Inceptor

取值一栏中粗体显示的值为默认取值。

用于运维管理ArgoDB的参数。

名称	含义	取值
ngmr.exec.mode	ArgoDB的执行模式。分为本地（local）和集群（cluster）两种。	cluster local
ngmr.local.job.max.records	在Local模式下执行的Job最多允许处理多少行记录。	5000000 自定义
【高危】ngmr.filesystem.cache.disabled	是否禁用文件系统缓存。（请用户尽量不要改变默认设置）	true false
【高危】ngmr.hdfs.filesystem.cache.disabled	是否禁用HDFS缓存。（请用户尽量不要改变默认设置）	true false
hive.exec.scratchdir	指定Hive的Scratch根目录。该目录用来存储不同阶段执行计划，同时也存储中间输出结果。	/tmp/hive [自定义目录]
hive.scratch.dir.permission	Scratch目录属者的权限。	711 [自定义目录]
hive.metastore.connect.retries	尝试连接至Metastore的重试次数。若尝试次数超过此值则连接失败。	3 自定义
hive.metastore.failure.retrie	ThriftMetastoreCall执行失败时的重试次数。	1 自定义
hive.aux.jars.path	Plugin Jar包的地址。Plugin Jar包含用户自定义的函数和SerDe。	空自定义
hive.jar.path	hive_cli.jar的地址。hive_cli.jar是当系统通过不同JVM提交Job时会被使用到的Jar包。	空自定义
hive.log4j.file	Hive log4j配置文件路径。该参数值应为有效URI，例如：file:///tmp/my-logging.xml。	管理界面配置参数
hive.server2.session.check.interval	Hive Server2检查一些僵尸资源TTL的时间间隔，如果小于等于0，则不做任何检查。hive.server2.session.check.interval最多不超过hive.server2.idle.operation.timeout的1/3。	50000 自定义
hive.server2.idle.session.timeout	一个Session的过期时间，单位为毫秒。如果Session空闲时间超过该时长，Server会主动关闭这个连接；如果小于等于0，不论Session连接多长时间都不会被关闭。该参数仅当hive.server2.session.check.interval大于零时生效。	7200000 自定义
hive.server2.idle.operation.timeout	一个Operation的过期时间，单位为毫秒。如果Operation（Client到Server的一个操作，可以是SQL查询，API调用等）的时间超过指定时长，Server会主动停止这个Operation（譬如SQL执行时间过长的情况）如果小于等于0，不论Operation多长时间都不会主动关闭这个Session，该参数仅当hive.server2.session.check.interval大于零时生效，且hive.server2.session.check.interval最多不超过hive.server2.idle.operation.timeout的1/3。	0 自定义
hive.server2.thrift.min.worker.threads	Hive Server 2线程池里Worker线程允许的最少数量。	5 自定义
hive.server2.thrift.max.worker.threads	Hive Server 2线程池里Worker线程的允许最多数量。	500 自定义
hive.server2.authentication	HiveServer2采用的客户端认证类型。有以下候选值： NONE：无认证检查。 LDAP：基于LDAP/AD的认证。 KERBEROS：基于Kerberos/GSSAP的认证。 PAM：采用可插拔认证模块。 NOSASL：传输原始数据。 CUSTOM：客户自定义认证策略。采用hive.server2.custom.authentication.class的配置。（不建议）	NONE LDAP KERBEROS PAM NOSAL CUSTOM
【高危】ngmr.aggr.serde	序列化聚合结果时使用BinarySortableSerDe还是LazyBinarySerDe。true表示前者；false表示后者。由于利用二进制而并非文本来表达数值，BinarySortableSerDe的速度快于LazyBinarySerDe。	true false
hive.show.rowcount	当业务表的数据有误时，是否打印出错误行的数量。	true false
hive.cli.errors.ignore	对于包含多SQL的文件，是否允许系统忽略错误语句以继续执行下一行。	true false
inceptor.sql.show.maxlength	允许打印在日志里的最大SQL长度。	1024 自定义
license.zookeeper.quorum	License Zookeeper的地址列表，用逗号分隔。	空自定义
zookeeper.session.timeout	Zookeeper Session的超时时长，单位为毫秒。	18000 自定义
inceptor.managed.table.location.enabled	控制是否允许使用带有自定义location属性的内表。为true时表示可以创建或删除带自定义location属性的内表，允许通过修改external属性值为false将外表转为内表，以及修改内表的location。	true false
inceptor.managed.table.drop.enabled	当inceptor.managed.table.location.enabled为false时，控制是否允许删除location是默认值的内表。	true false

名称

含义

取值

ngmr.exec.mode

ArgoDB的执行模式。分为本地（local）和集群（cluster）两种。

cluster
local

ngmr.local.job.max.records

在Local模式下执行的Job最多允许处理多少行记录。

5000000
自定义

【高危】ngmr.filesystem.cache.disabled

是否禁用文件系统缓存。（请用户尽量不要改变默认设置）

true
false

【高危】ngmr.hdfs.filesystem.cache.disabled

是否禁用HDFS缓存。（请用户尽量不要改变默认设置）

true
false

hive.exec.scratchdir

指定Hive的Scratch根目录。该目录用来存储不同阶段执行计划，同时也存储中间输出结果。

/tmp/hive
[自定义目录]

hive.scratch.dir.permission

Scratch目录属者的权限。

711
[自定义目录]

hive.metastore.connect.retries

尝试连接至Metastore的重试次数。若尝试次数超过此值则连接失败。

3
自定义

hive.metastore.failure.retrie

ThriftMetastoreCall执行失败时的重试次数。

1
自定义

hive.aux.jars.path

Plugin Jar包的地址。Plugin Jar包含用户自定义的函数和SerDe。

空
自定义

hive.jar.path

hive_cli.jar的地址。hive_cli.jar是当系统通过不同JVM提交Job时会被使用到的Jar包。

空
自定义

hive.log4j.file

Hive log4j配置文件路径。该参数值应为有效URI，例如：file:///tmp/my-logging.xml。

管理界面配置参数

hive.server2.session.check.interval

Hive Server2检查一些僵尸资源TTL的时间间隔，如果小于等于0，则不做任何检查。hive.server2.session.check.interval最多不超过hive.server2.idle.operation.timeout的1/3。

50000
自定义

hive.server2.idle.session.timeout

一个Session的过期时间，单位为毫秒。如果Session空闲时间超过该时长，Server会主动关闭这个连接；如果小于等于0，不论Session连接多长时间都不会被关闭。该参数仅当hive.server2.session.check.interval大于零时生效。

7200000
自定义

hive.server2.idle.operation.timeout

一个Operation的过期时间，单位为毫秒。如果Operation（Client到Server的一个操作，可以是SQL查询，API调用等）的时间超过指定时长，Server会主动停止这个Operation（譬如SQL执行时间过长的情况）如果小于等于0，不论Operation多长时间都不会主动关闭这个Session，该参数仅当hive.server2.session.check.interval大于零时生效，且hive.server2.session.check.interval最多不超过hive.server2.idle.operation.timeout的1/3。

0
自定义

hive.server2.thrift.min.worker.threads

Hive Server 2线程池里Worker线程允许的最少数量。

5
自定义

hive.server2.thrift.max.worker.threads

Hive Server 2线程池里Worker线程的允许最多数量。

500
自定义

hive.server2.authentication

HiveServer2采用的客户端认证类型。有以下候选值：

NONE：无认证检查。
LDAP：基于LDAP/AD的认证。
KERBEROS：基于Kerberos/GSSAP的认证。
PAM：采用可插拔认证模块。
NOSASL：传输原始数据。
CUSTOM：客户自定义认证策略。采用hive.server2.custom.authentication.class的配置。（不建议）

NONE
LDAP
KERBEROS
PAM
NOSAL
CUSTOM

【高危】ngmr.aggr.serde

序列化聚合结果时使用BinarySortableSerDe还是LazyBinarySerDe。true表示前者；false表示后者。由于利用二进制而并非文本来表达数值，BinarySortableSerDe的速度快于LazyBinarySerDe。

true
false

hive.show.rowcount

当业务表的数据有误时，是否打印出错误行的数量。

true
false

hive.cli.errors.ignore

对于包含多SQL的文件，是否允许系统忽略错误语句以继续执行下一行。

true
false

inceptor.sql.show.maxlength

允许打印在日志里的最大SQL长度。

1024
自定义

license.zookeeper.quorum

License Zookeeper的地址列表，用逗号分隔。

空
自定义

zookeeper.session.timeout

Zookeeper Session的超时时长，单位为毫秒。

18000
自定义

inceptor.managed.table.location.enabled

控制是否允许使用带有自定义location属性的内表。为true时表示可以创建或删除带自定义location属性的内表，允许通过修改external属性值为false将外表转为内表，以及修改内表的location。

true
false

inceptor.managed.table.drop.enabled

当inceptor.managed.table.location.enabled为false时，控制是否允许删除location是默认值的内表。

true
false

Metastore

用于运维管理Metastore的参数。

名称	含义	取值
datanucleus.autoCreateSchema	是否自动创建Schema。默认值为true，表示启动时如果元数据不存在就创建一个新的Schema，一旦创建完成，该参数值需设为false。	Manager配置参数
hive.metastore.warehouse.dir	指定Hive Warehouse的默认所在路径。	/user/hive/warehouse 自定义
hive.metastore.uris	远程Metastore的Thrift URI。Metastore客户端连接远程Metastore时使用。	null 自定义
hive.metastore.server.min.threads	Metastore服务线程池中的最少worker线程数。	200 自定义
hive.metastore.server.max.threads	Metastore服务线程池支持的最多worker线程数。	1000 自定义
hive.metastore.kerberos.principal	Metastore Thrift服务器的Kerberos Principal。“_HOST”会被正确的主机名称动态替换。	Manager配置参数
hive.metastore.sasl.enabled	是否利用SASL对Metastore Thrift接口进行安全保护。等于true时用户必须经过Kerberos认证。	true false
ngmr.metacache.server.timeout.ms	当Metastore的cache级别设置为server时，该参数控制cache的失效时间，-1表示永远不失效。	36000000 自定义
javax.jdo.option.ConnectionDriverName	连接Metastore时的JDBC driver。	Manager配置参数
javax.jdo.option.ConnectionUserName	用以连接Metastore的访问用户名。	Manager配置参数
javax.jdo.option.ConnectionPassword	JDO连接Metastore时使用的密码。	mine 自定义
javax.jdo.option.ConnectionURL	连接Metastore时JDBC的连接字符串。	自定义

名称

含义

取值

datanucleus.autoCreateSchema

是否自动创建Schema。默认值为true，表示启动时如果元数据不存在就创建一个新的Schema，一旦创建完成，该参数值需设为false。

Manager配置参数

hive.metastore.warehouse.dir

指定Hive Warehouse的默认所在路径。

/user/hive/warehouse
自定义

hive.metastore.uris

远程Metastore的Thrift URI。Metastore客户端连接远程Metastore时使用。

null
自定义

hive.metastore.server.min.threads

Metastore服务线程池中的最少worker线程数。

200
自定义

hive.metastore.server.max.threads

Metastore服务线程池支持的最多worker线程数。

1000
自定义

hive.metastore.kerberos.principal

Metastore Thrift服务器的Kerberos Principal。“_HOST”会被正确的主机名称动态替换。

Manager配置参数

hive.metastore.sasl.enabled

是否利用SASL对Metastore Thrift接口进行安全保护。等于true时用户必须经过Kerberos认证。

true
false

ngmr.metacache.server.timeout.ms

当Metastore的cache级别设置为server时，该参数控制cache的失效时间，-1表示永远不失效。

36000000
自定义

javax.jdo.option.ConnectionDriverName

连接Metastore时的JDBC driver。

Manager配置参数

javax.jdo.option.ConnectionUserName

用以连接Metastore的访问用户名。

Manager配置参数

javax.jdo.option.ConnectionPassword

JDO连接Metastore时使用的密码。

mine
自定义

javax.jdo.option.ConnectionURL

连接Metastore时JDBC的连接字符串。

自定义

Compactor

用于运维管理Compactor的参数，包括自动扫描的时间、间隔及状态统计等。

名称	含义	取值
compactor.full.scan.initial.time	自动扫描所有表的启动时间，格式为“HH:MM”（小时:分钟）。	12:00 自定义
compactor.full.scan.delay.interval.hour	自动扫描所有表的启动时间间隔，默认为24，单位是小时，即每隔24小时自动扫描所有表一次。	24 自定义
compactor.fetch.batch.size	Compactor页面显示的元素条数及自动Compaction开启时每批提交的元素条数。	50 自定义
compactor.valid.delta.count.persist.threshold	表或分区被持久化保存到“Table with specified delta numbers”列表的Valid Delta数量下限，即如果表或分区的Valid Delta文件数量大于此阈值，Compactor将会将其持久化保存到“Table with specified delta numbers”列表，直到执行Compaction成功或手动移出。	50 自定义
compactor.table.delta.count.alarm.threshold	表或分区被持久化保存到“Table unmodified for specified time”列表的Valid Delta数量阈值，即表或分区的Valid Delta文件数量大于此阈值，小于等于compactor.valid.delta.count.persist.threshold参数值，且超过一定天数未修改，则会被持久化保存到“Table unmodified for specified time”列表，直到执行Compaction成功或手动移出。	2 自定义
compactor.table.day.count.alarm.threshold	表或分区被持久化保存到“Table unmodified for specified time”列表的未修改天数阈值，即表或分区超过此天数未修改，并且Delta文件数量大于compactor.table.delta.count.alarm.threshold，小于等于compactor.valid.delta.count.persist.threshold时，则会被持久化保存到“Table unmodified for specified time”列表，直到执行Compaction成功或手动移出。	3 自定义
compactor.partial.scan.switch	自动更新统计信息的开关，默认为false，即不会对统计信息进行自动更新，以节省资源开销。	true false
compactor.auto.compact.submitter.switch	控制是否对长期未修改且有一定Delta文件的表/分区进行自动Compaction。默认关闭，即不会进行定期自动Compaction。	true false

名称

含义

取值

compactor.full.scan.initial.time

自动扫描所有表的启动时间，格式为“HH:MM”（小时:分钟）。

12:00
自定义

compactor.full.scan.delay.interval.hour

自动扫描所有表的启动时间间隔，默认为24，单位是小时，即每隔24小时自动扫描所有表一次。

24
自定义

compactor.fetch.batch.size

Compactor页面显示的元素条数及自动Compaction开启时每批提交的元素条数。

50
自定义

compactor.valid.delta.count.persist.threshold

表或分区被持久化保存到“Table with specified delta numbers”列表的Valid Delta数量下限，即如果表或分区的Valid Delta文件数量大于此阈值，Compactor将会将其持久化保存到“Table with specified delta numbers”列表，直到执行Compaction成功或手动移出。

50
自定义

compactor.table.delta.count.alarm.threshold

表或分区被持久化保存到“Table unmodified for specified time”列表的Valid Delta数量阈值，即表或分区的Valid Delta文件数量大于此阈值，小于等于compactor.valid.delta.count.persist.threshold参数值，且超过一定天数未修改，则会被持久化保存到“Table unmodified for specified time”列表，直到执行Compaction成功或手动移出。

2
自定义

compactor.table.day.count.alarm.threshold

表或分区被持久化保存到“Table unmodified for specified time”列表的未修改天数阈值，即表或分区超过此天数未修改，并且Delta文件数量大于compactor.table.delta.count.alarm.threshold，小于等于compactor.valid.delta.count.persist.threshold时，则会被持久化保存到“Table unmodified for specified time”列表，直到执行Compaction成功或手动移出。

3
自定义

compactor.partial.scan.switch

自动更新统计信息的开关，默认为false，即不会对统计信息进行自动更新，以节省资源开销。

true
false

compactor.auto.compact.submitter.switch

控制是否对长期未修改且有一定Delta文件的表/分区进行自动Compaction。默认关闭，即不会进行定期自动Compaction。

true
false