hive関連
| key | default value | about |
|---|
| hive.tez.container.size | -1 | tezのコンテナを使うメモリサイズ |
| hive.tez.auto.reducer.parallelism | false | reducerの並列有効化 |
| hive.exec.reducers.bytes.per.reducer | 256,000,000 | 1つのreducer辺りの処理サイズ |
| hive.exec.dynamic.partition.mode | stric | dynamic partitionを使用するときのモード。stricの場合partitionをselectで明示的に指定しなければいけない。 |
| hive.exec.compress.output | false | queryの最終結果を圧縮するかどうかを決める。圧縮方式は「mapred.output.compress*」から取得 |
mapreduce関連
| key | default value | about |
|---|
| mapred.reduce.tasks | -1 | Hadoopジョブで使用するReduceタスク数 |
| mapred.output.compression.codec | | Hadoopジョブの主力するファイルを圧縮するときのCodecのClass |
| mapreduce.output.fileoutputformat.compress.codec | | |
hdfs(NameNode)関連
| key | default value | about |
|---|
| io.compression.codecs | | 使用できる圧縮するときのCodecのclass |
tez関連
| key | default value | about |
|---|
| tez.queue.name | | tezのqueue名 |
| tez.tez-ui-history-url.base | http://<webserver-host:9999/tez-ui/ | TezUIのホスト |
| tez.am.view-acls | | View権限を与えるacl |
| | |