2019-06-27
阅读量:
803
本地模式(小任务)的时候hive的优化点有哪些?
本地模式(小任务)的时候hive的优化点有哪些?
答:本地模式(小任务)可以从以下几个参数入手
job的输入数据大小必须小于参数:hive.exec.mode.local.auto.inputbytes.max(默认128MB)
job的map数必须小于参数:hive.exec.mode.local.auto.tasks.max(默认4)
job的reduce数必须为0或者1
hive.exec.mode.local.auto.inputbytes.max=134217728
hive.exec.mode.local.auto.tasks.max=4
hive.exec.mode.local.auto=true
hive.mapred.local.mem:本地模式启动的JVM内存大小






评论(0)


暂无数据
推荐帖子
0条评论
0条评论
0条评论