热线电话:13121318867

登录
2019-06-27 阅读量: 803
本地模式(小任务)的时候hive的优化点有哪些?

本地模式(小任务)的时候hive的优化点有哪些?

答:本地模式(小任务)可以从以下几个参数入手

job的输入数据大小必须小于参数:hive.exec.mode.local.auto.inputbytes.max(默认128MB)

job的map数必须小于参数:hive.exec.mode.local.auto.tasks.max(默认4)

job的reduce数必须为0或者1

hive.exec.mode.local.auto.inputbytes.max=134217728

hive.exec.mode.local.auto.tasks.max=4

hive.exec.mode.local.auto=true

hive.mapred.local.mem:本地模式启动的JVM内存大小

0.0000
2
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子