dairui130

导航

hive on spark 释放session资源

背景 启动hive时,可以看到2.0以后的版本,将要弃用mr引擎,官方建议使用spark,tez等引擎。 spark同时支持批式流式处理,可以减少学习成本。a56爆大奖在线娱乐选用了spark作为执行引擎。 hive on spark 参数优化 使用hive on spark 默认只用2个container。任务处

posted on 2019-05-05 13:34  dairui130  阅读(1405)  评论(0编辑  收藏  举报