tencent cloud

弹性 MapReduce

动态与公告
产品动态
产品公告
安全公告
产品简介
产品概述
产品优势
产品架构
产品功能
应用场景
约束与限制
技术支持范围
产品发行版
购买指南
EMR on CVM 计费说明
EMR on TKE 计费说明
EMR Serverless HBase 计费说明
快速入门
EMR on CVM 快速入门
EMR on TKE 快速入门
EMR on CVM 操作指南
规划集群
管理权限
配置集群
管理集群
管理服务
监控告警
智能管家
EMR on TKE 操作指南
EMR on TKE 简介
配置集群
管理集群
管理服务
监控运维
应用分析
EMR Serverless HBase 操作指南
EMR Serverless HBase 产品简介
配额与限制
规划实例
管理实例
监控告警
开发指南
EMR 开发指南
Hadoop开发指南
Spark 开发指南
HBASE开发指南
Phoenix on Hbase 开发指南
Hive 开发指南
Presto开发指南
Sqoop 开发指南
Hue 开发指南
Oozie 开发指南
Flume 开发指南
Kerberos 开发指南
Knox 开发指南
Alluxio 开发指南
Kylin 开发指南
Livy 开发指南
Kyuubi 开发指南
Zeppelin 开发指南
Hudi 开发指南
Superset 开发指南
Impala 开发指南
Druid 开发指南
Tensorflow 开发指南
Kudu 开发指南
Ranger 开发指南
Kafka 开发指南
Iceberg 开发指南
StarRocks 开发指南
Flink 开发指南
JupyterLab 开发指南
MLflow 开发指南
实践教程
EMR on CVM 运维实践
数据迁移实践
自定义伸缩实践教程
API 文档
History
Introduction
API Category
Cluster Resource Management APIs
Cluster Services APIs
User Management APIs
Data Inquiry APIs
Scaling APIs
Configuration APIs
Other APIs
Serverless HBase APIs
YARN Resource Scheduling APIs
Making API Requests
Data Types
Error Codes
常见问题
EMR on CVM常见问题
服务等级协议
联系我们

配置 Hive 执行引擎

PDF
聚焦模式
字号
最后更新时间: 2024-10-30 11:34:29
Hive 支持 MapReduce、 Tez、 Spark 作为执行引擎,弹性 MapReduce 中默认为 MapReduce ,本文为您介绍如何在 Hive 中配置执行引擎。
一般情况下建议您使用执行引擎 Tez 替代 MapReduce,这样您会获得更好的计算效率。

开发准备

确认您已经开通了腾讯云,并且创建了一个 EMR 集群,详情参考创建集群
在创建 EMR 集群时在软件配置界面选择 Hive 组件,如果需要切换 Tez 或 Spark 执行引擎,在创建集群时需要勾选对应组件。

配置引擎

登录 Hive 客户端,具体操作参考 Hive 连接方式,Hive 的执行引擎由 hive.execution.engine 参数配置,默认执行引擎为 mr,执行如下命令可查看当前执行引擎:
hive> set hive.execution.engine;
hive.execution.engine=mr

在命令行中切换执行引擎

通过以下指令可以修改本次客户端会话中的执行引擎 。
修改执行引擎为 Tez:
hive> set hive.execution.engine=tez;
修改执行引擎为 Spark:
hive> set hive.execution.engine=spark;
执行完成后可以输入以下命令进行验证:
hive> set hive.execution.engine;
返回信息为您设置的执行引擎则说明配置成功。
说明:
以上切换执行引擎的操作只对单个客户端会话生效,由其他客户端进入或者退出后重新连接会恢复默认执行引擎。

在配置文件中切换执行引擎

全局切换默认执行引擎可通过 EMR 控制台 集群服务 > HIVE > 配置管理 页面,找到 hive-site.xml 配置文件,设置以下参数值:
修改执行引擎为 Tez:
hive.execution.engine = tez
修改执行引擎为 Spark:
hive.execution.engine = spark
执行保存 保存配置 > 保存并下发,重启 HiveServer2,执行完成后即可修改 Hive 的默认执行引擎。

帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈