tencent cloud

弹性 MapReduce

动态与公告
产品动态
产品公告
安全公告
产品简介
产品概述
产品优势
产品架构
产品功能
应用场景
约束与限制
技术支持范围
产品发行版
购买指南
EMR on CVM 计费说明
EMR on TKE 计费说明
EMR Serverless HBase 计费说明
快速入门
EMR on CVM 快速入门
EMR on TKE 快速入门
EMR on CVM 操作指南
规划集群
管理权限
配置集群
管理集群
管理服务
监控告警
智能管家
EMR on TKE 操作指南
EMR on TKE 简介
配置集群
管理集群
管理服务
监控运维
应用分析
EMR Serverless HBase 操作指南
EMR Serverless HBase 产品简介
配额与限制
规划实例
管理实例
监控告警
开发指南
EMR 开发指南
Hadoop开发指南
Spark 开发指南
HBASE开发指南
Phoenix on Hbase 开发指南
Hive 开发指南
Presto开发指南
Sqoop 开发指南
Hue 开发指南
Oozie 开发指南
Flume 开发指南
Kerberos 开发指南
Knox 开发指南
Alluxio 开发指南
Kylin 开发指南
Livy 开发指南
Kyuubi 开发指南
Zeppelin 开发指南
Hudi 开发指南
Superset 开发指南
Impala 开发指南
Druid 开发指南
Tensorflow 开发指南
Kudu 开发指南
Ranger 开发指南
Kafka 开发指南
Iceberg 开发指南
StarRocks 开发指南
Flink 开发指南
JupyterLab 开发指南
MLflow 开发指南
实践教程
EMR on CVM 运维实践
数据迁移实践
自定义伸缩实践教程
API 文档
History
Introduction
API Category
Cluster Resource Management APIs
Cluster Services APIs
User Management APIs
Data Inquiry APIs
Scaling APIs
Configuration APIs
Other APIs
Serverless HBase APIs
YARN Resource Scheduling APIs
Making API Requests
Data Types
Error Codes
常见问题
EMR on CVM常见问题
服务等级协议
联系我们

跨可用区集群部署

PDF
Focus Mode
Font Size
Last updated: 2024-10-30 10:33:12

多可用区部署集群

EMR 默认推荐使用单可用区部署,但单可用区可能存在整个可用区故障或资源不足风险,为提升集群可用区级可靠性及资源灵活性,Hadoop 集群类型场景下,可设置集群跨可用区部署策略,根据部署特点,分为平分策略和均衡策略。
平分策略:通过创建集群时用2个可用区资源部署服务,提升可用区级资源扩展性。需要设置2个可用区进行集群部署,1个主可用区和1个第二可用区,当第二可用区异常时,主可用区可正常提供服务。


均衡策略:通过互备可用区部署,当互备中一个可用区故障后集群仍可正常服务,由于数据的跨可用区分布能力尚未支持,目前在EMR on COS部署方案实现可用区级容灾。需要设置3个可用区进行集群部署,1个主可用区、1个第二可用区和1个均衡可用区,主可用区与第二可用区资源互备部署,主可用区和第二可用区任一可用区异常时不影响另一可用区正常提供服务。


注意
跨可用区网络存在使用费用,于2022年12月变更为收费,具体请参见 私有网络 > 购买指南

平分策略

下文主要说明基于平分策略的集群如何创建和管理。

创建集群

登录 EMR 控制台 ,在 EMR on CVM 集群列表页单击创建集群
1. 选软件配置 Step:选择地域,选择 Hadoop 集群类型,选择所需的集群场景,其他信息项参考单集群购买页,请参见 创建集群
2. 区域与硬件配置 Step:跨可用区信息项选择跨可用区选项,部署策略信息项选择平分策略后,可用区信息项需要按需选择两个可用区,按照可用区行序第一行为主可用区,第二行为第二可用区,参照可用区选择子网。 节点配置项分别配置已选可用区的节点规格及数量,平分策略高可用选项为默认开启且不可关闭配置
3. 基础配置及确认配置信息请参照单集群购买页,请参见 创建集群

扩容集群

平分策略主可用区和第二可用区均可支持按需扩容 Task、Core 及 Router 类型节点。

缩容集群

平分策略做缩时主可用区和第二可用区的 Core 节点类型总数可缩减至最小值为3,其他节点类型无限制。

均衡策略

下文主要说明基于均衡策略的集群如何创建和管理。

创建集群

登录 EMR 控制台 ,在 EMR on CVM 集群列表页单击创建集群
1. 选软件配置 Step:选择地域,选择 Hadoop 集群类型,选择所需的集群场景,其他信息项参考单集群购买页,请参见 创建集群
2. 区域与硬件配置 Step:跨可用区信息项选择跨可用区选项,部署策略信息项选择均衡策略后,可用区信息项需要按需选择三个可用区按照可用区行序第一行为主可用,第二行为第二可用区,第三行为均衡可用区,参照可用区选择子网。 节点配置项分别配置已选可用区的节点规格及数量,均衡策略时高可用选项为默认开启且不可关闭配置
3. 基础配置及确认配置信息请参照单集群购买,请参见 创建集群

查看集群

集群创建成功后,可在集群列表以及集群实例信息页面查看集群的主备可用区信息。 登录 EMR 控制台,可进入集群列表页面: 单击集群 ID/名称可进入集群实例信息页面:

扩容集群

均衡策略主可用区、第二可用区和均衡可用区均可支持按需扩容 Task、Core 及 Router 类型节点。
均衡策略的扩容仅为可用资源扩展,若用户集群的服务等部署为主备方案时建议主可用区和第二可用区的资源保持等量扩容。

缩容集群

平分策略做缩容时主可用区和第二可用区的 Core 节点类型总数可缩减至最小值为3,其他节点类型无限制。
均衡可用区在所容时支持 Core、Task、Router 节点类型的全量缩容。

Help and Support

Was this page helpful?

Help us improve! Rate your documentation experience in 5 mins.

Feedback