tencent cloud

腾讯云数据仓库 TCHouse-D

产品简介
产品概述
基本概念
集群架构
产品优势
应用场景
购买指南
计费概述
续费说明
到期与欠费说明
退费说明
配置变更计费说明
快速入门
通过控制台使用腾讯云数据仓库 TCHouse-D
通过客户端使用腾讯云数据仓库 TCHouse-D
操作指南
集群操作
监控和告警配置
账户权限管理
数据管理
查询管理
配置管理
节点管理
日志分析
SQL 工作区
开启资源隔离
开发指南
数据表设计
数据导入
数据导出
基础功能
查询优化
生态扩展功能
API 文档
History
Introduction
API Category
Making API Requests
Cluster Operation APIs
Database and Table APIs
Cluster Information Viewing APIs
Hot-Cold Data Layering APIs
Database and Operation Audit APIs
User and Permission APIs
Resource Group Management APIs
Data Types
Error Codes
云上生态
为子账号授予 CAM 策略
查询加速腾讯云 DLC
实践教程
基本功能使用
高级特性使用
资源规格选型及调优建议
命名规范及库表限制
表设计与数据导入
查询调优
建议规避的用法
通过 JDBC 方式公网访问 TCHouse-D
性能测试
TPC-H 性能测试
SSB 性能测试
TPC-DS 性能测试
常见问题
常见操作问题
常见报错
联系我们
词汇表
产品协议
服务等级协议
隐私政策
数据处理和安全协议

跨集群迁移

PDF
聚焦模式
字号
最后更新时间: 2024-06-27 10:51:35
腾讯云数据仓库 TCHouse-D 支持将当前数据以文件的形式,通过 Broker 备份到远端存储系统中,并支持从远端存储系统中将数据恢复到任意集群。该功能可用于对数据进行一次性或定期的快照备份,也可基于此实现跨不同集群的数据迁移。

操作指引

1. 进入备份恢复页后,单击 数据迁移配置,填写跨集群迁移的具体配置信息。



2. 迁移数据来源可选 Doris 集群或 COS 存储桶,填写相应的配置信息并通过连通性检查后,可选择执行方式、执行时间以及迁移范围。
若计划从 Doris 集群迁移数据,需填写信息包含源端集群 FE_Host、FE_TCP_PORT,以及具有 Admin 权限的 USER ID 与密码。
若计划从 COS 桶迁移数据,需填写对应 COS 桶的 SecretId、SecretKey 以及待迁移数据的 COS 路径。
说明:
若您希望迁移已创建的腾讯云数据仓库 TCHouse-D 集群中的数据,且目标端与远端处于同一 VPC 下,建议使用从 Doris 集群迁移。
若希望跨 VPC 迁移,或者从任意指定 COS 桶迁移备份数据,建议使用从 COS 桶迁移。

3. 完成迁移数据来源配置后,可设置执行方式与时间,并选定要迁移的库、表,单击迁移执行操作。
4. 从 Doris 集群迁移数据时,默认将数据同步至目标端 COS 桶,可在配置时选择备份完成后自动恢复数据。
5. 从 COS 桶迁移数据时,迁移完成后数据将自动同步至目标端 Doris 集群。
说明:
备份数据会按表维度,按原名称恢复到当前集群的同名数据库中,不需要提前创建库表。

跨集群迁移功能说明

从 Doris 集群迁移

若您希望在同一 VPC 下的两个集群间迁移数据,您可以将 Doris 集群设为迁移数据来源。为建立与远端集群的连接,需填写信息包含源端集群 FE_Host、FE_TCP_PORT,以及具有 Admin 权限的 USER ID 与密码。
迁移完成后,远端 Doris 集群数据将被同步至目标端集群指定的 COS 桶。您也可以配置自定义 COS 桶,指定迁移的 COS 路径,将数据迁移至 CosPath/doris_manage_backup 路径下。



您选择是否在迁移完成后自动恢复数据。若勾选,数据除被迁移至指定 COS 桶外,也会自动同步至目标端 Doris集群。

从 COS 桶迁移

当您在远端集群完成数据备份后,备份实例将被存储在选定的 COS 桶中,您可基于此实现跨集群数据迁移。
说明:
数据迁移功能不支持跨地域,建议在迁移前将远端 COS 桶内的数据拷贝到目标端地域的 COS 桶中。
若要发起从 COS 迁移的备份任务,需选择迁移数据来源为 COS,并填写远端 COS 桶对应的密钥与待迁移数据的 COS 路径。
自定义密钥:您可以在 API密钥管理 页面内,新建并管理自定义密钥。该密钥可用于管理您名下的所有腾讯云资源,请妥善保管。



待迁移的 COS 路径,格式为 https://$domain/$backup_dir/$snapshot_dir。
$domain:域名(可在 对象存储 中对应存储桶的概览页中查找)。
$backup_dir:文件所在的文件夹路径。
$snapshot_dir:备份版本snapshot文件夹路径。
迁移完成后,数据将自动同步至目标端 Doris 集群。

跨版本迁移版本说明

腾讯云 TCHouse-D 支持将旧内核版本集群的数据迁移至新内核版本集群,不支持将新版本备份的数据迁移到旧版本。已支持的版本对应关系如下表所示:
源端集群内核版本
目标端集群内核版本
0.15
0.15, 1.0.X
1.0.X
1.0.X, 1.1.0, 1.1.1, 1.1.2
1.1.0, 1.1.1, 1.1.2
1.1.X
1.1.3, 1.1.4, 1.1.5
1.1.3, 1.1.4, 1.1.5, 1.2.X
1.2.X
1.2.X



帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈