消息队列 CKafka 版
消息队列 CKafka 版(TDMQ for CKafka)是基于开源 Apache Kafka 消息队列引擎,提供高吞吐性能、高可扩展性的消息队列服务。消息队列 CKafka 版 兼容 Apache kafka 0.9、0.10、1.1、2.4、2.8、3.2版本接口,在性能、扩展性、业务安全保障、运维等方面具有超强优势,让您在享受低成本、超强功能的同时,免除繁琐运维工作。
什么是消息队列 CKafka 版
介绍 CKafka 的基础概念、核心功能(消息解耦、削峰填谷、顺序读写、异步通信)、高可用及数据压缩等特性,帮助您快速了解产品定位与能力。
应用场景
介绍 CKafka 在网页追踪、日志聚合、大数据处理、监控联动、IoT 数据采集、SCF 触发器等七大典型应用场景的使用方法与实践。
产品优势
介绍 CKafka 相比开源 Kafka 的核心优势:100%兼容 Apache Kafka、高性能(提升10%-20%)、7x24小时高可用、50%磁盘故障容灾、自动扩容及企业级安全防护。
与开源 Kafka 对比
从基础功能、运维管理、隔离性与多租户、监控告警、高可用容灾、安全合规等维度详细对比 CKafka 与自建 Kafka 的差异与优势。
安全与合规
介绍 CKafka 的双重安全防护体系:控制面通过 CAM 实现账号级权限管理;数据面通过 SASL/SCRAM 认证配合 ACL 策略实现资源级访问控制。
产品选型建议
提供 Serverful 高级版/专业版与 Serverless 版本的选型指导,涵盖带宽、存储、分区、副本数的计算方法及事务消息等影响稳定性的关键因素。
入门流程指引
介绍 CKafka 实例支持的私有网络(VPC)和公网两种访问方式及其接入流程,帮助用户根据自身网络环境选择合适的接入方案。
VPC 网络接入
介绍创建 CKafka 实例的操作步骤,包括产品形态、计费模式、集群类型、带宽磁盘分区等关键参数配置,以及 VPC 网络绑定方法。
公网域名接入
介绍通过公网域名方式接入 CKafka 的完整流程,包括创建实例、开启公网路由、配置 ACL 权限、创建 Topic 及收发消息等步骤。
创建 Topic
介绍在控制台手动创建 Topic 和开启客户端自动创建功能的方法,包括名称规则、分区数、副本数、保留时间及高级参数配置。
变更集群规格
介绍升级和降级 CKafka 实例规格的操作步骤,说明变更期间的数据迁移、Leader 切换及瞬时断连风险,以及变更模式的选型建议。
配置弹性伸缩策略
介绍动态消息保留和自动磁盘扩容两种弹性伸缩策略的配置方法、适用版本及注意事项,帮助应对磁盘空间不足问题。
使用开源工具迁移集群
介绍使用开源工具将自建或其他云厂商 Kafka 迁移至腾讯云 CKafka 的方法,包括目标实例规划购买、Topic 元数据同步和历史数据迁移。
使用连接器同步数据
介绍 CKafka Connector 的两种核心插件:Kafka-to-Kafka(跨集群复制/双活灾备)和 Kafka-to-ES(日志监控/行为分析/IoT 分析),支持 ETL 清洗与智能路由。
集群容量规划实践教程
介绍如何结合带宽利用率和集群负载指标进行容量规划,提供不同AZ部署模式的安全阈值参考,以及扩容规格的计算公式和实践案例。
生产消费实践教程
介绍生产者端的重试机制、确认机制、批处理与粘性分区最佳实践,消费者端的 Rebalance 处理、Offset 管理与积压解决方案,以及有序消息的实现方法。
日志接入
介绍通过 CLS 将日志实时投递至 CKafka 的方法,包括 Topic 准备、投递任务配置(原始内容/JSON 格式)、跨账号投递及权限设置。