tencent cloud

数据加速器 GooseFS

动态与公告
产品动态
产品选型指引
GooseFSx
产品简介
快速入门
购买指南
控制台指南
工具指南
实践教程
Service Level Agreement
词汇表
GooseFS
产品简介
计费概述
快速入门
核心特性
控制台指南
开发者指南
客户端工具
集群配置实践
数据安全
Service Level Agreement
GooseFS-Lite
GooseFS-Lite 工具
实践教程
在 Kubernetes 中使用 GooseFS 加速 Spark 数据访问
使用 GooseFS 以原生 POSIX 语义访问存储桶
GooseFS Distributedload 调优实践
常见问题

GooseFS 集群概述

PDF
聚焦模式
字号
最后更新时间: 2025-07-17 17:42:50

简介

GooseFS 是腾讯云推出的多协议、高性能、大吞吐的数据缓存加速服务。GooseFS 集群是该服务在公有云上的一种部署和运维形态。通过 GooseFS 集群,用户可以方便地管理和运维计算节点的本地盘作为缓存节点,为上层计算应用提供统一的命名空间和访问协议,方便用户在不同的存储系统管理和流转数据。

GooseFS 集群不仅可以加速海量数据分析、机器学习、人工智能等业务访问存储的性能,还可以帮助业务实现冷热数据自动分层,平衡业务架构的性能表现和成本支出。

基本概念

使用 GooseFS 集群,会涉及到以下基本概念:
集群:指数据湖存储 GooseFS 运行所需云资源的集合,包含了云服务器、裸金属设备等云资源。
节点:指组成 GooseFS 集群的各类云服务器资源实例,主要包括如下几类节点:
Master 节点:Master 节点是集群主控节点,至少需要使用1台实例部署;高可用模式下,至少需要3台以上实例部署。
Worker 节点:Worker 节点负责缓存热数据,至少需要使用1台实例作为 Worker 节点;Worker 节点数量可以跟随需要缓存的存储容量线性扩展。
Client 节点:Client 节点一般和计算或者 Worker 节点同机部署,用于读写 Worker 节点中的数据。
客户端:指访问 GooseFS 集群的终端,用于和计算应用对接,当前仅支持 GooseFS-FUSE 客户端。
命名空间:指 GooseFS 组织和管理缓存数据的空间,是 GooseFS 集群访问数据的统一访问接口。
部署形态:指数据湖存储 GooseFS 的部署模式,主要分为管控面托管、Master 托管模式。
管控面托管:使用客户已购买的 CVM 资源部署 GooseFS,并交由 GooseFS 云平台代运维。
Master 托管:GooseFS 集群的 Master 节点托管在 GooseFS 云平台,Worker 节点仍由客户自行购买 CVM 完成部署。
全托管:GooseFS 集群的 Master 节点和 Worker 节点都托管在 GooseFS 云平台,无需客户自行运维。
配置:指运行 GooseFS 集群的各类配置文件,主要包括:
goosefs-site.properties:GooseFS 服务配置文件,用于管理 GooseFS 集群的数据加载、缓存、淘汰策略等配置。
goosefs-env.sh:GooseFS 服务依赖环境变量脚本文件,用于管理 GooseFS 集群的各类环境变量。
log4j.properties:GooseFS 服务日志输出配置,用于管理 GooseFS 运行过程中的访问日志、系统日志等各类日志、监控信息。
core-site.xml:GooseFS 服务对接的底层存储系统配置,用于管理 GooseFS 集群对接的底层存储系统,例如对象存储、云 HDFS 等。

使用流程

GooseFS 集群使用流程主要分为如下几个环节:
1. 角色授权:注册并登录 数据加速器 GooseFS 控制台,完成服务授权获取相关资源操作权限,即可开始使用数据加速器 GooseFS 产品。
2. 创建集群:按需自定义新建集群。
3. 管理集群:集群新建后,可对集群进行扩缩容、节点管理、配置变更、命名空间管理、客户端管理等操作。
4. 管理任务:集群管理操作会注册为集群任务,用户可通过查看任务进展了解集群操作状态。

产品定价

腾讯云数据湖存储 GooseFS 针对不同部署形态提供了不同的计费体系。如需了解该产品详细的收费模式和具体价格,可 联系我们 咨询。

相关服务

GooseFS 只提供数据缓存能力,持久化数据存储可使用腾讯云对象存储服务。对象存储的使用说明请参见 对象存储产品文档
GooseFS 支持管理云服务器自带的本地盘或者云盘,用于将数据缓存到本地节点。云服务器的使用说明请参见 云服务器产品文档
GooseFS 集群可以建立在私有网络下,集群内主机可以分配在不同可用区的子网下。私有网络产品使用指南请参见 私有网络产品文档
GooseFS 集群支持将监控数据上报到腾讯云可观测平台或者日志服务 CLS 中。腾讯云可观测平台产品使用指南请参见 腾讯云可观测平台产品文档,日志服务 CLS 产品使用指南请参见 日志服务产品文档


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈