tencent cloud

对象存储

动态与公告
产品动态
产品公告
产品简介
产品概述
功能概览
应用场景
产品优势
基本概念
地域和访问域名
规格与限制
产品计费
计费概述
计费方式
计费项
免费额度
计费示例
查看和下载账单
欠费说明
常见问题
快速入门
控制台快速入门
COSBrowser 快速入门
用户指南
创建请求
存储桶
对象
数据管理
批量处理
全球加速
监控与告警
运维中心
数据处理
内容审核
智能工具箱
数据工作流
应用集成
工具指南
工具概览
环境安装与配置
COSBrowser 工具
COSCLI 工具
COSCMD 工具
COS Migration 工具
FTP Server 工具
Hadoop 工具
COSDistCp 工具
HDFS TO COS 工具
GooseFS-Lite 工具
在线辅助工具
自助诊断工具
实践教程
概览
访问控制与权限管理
性能优化
使用 AWS S3 SDK 访问 COS
数据容灾备份
域名管理实践
图片处理实践
COS 音视频播放器实践
工作流实践
数据直传
内容审核实践
数据安全
数据校验
大数据实践
COS 成本优化解决方案
在第三方应用中使用 COS
迁移指南
本地数据迁移至 COS
第三方云存储数据迁移至 COS
以 URL 作为源地址的数据迁移至 COS
COS 之间数据迁移
Hadoop 文件系统与 COS 之间的数据迁移
数据湖存储
云原生数据湖
元数据加速
数据加速器 GooseFS
数据处理
数据处理概述
图片处理
媒体处理
内容审核
文件处理
文档处理
故障处理
获取 RequestId 操作指引
通过外网上传文件至 COS 缓慢
访问 COS 时返回403错误码
资源访问异常
POST Object 常见异常
API 文档
简介
公共请求头部
公共响应头部
错误码
请求签名
操作列表
Service 接口
Bucket 接口
Object 接口
批量处理接口
数据处理接口
任务与工作流
内容审核接口
云查毒接口
SDK 文档
SDK 概览
准备工作
Android SDK
C SDK
C++ SDK
.NET(C#) SDK
Flutter SDK
Go SDK
iOS SDK
Java SDK
JavaScript SDK
Node.js SDK
PHP SDK
Python SDK
React Native SDK
小程序 SDK
错误码
鸿蒙(Harmony) SDK
终端 SDK 质量优化
安全与合规
数据容灾
数据安全
访问管理
常见问题
热门问题
一般性问题
计费计量问题
域名合规问题
存储桶配置问题
域名和 CDN 问题
文件操作问题
日志监控问题
权限管理问题
数据处理问题
数据安全问题
预签名 URL 问题
SDK 类问题
工具类问题
API 类问题
服务协议
Service Level Agreement
隐私政策
数据处理和安全协议
联系我们
词汇表

元数据加速桶清单功能

PDF
聚焦模式
字号
最后更新时间: 2025-11-24 11:45:26
元数据加速桶复用 COS 存储桶清单 能力,提供类 Hadoop OIV 工具的文件元数据导出功能。元数据加速桶可根据用户的清单任务配置,每天或者每周定时扫描用户存储桶内指定路径下的文件,并输出一份清单报告,以 CSV 格式的文件存储到用户指定的路径下,适用于文件分析、审计、治理等场景。
说明:
当前元数据加速桶清单功能白名单公测中,此文档仅作公测期间说明使用。如需申请开通清单功能,请 联系我们
公测期间清单功能暂不收取 COS 管理功能费用,后续收费说明以站内信及官网文档说明为准。

使用限制

请注意,元数据加速桶清单公测期间,有如下限制:
单个 COS 元数据加速桶配置的清单规则数量上限为5条。
说明:
通常情况下建议配置存储桶根路径作为清单扫描路径,若您使用场景需要配置大于5条规则,请 联系我们
不支持跨桶投递清单报告,任务配置中目标路径需要与源桶一致。
清单暂不支持自定义 ID,创建任务后会自动指定任务 ID。该 ID 可通过 List 接口查询。
元数据加速桶暂不支持即时清单。

清单报告投递说明

用户配置一项清单任务后,COS 将根据配置定时扫描用户存储桶内指定路径下的文件,并输出一份 CSV 格式的清单报告。清单报告投递路径可在任务配置中指定,CSV 文件的具体路径如下:
destination-prefix/YYYY-MM-DD-HH/Data/8d1048acf48096d17502bd62efc9f8c1.csv
destination-prefix:用户在清单投递任务中指定的投递路径。
YYYY-MM-DD-HH:时间戳,清单任务执行的年、月、日、小时。
说明:
路径中的小时为任务开始执行的时间,与实际投递时间不一致。COS 元数据加速桶仅支持配置天级别任务,首次配置或投递后24小时内产出一份清单报告,无法指定固定时间执行清单任务,或固定时间投递清单报告。
清单报告:以 CSV 格式投递,文件名称为 COS 生成的随机值。

清单任务按配置规则扫描路径下文件,产出的报告中不包含表头信息,报告中打印字段顺序及说明如下:
字段
描述
FileName
文件名称
ATime
文件的访问时间
说明:
为保证读写性能最优,元数据加速桶默认不开启 ATime 追踪。若您需要使用 ATime 功能,请 联系我们
MTime
文件内容的变更时间
CTime
文件元数据的变更时间
Size
文件大小(单位 Byte)
FileType
打印文件状态为目录或文件,输出格式为:DIR(目录)或 FILE(文件)
ACL
以数字表示打印文件权限,例如:755
UserName
用户名称,例如:hadoop
GroupName
用户组名称,例如:supergroup
StorageClass
当前文件的存储类型。可能为以下值:
STANDARD(标准存储)
DEGRADE(低频存储)
ARCHIVE(归档存储)
DEEP_ARCHIVE(深度归档存储)
ARCHIVE+STANDARD(归档存储已回热)
DEEP_ARCHIVE+STANDARD(深度归档存储已回热)

清单配置方法

当前 COS 元数据加速桶暂不支持通过控制台配置清单,仅支持使用 API 进行配置。具体步骤如下:
1. 创建 COS 角色。
2. COS 角色绑定权限。
3. 开启清单功能。

1. 创建 COS 角色

创建 COS 角色,具体接口信息请参见 CreateRole。 其中,roleName 必须为:COS_QcsRole。 policyDocument 为:
{
"version": "2.0",
"statement": [{
"action": "name/sts:AssumeRole",
"effect": "allow",
"principal": {
"service": "cos.cloud.tencent.com"
}
}]
}

2. COS 角色绑定权限

角色权限绑定权限,具体接口信息参见 AttachRolePolicy。 其中,policyName 为:QcloudCOSFullAccess,roleName 为第1步中的 COS_QcsRole,也可以使用创建 roleName 时返回的 roleID。

3. 开启清单功能

调用接口,开启清单功能。元数据加速桶复用 COS 清单能力,支持使用 COS Inventory 接口开启清单配置。由于元数据加速桶特性,API 中部分字段与 COS 清单接口存在差异,具体调用方式请参照如下接口示例:





帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈