tencent cloud

腾讯云智能数智人

产品简介
产品概述
产品功能
产品优势
购买指南
价格指南
购买指引
使用代金券购买流程
退费说明
数智人形象介绍
形象类别介绍
基础形象库
形象和声音复刻指引
数智人平台操作指引
访问平台
形象生产与资产管理
数智人会话互动应用与管理
播报数智人视频生成与管理
运营管理与分析
服务端 API 接入
数智人 API 接入模式概述
数智人 aPaas 接口调用方式
2D真人小样本形象、声音定制 API 文档
视频生成服务 API 文档
交互数智人服务 API 文档
个人资产管理 API 文档
客户端 SDK 接入
整体介绍
3D 端渲染 SDK 接入
2D 端渲染 SDK 接入
数智人 SSML 标记语言规范
相关协议
隐私协议
DSA(Data Sharing Agreement)
常见问题

常见问题

PDF
聚焦模式
字号
最后更新时间: 2024-09-18 20:44:11

一、形象定制相关

问题表述
回答
优化建议
示例图片
视频素材中间存在剪辑,跳帧会有什么影响?
生成的形象在同样位置会跳帧,训练导出demo时可手动选择,但需保证至少1min以上连续片段
视频只可进行掐头去尾式编辑,提供的素材需是连续无间断的拍摄片段



视频素材有美颜美体造成抖动(脸部,腰部等)会有什么影响?
生成的形象同样位置会抖动,训练导出demo时可手动选择,但需保证至少1min以上连续片段
视频如需美颜美体,建议检查处理过后的画面有无抖动

视频素材中人物转头角度过大,大侧脸,仰头低头等会有什么影响?
1. 导致训练人脸检测失败,实际被训练的视频时长可能小于3min,影响最终口型效果;
2. 大角度偏转前后口型效果明显差
建议人物头部不要有大幅转动,拍摄斜坐角度需要保证口型完整露出;



视频素材中手部或者其他物体遮挡了面部或下巴会有什么影响?
1. 遮挡面部的,会导致训练提前结束,实际被训练的视频时长可能小于3min,影响最终口型效果;
2. 遮挡下巴的,训练后的形象,遮挡下巴的物体会有缺失(手部被口型覆盖)
手部在做动作时不要进入头部区域;保证脸部全程无间断露出



视频时长过短,不足3mins;
视频时长不足,重复拼凑时长;
视频重复读一段文字会有什么影响?
口型丰富度不够,会明显影响口型的效果
建议视频录制满足时长3 - 5分钟

镜头抖动会有什么影响?
生成的形象同样可能发生抖动;需人工选取画面稳定的连续片段进行训练,若无连续一分钟以上镜头稳定片段则需重新录制;
保证镜头固定足够稳定,拍摄全程无任何机位的变化



衣服,椅子,桌面等附属物与绿幕同色系会有什么影响?
1. 易造成分割效果不佳;
2. 去绿时,同色系附属物会受到影响产生颜色变化
避免穿偏绿色系衣物及使用偏绿色系道具



人物、桌椅道具大面积反绿光怎么办?
训练时需要进行较高等级的去绿可能使反绿的位置颜色失真;若不进行高等级的去绿可能造成产出的形象同样反绿光
优化拍摄环节



眼镜片反光,透绿怎么办?
眼镜片绿色的部分会被分割当成背景
拍摄时适当调整,尽量避免眼镜片透绿



如何减少绿光的反射到人身上?
1. 绿幕选择牛津布材质,背光安装,保证绿幕后方没有光线渗入;
2. 模特距离绿幕至少1.5米距离;
3. 对模特进行四面环绕打光,打掉轮廓上的绿光;
4. 绿幕和模特分开打光;
5. 可以把周围绿幕用黑布遮挡掉,只露出需要扣像的一块来减少漫射的光线


视频有多人声说话会有什么影响?
对口型识别造成干扰,影响口型合成的效果
尽量保证环境安静;若无法满足,可调试麦克收音范围减小其他人声录入或进行音频后期处理

使用蓝幕录制会有什么影响?
身上反蓝光无法去除;需自行抠图去蓝光之后给到处理后素材和通道文件,可正常制作
提前准备绿幕避免使用蓝幕录制;

眼神不正视镜头,飘忽不定会有什么影响?
生产的形象眼神同样会飘忽不定
建议录制全程眼神正视镜头

开头未静默3s会有什么影响?
1. 可能造成生产的形象静默时嘴巴不闭合;
2. 训练时可以通过手动选取说话间的闭嘴帧作为静默帧,但可能有不自然的情况
建议开头静默1-3秒,口型保持闭合状态

发缝和碎发明显会有什么影响?
1. 头发主体区域之外的碎发在分割过程中会直接消失;
2. 发缝可能会造成外侧头发消失或闪动,也可能发缝分割不佳;
录制前整理头发,确保头发不会有发缝透出绿幕,尽量减少碎发



佩戴耳饰会有什么影响?
1. 画面中耳饰周围是绿幕时,分割后耳饰可能消失或闪动;
2. 耳饰周围是头发时,无影响,可正常分割
尽量不带耳饰,如佩戴耳饰,画面中耳饰需在头发范围内

佩戴金属饰品,纽扣,手表,项链等会有什么影响?
1. 易造成反绿,去绿后可能造成颜色变化或闪动;
2. 项链过粗或位于头部范围可能导致人脸识别失败
尽量不佩戴金属饰品,如佩戴需减少饰品的反绿程度

胳膊下方封闭处细小缝隙,腿部封闭缝隙会有什么影响?
在缝隙过暗的情况或极细小的粘连缝隙的情况下可能分割不佳;
拍摄时适当调整,增大或不漏出缝隙;



动作超出画面外会有什么影响?
生成的形象做相同动作时画面外的部位消失;训练时需人工选取动作不出框连续片段
在画面内动作,尽量不超出画面



人物复用性差的特定动作比较多(如,比数字123等)会有什么影响?
产出的形象随机动作播放时,这类动作和文本内容不匹配造成不自然
做动作时尽量做通用类型的动作

视频底噪大会有什么影响?
可能影响口型合成效果
建议采用麦克风进行录制;可以降低录制音量,相应的提高说话声音

使用桌子录制坐姿时需要注意什么?
需注意桌子无反绿情况出现;桌子稳定无晃动


是否可以录制侧身?
需要面部五官和口型全程完整露出,侧身幅度不要过大;


是否录制形象的时候一定要收音?
一定需要,且保证音画同步。算法训练口型需要画面和声音构成一组pair一起进入模型,因此需要画面对应的音频


补光灯,或者其他物体出镜怎么办?
1. 确保人物完整在绿幕中;
2. 其他不需要出现的物体跟人体在画面中无重叠交叉(有明显间距)


读错文本怎么办?
1. 视频素材录制过程中的读错字可以忽略
2. 声音录制过程中的读错字可以停顿两秒后将该句话再读一遍


是否可以使用客户自己准备的文本?
可以,且推荐客户读和所生产内容相符合类型的文本



二、声音复刻相关

问题表述
回答
优化建议
有混响和噪声会有什么影响?
易造成声音训练后效果不好
1. 录制时选择回音小、隔音好的房间(如卧室);
2. 采用麦克风录音,通过麦克风设置减少噪音收入;
3. 通过后期修音处理降低混响和噪声来提升demo效果
普通话不标准会有什么影响?
声音训练后,发音可能会奇怪
建议使用发音标准、吐字清晰的普通话
ASR 分句不足50句会有什么影响?
整体录音时长短,导致句子少的,会严重影响声音效果,需要补充录制;
按照声音录制指引进行录制,满足100分句,10分钟以上
音频振幅过大(爆音)会有什么影响?
声音训练后的发音也有同样问题
可以调试录制设备来改善录音效果,或提供后期修音后的素材
音频口水音,换气声明显会有什么影响?
声音训练后的发音也有同样问题
录制过程中需注意避免,或提供后期修音后素材
音频录制的场地如何选择?
建议在较多软质材料的安静场所录制,如卧室,车内等



帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈