tencent cloud

实时音视频

动态与公告
产品动态
产品近期公告
关于 TRTC Live 正式上线的公告
关于TRTC Conference 正式版上线的公告
Conference 商业化版本即将推出
关于多人音视频 Conference 开启内测公告
关于音视频通话 Call 正式版上线的公告
关于腾讯云音视频终端 SDK 播放升级及新增授权校验的公告
关于 TRTC 应用订阅套餐服务上线的相关说明
产品简介
产品概述
基本概念
产品功能
产品优势
应用场景
性能数据
购买指南
计费概述
免费时长说明
月订阅
现收现付
TRTC 逾期与暂停政策
常见问题解答
退款说明
新手指引
Demo 体验
视频通话 SDK
组件介绍
开通服务
跑通 Demo
快速接入
离线唤醒
会话聊天
云端录制
AI 降噪
界面定制
Chat 集成通话能力
更多特性
无 UI 集成
服务端 API
客户端 API
解决方案
错误码表
发布日志
常见问题
视频会议 SDK
组件介绍(TUIRoomKit)
开通服务(TUIRoomKit)
跑通 Demo(TUIRoomKit)
快速接入(TUIRoomKit)
屏幕共享(TUIRoomKit)
预定会议(TUIRoomKit)
会中呼叫(TUIRoomKit)
界面定制(TUIRoomKit)
虚拟背景(TUIRoomKit)
会议控制(TUIRoomKit)
云端录制(TUIRoomKit)
AI 降噪(TUIRoomKit)
会中聊天(TUIRoomKit)
机器人推流(TUIRoomKit)
更多特性(TUIRoomKit)
客户端 API(TUIRoomKit)
服务端 API(TUIRoomKit)
常见问题(TUIRoomKit)
错误码 (TUIRoomKit)
SDK更新日志(TUIRoomKit)
直播与语聊 SDK
Live 视频直播计费说明
组件介绍
开通服务(TUILiveKit)
跑通 Demo
无 UI 集成
UI 自定义
直播监播
视频直播
语聊房
高级功能
客户端 API
服务端 API
错误码
发布日志
常见问题
RTC Engine
开通服务
SDK 下载
API-Example
接入指引
API-参考手册
高级功能
AI 集成
概述
MCP 配置
Skills 配置
集成指南
常见问题
RTC RESTFUL API
History
Introduction
API Category
Room Management APIs
Stream mixing and relay APIs
On-cloud recording APIs
Data Monitoring APIs
Pull stream Relay Related interface
Web Record APIs
AI Service APIs
Cloud Slicing APIs
Cloud Moderation APIs
Making API Requests
Call Quality Monitoring APIs
Usage Statistics APIs
Data Types
Appendix
Error Codes
控制台指南
应用管理
套餐包管理
用量统计
监控仪表盘
开发辅助
解决方案
实时合唱
常见问题
迁移指南
计费相关
功能相关
UserSig 相关
应对防火墙限制相关
缩减安装包体积相关
Andriod 与 iOS 相关
Web 端相关
Flutter 相关
Electron 相关
TRTCCalling Web 相关
音视频质量相关
其他问题
旧版文档
RTC RoomEngine SDK(旧)
集成 TUIRoom (Web)
集成 TUIRoom (Android)
集成 TUIRoom (iOS)
集成 TUIRoom (Flutter)
集成 TUIRoom (Electron)
TUIRoom API 查询
实现云端录制与回放(旧)
监控仪表盘计费(旧)
协议与策略
安全合规认证
安全白皮书
信息安全说明
服务等级协议
苹果隐私策略:PrivacyInfo.xcprivacy
TRTC 政策
隐私协议
数据处理和安全协议
词汇表

Web

PDF
聚焦模式
字号
最后更新时间: 2023-05-31 10:58:30
本文主要介绍本地流的自定义采集和音视频流的自定义播放渲染等高阶用法。

自定义采集

默认情况下,trtc.startLocalVideo()trtc.startLocalAudio() 是开启摄像头和麦克风采集。
如果您需要自定义采集,可以通过 trtc.startLocalVideo() / trtc.startLocalAudio() 方法的 option.videoTrack/option.audioTrack 参数来指定。
获取 audioTrack,videoTrack 通常有以下几种方式:
通过 getUserMedia 采集摄像头和麦克风。
通过 getDisplayMedia 采集屏幕分享。
通过 videoElement.captureStream 采集 video 标签中正在播放的音视频。
通过 canvas.captureStream 采集 canvas 画布中的动画。

采集 video 标签中正在播放的视频

// 检测您当前的浏览器是否支持从 video 元素采集
if (!HTMLVideoElement.prototype.captureStream) {
console.log('your browser does not support capturing stream from video element');
return
}
// 获取您页面在播放视频的 video 标签
const video = document.getElementByID('your-video-element-ID');
// 从播放的视频采集视频流
const stream = video.captureStream();
const audioTrack = stream.getAudioTracks()[0];
const videoTrack = stream.getVideoTracks()[0];

trtc.startLocalVideo({ option:{ videoTrack } });
trtc.startLocalAudio({ option:{ audioTrack } });

采集 canvas 中的动画


// 检测您当前的浏览器是否支持从 canvas 元素采集
if (!HTMLCanvasElement.prototype.captureStream) {
console.log('your browser does not support capturing stream from canvas element');
return
}
// 获取您的 canvas 标签
const canvas = document.getElementByID('your-canvas-element-ID');

// 从 canvas 采集 15 fps 的视频流
const fps = 15;
const stream = canvas.captureStream(fps);
const videoTrack = stream.getVideoTracks()[0];

trtc.startLocalVideo({ option:{ videoTrack } });

自定义播放渲染

在正常情况下,在 startLocalVideo() startRemoteVideo() 时,传入 view 参数,SDK 会在指定的 element 标签下,创建 video 标签播放视频画面。
如果您需要自定义播放渲染,不需要 SDK 播放视频,可参考如下步骤实现:
在 startLocalVideo 或 startRemoteVideo 方法调用时不填 view 参数或 view 参数传入 null
通过 TRTC.getVideoTrack() 方法获取相应的 videoTrack
利用自己的播放器进行视频的播放渲染。
使用这种自定义播放渲染方式后,VIDEO_PLAY_STATE_CHANGED 事件将不会被触发,您需要自行监听视频轨道 MediaStreamTrack 的 mute/unmute/ended 等事件来判断当前视频数据流的状态。
对于远端视频,还需要监听 REMOTE_VIDEO_AVAILABLEREMOTE_VIDEO_UNAVAILABLE 事件来处理远端视频的生命周期。

自定义渲染本地视频

await trtc.startLocalVideo();
const videoTrack = trtc.getVideoTrack();

// 使用自定义的播放器进行视频播放渲染
const videoElement = document.getElementById('video-element');
videoElement.srcObject = new MediaStream([videoTrack]);
videoElement.play();


自定义渲染远端视频

trtc.on(TRTC.EVENT.REMOTE_VIDEO_AVAILABLE, async ({ userId, streamType }) => {
// 只拉流,不播放
await trtc.startRemoteVideo({ userId, streamType })
const videoTrack = trtc.getVideoTrack({ userId, streamType });

// 使用自定义的播放器进行视频播放渲染
const videoElement = document.getElementById('remote-video-element');
videoElement.srcObject = new MediaStream([videoTrack]);
videoElement.play();
});


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈