媒体传输适配器把 WebRTC 轨道连接到通过另一种传输交换媒体的服务。WebSocket 适配器支持音频接入、音频出站,以及以 JPEG 帧形式出站视频。
外部服务可以处理或生成音频,而无需实现 WebRTC peer。你的后端创建适配器并管理其生命周期。
WebSocket 适配器已正式发布。每个适配器在一个方向上承载一条轨道。按你的服务需要选择路径:
| 你的服务 | 方向 | 媒体 |
|---|---|---|
| 生成音频 | WebSocket → SFU → WebRTC | PCM 音频,发布为 WebRTC 音频轨道 |
| 转写或处理音频 | WebRTC → SFU → WebSocket | 以 PCM 投递的音频 |
| 检查帧或生成预览 | WebRTC → SFU → WebSocket | 以 JPEG 帧投递的视频 |
WebRTC 端点
媒体轨道
CloudflareRealtime SFU
WebSocket 适配器
二进制媒体数据包
你的 WebSocket 服务
WebRTC 端点媒体轨道 ↔Realtime SFU
Realtime SFU媒体 ↔WebSocket 适配器
WebSocket 适配器二进制媒体数据包 ↔你的 WebSocket 服务
双向音频请使用独立的适配器实例。WebSocket 适配器不支持视频接入。
使用 WebSocket 适配器
AI 音频指南展示了通过独立适配器路径进行语音生成和转写。对于视频,WebRTC 转 JPEG 示例 ↗在 Durable Object 中接收帧并分发给观众。
这两个示例都是实验性内容,公开使用前需要应用层认证和授权。仓库指南描述了设置和集成限制。