Agent Participant 可将服务器端 Agent 添加到 RealtimeKit 会议。任何能够建立 WebSocket 的后端(Cloudflare Worker、Durable Object 或你自己的服务器)都可以连接。无需客户端 SDK 或浏览器。
目前,Agent 可以接收实时会议活动,例如转录内容、参与者状态和广播。未来计划增加更多功能,包括发送消息和处理会议媒体。
参与者使用 RealtimeKit SDK 的浏览器和应用
音频、视频、聊天、投票、广播
RealtimeKit 会议
Agent 参与者由预设配置
监听:转录、在线状态、广播
发送:聊天、广播、流式音频(规划中)
我的代码Durable ObjectWebSocket ↔ JSON
参与者↔RealtimeKit 会议
Agent 参与者加入会议RealtimeKit 会议
Agent Participant监听 →Worker 或 Durable Object
Worker 或 Durable Object发送(规划中)→Agent Participant
Agent 是会议参与者。其预设决定加入会议的方式,其订阅决定接收哪些事件。
有关创建预设和选择订阅的信息,请参阅构建 Agent。有关 Agent 与人类参与者功能的比较,请参阅功能矩阵。
我的 Worker
我的 Durable Object
Agent Participant
RealtimeKit 会议
使用 agent 预设添加参与者
- 使用已配置的预设,通过 create-participant-api为 Agent 创建参与者。
- Durable Object 使用该 Agent 的参与者令牌打开 WebSocket。
- Agent 会加入会议,并转发你订阅的事件。
- 会话结束时,服务器会发送
session.ended并关闭 WebSocket。
使用 Durable Objects 构建 Agent
请决定会议参与者是否应该看到 Agent。无论选择哪种方式,Agent 收到的事件都相同。
目前尚不支持 Agent 讲话或发送聊天消息。请参阅功能矩阵。
只要 Agent 保持连接,就会作为参与者计费。即使其他人都已离开,已连接的 Agent 也会使会话保持活动状态,因此后端必须将其移除。请参阅计费与结束会话。