跳到正文
5月6日周三
  1. 声网博客60

    声网拆解卡顿率、丢包率与延迟对 RTC 体验的差异化影响

    按场景给出指标优先级:强交互场景延迟是第一杀手(端到端超 400ms 对话节奏被破坏),内容消费场景卡顿最致命,音频质量敏感场景丢包率需严控;并说明三者连锁反应——丢包超 10% 时卡顿率通常同步上升,以及声网在教育、社交、会议场景的分层保障策略(大班课教师端 400ms 内、学生端 CDN 3-5 秒)。

    推荐理由:把延迟、丢包、卡顿三个指标放进场景比较优先级,对质量监控体系设计有直接参考价值。

4月17日周五
  1. LiveKit Blog70

    LiveKit 逐项对比语音 Agent 两种架构:STT-LLM-TTS 级联与端到端 Realtime

    LiveKit 对照级联管线(STT-LLM-TTS)与实时端到端(S2S)模型在延迟、工具调用、话轮检测、语音自然度、可控性与调试、成本、合规与电话场景上的差异:实时模型在情绪与韵律感知、串行开销上有结构优势,但工具调用准确率与可定制性较弱;管线在每层可观测、可替换、可在文本层脱敏 PII、可做区域数据驻留上更可控,但需要靠流式重叠(部分转写进 LLM、token 边到边进 TTS)才能压到接近实时模型。文章另给出两种混合方案:realtime 模型配独立 STT,以及半级联(realtime 只出文本、由独立 TTS 出声)。并指出电话网络为 8kHz G.711 音频,而实时模型多按 16–48kHz WebRTC 音频训练,呼叫中心场景管线通常更可靠。

    推荐理由:语音 Agent 架构选型的系统性对照,覆盖延迟、工具调用与合规等实际决策维度。

4月16日周四
  1. LiveKit Blog64

    LiveKit 用观察者模式做语音 Agent 护栏:后台模型读转录并向上下文注入处置

    LiveKit 给出观察者模式(observer pattern)的完整实现:通过 AgentSession 的 conversation_item_added 事件旁路监听转录,用更强、可更慢的独立 LLM 异步做策略分类,再以 update_chat_ctx 把护栏指令作为系统消息注入主 Agent 上下文,主 Agent 在下一轮生效,全程不阻塞对话;必要时观察者可直接结束通话或接管控制。示例中主会话使用 gpt-4.1-mini、观察者使用 gpt-4.1,并以网约车乘客被司机要求线下现金支付的违规场景演示分类与响应分离。文章还列出三项工程细节:同一违规类型每会话最多注入一次、并发保护确保同时只跑一次评估且不丢用户轮次、以及 JSON 解析失败的兜底。

    推荐理由:把安全策略与对话模型解耦的可复用工程模式,直接缓解复杂护栏挤占对话能力的问题。

4月13日周一
4月1日周三
  1. LiveKit Blog62

    LiveKit 拆解 talker-reasoner 模式:快慢双模型加异步工具,让语音 Agent 不阻塞

    LiveKit 介绍 subagent delegation(又称 talker-reasoner、快脑慢脑)模式:每个会话轮次由延迟优化的主 Agent(示例用 google/gemma-4-31b-it)处理,需要多步推理或慢工具的任务交给后台推理模型(示例用 google/gemini-3.1-pro),两者仅通过一个异步工具连接——主 Agent 调用后首次进度更新即释放对话,可继续应答或追问,子 Agent 结果在空闲时以追加回复返回,且会话历史不进入子 Agent 以保持轮次成本低。文章同时给出不适用情形:答案需先核实(价格、医疗建议)、单个快模型已够用、主 Agent 无事可做只能念填充话术、以及通话普遍短于 30 秒。

    推荐理由:面向长耗时推理的语音 Agent 编排模式,给出了可落地的分工与适用边界。

2月10日周二
1月19日周一
  1. 声网博客52

    声网讲解 SRT 协议:选择性重传、AES 加密与延迟窗口权衡

    SRT 基于 UDP 引入序列号与时间戳,用选择性自动重传替代 TCP 的顺序阻塞重传以避免队头阻塞,并可在配置的延迟窗口内换抗丢包能力;协议层内置 AES-128/256 端到端加密、传输层统一时间基准做音视频同步、仅出站连接简化防火墙穿透,还持续监测丢包/RTT/带宽/抖动以自适应调整;定位为专业直播与远程制作的低延迟传输方案。

1月14日周三
  1. 声网博客52

    声网梳理媒体鲁棒性四层防线:编码加固、动态适配与错误隐藏

    把抗弱网能力分为四层:发送前加固(抗错编码、I 帧最高保护等级的不平等保护、FEC 冗余)、传输中动态适配(实时探测带宽/丢包/延迟/抖动并调码率、按延迟预算决定是否重传)、接收端补救(运动补偿错误隐藏、FEC 解码恢复)、系统级协同(Wi-Fi 与蜂窝多路径传输、按接收者网络选发低码率高保护流)。

1月10日周六
  1. 声网博客22

    声网对话式 AI 引擎:2 行代码 15 分钟搭建 24 小时 AI 客服

    声网推出对话式 AI 引擎,主打 2 行代码、15 分钟快速构建 AI 客服智能体,集成 ASR、NLP、LLM 与 TTS 全链路。其端到端响应延迟控制在 650 毫秒以内,打断响应为 340 毫秒,并可抑制高达 95% 的环境人声与背景噪声。接入需开通服务、集成 v4.5.1 及以上实时互动 SDK,并配置 LLM 与 TTS 供应商信息。

1月4日周日
  1. 声网博客54

    声网解析丢包容错(PLC):插入、插值与重构三类算法

    按发送端丢包恢复与接收端 PLC 两条线展开:发送端靠 FEC 与低比特冗余,接收端 PLC 不占额外带宽、不增延迟,分插入、插值(波形替换、音高波形复制、时域校正,G.711 采纳音高复制)与基于重构的合成(如 G.723.1 插值线性预测系数)三类,并说明 PLC 常与 FEC、自适应码率配合使用。

12月24日周三
  1. 声网博客50

    声网讲解自适应媒体质量控制:码率、分辨率与帧率的协同调节

    按“感知—评估—决策—调整—反馈”闭环组织:持续监测吞吐、丢包、RTT、抖动与缓冲趋势做带宽估计,检测到丢包上升、RTT 增大或缓冲积压即启动拥塞控制,再渐进式调整码率、分辨率、帧率与编码结构以避免大幅波动;定位为 RTC、互动直播与弱网移动场景的核心支撑技术。

12月19日周五
12月3日周三
11月4日周二
3月3日周一
  1. Cartesia Blog29

    如何用 Cartesia API 构建语音 AI 智能体:从架构到生产部署的分步指南

    用 Cartesia API 和 Sonic 模型可在 Python 中搭建语音 AI 智能体,流程为语音识别转文本、LLM 生成回复、再由 Sonic 合成自然语音。教程要求准备 Cartesia 账号、API key 并安装 FFmpeg,语音识别可选用 Whisper、Deepgram 等服务,也可借助 LiveKit、VAPI 或 RASA 平台快速起步。