00:00
今天指定一件事,实时语音A帧怎么串成链?端到端延迟预算多少?6周能不能上线,谁负责?客户买的不是模型,是打断后0.3秒接上话的真人感,做不到语音客服就是按键菜单加长版。上周客户骂了三次,说完要等2秒才回应,中途插话被无视,最后直接挂断。工单里全是播报感,Live kit agency里VAD轮次检测打断都是默认能力,Open to lemon tree的JAAI约定能直接标出首音延迟。第7只做电话客服一条链路,单轮问答加打断,不做多人会议,不做情绪识别验收标准先写死。方案A,流式串行asr l lmtts各自流逝,工具旁路一步。方案B,端到端语音模型少一跳,但不可审计串行。
01:00
最怕半句话AS2还没定稿,ALM就答了TTS波一半用户插话。这三个状态机不密,等上线必炸。现在P50首音1.9秒,P953.4秒,打断成功率不到四成,没有基线就没有优化,先上trace再提速。搜10时语音agent延迟的人八成在找延迟预算表,把它写成公开文档,是自然流量最省的入口,转化事件只买首音低于1.2秒这条拿他头,开发者社区cat能压到80以内,超了就不加预算。数字人渲染和TTS按分钟计费,每分钟成本必须压到0.12元以内,毛利率不到六成就不投。第二起通话录音和声文属灵感信息,必须明示告知加单独授权数字人不得暗示真人身份,责任写进合同,先排4个owner链。
02:00
打断trace数字人第一周出延迟预算表,谁卡住谁?当天挂blocker,串行还是端到端?我只要一个答案,端到端省100ms,但不可观测,这100ms值不止一个黑盒。既然可审计优先,我把话术改成响应了,能打断可查证,不承诺像真人客户反而更细。打断必须200ms内静音,否则用户会重复说一遍,我用一线标准验连说三次都被接住才准上生产。反正也有一条端到端语音模型在多口印场景更稳,所以串行方案得留切换位,不能把接口焊死,范围冻结,单轮问答打断一次工具查询就这三样,多人会议、情绪识别、声文克隆全部移出。本期最终取舍牺牲约150ms极限延迟,换全链路可观测和可插RA工具TTS按距流式工具预取并行实现路径句子及刘世家可取消会话AS2未定稿只缓存不触发打断。
03:17
取消LLM并清空播放缓冲成功线P9无首音1.2秒端到端1.5秒,打断成功率95%,连续三天超过2秒就回退半双攻上线后把延迟预算表和打断时限写成两篇技术文档,看自然搜索带来的试用注册目标每月500个付费只测一条创意延迟对比视频预算每天500封顶,RAS低于1.5就关归因看首次绘画完成首期预算18万,6周只要单分钟成本低于0.12元,回收期3个月内我就签字,超支一分不加,加两条就过合规开场3秒告知录音与合成语音授权单独勾选写进合同,责任边界就清楚,Owner定了Bob管链路艾ex斯管打断,David管trace艾VI管数字人,6周后验收。
04:17
95手机1.2秒打断95%开板做Li k上的流式串行链路,6周上线单轮客服加打断,端到端P 95压在1.5秒trace全程开。
我来说两句