a16z谈AI语音:呼叫中心、教练与陪伴者——与Olivia Moore、Anish Acharya对谈
摘要
AI语音最先形成持久商业切口的,将是垂直B2B,而不是独立消费应用。 企业本来就会付钱请人接电话,因此夜间覆盖和原本无人接听的电话都是很自然的切入口;最强的初创公司随后会扩展到工作流主导权。Labenz称,其中一些属于“过去10年里我们见过增长最快的B2B初创公司”。
对话式AI的可用性基本已经到位,但拟人感仍不只取决于转写准确率。 延迟如今通常低于半秒,而Sesame展示了停顿、“嗯”等填充词和声音抑扬如何把一副打磨过的合成声音变成“足以被误认为真人”的声音。情绪适配、多方轮流发言和可打断性仍是明显短板。
Happy Robot说明,专业化的对话质量可以打开更高价值的工作。 它的智能体会向货运经纪商披露自己是AI,并与卡车司机交朋友、唱反调和谈判;其中一种策略是先插入5秒钟的“让我去和主管谈谈”,再回来让步一点,Moore认为这一做法可能带来高得多的接受率,但她对此并不确定。值得投资的启示是,更好的表达方式能赢得处理说服和定价的许可,而商品化语音做不到这一点。
应用层的护城河在于围绕语音搭建的垂直系统,而不只是语音生成本身。 企业需要集成、客户专属上下文、评测、护栏,以及系统记录失效时的故障恢复——“这种能力能让你进入对话,但不足以把你带到另一边”。这使垂直平台比横向智能体更占优势,即使底层模型仍在进步。
Apple推迟Siri大改版体现的是 incumbents 的劣势,而不是技术进展不足。 Acharya称Siri“每天五次都像往眼睛里戳一根棍子”,并认为大公司很难拥抱AI混乱而具有人性的部分;Moore补充,Apple必须安全地向数亿用户交付产品,不像初创公司只服务于主动报名的测试者。Labenz还把Google未能在ChatGPT与Deep Research绑定之前将其商业化,视为类似的错失机会。
语音自动化正在带来教练和任务替代,但还没有达到Labenz设想的呼叫中心90%裁员。 当实时辅导能够影响一笔1万美元的暖通空调增购时,每月数百美元的费用就可能合理;招聘智能体则能为招聘人员每周释放约20小时,让其服务5名优先候选人。尽管呼叫中心年人员流失率达到300%,嘉宾们尚未观察到数量级的岗位损失,Acharya也不愿自信地把18个月的技术时间线直接换算成劳动力市场的时间线。
消费级前沿正从老年人和儿童延伸到越来越个性化的陪伴者。 多模态语音可以为老年人提供耐心的技术帮助,为儿童提供辅导老师或具有积极社交属性的Minecraft伙伴,也可以打造从共情倾听者到会挑战用户的“东海岸模式”人格不等的陪伴者。Acharya更长期的框架是“情感自行车”:正如计算机扩展了人的智力,它也将扩展人的情感能力。
安全政策必须在已被证明的冒充风险与授权身份的市场需求之间取得平衡。 Labenz称,在他披露问题一年后,仍有两个呼叫平台允许他克隆Donald Trump并进行规模化呼叫;Moore则表示,当下人们对模型限制的挫败感,可能高于对自己被克隆的担忧。她对“禁止克隆登记”的改造具有经济建设性:人们可以禁止冒充,同时明确授权自己的声音或头像用于获批场景。
精读
1. 需求侧行为往往是最清晰的产品信号
Moore的项目观察漏斗覆盖创始人密集的Twitter、newsletter和线下聚会,也包括Instagram、TikTok,尤其是YouTube——后者是“全球排名第1的移动应用、第2的网站”。对许多消费级和专业消费者AI产品而言,YouTube教程是社交推荐的最大来源。
团队会观察普通用户——“说实话,通常是十几岁的女孩”——如何把ChatGPT强行变成治疗师、朋友或教练。Moore的框架是:“消费端太随机、太神奇,所以我们尽量让数据说话”,因为如果产品错过了时机、上手流程或某个决定性功能,再好的出身也救不了它。
Moore不那么光鲜的优势,就是亲自使用这些产品:Operator、Deep Research、DeepSeek、o1 Pro和Krea都是许多自称业内人士的人尚未尝试过的工具。她用一个更新版的社交应用老笑话来测试需求:“每个大语言模型都在被折磨成治疗师。”
2. 语音打开了屏幕从未覆盖的技术界面
Acharya从第一性原理出发:语音介入了大多数人与人之间的关系,但技术过去没有处理这一界面的基础设施。与经历了数十年产品试验的计算界面不同,语音仍是“一张完全空白的纸”,同时创造了产品和分发机会。
Moore认为B2B智能体的进展更快,因为即使是小企业也会付钱请1到3个人接电话。当模型接近人类水平后,用智能体接听夜间电话或原本会转入语音信箱的电话,就成了显而易见的替代方案;许多消费者可能已经在不知情的情况下遇到过这类智能体。
消费端的接触则主要通过ChatGPT、Grok和病毒式传播的Sesame演示发生。Moore认为,1-800-ChatGPT暗示着许多人第一次真正有意义的AI体验——无论这个产品本身是否成功——可能会通过电话到来,而不是通过一个新应用。
3. 老年人说明多模态与对话同样重要
Moore那位90多岁的母亲已经会让Alexa播放音乐,因此Alexa+可能成为进入对话式计算的桥梁。语音也可以解锁她从未学会操作的老技术,包括电子邮件界面和电视遥控器。
Labenz有一条屡试不爽的技术支持指令:“从上到下,把屏幕上的所有内容读一遍。”这条指令已经可以作为纯文本GPT-4提示词发挥作用。一个有耐心的模型,能够为那些没有“无限耐心”的亲属的人复现这种帮助。
Acharya提到Google在“我想应该是去年年底,12月”发布了能看见屏幕内容并实时交互的Gemini模型;OpenAI也有类似能力。他更尖锐的观点是,关键上下文往往存在于物理世界:把手机对准遥控器,比把每个按键逐一用语言解释给Nathan或Google更自然。
4. 低于半秒的延迟解决了入门级语音,却没有解决对话
Acharya认为“解决了”说得太满,但基础延迟和可理解性在过去一年里已经接近解决。如今大多数模型的响应时间都低于半秒,这决定了系统只是交换音频,还是已经能够维持一场对话。
Sesame的突破在于保留了表面上的不完美:额外停顿、“嗯”等填充词,以及传统系统可能视为错误的表达性语调。这些细节让输出超越了更好的Alexa或Siri,趋近于“足以被误认为真人”的声音。
情感表达仍未完成。创始人希望智能体能识别内容并调整语气:面对令人兴奋的消息时更明快,面对悲伤时更低沉、更缓慢;可打断性仍然笨拙,尤其是在多人场景中。Moore指出,人类自己也还没有完全解决两个人同时开口时该怎么办。
Labenz区分了语音模型和对话模型:人类通过细微的听觉和视觉信号协调轮流发言,而且往往在还不知道完整句子之前就已经开口。一个早已知道全部回答的AI会让人觉得不自然,这说明原生的对话行为需要的不只是“语音转文字—LLM—文字转语音”的流水线。
5. 专业化表达赢得谈判资格
a16z被投公司Happy Robot为货运经纪商提供语音AI。Acharya认为,它更深层的技术工作让对话明显优于商品化替代方案,从而让客户有信心把“说服、谈判、反驳”交给它,而不只是让它检索信息。
Moore最突出的例子,是智能体刻意增加延迟。它会说:“等一下,让我去和主管谈谈。”停约5秒后,再回来给出一个略高一点的价格,尽管它早已知道自己的授权区间;人在主观上会觉得自己争取到了让步,Moore认为最终报价的接受率会高得多。
Labenz的反应是:“我不知道该怎么看这件事。”这保留了有效设计与操纵之间的张力。智能体会披露自己是AI,但卡车司机仍会进入熟悉的对话节奏;理性上的知情,并不能抵消谈判仪式训练出来的“爬行动物大脑”。
更广泛的判断是,AI可以“比人更像人”:同一个友好的智能体每次都能接待,耐心倾听,并且可以把全部时间都花在来电者身上。即便模型的推理能力还没有超越人类,超人的耐心以及几乎为零的等待时间也已经具备运营价值。
6. incumbents 同时面临文化和分发障碍
Apple宣布重大Siri更新要等到2027年,与快速进步的初创公司放在一起看显得荒谬。Acharya认为,日常Siri糟糕的表现与Apple Intelligence的广告之间的落差正在侵蚀信任:“每天五次都像往眼睛里戳一根棍子。”
他的诊断是制度性的:AI最适合在人类互动混乱的表面上工作,而 incumbents 的组织方式却是从技术中消除人性和不可预测性。委员会、律师,以及试图“阉割AI”的努力,构成了他所说的“非常困难的精神问题”。
Moore提供了另一面:Apple必须向数亿不同年龄、不同使用场景的用户交付自然且正确的产品。初创公司可以把不完美的测试版交给自愿尝鲜的早期用户;她猜测,生成式通知摘要引发的公众反应可能吓到了Apple。
Google Labs通过NotebookLM等受限实验提供了部分范本,但商业化仍然缓慢。Labenz最尖锐的例子是Deep Research:它最初是Gemini产品,本应由Google占据主导,却最终让ChatGPT因这一能力而闻名——“incumbents一次又一次错失机会”。
7. 垂直上下文和集成才是真正的企业护城河
原生端到端语音模型仍处于早期,而且成本略高;Acharya认为Gemini Flash或许是当前最好的选择,但也指出其可打断性仍然落后。他一贯的保留意见是:“模型现在正处于它们未来任何时点都不会更差的状态”,因此今天的多阶段技术栈一年后可能就会显得过时。
Acharya把推理模型视为一种独立原语,尽管它们拥有熟悉的界面。概率式的语言行为有助于建立友谊和融洽感,而定价等事实性决策要求准确;通过编排推理模型和语言模型,可以把对话的不同部分分配给合适的系统。
工具调用意味着语音生成只是第一层。正如Acharya所说:“这种能力能让你进入对话,但不足以把你带到另一边”;持久的产品需要工作流、集成、结果衡量、护栏,以及对后端故障长尾情况的处理能力。
Moore称,这一负担对传统企业尤其严重:它们可能连一次性搭建都很困难,更不用说持续让模型与系统记录保持同步。她强调,专注垂直领域的平台可以处理行业对话类型和集成的长尾;Labenz则把客户专属上下文称为稀缺的“最后一公里”,这是基础模型无法从通用知识中推断出来的。
8. 辅导已经奏效,大规模替代仍未得到证明
Acharya称,实时辅导已经在呼叫中心员工、销售人员和暖通空调技师中发挥作用。如果一个细微问题决定了一笔1万美元的增购,那么每月数百美元的个人教练费用就能带来显而易见的回报;涉及体力劳动或深度个人关系的工作尤其适合增强。
自动化也在移除不受欢迎的任务。呼叫中心的年人员流失率可能达到约300%,而招聘智能体可以完成初筛,每周为招聘人员释放约20小时,让其投入到5名优先候选人的说服、沟通和照护中。
Labenz不接受简单的再培训叙事:被替代的呼叫中心员工未必会在同一家雇主那里转入更高价值的工作。他追问这项技术是否可能支持90%的人员削减,并认为这种影响或许要到2026年及以后才会出现,同时承认问题关注的是数量级,而不是一个完全没有人的呼叫中心。
Acharya从经验出发反驳:他们尚未看到这样的削减,因为一份工作往往同时包含筛选、面试、薪资谈判、入职,甚至陪员工去看棒球比赛。“即使技术还有18个月才到位,”他说,它对劳动力市场的影响仍很难预测;当供给变得充裕,问题可能会从工作转向意义。
9. 消费级语音从中小企业前台扩展到情感基础设施
对餐厅、水疗店和家政服务公司,Acharya建议采用垂直而非通用智能体。老板通常不会解雇原本接电话的核心员工,而是把他们转向客户体验和增长,让智能体处理漏接电话和常规来电。
创作者工具已经覆盖ElevenLabs的声音克隆和描述式声音生成、可能类似Delphi的互动数字分身,以及HeyGen头像。Moore认为,完全合成的播客主持可能还要“几年时间”,但她可以想象这样一个世界:一档脚本化节目既不需要摄像机,也不需要麦克风。
Labenz列举了Synthesis、Ello和Super Teacher等个性化辅导案例;Moore最看重的例子,则是一个积极的AI Minecraft伙伴取代“有毒的青少年”,以及一个多模态课堂观察者,为资源不足的学校中的家长和教师提供原本无法获得的反馈。
陪伴者需求也打破了原有假设:嘉宾看到的AI男友和互动小说行为,往往更多来自女性,而不是由“精力旺盛的年轻男性”主导的市场。陪伴者可以补充现实关系,教授对话或调情,承接情绪压力,也可以挑战用户而不是一味奉承——也就是开玩笑称作的“东海岸模式”。
10. 身份授权可以把保护与经济机会结合起来
Labenz引用了斯坦福大学在此前一集Replika节目中讨论的研究:用户报告称自杀意念减少,而且更多时候与外部世界的互动增加,但他质疑其中部分数据,并指出一些结果来自自我报告。他的结论是有条件的:有益的陪伴者确实存在,但掠夺性和成瘾性的版本同样可以被制造出来。
他的红队测试让冒充风险变得具体:在他报告漏洞一年后,两家相对知名的呼叫平台仍允许快速克隆Donald Trump的声音并进行规模化外呼。因此,他主张尽早实施披露规则和禁止克隆登记。
Moore看到了登记制度对应的正向市场:人们可以授权自己身份的获批用途。ElevenLabs的声音收藏已经为配音艺术家创造机会;一个拥有5,000名粉丝的网红,也可能通过可扩展的头像实现变现,即使大型品牌会忽略这个真人创作者。
Acharya警告不要本能地采取家长式保护,认为消费者已经学会不去相信书籍、互联网或社交媒体上的一切。Moore的长期愿景是让语音遍布AirPods、眼镜、电脑和每一种产品——有时是双向交互,有时只是转写;Acharya则称其为一辆“情感自行车”,能够扩展人的情感能力。