语音人工智能解决方案领先供应商Krisp Technologies Inc.今日宣布推出VIVA,这是一个专为语音智能体设计的新型语音隔离AI模型和软件开发工具包。
该公司还透露,VIVA目前每月在全球范围内处理超过10亿分钟的语音音频。
VIVA是"语音智能体语音隔离"的缩写,集成到应用程序的音频路径中。它增强了语音智能体检测语音活动的能力,改善了它们的对话轮换行为,有助于防止错误中断并创造更自然、有效的对话。
消费者对AI语音交互的期望越来越高。过去,与在线系统的对话是僵化和脚本化的,往往只是美化的录音。这些日子即将结束。如今,语音智能体可以进行真实对话,动态响应并适应上下文。
"行业术语称之为对话轮换,"联合创始人兼首席执行官Davit Baghdasaryan在接受SiliconANGLE独家采访时说。"当有背景噪音时,对话轮换就会变得非常混乱——特别是背景声音。AI会变得非常困惑。"
对话轮换指的是对话的来回流动,或者知道何时说话何时倾听。人类通过语言和非语言的调整,如语音、停顿、语调和肢体语言,自然地做到这一点。
在语音AI中,对话轮换指的是检测用户何时停止说话以及何时适合响应而不中断或留下长时间沉默。糟糕的对话轮换会导致尴尬或不自然的交互。
Krisp的VIVA模型在20毫秒内处理音频,显著提高了响应速度。它可以将对话轮换准确性提高3.5倍,从而减少50%的通话中断,并帮助提升客户满意度。
与依赖耗电图形处理器的模型不同,VIVA在中央处理器上高效运行,使其非常适合在广泛的设备上部署。这使其能够嵌入运行或与更大模型并行工作而不影响性能。
这对企业至关重要,因为它即使在嘈杂环境中也能提高转录准确性,并消除不相关的音频,如背景电视或无关对话,改善自动理解和整体用户体验。
人类交流依赖于微妙的音频和行为线索。虽然人们自然地处理这些线索,但语音智能体仍然难以应对。背景声音、笑声甚至停顿都可能导致AI响应中断或混乱。
"仅从音频就有五、六种不同的线索,"Baghdasaryan解释说。"如果我们想要有人类级别的对话AI,AI必须意识到这些线索。"
Krisp设计VIVA来识别和适应这些信号。例如,一个VIVA模型过滤掉笑声——在有儿童的环境中特别有用——这样机器人就不会误解这些声音为用户语音的一部分。
"笑声是一个很大的问题,"Baghdasaryan说。"我们有模型可以去除笑声,这样机器人就不会被它中断。"
VIVA已经集成到Decagon AI、Voxex.ai、Vapi Inc.、Ultravox.ai(前身为Fixie.ai)、LiveKit Inc.和一些世界最大AI实验室使用的智能体系统中,在那里它正在提供可衡量的改进。
"当我们的开发团队演示Krisp的能力时,我们被震撼了,"Vodex首席技术官Kumar Saurav说。"看到我们的机器人即使在嘈杂的办公室噪音中也能不间断地继续工作,对我们来说是一个游戏规则改变者。"
Baghdasaryan总结说,随着每月数十亿音频请求的里程碑,VIVA已准备好让开发者构建更响应迅速的智能体,并为更好的客户支持和虚拟伙伴提供基础。
好文章,需要你的鼓励
苏州大学研究团队提出"语境降噪训练"新方法,通过"综合梯度分数"识别长文本中的关键信息,在训练时强化重要内容、抑制干扰噪音。该技术让80亿参数的开源模型在长文本任务上达到GPT-4o水平,训练效率比传统方法高出40多倍。研究解决了AI处理长文档时容易被无关信息干扰的核心问题,为文档分析、法律研究等应用提供重要突破。
在Cloudera的“价值观”中,企业智能化的根基可以被概括为两个字:“源”与“治”——让数据有源,智能可治。
清华大学团队首次揭示了困扰AI训练领域超过两年的"幽灵故障"根本原因:Flash Attention在BF16精度下训练时会因数字舍入偏差与低秩矩阵结构的交互作用导致训练崩溃。研究团队通过深入分析发现问题源于注意力权重为1时的系统性舍入误差累积,并提出了动态最大值调整的解决方案,成功稳定了训练过程。这项研究不仅解决了实际工程问题,更为分析类似数值稳定性挑战提供了重要方法论。