LiveKit Plugins Turn Detector

LiveKit Plugins Turn Detector

基于定制模型的LiveKit代理端发言结束检测插件

0
  • • 提供基于语言模型的发言结束检测,提高准确性和鲁棒性。
  • • 与传统VAD模型相比,减少误报,避免代理在用户发言结束前打断。
  • • 支持与VoicePipelineAgent集成,方便开发者使用。
  • • 需要模型文件,可通过命令行下载。
  • • 优化以在CPU上运行,具有适度的系统要求。
  • • 支持多并发会话,适合在代理服务器上运行。
  • • 未来版本将减少CPU和内存需求。

产品详情

LiveKit Plugins Turn Detector是一个用于LiveKit Agents的插件,它通过使用定制的开放权重模型来确定用户何时完成发言,从而引入了端对端的发言结束检测。相较于传统的声学活动检测(VAD)模型,该插件利用专门为此任务训练的语言模型,提供了一种更准确、更稳健的发言结束检测方法。目前版本仅支持英文,不建议用于其他语言。