要闻 值得关注 10月25日 周日 #multimodal#llm#research

Block 发布只用语音训练的全双工对话模型 Dessa

Block 的 AI 研究团队发布研究预览版 Dessa:一个从零开始、只用人类对话语音训练的语音到语音模型,没有使用任何文本或预训练模型。它是全双工的,可以边听边说,会判断何时插话、何时回应「嗯」「好的」这类附和。Block 称它能在 M4 Max 及以上的 MacBook Pro 上本地运行,推理快于实时。

要点

  • 训练只用了一台 NVIDIA GB200 NVL72;官方称它学会语言所用的词量比 LLM 少数百倍,但未公布参数量和数据规模
  • 页面只提供六段对话录音演示,没有基准分数
  • 目前只向一小批 AI 安全研究者开放早期访问,下载链接「即将推出」,许可证未说明
为什么值得关注

主流语音助手先把语音转成文本,语气和情绪信息随之丢失;Dessa 走纯语音路线,是语音 Agent 的另一种思路,但在公开权重和评测之前还难以判断实际水平。

来源

Esc
↑ ↓ 选择Enter 打开

分享图

1080 × 1350,适合发到群聊或朋友圈
分享图预览

键盘快捷键

j / k
下一条 / 上一条
o
展开或收起当前条目
Enter
打开当前条目详情
c
复制当前条目链接
s
收藏 / 取消收藏当前条目
/ 或 ⌘K
搜索
1 2 3
切换密度:标题 / 摘要 / 完整
t
切换主题
?
显示本帮助