跳到正文

#语音

今日 14 条
今天9月30日周三
  1. arXiv cs.CV22

    当语义重要时:面向共语手势生成的可靠性感知语义-节奏控制

    研究者提出用于共语手势生成的可靠性感知语义-节奏控制框架:以离散运动先验在 motion-code 空间表示手势,用全多模态分支与纯音频分支的分布差异构造条件信息增益,量化语义对动作预测的影响,在内容相关片段加强语义引导、在节奏主导片段减少干预。该框架把背景噪声视为声学可靠性条件,通过噪声条件特征调制与潜在扰动提升鲁棒性,在基准数据集上兼顾语义表达、节奏同步和动作多样性。

  2. arXiv cs.CL36

    车载对话助手(ICA)多轮对话的自动化评估框架

    车载对话助手(ICA)的多轮对话能力评估有了自动化框架:闭环仿真结合策略引导的用户模拟器与对抗式策略管理器,由两级 LLM 评判器评估单轮失败和整段对话质量。在一款工业级 ICA 上用 6 个 LLM 后端和 12 名人工标注者验证,自动评判与人类一致性较高;策略引导比无引导仿真每段对话多发现 2.96 倍独特失败类型,独特失败对话数翻倍以上。

  3. arXiv cs.CL39

    FD-VAD:面向流式全双工语音的语义端点检测

    FD-VAD 提出免 ASR 的流式语义端点检测,直接把因果音频窗口映射为 Continue/Stop 决策。该模型由冻结语音编码器、轻量模态适配器和参数高效适配的语言模型组成,采用 last-chunk 训练目标,并引入置信度门控端点提交。在 TurnBench dev set 上,其零样本 EOT recall 达 0.853(FP<=0.10)。

  4. AGI Hunt41

    Audio8 ASR Infinite 发布:流式语音识别以滚动 KV Cache 实现 7×24 常数延迟

    Audio8 ASR Infinite 发布,采用原生流式架构与滚动 KV Cache,使内存与延迟保持恒定,可支持 7×24 小时不间断运行。该模型每秒解码 12.5 次,每个时钟步输出一个文本 token,在 12.5/8.3/6.25 次决策每秒之间权衡感知粒度与资源开销。模型已发布,HuggingChat 的 ML 实习生搭建了 Gradio 工作流,可直接在线试用。

  5. AGI Hunt30

    听障用户的暖心时刻:AI 字幕把亲吻记成「woof woof」

    一位听障用户分享,AI 语音转写把丈夫亲她头顶的声音记成「m...mmm..mmmm」,又把狗叫忠实转写成「woof woof」,她靠这两段字幕才推理出真相。她完全听不到邻居抱怨的狗叫,反而觉得 AI 把狗叫转写成拟声词「可爱到不行」,并在 reddit 发帖问其他人是否也会看到这样的结果。

  6. IT之家63

    OpenAI Codex CLI 升级支持语音对话并更新终端界面

    OpenAI 在 DevDay 2026 活动上宣布 Codex CLI 升级,新增语音对话和 /agents 多智能体视图。用户可以直接与 Codex 对话来启动任务并引导任务推进,也能通过 /agents 把工作分配给多个智能体并跟踪多项任务进度。此次还改进了编辑提示词、恢复会话等日常流程,新增内置工作树支持并更新终端界面,更新适用于所有套餐。

9月29日周二
  1. IT之家26

    荣耀 AI 耳夹耳机 FlyClip Pro 开售:国补价 389.7 元,续航 44 小时

    荣耀 AI 耳夹耳机 FlyClip Pro 开售,提供紫、白、灰三种配色,京东叠加国补与 10 元优惠券后到手价 389.7 元。耳机单次续航 10 小时,配合充电盒综合续航 44 小时,支持无线充电,机身重 6.0g。其搭载 12mm 双磁路单元与 LCP 液晶振膜,响度和低频动力提升 200%,并配备骨传导单元用于 AI 降噪。

  2. arXiv cs.AI41

    Audio LLM 知道自己何时听不清用户语音

    Audio LLM 往往无法识别自身转录何时不可靠,多数情况下仍会预测转录可靠。研究据此提出基于冻结音频编码器表征的轻量可靠性预测器,在生成前预测可靠性类别,域内与跨域 macro-F1 分别达 81.10% 和 78.09%,超过最强基线 10.33 与 11.93 点。预测为不可靠时可触发向用户澄清,可靠查询照常进行,可靠性标签还能跨 Audio LLM 家族迁移。

  3. IT之家64

    央视起底网贷诈骗新套路:利用 AI 批量拨号,两月上千人被骗、涉案流水超千万元

    浙江乐清警方破获一起利用 AI 语音系统实施诈骗的案件,两个月内上千人受骗,30 名嫌疑人被抓获,涉案流水超千万元。团伙在 AI 平台付费获取动态账号密码,导入非法获取的手机号库后自动批量拨号,拨打时段设为上午 10 点至 12 点、下午 2 点至 6 点,单日呼出电话可超 20 万次,并按沟通中的关键词把用户分为 A 至 F 六个等级,筛出贷款意向者后无缝转接人工话务员。

  4. SiliconANGLE:AI52

    语音 AI 初创公司 Modulate 融资 2500 万美元,把音频原生模型推向更多开发者

    语音 AI 初创公司 Modulate 宣布完成 2500 万美元新融资,用于把音频原生模型带给更多开发者。其模型直接分析对话原始音频中的情绪、语气、意图以及深伪信号,旗舰平台 Velma 底层的 Ensemble Listening Model 架构从 100 多个小型专用音频模型中选择并融合结果,公司称该设计最多比把同样音频交给单个大模型高效 1000 倍。

  5. arXiv cs.CL28

    THA:面向高棉语的加权有限状态文本规范化与逆文本规范化工具包

    THA 是面向高棉语的开源文本规范化与逆文本规范化工具包,基于加权有限状态转换器,用一次最短路径搜索完成整行分词与分类,并由第二个转换器拒绝高棉语音节内部的 token 边界。在 Google 高棉语测试集上,其对全部 274 个基数词与参考一致,仅有一处拼写变体差异;在 2906 条真实 TTS 提示中,改写的 158 句有 153 句正确。

  6. arXiv cs.CL31

    免训练发音转写:用文本约束的声学重打分

    免训练 ST2P 流程在推理时同时利用词汇与声学信息,将日语发音转写的 CER 从 0.60–1.40%(纯文本基线)降至 0.04–0.17%。它先用 G2P 工具生成文本约束候选,再由冻结的 S2P 模型以整序列负对数似然做从左到右贪心搜索,速度比 beam search 快 3–3.5×,级联解码比直接解码快 2×。

  7. arXiv cs.CL32

    KAME:用随机引导在串联语音到语音模型中学习自然对话行为

    KAME 提出随机中间引导(randomized intermediate guidance),直接从对话语料提取引导信号,省去模拟 LLM 生成缺失引导的数据准备开销。在合成对话上,其回复质量与 LLM 生成引导、相似度基线相当。用 3.8k 小时真实对话训练后,轮次切换更顺畅、audio-judge 自然度优于合成数据版 KAME,并保持对 Moshi 的回复质量优势。

  8. arXiv cs.CL34

    Inquesto Score:面向语音智能体的可靠性评测协议

    Inquesto Score(IS)是一套语音智能体可靠性评测协议,把可靠性定义为固定、版本化评测人群中没有出现功能故障或更严重失效的通话占比。其 v0.1 覆盖 30 个场景、3 种声学条件、4 个说话人分组,对参考语音智能体系统的 13 种配置各评测 306 通通话,其中 talk-over、响应延迟等时序失效直接从音频测量。协议、参考实现与评测记录已公开。

  9. arXiv cs.CL30

    面向 LLM 同声语音到语音翻译的因果感知框架 FAST-CAP

    LLM 同声语音到语音翻译框架 FAST-CAP 提出,包含分解式 S2ST 架构 FAST、因果感知自适应策略 CAP 和因果感知延迟指标。在 CVSS 西班牙语、德语、法语上,它比固定策略最高提升 1.2 BLEU、延迟相对降低 26%。该框架用远少于现有系统的训练数据,在语音翻译质量与说话人保真度上达到 SOTA,延迟相对降低最多 38.8%。

  10. IT之家36

    曝腾讯秘密内测 AI 游戏搭子“鹅次元”,可选择不同陪玩人物

    腾讯正在秘密内测 AI 游戏陪伴产品“鹅次元”,主打数字人 AI 搭子,提供语音对话、画面实时识别和游戏陪伴等能力。产品内置多位人设各异的男女虚拟角色,选定后可闲聊互动,或激活适配多款主流网游的游戏陪伴模式。目前全部功能限时免费,界面已露出星币兑换能量的付费框架,预示未来商业化方向。

  11. TechCrunch · AI45

    Modulate 为语音模型与分析套件融资 2500 万美元

    波士顿语音智能公司 Modulate 完成 2500 万美元新融资,由 Future Ventures 领投,Hyperplane 与 Lakestar 参投。其平台运行 100 多个小型模型,提供转录、情绪分析、深度伪造与 AI 音乐检测,并为受监管行业的语音智能体做合规策略执行。PitchBook 数据显示,本轮前公司累计融资 4100 万美元、估值 1.7 亿美元。

9月26日周六
9月25日周五