分享语音推理扩容方法
Angelos Perivolaropoulos 分享并测试 通过批处理、量化、推测解码和缓存压缩提升单GPU语音推理吞吐的方法
English translation is being prepared.
匹配字段标题
Angelos Perivolaropoulos 分享并测试 通过批处理、量化、推测解码和缓存压缩提升单GPU语音推理吞吐的方法
English translation is being prepared.
匹配字段标题
2026年6月30日,Cartesia发布语音AI术语入门指南,系统解释STT、VAD、Turn Detection、TTS、Barge-in等核心概念。指南指出,其最新Ink-2 STT模型内置转向检测,无需单独VAD模型,可简化语音智能体流水线。指南还涵盖语音隔离与降噪,帮助理解对话式语音AI的评测结果。
匹配字段标题
2026年5月30日,作者Mario Zechner分享了一个用低成本玩具机器人搭建LLM语音代理的方案。他花10欧元买下Silverlit YCOO NEO OCTOBOT玩具机器人,拆解后逆向其单层PCB,移除主控IC并直接接管H桥驱动电机。方案用Adafruit FT232H让手机充当显示屏与USB控制端,服务端跑在笔记本上,用TypeScript和Node管理语音转文字、文字转语音、LLM与智能体,目标是让所有模型本地运行以保护孩子隐私。
匹配字段标题
匹配字段标题
2026年4月30日,xAI推出Custom Voices语音克隆功能。据xAI官方信息,用户录制约一分钟自然语音即可克隆自己的声音,并在两分钟内生成可用于生产的语音模型。该功能接入Grok Text to Speech和Voice Agent API,支持语音标签、多语言输出以及REST和WebSocket流式传输,使用自定义声音不额外收费。创建前需通过两阶段验证:先朗读验证短语由STT引擎实时比对,再比对说话人嵌入向量确认同一人,因此无法用已有录音或他人声音进行克隆。目前该功能已随发布上线,暂无后续发展事实。
匹配字段标题
2026年4月15日,Google DeepMind 发布 Gemini 3.1 Flash TTS 文本转语音模型。据官方信息,该模型可通过 audio tags 精细控制语音风格、节奏和表达,支持 70 多种语言及原生多说话人对话,在 Artificial Analysis TTS 排行榜获得 1,211 Elo 分,并正逐步上线 Google AI Studio、Vertex AI 和 Google Vids,生成的音频均带有 SynthID 水印。目前尚无后续有证据支持的发展。
匹配字段标题
2026年4月17日,xAI发布两个独立音频API:Grok Speech to Text(STT)和Grok Text to Speech(TTS),基于驱动Grok Voice、Tesla车辆和Starlink客服的同一套技术栈。据xAI官方信息,STT支持REST批量转写与WebSocket实时转写,具备词级时间戳、说话人分离、多声道和逆文本归一化,覆盖25+语言,批量定价每小时0.10美元、流式每小时0.20美元;TTS支持[laugh]、[sigh]、[whisper]等语音标签控制语气与情感,定价每100万字符15.00美元。目前尚无后续发展事实,状态为发布当日。
匹配字段标题
匹配字段标题
Cartesia 发布 语音AI术语入门指南
English translation is being prepared.
匹配字段标题
2026年6月17日,Vapi 介绍了一套用代码引导生成语音代理集群的框架。据 Vapi Blog 当日发布的文章,Vapi 主页运行着 15 个语音智能体,覆盖 3 类场景、5 种语言,它们并非在控制台逐个手工搭建,而是从一份 ROUGH_DRAFT.md 草稿出发用代码批量生成。该框架分为 plan、draft、bootstrap、harden 四个阶段,默认使用 OpenAI gpt-4.1(温度 0.5)、ElevenLabs 与 Deepgram nova-3 等组件,并通过幂等 upsert 循环把状态存入 .env.local,重复运行不会重复创建。文章称,克隆仓库并配置 VAPI_PRIVATE_KEY 后运行 bun run bootstrap 即可复现。目前该故事尚无后续发展事实。
匹配字段标题
2026年6月3日,Microsoft 发布文本转语音模型 MAI-Voice-2。据 Microsoft AI Blog 当日报道,该模型从仅支持英语扩展到 15 种语言,并新增 sad、whispered、excited 等情感标签控制。报道称其支持用 5-60 秒参考音频做零样本声音克隆,在对比测试中被 72% 的偏好选择优于前代 MAI-Voice-1。报道还称该模型现已上线 Microsoft Foundry,并正在集成进 VSCode 和 Dynamics 365 Contact Center。目前尚无后续发展事实,状态以发布时信息为准。
匹配字段标题
2026年6月2日,Microsoft 发布 MAI-Transcribe-1.5 多语言语音转写模型。据 Microsoft AI Blog 当日报道,该模型语言覆盖从 25 种扩展到 43 种,在 FLEURS 基准上取得 43 种语言的最佳词错误率,Artificial Analysis 榜单 WER 为 2.4%、排名第 3。转写速度方面,一小时音频转写耗时不到 15 秒,长音频速度最高为 Gemini 3.1、Scribe v2、GPT-4o-Transcribe 的 5 倍。模型新增关键词偏置功能,在 FLEURS 上可将 WER 最多降低 30%。发布时该模型已接入 Copilot、Teams、GitHub 和 Dynamics 365 Contact Centre,并在 Foundry 与 MAI Playground 提供。目前尚无后续发展事实。
匹配字段标题
Vapi 介绍 用代码引导生成语音代理集群的框架
English translation is being prepared.
匹配字段标题
Microsoft 发布 MAI-Voice-2 文本转语音模型
English translation is being prepared.
匹配字段标题
Microsoft 发布 MAI-Transcribe-1.5
English translation is being prepared.
匹配字段标题
Mario Zechner 分享 基于低成本玩具机器人的LLM语音代理搭建过程
English translation is being prepared.
匹配字段标题
Together AI 构建并优化 低延迟语音转写服务栈
English translation is being prepared.
匹配字段标题
xAI 发布 Grok语音转文字与文字转语音API
English translation is being prepared.
匹配字段标题
Google DeepMind 发布 Gemini 3.1 Flash TTS文本转语音模型
English translation is being prepared.
匹配字段标题
Together AI 原生上线 Deepgram STT与TTS模型系列
English translation is being prepared.
匹配字段标题