⚡ 前沿动态

阶跃星辰最新的StepAudio 3系列五款语音大模型详解

🕐 2026.09.17 星期四 来源 · 媒体 🔥 402 次点击

阶跃星辰于2026年9月15日正式发布StepAudio 3系列五款语音大模型,实现从“听”“说”到“理解推理”“全音频创作”的全栈能力覆盖,多款核心模型在Artificial Analysis权威评测中位列全球第一,标志着语音大模型正式进入“听说想做”的全能力融合新阶段‌。在Artificial Analysis两个语音权威榜单同时拿到全球第一(对话动态98.9%、语音推理99.7%),ASR词错率1.7%并列第一;国产语音模型首次在第三方语音榜单形成多维度第一。

语音赛道的竞争正从"能听会说"转向"边听边判断、顺手调工具完成任务"。StepAudio 3 Realtime的全双工+异步工具调用组合,与谷歌Gemini 3.8 Live前后脚强调的"异步函数调用+后台推理"是同一方向——两家在技术判断上独立趋同,说明"语音agent=对话+工具"已成为路线共识。阶跃官方未公布参数规模与训练细节,技术报告层面的公开信息有限(这是国产模型发布的常见短板,本条如实标注)。

阶跃星辰目前最新的 StepAudio 3 系列五款模型已全部上线阶跃星辰开放平台,开发者和企业可直接通过官网或移动端应用接入,覆盖智能客服、车载语音交互、医疗语音记录、金融语音服务、短视频内容生产等数十类落地场景。sP-AIDeepTh问Ink.cn

该系列也是阶跃星辰继Step-Audio、StepAudio 2 mini、StepAudio 2.5之后的重磅迭代,进一步巩固了其在全球语音大模型第一梯队的技术地位。

一、关键参数

  • Realtime:Artificial Analysis Conversational Dynamics榜98.9%全球第一;Speech Reasoning榜99.7%语音推理准确率全球第一;支持原生全双工与异步工具调用
  • ASR:非流式语音识别榜词错误率(WER)1.7%,并列全球第一
  • TTS:语音合成,已上线
  • Gen:单次生成人声、音效、环境音与配乐
  • Music:支持ABC记谱法多轮交互创作sP-AIDeepTh问Ink.cn
  • 可用性:五款均已上线阶跃星辰开放平台

二、模型核心能力

中文场景的三个实际痛点:方言与专业术语识别(ASR 1.7% WER直接对应)、会议纪要与车载客服的可用度(Realtime的实时判断)、内容生产的配乐与人声合成(Gen一次生成四类音轨、Music多轮交互作曲)。应用场景包括智能客服外呼、车载语音交互、播客与视频配乐生产、多轮音乐创作辅助。

该系列针对不同场景深度定制,每款模型都有明确的能力边界和优化方向:

1. StepAudio 3 Realtime‌

面向实时语音交互场景,支持原生全双工对话,可在持续交流中自主判断回应时机、处理临时打断,同时具备语音推理和异步任务执行能力,在Artificial Analysis Conversational Dynamics榜单中综合得分98.9%排名全球第一,Speech Reasoning榜单语音推理准确率达99.7%同样位列全球第一。

2. StepAudio 3 ASR‌

面向高精度语音识别场景,融合大语言模型上下文理解能力,支持中文、英文、方言、中英混说及专业领域场景,针对低声、快速语音、含糊连读、带背景音乐等复杂输入深度优化,非流式语音识别WER(词错误率)仅为1.7%,并列全球第一。

3. StepAudio 3 TTS‌

面向真人级语音生成场景,除常规音色、语调、情绪表达外,还能生成笑声、迟疑、改口等真实交流中的副语言细节,采用流式生成架构实现生成与播放同步,完全满足实时语音应用的低延迟需求。

4. StepAudio 3 Gen‌

面向完整音频内容生成场景,可通过自然语言描述,一次性统一生成人声、音效、环境声和背景音乐,支持对角色音色、情绪、不同声音时序的精细控制,覆盖影视动画、游戏、广播剧、有声书等内容生产场景。

5. StepAudio 3 Music‌

面向专业音乐创作场景,不再局限于“一句话生成歌曲”,支持完整歌曲创作、清唱自动配乐、歌曲翻唱,还可基于ABC记谱法实现多轮交互创作,深度融入专业音乐生产全流程。

三、行业核心突破

  • 打破了过去语音大模型只在语音识别、语音生成单项能力内卷的格局,首次把实时交互、语音推理、全音频创作能力打通,形成完整的语音全栈技术体系。
  • 把语音交互的体验从“低延迟能打断”升级到“边听边理解、边推理边输出”,AI可以在对话过程中并行完成复杂任务调用,不会打断当前交流节奏。sP-AIDeepTh问Ink.cn
  • 大幅降低了音频内容生产门槛,过去需要多套工具配合才能完成的广播剧、短视频全音频制作,现在通过单一模型就能端到端完成。

四、横向对比(简表)

产品 强项 第三方榜单
StepAudio 3 Realtime(阶跃星辰) 中文全双工+工具调用 AA对话动态98.9%第一
Gemini 3.8 Live(Google) 边说边想+97语言 AA SSQI 82.6第一
GPT-Live-1(OpenAI) 生态与价格 SSQI 81.5

边界:AA不同子榜的考察维度不同(对话动态不等于SSQI总分),跨榜直接比大小无意义;StepAudio 3的短板在于英文场景与企业级部署案例尚未公开。

声明:文中数据及部分观点来源于网络,部分观点来源于个人分析和推理,仅供参考,不构成投资或商业决策建议。
资料来源
  1. TechFlow
  2. 凤凰网
  3. 澎湃新闻
← 返回 [前沿动态]