人工智能

Google推出Gemini 3.5 Transcribe,用于多语言实时语音转写

Google宣布推出Gemini 3.5 Transcribe,这是一款面向实时转写和录音文件的语音转文本模型,支持频率处理、文本格式化和说话人识别。该模型通过Gemini API以及Google面向开发者和企业的平台提供公开预览,并逐步集成到Google应用中。

2026-08-26
1 分钟阅读
465 浏览量
certi.news Editorial Team
Google推出Gemini 3.5 Transcribe,用于多语言实时语音转写

Google于2026年8月26日宣布推出Gemini 3.5 Transcribe,这是一款专为实时语音转写和智能语音交互设计的新型语音转文本模型。该公司表示,与仅将原始音频转换为文字不同,该模型能够清理频率和自我修正内容,识别专业术语,并输出更接近可直接使用格式的排版文本。

该模型面向构建语音代理、实时翻译或字幕工具,以及用于分析已录制通话和会议的处理流程的开发者。它可通过Google AI Studio中的Gemini API使用,也可通过Gemini Enterprise Agent Platform使用。

面向不同用途的两个接口

Google通过两个独立接口提供该模型。第一个是使用gemini-3.5-transcribe-live模型的Live API,提供持续的双向流式传输,延迟低于一秒,适合交互式语音对话应用。第二个是使用gemini-3.5-transcribe模型的Interactions API,用于处理录音、会议和通话记录,并将语音归属到不同说话人,同时添加词级时间戳。

Google表示,Gemini 3.5 Transcribe能够处理自我修正,例如说话者在讲话过程中更改约会时间或词语;能够删除口头填充词,例如含糊的重复音;并自动格式化文本。该模型还支持自定义词汇,开发者可以提供这些词汇,以便识别专业术语和不常见的拼写;同时支持检测和转写超过85种语言,并处理地区方言和口音。

在录音文件中,该模型可通过时间戳将语音归属于最多三位说话人,而超过三位说话人的支持仍处于实验阶段。它还能够处理流式传输过程中语言之间的切换,这对于多语言对话十分重要,但来源没有提供所有受支持语言的详细信息,也没有说明每种语言的性能限制。

与Chirp 3相比的性能数据

根据Google引用的Artificial Analysis测量结果,该模型在流式场景中的平均词错误率为4.0%,在非流式使用场景中的平均词错误率为2.6%。在涵盖多种语言和地区的FLEURS基准测试中,其流式词错误率为5.50%,非流式使用中的词错误率为5.04%。该公司表示,与此前的转写模型Chirp 3相比,最终转写结果的延迟降低了70%。

这些数据表明,准确性和速度均有所提升,但这并不意味着在每种音频环境中都会得到完全相同的结果;结果取决于基准测试、语言、录音质量、说话人数和噪声水平。此外,来源没有详细说明Artificial Analysis的方法,也没有提供按语言划分的完整结果表。

从Google界面到开发者工具

Google已经在Gemini应用和部分Android体验中使用该模型,其中包括Rambler功能。该功能可将语音转换为格式化文本,支持删除填充词、进行修正,并通过语音更改写作风格。在macOS上的Gemini应用中,语音指令可以利用屏幕上下文执行诸如总结本地文件、在应用之间复用文本,或通过调用其他Gemini模型生成图像等任务。

在获得用户许可后,Google Antigravity会使用屏幕上下文和对话记录,改善对文件名、当前活动文档及代理想法的识别。用户还可以在Google AI Studio的Build模式中访问该模型,使用语音构建应用。Google表示,面向任意网页字段的语音输入功能即将登陆Chrome。

实际会发生什么变化?

最重要的变化是,语音转写从初步的录音转录步骤转变为理解和清理语音、并将其与应用上下文关联的一层能力。对于开发者而言,这意味着可以构建无需针对每次修正或填充词进行单独处理的语音界面,同时可根据产品性质选择实时流式传输或归档录音。

目前,Gemini 3.5 Transcribe以公开预览形式面向开发者提供,可通过Google AI Studio和Google Antigravity中的Gemini API使用;面向企业则可通过Gemini Enterprise Agent Platform使用,之后还将登陆Gemini Enterprise for Customer Experience。对于用户,该模型已在英文版macOS Gemini应用中提供;Rambler则在部分国家和语言中提供Android版本,Chrome版本也即将推出。

新闻来源
Google Official News
查看原始来源 ↗
c
作者

certi.news Editorial Team

你需要知道的

Google 宣布推出 Gemini 3.5 Transcribe,这是一款语音转文本模型,支持实时转录和多语言录音,并提供文本格式化、说话人识别和时间戳功能。目前,该模型已通过 Gemini API、Google AI Studio、Google Antigravity 和 Gemini Enterprise Agent Platform 开放公众预览;Google 表示,其他集成将在稍后推出。

  • Live API 提供双向音频流,延迟低于一秒;Interactions API 则用于处理录音、会议和通话记录。
  • 该模型支持 85 种以上语言、流式传输中的语言切换、自定义词汇,以及删除语气词和自我修正内容。
  • 在录音中,该模型可将语音归属于最多三位说话人,并提供逐词时间戳;对三位以上说话人的支持仍处于实验阶段。
  • 根据 Google 引用的 Artificial Analysis 测量结果,流式传输中的词错误率为 4.0%,非流式使用中的词错误率为 2.6%;与 Chirp 3 相比,最终延迟据称降低了 70%。
  • 该模型已用于部分 Gemini 和 Android 试验,Gemini 3.5 Transcribe 目前以公众预览版向开发者和企业提供。

常见问题

什么是 Gemini 3.5 Transcribe?

这是 Google 推出的一款语音转文本模型,面向实时转录和录音处理,并支持文本清理与格式化以及说话人识别。

开发者如何使用该模型?

开发者可以通过 Gemini API 在 Google AI Studio 和 Google Antigravity 中使用该模型;企业则可通过 Gemini Enterprise Agent Platform 使用。

该模型支持多少种语言?

Google 表示,该模型支持检测和转录 85 种以上语言,并能处理地区方言和口音。

该模型是否支持三位以上的说话人?

目前,该模型在录音中支持将语音归属于最多三位说话人;对三位以上说话人的支持仍处于实验阶段。

同一分类

你可能还喜欢

查看所有新闻