aifollow.news
Back IT之家 科技新闻
IT之家 科技新闻· · Original publication time AI score54

iFLYTEK launches SparkAudio 1.0 API for multilingual audio tasksMachine translation

科大讯飞上线 SparkAudio 1.0 API,支持多语言语音处理

AI-assisted summary

iFLYTEK says developers can now access SparkAudio 1.0 through its open platform API. The model accepts text and audio input and produces text output. According to the company, it supports 99 languages and 202 dialects for tasks including transcription, translation and environmental sound understanding.

Article · Original

感谢IT之家网友 Domado 的线索投递!

IT之家 11 月 12 日消息,科大讯飞今日宣布,讯飞星火语音基座大模型 SparkAudio 1.0 已在讯飞开放平台上线 API 服务,开发者可直接接入调用。

SparkAudio 1.0 支持文本和语音两个模态的输入以及文本模态的输出,可支持语音转写、多语言翻译、多方言识别、环境音理解、说话人分离、情感分析以及复杂的音频问答等场景任务的实现。

官方表示,过去处理音频大多采用级联方案:先把语音转成文字,再交给大模型理解。这种做法有两个明显短板:

信息丢失:文字只能记录说了什么,会丢掉语音里自带的语气、情绪,还有背景环境音等关键信息,导致模型对场景的判断不完整,自然也会影响到最后的结果。

链路割裂:这套系统把语音转写、声纹识别、语音翻译等能力拆成独立模块串联运行,模块之间存在断点,不仅容易累积错误,在使用体验上也会出现延迟、卡顿。

据介绍,语音基座大模型解决了上面的这些问题:它不再只做语音转文字,而是直接理解语音。语音基座大模型一次性听懂人声、环境音、音乐等等,而且还能理解声音里的语义、情绪和场景。

相较于上一代模型,星火语音基座 SparkAudio 1.0 在三大方面有了全新升级:

听见更多:支持 99 种语言、202 种方言,能够处理多语言语音识别与翻译任务;

理解更透:从语音识别到多维音频理解,能理解语音的深层含义,支持智能客服、汽车座舱、跨语会议、医疗病历、内容审核等多种场景;

用得更广:全国产算力训练,为开发者和行业应用提供自主可控的语音智能底座。

IT之家附相关链接:

体验链接:https://iflytekresearch.iflytek.com/console/spark-audio

API 地址:https://www.xfyun.cn/services/Spark_Audio_1.0

相关阅读:

《科大讯飞首发星火语音基座大模型 SparkAudio 1.0:中英文任意切换、说话人实时识别,输入法里就能用》

广告声明:文内含有的对外跳转链接(包括不限于超链接、二维码、口令等形式),用于传递更多信息,节省甄选时间,结果仅供参考,IT之家包含外链的文章均包含本声明。

Found an error? Send a correction