巨人网络与清华联合首创多方言语音合成大模型框架
AI导读:
10月15日,巨人网络AI Lab与清华大学电子工程系SATLab联合首创多方言语音合成大模型框架DiaMoE-TTS,数据代码方法全开源,旨在推动方言语音合成的公平与普惠,为方言语音合成领域带来革命性突破。
上证报中国证券网讯(记者罗茂林)10月15日,记者从巨人网络获悉,巨人网络AI Lab与清华大学电子工程系SATLab的研究团队联合首创多方言语音合成大模型框架DiaMoE-TTS,数据代码方法全开源,借此推动方言语音合成的公平与普惠。 在当今大模型引领的语音合成时代,通用TTS系统已展现出令人惊叹的能力,但方言TTS依然是相关从业者难以触及的“灰色地带”。现有的工业级模型往往依赖巨量专有数据,这让方言TTS从业者和研究者几乎无从下手:缺乏统一的语料构建方法,更缺乏一个可实现多语言的端到端开源框架。
据悉,双方联合首创的DiaMoE-TTS,这是一个在一定程度上媲美工业级方言TTS模型的开源全套解决方案。他们基于语言学家的专业经验,构建了一个统一的IPA表达体系,并且在仅依赖开源方言ASR数据的前提下提出这一方案。该框架的推出,为方言语音合成领域带来了革命性的突破,使得方言语音合成更加高效、准确。
在推出广东话、四川话、上海话等中文方言版本之前,研究团队已在英语、法语、德语、荷兰比尔茨语等多语种场景中进行验证,确保该方法具备全球范围内多语言的可扩展性与稳健性。这一成果不仅彰显了我国在语音合成领域的强大实力,也为全球方言语音合成研究提供了新的思路和方向。
巨人网络AI Lab与清华大学电子工程系SATLab希望借此推动方言语音合成的公平与普惠,让任何研究者、开发者乃至语言文化保护工作者都能自由使用、改进与扩展这一框架;让小众语言与方言不再被淹没在通用大模型洪流中,而能通过开源的力量被更广泛地听见与传承。
(文章来源:上海证券报·中国证券网)
郑重声明:以上内容与本站立场无关。本站发布此内容的目的在于传播更多信息,本站对其观点、判断保持中立,不保证该内容(包括但不限于文字、数据及图表)全部或者部分内容的准确性、真实性、完整性、有效性、及时性、原创性等。相关内容不对各位读者构成任何投资建议,据此操作,风险自担。股市有风险,投资需谨慎。如对该内容存在异议,或发现违法及不良信息,请发送邮件至yxiu_cn@foxmail.com,我们将安排核实处理。

