虎科技
业界资讯 手机产品 数码产品 移动互联 软件产品 智能汽车 生活家电 关于我们

语音大模型MaskGCT开源,赋能短剧游戏数字人新品

2024-10-25来源:ITBEAR编辑:瑞雪

趣丸科技与香港中文大学(深圳)联手打造的语音大模型MaskGCT,近日宣布在Amphion系统中开源,供全球用户使用。该模型凭借其独特的技术,在声音克隆、跨语种合成及语音控制等领域展现出显著优势。

MaskGCT采用掩码生成模型与语音表征解耦编码技术,实现了秒级超逼真的声音克隆,仅需3秒音频样本即可复刻各种音色,包括人类、动漫等,同时完整保留语调、风格和情感。该模型还支持更精细可控的语音生成,可灵活调整语音的长度、语速和情绪。

MaskGCT的训练基于香港中文大学(深圳)与趣丸科技等机构联合推出的10万小时数据集Emilia,这是全球最大且最为多样的高质量多语种语音数据集之一,涵盖了中英日韩法德6种语言。

在官方实验中,MaskGCT在语音质量、相似度和可理解性方面均表现出色,优于当前大部分TTS模型。其两阶段模型设计,使得在推理过程中,模型能以并行方式生成指定长度的标记,大幅提高效率。

目前,MaskGCT已在多个领域展现出广泛应用前景,如短剧出海、数字人、智能助手等。趣丸科技基于MaskGCT开发了多语种速译智能视听平台“趣丸千音”,旨在降低翻译成本,缩短制作周期,助力国产内容出海。

《2024年短剧出海白皮书》显示,海外市场规模远超国内市场,短剧出海正成为新蓝海。趣丸千音有望帮助国产短剧以更低成本、更快捷的方式走向世界,提升中国文化内容的出海效率。

一加13维修价目表揭晓:屏幕1650元起,主板2350元起,你觉得贵吗?
11 月 2 日消息,一加 13手机于 11 月 1 日开启首销,搭载骁龙 8 至尊版、首发第二代 2K 东方屏,定价 4499元起。 新机搭载高通骁龙 8 至尊版处理器,第二代天工散热系统 Pr…

2024-11-02

赛力斯汽车就昆明市问界M9事故作出回应,安全性再度引关注
鞭牛士11月2日消息,赛力斯汽车今日发布有关“昆明市问界M9事故”的声明,表示正全力配合属地交管部门及用户处理相关事宜,具体情况请以官方发布为准。声明指出,2024年10月31日早晨7点10分左右,一辆问界M…

2024-11-02

比亚迪仰望U7白色版惊艳亮相:首搭云辇-Z技术,年底震撼上市!
11月2日消息,博主“蜗牛同学LX”今天上午发布了一组仰望U7豪华轿车的白色版实车谍照,并称“据说有混动版本”。就在不久前的10月30日,博主“吴颖碎碎念”透露“仰望的朋友”告诉自己可以准备体验仰望U…

2024-11-02

小马智行携手北汽新能源,共同开发Robotaxi技术,未来出行会更智能吗?
11月2日消息,小马智行今日与北汽新能源达成L4无人驾驶车型开发技术合作。根据协议,双方将基于极狐阿尔法T5车型和小马智行第七代自动驾驶软硬件系统方案,合作研发全无人Robotaxi车型,计划于2025年推出…

2024-11-02

雷军亲自下场辟谣:偷喝员工酸奶?纯属无稽之谈!
鞭牛士 11月2日消息,小米集团董事长兼CEO雷军昨日晚在直播间回应在金山时偷喝同事酸奶的传言。雷军表示:“真的没有,纯属谣传。我的很多传言都是谣言。…

2024-11-02