超神开源,声音克隆+语音生成,炸裂!

116 阅读3分钟

大家好,我是立志替大家出手的AI区UP主格伦Glen。Fish Audio开源了一款超厉害的文本转语音模型——OpenAudio S1-Mini。可能你会想,不就是个语音模型嘛,有啥好大惊小怪的?但这个模型简直就是个“宝藏”,优点多到超乎想象!
小尺寸大能量

很多语音模型要么效果好但对设备要求贼高,要么设备要求低了,效果却不尽人意。

OpenAudio S1-Mini可就不一样啦,它只有0.5B参数,不仅大幅降低了计算需求,普通电脑甚至一些移动设备都能轻松“驾驭”它。

Openaudio-s1-mini一键包,声音克隆,TTS,支持50系显卡,不支持老显卡,FishAudio团队开源

它是基于超过200万小时的庞大音频数据集训练出来的,效果那是相当强悍,啥样的语音风格都能轻松拿捏。

而且它还是个“语言小天才”,支持14种语言,不管是中文,还是英语、日语、法语这些外语,它都能说得超地道,完全没有那种生硬的机器感。

情绪表达:绝

OpenAudio S1-Mini 的 “情绪表达” 能力堪称一绝,它能生成超过50种情感和语调的语音表达,愤怒时的激昂、开心时的欢快、惊讶时的高亢,这些常见情绪不在话下。

OpenAudio S1 Mini - Multilingual TTS Model - Install and Test Locally

就连笑声、哭声这种特殊音效,它都能模仿得惟妙惟肖。比如你要制作一个故事音频,里面的角色一会儿哈哈大笑,一会儿伤心哭泣,以前实现起来可太难了,现在有了 OpenAudio S1-Mini,一切都变得简单无比!

免费离线懒人包

为了让大家能够轻松体验到该项目的魅力,我当然是:无所谓,我会出手.jpg。为大家准备了一个免费整合包,让你不用配置环境,直接就能用。

图片

①下载整合包到本地,解压并双击“一键启动.exe”,项目会自动打开浏览器运行。

图片

②按下图流程,即可快速进行声音克隆+语音生成了。

图片

以下为生成示例和官方给出的情绪及音调控制提示词,可自行尝试:

基本情绪:

(angry) (sad) (excited) (surprised) (satisfied) (delighted) (scared) (worried) (upset) (nervous) (frustrated) (depressed) (empathetic) (embarrassed) (disgusted) (moved) (proud) (relaxed) (grateful) (confident) (interested) (curious) (confused) (joyful)

高级情绪:

(disdainful) (unhappy) (anxious) (hysterical) (indifferent) (impatient) (guilty) (scornful) (panicked) (furious) (reluctant) (keen) (disapproving) (negative) (denying) (astonished) (serious) (sarcastic) (conciliative) (comforting) (sincere) (sneering) (hesitating) (yielding) (painful) (awkward) (amused)

声调标记:

(in a hurry tone) (shouting) (screaming) (whispering) (soft tone)

特殊音效:

(laughing) (chuckling) (sobbing) (crying loudly) (sighing) (panting) (groaning) (crowd laughing) (background laughter) (audience laughing)

不管你是做自媒体配音、开发语音助手,还是打造有声读物,OpenAudio S1-Mini都能成为你的得力助手。

如此强大又开源的 TTS 模型,绝对是行业福音,赶紧去探索它的无限可能吧!

注意事项:

  1. 显卡推荐:建议使用配有至少4GB显存的英伟达显卡。

  2. 路径和文件名:确保安装路径不包含中文字符,上传的文件也不要包含中文哦。

今天就聊到这了,我是Glen(格伦)** ,感谢你看我的内容,欢迎大家继续支持我,请点赞、推荐、分享三连走一波吧~

欢迎大家关注💚公zhong号Glen,私信回复关键词【S1Mini整合包】免费获得整合包

我是Glen,原鹅厂、字节高级产品经理,现AI公司创始人。我的使命是:让一部分人,看见AI并连接。分享人工智能、互联网、商业、职场等内容。警惕舒适,消除模糊;管理精力,提升认知。