扫一扫 扫一扫 扫一扫 扫一扫 大家好,这里是和你们一起探索 AI 的花生~ 之前推荐过 AI 无痕翻译视频的相关内容,它的实现条件包括文本内容的准确翻译、人物语音克隆及嘴型匹配。今天我们就来看一款效果非常不错的 AI 语音克隆工具 Speaking AI,它可以将文本转为如真人说话一般自然的语音,还支持用户免费克隆自己的声音。 上期回顾: 让郭德纲说英语,霉霉讲中文,AI是如何做到视频无痕翻译的?大家好,这里是和你们一起探索 AI 的花生~这几天互联网上出现的一类视频引起了大家的广泛关注和热烈讨论,视频的特点是可以“让人物说外语”,但形式并不是我们常见的视频配音,而是真的像他们自己就会说外语一样,口音毫无 AI 感,人物的嘴型也是一致的。 阅读文章 >一、Speaking AI 介绍网站直达: https://speaking.ai/ Speaking AI 是一个初创公司,创始人为 Harry Zheng,其团队成员也都是中国人。公司创立的初衷是坚信对话式生成语音代表着人类与人工智能之间的未来接口,他们希望让语音克隆听起来更加自然,为人与人工智能之间的互动方式带来根本性改变。 Speaking AI 目前有两项主要功能:文本转语音和语音克隆,其中语音克隆功能尤其出色,能做到接近真人说话的效果。 先来看一下其官网上的语音克隆案例: 视频中第一段播放的是 Taylor Swift 的原声,第二段播放的是克隆出来的语音,可以发现二者在音色上几乎没有差别,也就是说 Speaking AI 可以完美还原一个人原本的声音。更厉害的是,在克隆语音中我们能听到真人说话时常见的“呃”“啊”这样的语气词和一些停顿,这些内容在文本中并没有体现,是 Speaking AI 在合成过程中自动加入的,这能让语音克隆的效果更真实自然。 Speaking AI 目前支持中文和英文的文本转语音,另有 5 款名人语音模板供用户选择。此功能目前是免费的,使用人数较多时需要排队。下面是我用成龙的声音合成的中文内容,效果很不错,我自己听着都觉得好神奇。 Speaking AI 支持用户克隆自己和他人的声音,你可以选择在线录制 10 秒的音频,或者上传本地音频文件,然后进行实时转换,操作起来非常方便。录制时说话的情绪和语调会影响最终的合成效果,Speaking AI 的模型也会根据文本内容自主选择合适的情感基调。 注意:上传他人的声音时需要获得对方的同意,并且不能将合成的语音用于任何非法、欺诈和有害目的。 据创始人介绍,目前 Speaking AI 还处于 V1 模型,算是一个试玩 Demo,性能比较有限,这种情况会在未来几周内得到改善。官方已经在研发 V2 模型,它将支持更多不同的语言,语音克隆速度会更快,质量也会更高。 二、发展迅速的 AI 语音技术除了今天推荐的 Speaking AI,目前市面还有很多成熟的 AI 语音生成应用和开源工具。 比如一直比较受关注的 Elevenlabs,几分钟就能克隆用户个人声音并合成新的语音,支持将文本转换为中文等 28 种语言,并能以不同的情绪演绎,目前上线了视频自动翻译配音功能。Elevenlabs 在翻译、电影游戏/配音、有声书制作、聊天机器人对话上有广泛应用,它的文本转语音功能可以免费使用,进入官网后注册账号就能体验。 网站直达: https://elevenlabs.io/ 国内的网易有道技术团队则在 11 月份开源了自研的语音合成(TTS)引擎「易魔声」,目前支持中英文双语,包含 2000 多种不同的音色。易魔声也支持情感合成功能,可以合成如快乐、兴奋、悲伤、愤怒等不同感觉的语音。其 Github 主页中有官方提供的 Web 界面及批量生成结果的脚本接口,安装后就可以免费使用。 Github 主页: https://github.com/netease-youdao/EmotiVoice 我最近还在网上看到一个新的 AI 音乐合成工具 Musicfy AI,它可以将人声哼唱转化为不同类型的乐器伴奏,非常有意思。这可能会改变传统的编曲工作流,人们可以轻松地用声音进行音乐创作,对音乐感兴趣的小伙伴可以尝试一下。 网页直达: https://musicfy.lol/
当视频无法加载时请刷新页面, 好啦以上就是本期为大家介绍的 AI 语音克隆工具 Speaking AI,喜欢本期内容的话记得点赞收藏支持一波,之后会继续为大家带来更多 AI 绘画干货知识~ 也欢迎大家扫描下方的二维码加入“优设 AI 绘画交流群”,和我及其他 设计师 一起交流学习 AI 知识。 我最新制作的《AI 绘画入门完全指南》已经上线,这是针对零基础人群的 AI 绘画入门课程,可以帮你快速掌握目前最热门的 2 款 AI 绘画工具 Midjourney 和 Stable Diffusion,说不定之后你也可以用它们结合 Krea.AI,进一步优化自己的创作流程,提升工作效率。 课程链接: 零基础 AI 绘画入门完全指南 (uisdc.com) (录播+课程群辅导) 课程内容:
推荐阅读: 颠覆传统工作流!Krea AI 的实时生成功能究竟有多疯狂?大家好,这里是和你们一起探索 AI 绘画的花生~上周为大家介绍了 LCM 技术,它可以在 3 秒内生成 4 张图像,速度惊人;文章内还有 2 个视频,显示了依靠 LCM 实现图像实时生成的效果,视频内用到的工具就是 Krea AI。 阅读文章 >想把图像变成动图/视频?这5款AI神器帮你轻松搞定!大家好,这里是你们的 AI 神器挖掘机花生~今天为大家推荐 5 款可以将图像转换为动图或者短视频的 AI 神器,它们都是在线工具,操作简单还可以免费使用,可以让静态图像更具吸引力,适合用来生成动态海报或创意短视频~上期回顾:一、LeiaPix Converter网站直达: 阅读文章 >手机扫一扫,阅读下载更方便˃ʍ˂ |
@版权声明
1、本网站文章、帖子等仅代表作者本人的观点,与本站立场无关。
2、转载或引用本网版权所有之内容须注明“转自(或引自)网”字样,并标明本网网址。
3、本站所有图片和资源来源于用户上传和网络,仅用作展示,如有侵权请联系站长!QQ: 13671295。