您现在的位置是：主页 > 品牌 > 微软 >
“新开源AI替代霉霉中文，月省350元！”
发布时间：2023年11月11日 13:39:32 微软 人已围观
简介一种新的开源AI工具可以让霉霉流利地说中文，也能帮助郭德纲用英语表演相声。这项技术已经被应用于罗翔的英文普法课程，效果显著。同时，该工具还能够用英语讨论人生哲理，展现...
能让霉霉用中文表达无碍、郭德纲用英语进行相声表演的那个AI——
终于有开源替代品了！
使用它可以让罗翔进行英文法律普及的成果，张三李四的“要素”相当完整：
以及用英语谈论人生哲理，“你的内心是否存在阴暗面”（来源: line xiongjie lin）：
虽然在某些方面与原产品（HeyGen）存在些许差距，但网友们的评价是：
也算不错。
有了它，我们可以在本地随心所欲地进行视频翻译，直接带来的好处是每月节省350元（手动狗头）。
毕竟，HeyGen再强大，也仅提供2分钟的免费使用时间。
△ HeyGen的收费情况
具体看一下。
HeyGen的开源替代品登场
这个视频翻译的替代工具叫MyHeyGen，来自B站UP主@ai浮世绘。
MyHeyGen不仅支持英文，还能够转换成法语、日语等共16种语言。
视频翻译的过程包括三个阶段：音频翻译、翻译校正以及视频同步口型合成，所有环节通通包揽在一起。
如果你想亲自尝试，步骤也不复杂。
大致流程是这样的：
首先准备环境：
需要分别在Huggface申请一个token、在百度翻译申请AppKey，并下载权重和checkpoints文件。
安装完成后便可进行git clone。
在开始测试之前，请确保将需要翻译的视频下载到本地。
接下来，只需在执行命令时提供视频文件的保存路径、要翻译的语言代码（例如’en’代表英语）以及翻译后的视频保存路径，就能开始等待了。
命令的完整格式如下：
python translate.py 原视频文件路径 目标语言代码 -o 保存路径
有网友实测成功：
不过，仍需满足16G显存的要求，而Windows用户可能需要自行解决兼容性问题（在视频评论区有人提供了相关方法）。
如果这些都不行，可以再期待一下colab的实现，UP主表示正在进行测试中。
效果方面，MyHeyGen的音色还原非常到位，使用了最新的语音克隆开源技术XTTS v2。
只需为AI提供一段明星采访视频，它便能克隆出其中的声音并说出不同的话。
至于MyHeyGen的不足之处，大家都能明显看出。