软件介绍
heygem是帮你快速“复制一个虚拟自己”的软件。由南京硅基智能公司开发,而且是开源的。最大优点是不用联网、在自家电脑上就能跑,隐私有保障。
以前做数字人又贵又慢,现在用它,你只需要1秒的视频或音频,就能在很短时间里做出一个很像你的数字分身。对电脑配置要求也不高,有块NVIDIA 1070或更好的显卡就够用了。
核心功能:
速度超快:30秒克隆你的形象和声音,60秒就能生成一段4K高清视频。
表现自然:即使你侧着脸、光线不好或有东西挡着,数字人的嘴型也能和你说的话100%对上,表情和动作也很生动。
能说多国话:克隆完后,可以让它用中文、英文、日文等8种语言说话,方便做跨国业务。
随便用,不限量:想克隆多少人就克隆多少人,视频合成次数也没限制。
技术原理:
其实就是把几种AI技术揉在一起用了:
计算机视觉:负责认脸、对口型、驱动表情,让数字人说话时嘴唇动作自然,表情也跟得上。
多模态融合:相当于让AI同时处理文字、图片、声音等多种信息,并理解它们之间的关系,这样数字人的反应才更协调、更逼真。