开源数字人模型Heygem

一、Heygem是什么

Heygem 是硅基智能推出的开源数字人模型，专为 Windows 系统设计。基于先进的AI技术，仅需1秒视频或1张照片，能在30秒内完成数字人形象和声音克隆，在60秒内合成4K超高清视频。Heygem支持多语言输出、多表情动作，具备100%口型匹配能力，在复杂光影或遮挡场景下能保持高度逼真的效果。

Heygem 基于全离线运行模式，保护用户隐私，支持低配置硬件部署，极大地降低使用门槛，为内容创作、直播、教育等场景提供高效、低成本的数字人解决方案。

二、Heygem主要功能

• 秒级克隆：仅需1秒视频或1张照片，完成数字人形象和声音的克隆，30秒内完成克隆，60秒内合成4K超高清数字人视频。

• 高效推理：推理速度达到1:0.5，视频渲染合成速度达到1:2。

• 高质量输出：支持4K超高清、32帧/秒的视频输出，超越好莱坞电影24帧的标准。

• 多语言支持：克隆后的数字人支持8种语言输出，满足全球市场需求。

• 无限量克隆：支持无限量克隆数字人形象和声音，无限量合成视频。

• 100%口型匹配：在复杂光影、遮挡或侧面角度下，实现高度逼真的口型匹配。

• 低配可跑：支持Docker一键部署，最低只需NVIDIA 1080Ti显卡即可运行。

三、Heygem实现原理

• 声音克隆技术：基于AI等先进技术，根据给定的声音样本生成与之相似或相同声音的技术，涵盖语音中的语境、语调、语速等。

• 自动语音识别：将人类语音中的词汇内容转换为计算机可读输入，让计算机“听懂”人们说的话。

• 计算机视觉技术：用在视频合成中的视觉处理，包括面部识别、口型分析等，确保虚拟形象的口型与声音和文字内容相匹配。

四、Heygem基本使用

安装Heygem需要满足如下基本要求：

系统要求：支持Windows 10 19042.1526或更高版本。

硬件推荐：

• CPU：第13代英特尔酷睿i5-13400F。

• 内存：32GB。

• 显卡：RTX 4070。

  存储空间：

• D盘：用在存储数字人和项目数据，需要30GB以上空间。

• C盘：用在存储服务镜像文件，需要100GB以上空间。

依赖项

• Node.js 18及以上版本

• Docker 镜像：

  docker pull guiji2025/fun-asr:1.0.20

  docker pull guiji2025/fish-speech-ziming:1.0.39.

  docker pull guiji2025/heygem.ai:0.0.7_sdk_slim.

五、Heygem使用场景

• 内容创作：快速生成动画、教育视频等，降低制作成本。

• 在线教育：创建虚拟教师，支持多语言教学，提升趣味性。

• 直播营销：用在虚拟直播、产品推广，降低人力成本。

• 影视特效：生成虚拟角色或特效镜头，简化制作流程。

• 智能客服：创建虚拟客服，提供自然的人机交互体验。

项目链接：https://github.com/GuijiAI/HeyGem.ai