本项目的目标是实现一款可以完全离线使用的数字人直播软件,支持实时语音交互、定制角色、知识库、数字人嘴型同步和制定直播计划。
作者联系方式:
开发者微信号:bigfacewo
策划和美术微信号:leng151213
有任何问题或者合作机会请联系。
点击此链接查看 https://www.bilibili.com/video/BV1bgYJeCE55/?vd_source=94467fd1f84447c87ac3d86cb2606cff
- 运行环境:必须是支持 cuda 的 nvidia gpu,在之前的实际直播测试中,我们使用的是rtx 4060ti 16g。
- UE5版本:5.3,仅支持嘴型同步到metahuman制作的人物。
- 内存大小:64GB及以上。
- 项目初始运行时,必须能够访问外网,在建立缓存之后可以离线使用。
- 交互任务的实时性,通常取决于运行程序的机器的性能,影响的部分包括:
- 大语言模型响应速度
- 语音合成速度
- 支持实时语音交互
- 支持定制角色
- 支持知识库
- 支持嘴型同步
- 支持直播计划脚本
- 直播计划脚本可视化编辑器
- 直播计划管理软件
- All In One, 即将各部分代码封装到一起,形成一个单一软件
- 支持任务的基础功能,如背景图片、背景音乐等。
- 支持音频任务
- 支持组任务
- 支持互动任务
- 优化长文本的语音生成速度
查看部署文档
查看直播计划脚本文档
请转到本项目的 Release 列表下载 ue-digtal-people.7z。
关于UE工程的项目开发文档,后续补充。
如果我们的工作帮助到了你,欢迎给我们买一杯咖啡: