Home

Awesome

<div align="center"> <br> <img src="images/icon.png" alt="Fay"> <h1>FAY</h1> <h3>UE5 数字人工程(Metahuman)</h3> </div>

[此工程是一个完整的UE数字字人开源工程,可以配合Fay数字人框架,实现各种应用场景:虚拟主播、现场推销货、商品导购、语音助理、远程语音助理、数字人互动、数字人面试官及心理测评、贾维斯、Her](https://github.com/xszyou/Fay )。

(加入交流群请关注公众号:fay数字人)

【10】das唇型版(离线商业唇型)

UE版本:5.3,唇型:das bs 离线商业唇型(进ue交流群下载) ,驱动接口:fay 数字人接口驱动(‌‌‌‍‌‍‬‌‌‍⁠⁠⁠‬‌⁠‍‌‌‌‬‬数字人接口(10002) - 飞书云文档

工程下载: https://pan.baidu.com/s/1tZXYfG8Y9bcrv3zMOO044A?pwd=kbq9

运行包:https://pan.baidu.com/s/1tDV6XUYJIU2BGHLA-6maYQ?pwd=8rwa

改进:商业唇型。

ue工程选择指引:‍‬‬‌‍‌⁠‬‬‌‌‬‬‍‬‍‍⁠⁠‍⁠⁠metahuman(3d) - 飞书云文档

一、使用逻辑

1、如何进行抖音直播

2、如何进行B站直播

3、如何进行人机交互

4、OVRLipsync唇形算法代码

(以工程7为例)

二、UE工程说明

1、UE基本操作及数字人工程模块组成

2、UE数字人工程运行逻辑及程序逻辑

(以工程7为例)

三、其他版本

【1】UE4.27 男模陈升

UE版本:4.27,唇型:固定动画 ,驱动接口:接收音频文件路径、接收情绪值

下载工程

Windows一键运行包

【2】UE5.03 Girl_night

UE版本:5.0.3,唇型:Metahuman SDK ,驱动接口:接收文本、接收情绪值

下载工程

【3】UE5.03 本地唇形Girl_lip

UE版本:5.0.3,唇型:视音素动画 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值

下载工程

【4】UE5.03 8月版

UE版本:5.0.3,唇型:视音素动画 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态

下载工程

视频说明

【5】9月版

ue数字人9月版

UE版本:5.0.3,唇型:视音素BS ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态,改进:新模型、使用唇形BS

工程下载地址:https://pan.baidu.com/s/10ASvGYQMpSrZV8OtXCmDdw?pwd=plz1

唇型BS说明:https://www.bilibili.com/video/BV1G94y1V75W

【6】10月版

ue数字人9月版

UE版本:5.0.3,唇型:优化视音素 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态,

改进:全新模型、提供VR运行包(视频)、优化唇形、改进web socket 状态显示逻辑、降低性能资源消耗。

工程下载地址:链接:https://pan.baidu.com/s/1Fal4ZvL-pL5g_bdsWJIcaw?pwd=4bz8

VR运行包下载地址(含普通运行包):https://pan.baidu.com/s/1m7a-METJFaFmwyRKwDeTRQ?pwd=ztmh

VR效果:https://b23.tv/1W0sJZv

【7】emily

ue数字人9月版

UE版本:5.0.3,唇型:视音素 ,驱动接口:接收音频文件路径、接音音频视音素序列、接收情绪值、接收控制台日志、接收用户问题文本、回复说话完成状态,

改进:全新模型、提供站姿绿幕包、支持打断功能。

工程下载地址:https://pan.baidu.com/s/1lUPK5G0-BLwfgu3LrfulCQ?pwd=wesr

运行包下载地址:https://pan.baidu.com/s/1VaWmA8_0s8wmlaWBCUihog?pwd=02dx

【8】5.3_azure ue数字人

ue版本:5.3

唇型:azure ,音频:azure,ASR:azure,驱动接口:Fay及其他gpt兼容接口。

插件:AZSpeech(key在metahuman本体蓝图上配置)

改进:全新模型、支持最新5.3引擎、使用azure全家桶、支持与Fay异地、支持网页推流、支持打包android、ios及pc客户端。

运行包: https://pan.baidu.com/s/1ZxsjVTB1nh89JJv3L5JmHg?pwd=k57d

工程包:https://pan.baidu.com/s/1xweuSUckmHLgcxO1RbY8yg?pwd=q8zv

【9】Fay5_4_Oct_azure

ue数字人

ue版本:5.4

唇型:azure ,音频:azure,ASR:azure,驱动接口:Fay及其他gpt兼容接口。

插件:FayConnector、Runtime Audio lmporter、AZSpeech(key在metahuman本体蓝图上配置) ue数字人

工程包:https://pan.baidu.com/s/1Gxzi_DgST7Jh90s6tGOlew?pwd=32fe