fay数字人游玩指南

fay数字人

Fay数字人开源地址：https://github.com/TheRamU/Fay

fay-ue5开源地址：https://github.com/xszyou/fay-ue5

UE数字人系统教程：

1.Fay-UE5数字人工程导入：

https://www.bilibili.com/video/BV1ku4y1R71P/

2.UE数字人语音交互：

https://www.bilibili.com/video/BV1F8411R7dY/

3.UE基本操作及数字人工程模块组成

https://www.bilibili.com/video/BV1S84y1Z76e/

4.UE数字人工程运行逻辑及程序逻辑

https://www.bilibili.com/video/BV1g8411Q7y5/

1.集成消费级pc大模型（ChatGLM-6B的基础上前置Rasa会话管理）：

https://m.bilibili.com/video/BV1D14y1f7pr

2.非常全面的数字人解决方案_郭泽斌之心的博客-CSDN博客_数字人算法：

https://blog.csdn.net/aa84758481/article/details/124758727

3.开源项目：数字人FAY——Fay新架构使用讲解：

https://www.bilibili.com/video/BV1NM411B7Ab/

4.开源项目FAY——UE工程讲解：

https://www.bilibili.com/video/BV1C8411P7Ac

5.m1机器安装办法（Gason提供）：

https://www.zhihu.com/question/437075754

6.bilbil主页：xszyou的个人空间_哔哩哔哩_bilibili：

https://b23.tv/JxuMfrg

7.Fay数字人集成灵聚NLP api(支持GPT3.5及多应用)

https://www.bilibili.com/video/BV1NW4y1D76a/

8.fay数字人助理更新本地唇型算法发布

https://www.bilibili.com/video/BV1Zh4y1g7o7/

Fay数字人更新日志：

Fay数字人本周更新2023.08.11：

Fay数字人 助理版：https://github.com/TheRamU/Fay

1.去除mp3格式警告信息；

2.去除灵聚、渡鸦接口警告信息；

3.websocket逻辑优化；

4.数字人端接口通讯优化。

Fay数字人带货版：https://github.com/TheRamU/Fay/tree/fay-sales-edition

1.商品带货脚本补充唇形计算；

2.去除mp3格式警告信息；

3.websocket逻辑优化；

4.去除灵聚接口警告信息；

5.数字人端接口通讯优化。

2023.08.04：

1、唇型计算的视音素更换成33毫秒；

2、内置rwkv_api nlp可以直接使用；

3、降低情绪性向数字人端推送的频度；

4、非数字人连接状态不产生接口消息；

5、修复因mp3格式错误而导致一定概率不推送播放信息给数字人端的问题；

6、修复静音等指令执行时提前结束nlp逻辑，而导致用户提问消息不推送数字人端问题；

7、补充wav文件启动清理；

8、websocket工具类升级完善。

UE5工程：https://github.com/xszyou/fay-ue5

修复叠音问题

2023.07.28：

增加运行时自动清理ui缓存；

增加gpt代理设置可为空；

提高灵聚对接的稳定性。

2023.07.26：

修复连接数字人之前产生大量ws信息问题；

增加数字人（ue、live2d、xuniren）通讯接口：实时日志；

更新数字人（ue、live2d、xuniren）通讯接口：音频推送。

2023.07.21：

【开源tts测试结果-哔哩哔哩】[url=https://b23.tv/RZulg0r]https://b23.tv/RZulg0r[/url]

【Fay数字人UE工程快速替换自己的Metahuman-哔哩哔哩】 https://b23.tv/RZulg0r

Fay数字人带货版：https://github.com/TheRamU/Fay/tree/fay-sales-edition

带货版多项更新：

1、接入灵聚NLP；

2、NLP模块调整；

3、麦克风优化调整；

4、页面优化。

2023.07.19，周三更新：

Fay数字人助理版：https://github.com/TheRamU/Fay

1、修复远程语音不识别问题；

2、修复asr时有不灵问题；

3、去除唱歌指令；

2023.07.14

Fay:[url=https://github.com/TheRamU/Fay]https://github.com/TheRamU/Fay[/url]

RWKV开源NLP：https://m.bilibili.com/video/BV1yu41157zB

汇总实时驱动AI照片数字人方案：https://www.bilibili.com/read/cv24997550

修复linux及mac运行出错问题；

修复因唇型出错无法继续执行问题；

提供rwkv对接方案。

2023.07.12：

修复助理版文字输入不读取人设回复问题；

修复助理版文字输入不读取qa回复问题；

增强麦克风接入稳定性。

2023.07.06

今天，星期三：

Fay数字人: https://github.com/TheRamU/Fay

1、修复由于唇形算法出错而导致的声音不播放问题；

UE5: https://github.com/xszyou/fay-ue5

1、修复打包后掉头发问题。

2023.06.28

今天，星期三：

主仓  https://github.com/TheRamU/Fay

+ 重构NLP模块管理逻辑，便于自由扩展；

+ gpt：拆分为ChatGPT及GPT、更换新的GPT接口、可单独配置代理服务器；

+ 指定yolov8包版本，解决yolo不兼容问题；

+ 修复：自言自语bug、接收多个待处理消息bug。

xuniren https://github.com/waityousea/xuniren

+ 相同音频不重新推理；

+ 音唇同步。

2023.06.21：

1、集成灵聚NLP api(支持GPT3.5及多应用)；

2、ui修正。

新版效果：https://m.bilibili.com/video/BV1NW4y1D76a

2023.06.17

Fay数字人开源项目（github）祝大家周末愉快：

1、主仓更新本地唇型算法：https://github.com/TheRamU/Fay/

2、UE5工程替换新模型：https://github.com/xszyou/fay-ue5

3、游玩视频教程：https://m.bilibili.com/video/BV1Zh4y1g7o7

2023.06.14

Fay数字人助理版多处优化：

1、解决多声道麦克风兼容问题；

2、重构fay_core.py及fay_booter.py代码；

3、ui适应布局调整；

4、恢复声音选择；

5、”思考中...“显示逻辑修复。

2023.06.09：

1、https://github.com/waityousea/xuniren

仓库更新，尽情打造自己call annie

2、赠送windows稳定安装教程：

https://www.cnblogs.com/dm521/p/17469967.html

3、赠送模型训练教程：

https://blog.csdn.net/aa84758481/article/details/131135823

游玩Fay数字人过程中遇到问题可通过公众进入论坛

更多玩法请参考公众号历史文章

祝大家周末愉快！

2023.05.28

1.【（yolov8+VisualGLM）让你的Fay数字人助理看得见】

https://www.bilibili.com/video/BV1mP411Q7mj/

2.【tesla p100 + gtx 2080ti魔改22g显存，炼丹与数字人两不误】

https://www.bilibili.com/video/BV11N411y72i/

祝大家周末愉快！

2023.05.19

1.【chatgpt4彩蛋：fay(github数字人开源项目)】

https://www.bilibili.com/video/BV1Dg4y1V7pn/

2.【给Fay数字人加上本地免费语音识别（达摩院funaar）】

https://www.bilibili.com/video/BV1qs4y1g74e/

祝大家周末玩儿愉快+520快乐！