fay数字人 发表于 2023-6-13 09:43:16

fay数字人游玩指南

Fay数字人开源地址:https://github.com/TheRamU/Fayfay-ue5开源地址:https://github.com/xszyou/fay-ue5UE数字人系统教程:1.Fay-UE5数字人工程导入:https://www.bilibili.com/video/BV1ku4y1R71P/2.UE数字人语音交互:https://www.bilibili.com/video/BV1F8411R7dY/3.UE基本操作及数字人工程模块组成https://www.bilibili.com/video/BV1S84y1Z76e/4.UE数字人工程运行逻辑及程序逻辑https://www.bilibili.com/video/BV1g8411Q7y5/
1.集成消费级pc大模型(ChatGLM-6B的基础上前置Rasa会话管理):https://m.bilibili.com/video/BV1D14y1f7pr
2.非常全面的数字人解决方案_郭泽斌之心的博客-CSDN博客_数字人算法:https://blog.csdn.net/aa84758481/article/details/124758727
3.开源项目:数字人FAY——Fay新架构使用讲解:https://www.bilibili.com/video/BV1NM411B7Ab/
4.开源项目FAY——UE工程讲解:https://www.bilibili.com/video/BV1C8411P7Ac
5.m1机器安装办法(Gason提供):https://www.zhihu.com/question/437075754
6.bilbil主页:xszyou的个人空间_哔哩哔哩_bilibili:
https://b23.tv/JxuMfrg
7.Fay数字人集成灵聚NLP api(支持GPT3.5及多应用)https://www.bilibili.com/video/BV1NW4y1D76a/
8.fay数字人助理更新本地唇型算法发布https://www.bilibili.com/video/BV1Zh4y1g7o7/

Fay数字人更新日志:
Fay数字人本周更新2023.08.11:Fay数字人 助理版:https://github.com/TheRamU/Fay1.去除mp3格式警告信息;2.去除灵聚、渡鸦接口警告信息;3.websocket逻辑优化;4.数字人端接口通讯优化。
Fay数字人带货版:https://github.com/TheRamU/Fay/tree/fay-sales-edition1.商品带货脚本补充唇形计算;2.去除mp3格式警告信息;3.websocket逻辑优化;4.去除灵聚接口警告信息;5.数字人端接口通讯优化。
2023.08.04:1、唇型计算的视音素更换成33毫秒;2、内置rwkv_api nlp可以直接使用;3、降低情绪性向数字人端推送的频度;4、非数字人连接状态不产生接口消息;5、修复因mp3格式错误而导致一定概率不推送播放信息给数字人端的问题;6、修复静音等指令执行时提前结束nlp逻辑,而导致用户提问消息不推送数字人端问题;7、补充wav文件启动清理;8、websocket工具类升级完善。
UE5工程:https://github.com/xszyou/fay-ue5修复叠音问题
2023.07.28:增加运行时自动清理ui缓存;增加gpt代理设置可为空;提高灵聚对接的稳定性。
2023.07.26:修复连接数字人之前产生大量ws信息问题;增加数字人(ue、live2d、xuniren)通讯接口:实时日志;更新数字人(ue、live2d、xuniren)通讯接口:音频推送。
2023.07.21:【开源tts测试结果-哔哩哔哩】https://b23.tv/RZulg0r]https://b23.tv/RZulg0r【Fay数字人UE工程快速替换自己的Metahuman-哔哩哔哩】 https://b23.tv/RZulg0r
Fay数字人带货版:https://github.com/TheRamU/Fay/tree/fay-sales-edition带货版多项更新:1、接入灵聚NLP;2、NLP模块调整;3、麦克风优化调整;4、页面优化。
2023.07.19,周三更新:Fay数字人助理版:https://github.com/TheRamU/Fay1、修复远程语音不识别问题;2、修复asr时有不灵问题;3、去除唱歌指令;
2023.07.14Fay:https://github.com/TheRamU/Fay]https://github.com/TheRamU/FayRWKV开源NLP:https://m.bilibili.com/video/BV1yu41157zB汇总实时驱动AI照片数字人方案:https://www.bilibili.com/read/cv24997550
修复linux及mac运行出错问题;修复因唇型出错无法继续执行问题;提供rwkv对接方案。
2023.07.12:修复助理版文字输入不读取人设回复问题;修复助理版文字输入不读取qa回复问题;增强麦克风接入稳定性。

2023.07.06今天,星期三:Fay数字人: https://github.com/TheRamU/Fay1、修复由于唇形算法出错而导致的声音不播放问题;
UE5: https://github.com/xszyou/fay-ue51、修复打包后掉头发问题。
2023.06.28今天,星期三:主仓https://github.com/TheRamU/Fay+ 重构NLP模块管理逻辑,便于自由扩展;+ gpt:拆分为ChatGPT及GPT、更换新的GPT接口、可单独配置代理服务器;+ 指定yolov8包版本,解决yolo不兼容问题;+ 修复:自言自语bug、接收多个待处理消息bug。
xuniren https://github.com/waityousea/xuniren+ 相同音频不重新推理;+ 音唇同步。
2023.06.21:1、集成灵聚NLP api(支持GPT3.5及多应用);2、ui修正。新版效果:https://m.bilibili.com/video/BV1NW4y1D76a
2023.06.17Fay数字人开源项目(github)祝大家周末愉快:1、主仓更新本地唇型算法:https://github.com/TheRamU/Fay/ 2、UE5工程替换新模型:https://github.com/xszyou/fay-ue53、游玩视频教程:https://m.bilibili.com/video/BV1Zh4y1g7o7
2023.06.14Fay数字人助理版多处优化:1、解决多声道麦克风兼容问题;2、重构fay_core.py及fay_booter.py代码;3、ui适应布局调整;4、恢复声音选择;5、”思考中...“显示逻辑修复。
2023.06.09:1、https://github.com/waityousea/xuniren 仓库更新,尽情打造自己call annie2、赠送windows稳定安装教程:https://www.cnblogs.com/dm521/p/17469967.html3、赠送模型训练教程:https://blog.csdn.net/aa84758481/article/details/131135823游玩Fay数字人过程中遇到问题可通过公众进入论坛更多玩法请参考公众号历史文章祝大家周末愉快!
2023.05.281.【(yolov8+VisualGLM)让你的Fay数字人助理看得见】https://www.bilibili.com/video/BV1mP411Q7mj/2.【tesla p100 + gtx 2080ti魔改22g显存,炼丹与数字人两不误】 https://www.bilibili.com/video/BV11N411y72i/祝大家周末愉快!
2023.05.191.【chatgpt4彩蛋:fay(github数字人开源项目)】https://www.bilibili.com/video/BV1Dg4y1V7pn/2.【给Fay数字人加上本地免费语音识别(达摩院funaar)】https://www.bilibili.com/video/BV1qs4y1g74e/祝大家周末玩儿愉快+520快乐!


页: [1]
查看完整版本: fay数字人游玩指南