AI数字人开发全流程,Maya建模到UE5集成、大模型接入和实时语音交互,43课实战
43节AI数字人开发课,从Maya骨骼蒙皮、Blendshape表情做到导入UE5加材质和头发动力学,接入ChatGPT、文心一言等大模型,配语音唤醒合成和Audio2face口型,最后用抖音弹幕抓取做直播互动
「AI数字人开发全流程」是一套 43 节的数字人开发课程,从 Maya 建模绑定开始,做到 UE5 集成、大模型接入、实时语音交互,最后打包成能在抖音直播里用的数字人
课程前半段都在 Maya 里完成角色资产:约束、蒙皮、Blendshape 融合变形基础,接着搭骨骼、画权重,衣服和头发的权重传递也在这里处理。表情部分有 10 节,从表情原理和元音口型,一直做到表情 BS 与绑定模型整合,最后整理材质并导出
进入 UE5 之后要处理角色导入、材质添加、骨骼重指定和角色封装,再加上头发动力学。交互这一块接入 ChatGPT、百度文心一言、离线大模型和星火大模型,配合语音唤醒、语音合成和本地知识库,用蓝图整合到一起
课程最后给了两个版本的完整流程。离线版走场景制作、摄像机设置、眨眼表情控制和动作随机切换,再打包输出;Audio2face 版用 Python 调接口驱动口型,同样有动作随机切换和打包环节。第 43 节是抖音弹幕抓取,把直播间的弹幕接进数字人做实时互动
学完能覆盖的方向包括虚拟直播、智能客服这类应用场景,适合有一点三维基础、想往数字人方向做的开发者
课程目录
环境搭建与 Maya 绑定基础(001-011)
- 001 教学课程介绍和角色选定
- 002 数字人环境安装与搭建
- 003 Maya 的约束基础
- 004 Maya 蒙皮基础
- 005 Maya 的 Blendshape 融合变形基础
- 006 角色骨骼建立 01
- 007 角色骨骼建立 02
- 008 角色权重绘制 01
- 009 角色权重绘制 02
- 010 衣服权重绘制
- 011 头发制作和权重传递
表情制作(012-021)
- 012 表情制作原理与准备
- 013 角色表情制作 01
- 014 角色表情制作 02
- 015 角色表情制作 03
- 016 角色表情制作 04
- 017 角色元音口型制作
- 018 角色表情 BS 与绑定模型整合 01
- 019 角色表情 BS 与绑定模型整合 02
- 020 角色表情 BS 与绑定模型整合 03
- 021 角色材质整理和导出
UE5 集成(022-025)
- 022 角色导入到 UE5 和整理
- 023 角色材质添加
- 024 骨骼重指定和角色封装
- 025 头发动力学
大模型接入与语音交互(026-033)
- 026 语音唤醒
- 027 ChatGPT 模型接入
- 028 百度文心一言接入
- 029 离线大模型接入
- 030 星火大模型接入
- 031 本地知识库
- 032 语音合成(离线版)
- 033 蓝图整合(离线版)
场景与离线版打包(034-037)
- 034 场景制作和摄像机设置
- 035 眨眼表情控制
- 036 角色动作自然随机切换
- 037 打包输出(离线版本)
Audio2face 版本(038-042)
- 038 Python 环境安装
- 039 Audio2face 接入虚拟人
- 040 动作随机切换(Audio2face 版)
- 041 语音合成调用 API
- 042 打包输出(Audio2face 版本)
抖音弹幕交互(043)
- 043 抖音弹幕抓取交互
配套的课程视频文件在本页获取
资源目录一览
已核验有效本文隐藏内容
已解锁- 本文标题
- AI数字人开发全流程,Maya建模到UE5集成、大模型接入和实时语音交互,43课实战
- 本文作者
- 孙晨
- 来源平台
- 网友投稿
- 本文链接
- https://www.zisuda.com/ai-digital-human-maya-to-ue5-llm-voice-interaction-pipeline
版权声明:本站所有资源均来自互联网公开分享或原创整理,仅供个人学习、技术交流与研究测试使用,版权归原作者所有
免责条款:任何个人或组织不得将本站资源用于商业用途。如无意中侵犯了您的知识产权或合法权益,请通过邮件(itsafeng@gmail.com)联系我们,我们将在收到通知并核实后第一时间进行删除下架处理







