MegActor 是由 MEGVII Technology(旷视科技)研发的一项人像动画生成器,它使用原始视频作为驱动因素来生成逼真生动的说话头部视频。具体来说,研究团队利用了两个 unet:一个从源图像中提取身份和背景特征,另一个精确地生成和整合直接从原始视频中提取的运动特征。MegActor 可以在低质量、公开可用的数据集上进行训练,并且在面部表情、姿势多样性、微妙的可控性和视觉质量方面表现出色。
使用云平台:OpenBayes
http://openbayes.com/console/signup?r=sony_0m6v
登录到 OpenBayes 平台后,打开「公共教程」,找到「MegActor 人像动画生成器 Demo」的教程。
进入教程后,点击右上角「克隆」。
平台在克隆过程中会自动为容器绑定所需要的数据,不需要我们再手动配置,直接点击「下一步:选择算力」。
平台会自动为模型选配好合适的算力资源和镜像版本,这里使用的是英伟达 RTX 4090 的算力和 PyTorch 的镜像,别忘了使用文章开头的邀请链接,可以 get 免费时长!选择好后,点击「下一步:审核」即可。
确认无误后,点击「继续执行」。
系统分配资源完成后,待状态显示为「运行中」后,由于该项目需要额外的环境配置,在容器启动完成后项目会自动下载所需依赖,等待 5 至 6 分钟即可通过 API 地址进入该项目操作页面。使用 API 需要进行现进行实名认证哦~
在左侧 Source Image 处上传一张照片,Driver video 处上传参考视频,点击 Animate,即可生成人像动画。
**粗体** _斜体_ [链接](http://example.com) `代码` - 列表 > 引用
。你还可以使用@
来通知其他用户。