品玩11月7日讯,据 Arxiv 页面显示,字节跳动近日公布单图视频驱动模型 X-Portrait 2,可以根据单张图片生成高质量的图片。
X-Portrait 2模型不仅能保留原图的 ID,还能捕捉并迁移从细微到夸张的表情和情绪,简化了现有动作捕捉、角色动画和内容创作流程。不同于以往依赖人脸关键点检测的单图驱动方法,X-Portrait 2 构建了一个表情编码器模型,通过一种端到端自监督训练框架,能够从大量人像视频中自学习 ID 无关的运动隐式表征。
经过在大规模高质量表情视频上的训练,X-Portrait 2 在运动表现力和 ID 保持性方面显著优于先前技术。
0 条评论
请「登录」后评论