库里杜兰特“合舞”科目三，腾讯混元团队全新图生视频模型来了

2024-06-10 17:32:05

智能视野

发布在

科普

阅读：341

腾讯混元团队与中山大学、香港科技大学合作推出了全新的图生视频模型Follow-Your-Pose-v2，它革新了视频生成技术。以前，单一人物动作易实现，但现在，只需一张人物合照，多人就能同步“舞动”。这款模型有四大亮点：支持多人动作生成、具有强泛化能力、能用生活照和抓拍训练，且能处理遮挡问题，生成前后一致的画面。模型在多角色生成效果上超越现有技术35%以上，尤其在动作跟踪和视觉质量上表现出色。其创新之处在于使用嘈杂开源视频训练，结合光流、深度图和推理图指导器，提升了模型的稳定性和质量。这一技术在AIGC领域有广阔的应用前景，腾讯混元团队还发布了加速库，降低了使用门槛。相关论文和模型库可供进一步研究。

原文链接

本文链接：https://kx.umi6.com/article/1075.html

转载请注明文章出处

Follow-Your-Pose-v2