腾讯联合清华大学推出全新图生视频模型“Follow-Your-Click”

科技 2024-03-15 18:37 阅读:3

近日,腾讯联合清华大学和香港科技大学推出了一款名为“Follow-Your-Click”的全新图生视频模型,该模型已经上架GitHub并发表了研究论文。这款模型的主要功能包括局部动画生成和多对象动画,支持多种动作表达,如头部调整、翅膀拍动等。

据介绍,用户可以通过简单的点击和短语提示来生成局部图像动画。只需点击对应区域,并加上少量提示词,就可以让图片中原本静态的区域动起来,一键转换成视频。比如,用户可以让物体微笑、跳舞或飘动,实现更加生动的动画效果。

除了能够控制单个对象的动画,这个框架还支持同时对多个对象进行动画处理,增加了动画的复杂性和丰富性。用户可以通过简单的点击和短语提示轻松地指定希望动画化的区域和动作类型,无需复杂的操作或详细描述。

这款“Follow-Your-Click”图生视频模型的推出,为用户提供了更加便捷的动画制作方式。通过简单的操作,用户可以实现图片到视频的转换,为动画制作带来了更多可能性。相信随着这一模型的不断完善和推广,将会为动画制作领域带来新的发展机遇。