一键点、万物动!腾讯联合清华、港科大推出图生视频大模型“Follow Your Click”

2024-12-01 00:50:06 admin

讯(记者 杨玉红)3月15日,键点腾讯和清华大学、动腾大模香港科技大学联合推出全新图生视频模型“Follow-Your-Click”,讯联型基于输入模型的合清华港图片,只需点击对应区域,推出图生加上少量提示词,视频就可以让图片中原本静态的键点区域动起来,一键转换成视频。动腾大模 

当前的讯联型图生视频大模型中,一般的合清华港生成方法不仅需要用户在提示词中描述运动区域,还需要提供运动指令的推出图生详细描述,过程较为复杂。视频另外,键点从生成的动腾大模效果来看,现有图像生成视频技术在移动图像的讯联型指定部分上缺乏控制,生成的视频往往需要移动整个场景,而不是图像上的某一个区域,精准度和灵活性上有所欠缺。

为了解决这些问题,腾讯混元大模型团队、清华和港科大的联合项目组提出了更实用和可控的图像到视频生成模型Follow-Your-Click,带来更加便捷的交互,也让图片“一键点,万物动”成为现实。

图像到视频生成的技术在电影内容制作、增强现实、游戏制作以及广告等多个行业的AIGC应用上有着广泛前景,是2024年最热门的AI技术之一。

据了解,本联合项目组中的腾讯混元大模型团队,正在持续研究和探索多模态技术,拥有行业领先的视频生成能力。此前,腾讯混元大模型作为技术合作伙伴,支持《人民日报》打造原创视频《江山如此多娇》,生成中国大美河山的精美视频片段,展示出了较强的内容理解、逻辑推理和画面生成能力。

  • 文章

    4635

  • 浏览

    56

  • 获赞

    79472

赞一个、收藏了!

分享给朋友看看这篇文章

热门推荐