阿里图生视频专利曝光:智能化端到端生成,无需预设运动参数

   时间:2025-02-08 01:46 来源:天脉网作者:顾青青

阿里巴巴公布图生视频技术新专利

近期,阿里巴巴(中国)有限公司在知识产权领域取得了新进展,一项名为“一种图生视频方法和装置”的专利被正式公布。该专利的公布标志着阿里巴巴在图生视频技术方面迈出了重要一步。

据了解,这项专利的核心在于通过智能化的方式,实现从图像到视频的端到端生成。具体而言,该技术首先会将包含目标对象的源图像输入至一个专门设计的第一视频生成模型中,进而生成素材视频。随后,系统会基于素材视频确定帧间变换矩阵序列,这是实现后续图像变换和视频生成的关键步骤。

紧接着,技术会从源图像中提取出目标对象对应的对象掩码图像。通过将该帧间变换矩阵序列应用于对象掩码图像,可以生成一系列掩码图像,组成掩码图像序列。同样地,将帧间变换矩阵序列应用于源图像,可以生成一系列目标对象图像,组成目标对象图像序列。这两个序列的生成,为后续的视频合成提供了关键素材。

接下来,系统会结合源图像、掩码图像序列和目标对象图像序列,确定目标输入数据。这一数据将被输入至一个支持局部重绘的第二视频生成模型中。通过该模型的处理,最终可以得到对应的目标视频。这一过程无需引入预设的运动参数,即可在保持目标对象不扩散的同时,实现运动轨迹的多样性。

该专利的公布不仅展示了阿里巴巴在图生视频技术方面的创新能力,也预示着未来视频生成领域可能迎来更多的智能化变革。通过两次模型生成视频的方式,阿里巴巴成功实现了从图像到视频的智能化、端到端生成,为视频创作和内容生成提供了新的可能。

随着技术的不断进步和应用场景的拓展,图生视频技术有望在广告、娱乐、教育等多个领域发挥重要作用。阿里巴巴的这一专利成果,无疑为行业的未来发展注入了新的活力和动力。

 
反对 0举报 0 收藏 0
 
更多>同类天脉资讯
全站最新
热门内容
媒体信息
新传播周刊
新传播,传播新经济之声!
网站首页  |  关于我们  |  联系方式  |  版权隐私  |  网站留言  |  RSS订阅  |  违规举报