EN

新闻资讯

News information

江南体育-阿里巴巴公布图生视频专利 可实现智能化端到端图生视频

2025-03-06   • JN江南新闻 

  【江南JN科技消息】近日,江南JN注意到,天眼查知识产权信息显示,阿里巴巴(中国)有限公司在视频生成技术领域取得了突破,其申请的“一种图生视频方法和装置”专利正式公布。这一专利的公布,标志着阿里巴巴在智能化视频生成方面迈出了坚实的一步。

阿里巴巴公布图生视频专利 可实现智能化端到端图生视频

  专利摘要显示,该专利的核心在于实现智能化端到端的图生视频。具体而言,该方法通过将包含目标对象的源图像输入到第一视频生成模型中,生成素材视频。随后,根据素材视频确定帧间变换矩阵序列,这一步骤为后续的图像处理和视频生成奠定了关键基础。

阿里巴巴公布图生视频专利 可实现智能化端到端图生视频

  在此基础上,专利进一步从源图像中提取出目标对象对应的对象掩码图像。通过将帧间变换矩阵序列应用于对象掩码图像,可以得到多张掩码图像,这些图像组成掩码图像序列。同样地,将帧间变换矩阵序列应用于源图像,可以得到多张目标对象图像,进而组成目标对象图像序列。

阿里巴巴公布图生视频专利 可实现智能化端到端图生视频

  接下来,根据源图像、掩码图像序列和目标对象图像序列,确定目标输入数据。这一数据随后被输入到支持局部重绘的第二视频生成模型中,最终得到对应的目标视频。这一过程实现了两次模型生成视频,不仅提高了视频生成的智能化水平,还确保了目标对象在运动过程中的不扩散和轨迹多样性。

阿里巴巴公布图生视频专利 可实现智能化端到端图生视频

  值得一提的是,该专利无需引入预设运动参数,即可实现上述效果。这一创新点使得视频生成更加灵活多变,能够满足更多样化的应用场景需求。

-江南体育