阿里云再推视频生成大模型 2分钟生成高清电影级效果视频 (阿里云视频教程)

文章编号:40637 资讯动态 2024-12-03 I2VGen阿里云XL摩达社区

近日,阿里云推出全新视频生成大模型I2VGen-XL,并在魔搭社区开放体验,用户上传一张图片后2分钟左右即可生成一段1280*720的高分辨率视频,该模型研发负责人表示,未来将进一步实现2K超清效果,可应用于短视频内容生产、电影制作等场景。

阿里云再推视频生成大模型,2分钟生成高清电影级效果视频

和业界爆火的AI绘画创作大模型不同,视频生成大模型的技术门槛更高,其需要克服文本和视频内容匹配度、视频画面质量、画面连续性等诸多技术挑战。在此之前,阿里云和微软等科技公司相继推出一系列可控视频生成研究成果,例如用户可通过定义空间布局、运动模式等条件来生成视频,但其画面清晰度难以满足真实场景应用的需求。

针对该问题,阿里云进一步提出创新思路,I2VGen-XL模型设计了两个阶段,首先在低分辨率条件下保证生成结果和给定图像语义的匹配度,随后通过视频扩散模型(VLDM)来提高视频分辨率,并同时提升时间和空间上的一致性,保证最终视频内容的清晰度和连贯性,最终实现1280*720高分辨率的突破,并且在画面细节的展现上大幅领先现有模型。据介绍,该模型的训练还使用了多种风格的视频数据,因此可生成科技感、电影色、卡通风格和素描等类型丰富的视频。

阿里云再推视频生成大模型,2分钟生成高清电影级效果视频

目前,I2VGen-XL的模型和代码均已开源,国内外社交媒体显示,该模型已吸引国内外用户和开发者的广泛体验和二次开发,涌现了大量创意AI视频生成内容,例如在城堡上展翅的恐龙、宇航员在飞船中行走的科幻电影画面等等……知名AI社交媒体分析师Ahsen Khaliq在推特发布多条由该模型生成的视频效果,并表示模型在清晰度、纹理、语义和时间连续性方面有优势。

阿里云再推视频生成大模型,2分钟生成高清电影级效果视频

国内外网友和开发者广泛关注和体验

在视觉生成领域,阿里云此前已推出AI绘画创作大模型通义万相(基座模型Composer)和可控视频生成模型VideoComposer,团队在该领域发表60多篇CCF-A类论文,并在国际顶级视觉竞赛中获得10余项冠军。

模型体验链接:thtps://modelscope.cn/studios/damo/I2VGen-XL-Demo/summary

版权文章,未经授权禁止转载。详情见 转载须知 。

全局中部横幅
润毅财经知识网

润毅财经为您搜集新鲜财经新闻、财经资讯及实用的股票知识,为您提供更有价值的财经信息,股票资讯,内容覆盖全面,为您推荐投资理财和金融管理方案

镀锌厂家

天津镀锌加工厂咨询热线:138-2188-4447是一家多年经营镀锌厂家,热镀锌厂家,热镀锌加工厂家,挂镀加工厂家,吹镀加工厂家为一体的现代化高新技术企业,规格型号齐全!欢迎来电咨询!

品胜官网

品胜—IT、数码、手机配件领导者。提供专业的移动电源、充电宝、手机平板电脑壳膜、充电电池、笔记本电池、数码相机电池、手机电池和数码、电脑、手机周边配件,是中国最专业、最优秀的配件提供商。

长春市风华制冷设备有限公司

长春市风华制冷设备有限公司|我们从事制冷行业多年,长期与美国爱默生谷轮、意大利莱富康,台湾复胜,汉中罗杆机,比泽尔等厂家合作,多年来受到厂家和客户的一致好评,被评为制冷行业

北京废品回收

北京废品回收中心-北京废品回收服务大平台,专注于全行业全品类北京废品回收,北京废旧回收,北京库存回收等服务,权威的北京废品回收专家,7*24小时服务于全北京地区,22年回收优质服务经验,13391973449

君冠时代(厦门)科技控股有限公司

君冠时代(厦门)科技控股有限公司是一家集“材料科学”、“产学研”、“智能制造”、“进出口贸易”科工贸一体化的新型材料高新技术企业集团。

允复纳米

上海允复纳米科技有限公司

大鹏资源网

《大鹏资源网》www.01zt.com是一个专注于资源与技术分享的平台。我们致力于为用户提供丰富的资料和权威的技术文章,帮助您在学习和工作中迅速提升技能与知识。无论您是寻求前沿技术信息,还是需要实用的学习资源,这里都能满足您的需求。我们希望通过这个网站,为您的成长与发展提供有力支持。

全局底部横幅