阿里巴巴推出AtomoVideo高保真图生视频框架，兼容多种文生图模型
智能科技 2024-03-08 were65768
3 月 7 日消息，阿里巴巴研究团队近日推出了 AtomoVideo 高保真图生视频（I2V，Image to Video）框架，旨在从静态图像生成高质量的视频内容，并与各种文生图（T2I）模型兼容。
IT之家总结 AtomoVideo 特性如下：
高保真度：生成的视频与输入图像在细节与风格上保持高度一致性
运动一致性：视频动作流畅，确保时间上的一致性，不会出现突兀的跳转
视频帧预测：通过迭代预测后续帧的方式，支持长视频序列的生成
兼容性：与现有的多种文生图（T2I）模型兼容
高语义可控性：能够根据用户的特定需求生成定制化的视频内容
AtomoVideo 使用预先训练好的 T2I 模型为基础，在每个空间卷积层和注意力层之后新添加一维时空卷积和注意力模块，T2I 模型参数固定，只训练添加的时空层。由于输入的串联图像信息仅由 VAE 编码，代表的是低层次信息，有助于增强视频相对于输入图像的保真度。同时，团队还以 Cross-Attention 的形式注入高级图像语义，以实现更高的图像语义可控性。
目前，该团队只发布了 AtomoVideo 的论文及演示视频，并未提供在线体验地址。同时官方开设了 GitHub 账户，但仅用作官方网站托管，并未上传任何相关代码。
【来源：IT之家】
The End
免责声明：本文内容来源于第三方或整理自互联网，本站仅提供展示，不拥有所有权，不代表本站观点立场，也不构成任何其他建议，对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容,不承担相关法律责任。如发现本站文章、图片等内容有涉及版权/违法违规或其他不适合的内容， 请及时联系我们进行处理。
相关阅读
- 已批量出货 75TB SSD，Pure Storage 公司正测试 150TB SSD
- 苹果 tvOS 18.2 隐藏代码显示 Apple TV 将获得史努比等 4 款屏保
- 苹果iPhone用户反馈升级iOS 17后，重新打开“重要地点”选项
- 三星以 65 亿元出售所持 ASML 全部股份！为半导体技术升级筹措资金
- 100万台仅用4个月！比亚迪第800万辆新能源车将于7月4日下线
- 搭载Exynos 1480处理器，三星Galaxy A55手机信息曝光
- 京东CEO许冉兼掌零售集团：低价战略是正向循环，不会牺牲合理利润和股东利益
- 百度关联公司终止收购YY直播 欢聚集团回应
- 三星 Galaxy M55 5G 手机曝光：骁龙 7 Gen 1 芯片 + 8GB 内存
- 李斌：第二品牌“阿尔卑斯”已完成试制，销售方面不会与蔚来共享
-
分类导航
-
-
最新文章
-
本栏文章
-
随机文章
-
友情链接
