open-sora1.1 相比open-sora1.0,实现了Sora报告中提到的以下功能: 可变的视频时长、分辨率、宽高比(包括采样灵活性、改进的取景范围和构图) 提示词增加图片和视频选项(使图像动起来、生成式增长视频、视频到视频编辑、连接不同视频) 图像生成功能 ST-DiT修改 在时间注意力模块中添加旋转位置编码:遵循目前LLM的最佳实...
“技术是无国界的，我们想做的就是开源，让大家一起参与，共享和使用Open-Sora计划的成果。”联合实验室副主任、北京大学信息工程学院助理教授、博士生导师袁粒在说明会上表示。面对CloseAI“开源版Sora”全球用户都可用 今年初，由OpenAI发布的文生视频大模型Sora震惊了世界，仅需输入文字指令，便可生成长达一分钟高...
不久前 OpenAI Sora 以其惊人的视频生成效果迅速走红，在一众文生视频模型中突出重围，成为全球瞩目的焦点。继 2 周前推出成本直降 46% 的 Sora 训练推理复现流程后，Colossal-AI 团队全面开源全球首个类 Sora 架构视频生成模型 「Open-Sora 1.0」，涵盖了整个训练流程，包括数据处理、所有训练细节和模型权重，...
OpenAI的sora太火了!但是现在连内测资格都很难获取,更不要说让普通人上手体验了!但是别慌,开源社区有个项目也能在一定程度满足你视频生成需求,那就是:Open-Sora目前项目已经收到1w个⭐了,十分火热!Open-Sora是一个开源项目,旨在复现OpenAI的Sora模型核心技术,专
来源| 机器之心 ID | almosthuman2014 不久前 OpenAI Sora 以其惊人的视频生成效果迅速走红,在一众文生视频模型中突出重围,成为全球瞩目的焦点。继 2 周前推出成本直降 46% 的 Sora 训练推理复现流程后,Coloss…
Open-Sora它是个开源项目,由一个叫YangYou1991的团队搞出来的,主要干的事情就是让你能在家里动动鼠标键盘,就能造出视频来。 想象一下,不用出门,不用拍摄,电脑前坐好,就能搞定2到5秒的小视频,分辨率还挺给力的,512x512的。 Open-Sora用的技术听起来挺高端,有个叫VAE的模...
Open-Sora项目通过其强大的工程能力,快速的搭建和验证了Sora的技术链路,推动了开源视频生成的发展,同时我们也期待V2版本中,对时空VAE等难题的进一步解决。 魔搭最佳实践 第一步:下载代码并安装: # install flash attention (optional)pip install packaging ninjapip install flash-attn --no-build-isolation# install...
不久前 OpenAI Sora 以其惊人的视频生成效果迅速走红,在一众文生视频模型中突出重围,成为全球瞩目的焦点。 继2 周前推出成本直降 46% 的 Sora 训练推理复现流程后,Colossal-AI 团队全面开源全球首个类 Sora 架构视频生成模型 「Open-Sora 1.0」,涵盖了整个训练流程,包括...
在说明会现场，袁粒作为计划发起人之一，介绍了Open-Sora开源计划的技术逻辑和发起这一计划的目标。袁粒表示，Open-Sora计划希望聚集开源社区力量复现出一版开源的TinySora（小Sora）。实现这一目标分为三个阶段，目前团队已经搭建起了由三部分组成的Open-Sora底层框架，并初步验证了当前框架的有效性，基本实现了第一...