Official project repo for paper "Speech Driven Video Editing via an Audio-Conditioned Diffusion Model" Resources Readme License MIT license Activity Stars 229stars Watchers 12watching Forks 15forks Report repository Releases No releases published Packages No packages published Languages Python60.1% JavaScript34.2% HTML5.1% CSS0.6%
Awesome Video Diffusion A curated list of recent diffusion models for video generation, editing, restoration, understanding, nerf, etc. (Source: Make-A-Video, Tune-A-Video, and Fate/Zero.) Table of Contents Open-source Toolboxes and Foundation Models Evaluation Benchmarks and Metrics Commerc...
git clone https://github.com/rese1f/StableVideo.gitconda create -n stablevideo python=3.11pip install -r requirements.txt 所有的模型和检测器都可以从ControlNet的页面下载。然后工作目录是这样的 StableVideo├── ...├── ckpt│ ├── cldm_v15.yaml| ├── dpt_hybrid-midas-501f0c75...
Sora的亮相带火了两个东西——一个是Diffusion Transformer,另一个则是text-to-video generation这件事。至今时隔Sora亮相已经过去了足足八个月之久,视频生成领域的卷度貌似没有我们想象中的那样夸张。「夸张」这个标准我们可以用2022年到2024年,基于diffusion model的图像生成技术论文来对比,根据我自己的GitHub调研仓库...
git clone https://github.com/rese1f/StableVideo.git conda create-n stablevideo python=3.11pip install-r requirements.txt 所有的模型和检测器都可以从ControlNet的页面下载。 然后工作目录是这样的 代码语言:javascript 代码运行次数:0 运行 AI代码解释 ...
代码的话,统一阅读openai/improved-diffusion: Release for Improved Denoising Diffusion Probabilistic Models (github.com),里面包含了DDIM和IDDPM两篇论文的内容。虽然这个代码读起来挺复杂的。 【后续常用的加速sample】 Stable diffusion集成了DDIMSampler, PLMSSampler, DPMSolverSampler。
Our project page can be found at https://customize-a-video.github.io .Ren, YixuanUniversity of MarylandZhou, YangAdobe ResearchYang, JimeiAdobe ResearchShi, JingAdobe ResearchLiu, DifanAdobe ResearchLiu, FengAdobe ResearchKwon, MingiYonsei UniversityShrivastava, Abhinav...
(3) 我们实现了高质量的多模态控制的人脸生成和编辑。 (4) Collaborative Diffusion 是一个通用的框架,不仅适用于图片生成,还适用于图片编辑,以及未来更多的基于扩散模型的其他任务。 代码已开源,各位大佬走过路过不要忘记star～ https://github.com/ziqihuangg/Collaborative-Diffusion...
我们的模型在 unsupervised segmentation,compositional generation 等多个任务上均取得了 SOTA 效果,同时可以用于 image editing,VQA,video prediction 等下游任务。代码已开源,详见 project page(https://slotdiffusion.github.io/)。 论文题目: SlotDiffusion: Object-Centric Generative Modeling with Diffusion Models...
我们的模型在 unsupervised segmentation,compositional generation 等多个任务上均取得了 SOTA 效果,同时可以用于 image editing,VQA,video prediction 等下游任务。代码已开源,详见 project page(https://slotdiffusion.github.io/)。 论文题目: SlotDiffusion: Object-Centric Generative Modeling with Diffusion Models...