Commit
·
ca97fdf
1
Parent(s):
f9044a2
Update README.md
Browse files
README.md
CHANGED
|
@@ -59,6 +59,8 @@ Additionally, many of the design concepts for **I2VGen-XL** are inherited from o
|
|
| 59 |
<p>
|
| 60 |
</center>
|
| 61 |
|
|
|
|
|
|
|
| 62 |
## 模型介绍 (Introduction)
|
| 63 |
|
| 64 |
**I2VGen-XL**建立在Stable Diffusion之上,如图Fig.2所示,通过专门设计的时空UNet在隐空间中进行时空建模并通过解码器重建出最终视频。为能够生成720P视频,我们将**I2VGen-XL**分为两个阶段,第一阶段保证语义一致性但低分辨率,第二阶段通过DDIM逆运算并在新的VLDM上进行去噪以提高视频分辨率以及同时提升时间和空间上的一致性。通过在模型、训练和数据上的联合优化,本项目主要具有以下几个特点:
|
|
@@ -306,6 +308,7 @@ pip install scipy
|
|
| 306 |
pip install imageio
|
| 307 |
pip install pytorch-lightning
|
| 308 |
pip install torchsde
|
|
|
|
| 309 |
```
|
| 310 |
|
| 311 |
|
|
|
|
| 59 |
<p>
|
| 60 |
</center>
|
| 61 |
|
| 62 |
+
<font color="#dd0000">体验地址(Project experience address):</font> <font color="#0000ff">https://modelscope.cn/studios/damo/I2VGen-XL-Demo/summary</font>
|
| 63 |
+
|
| 64 |
## 模型介绍 (Introduction)
|
| 65 |
|
| 66 |
**I2VGen-XL**建立在Stable Diffusion之上,如图Fig.2所示,通过专门设计的时空UNet在隐空间中进行时空建模并通过解码器重建出最终视频。为能够生成720P视频,我们将**I2VGen-XL**分为两个阶段,第一阶段保证语义一致性但低分辨率,第二阶段通过DDIM逆运算并在新的VLDM上进行去噪以提高视频分辨率以及同时提升时间和空间上的一致性。通过在模型、训练和数据上的联合优化,本项目主要具有以下几个特点:
|
|
|
|
| 308 |
pip install imageio
|
| 309 |
pip install pytorch-lightning
|
| 310 |
pip install torchsde
|
| 311 |
+
pip install easydict
|
| 312 |
```
|
| 313 |
|
| 314 |
|