|
@@ -0,0 +1,67 @@
|
|
|
+# 动漫视频模型比较
|
|
|
+
|
|
|
+[English](anime_comparisons.md) **|** [简体中文](anime_comparisons_CN.md)
|
|
|
+
|
|
|
+## 更新
|
|
|
+
|
|
|
+- 2022/04/24: 发布 **AnimeVideo-v3**. 主要做了以下更新:
|
|
|
+ - **更自然**
|
|
|
+ - **更少瑕疵**
|
|
|
+ - **颜色保持得更好**
|
|
|
+ - **更好的纹理恢复**
|
|
|
+ - **虚化背景处理**
|
|
|
+
|
|
|
+## 比较
|
|
|
+
|
|
|
+我们将 RealESRGAN-AnimeVideo-v3 与以下方法进行了比较。我们的 RealESRGAN-AnimeVideo-v3 可以以更快的推理速度获得更好的结果。
|
|
|
+
|
|
|
+- [waifu2x](https://github.com/nihui/waifu2x-ncnn-vulkan). 超参数: `tile=0`, `noiselevel=2`
|
|
|
+- [Real-CUGAN](https://github.com/bilibili/ailab/tree/main/Real-CUGAN): 我们使用了[20220227](https://github.com/bilibili/ailab/releases/tag/Real-CUGAN-add-faster-low-memory-mode)版本, 超参: `cache_mode=0`, `tile=0`, `alpha=1`.
|
|
|
+- 我们的 RealESRGAN-AnimeVideo-v3
|
|
|
+
|
|
|
+## 结果
|
|
|
+
|
|
|
+您可能需要**放大**以比较详细信息, 或者**单击图像**以查看完整尺寸.
|
|
|
+
|
|
|
+**更自然的结果,更好的虚化背景恢复**
|
|
|
+
|
|
|
+| 输入 | waifu2x | Real-CUGAN | RealESRGAN<br>AnimeVideo-v3 |
|
|
|
+| :---: | :---: | :---: | :---: |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+
|
|
|
+**更少瑕疵,更好的细节纹理**
|
|
|
+
|
|
|
+| 输入 | waifu2x | Real-CUGAN | RealESRGAN<br>AnimeVideo-v3 |
|
|
|
+| :---: | :---: | :---: | :---: |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+
|
|
|
+**其他更好的结果**
|
|
|
+
|
|
|
+| 输入 | waifu2x | Real-CUGAN | RealESRGAN<br>AnimeVideo-v3 |
|
|
|
+| :---: | :---: | :---: | :---: |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+|  |   |   |   |
|
|
|
+| |  |  |  |
|
|
|
+| |  |  |  |
|
|
|
+
|
|
|
+## 推理速度比较
|
|
|
+
|
|
|
+### PyTorch
|
|
|
+
|
|
|
+请注意,我们只报告了**模型推理**的时间, 而忽略了读写硬盘的时间.
|
|
|
+
|
|
|
+| GPU | 输入尺寸 | waifu2x | Real-CUGAN | RealESRGAN-AnimeVideo-v3
|
|
|
+| :---: | :---: | :---: | :---: | :---: |
|
|
|
+| V100 | 1921 x 1080 | - | 3.4 fps | **10.0** fps |
|
|
|
+| V100 | 1280 x 720 | - | 7.2 fps | **22.6** fps |
|
|
|
+| V100 | 640 x 480 | - | 24.4 fps | **65.9** fps |
|
|
|
+
|
|
|
+### ncnn
|
|
|
+
|
|
|
+- [ ] TODO
|