动漫视频模型比较

English | 简体中文

更新

• 2022/04/24: 发布 AnimeVideo-v3. 主要做了以下更新：
  • 更自然
  • 更少瑕疵
  • 颜色保持得更好
  • 更好的纹理恢复
  • 虚化背景处理

比较

我们将 RealESRGAN-AnimeVideo-v3 与以下方法进行了比较。我们的 RealESRGAN-AnimeVideo-v3 可以以更快的推理速度获得更好的结果。

• waifu2x. 超参数: tile=0, noiselevel=2
• Real-CUGAN: 我们使用了20220227版本, 超参: cache_mode=0, tile=0, alpha=1.
• 我们的 RealESRGAN-AnimeVideo-v3

结果

您可能需要放大以比较详细信息, 或者单击图像以查看完整尺寸。 请注意下面表格的图片是从原图里裁剪patch并且resize后的结果，您可以从 Google Drive 里下载原始的输入和输出。

更自然的结果，更好的虚化背景恢复

| 输入 | waifu2x | Real-CUGAN | RealESRGAN AnimeVideo-v3 | | :---: | :---: | :---: | :---: | | | | | | | | | | | | | | | |

更少瑕疵，更好的细节纹理

| 输入 | waifu2x | Real-CUGAN | RealESRGAN AnimeVideo-v3 | | :---: | :---: | :---: | :---: | | | | | | | | | | | | | | | | | | | | |

其他更好的结果

| 输入 | waifu2x | Real-CUGAN | RealESRGAN AnimeVideo-v3 | | :---: | :---: | :---: | :---: | | | | | | | | | | | | | | | | | | | | | | | | | |

推理速度比较

PyTorch

请注意，我们只报告了模型推理的时间, 而忽略了读写硬盘的时间.

GPU	输入尺寸	waifu2x	Real-CUGAN	RealESRGAN-AnimeVideo-v3
V100	1921 x 1080	-	3.4 fps	10.0 fps
V100	1280 x 720	-	7.2 fps	22.6 fps
V100	640 x 480	-	24.4 fps	65.9 fps

ncnn

• TODO