dwing吧 关注:5,349贴子:84,687
  • 2回复贴,共1

USI(Ultra Scaled Image) 比waifu2x快10倍以上的图像2倍放大算法

取消只看楼主收藏回复

自创的算法, 目前尚在实验中, 质量和性能仍有改进空间, 预览对比如下(左:原图, 中:USI, 右:waifu2x):


回复
1楼2016-03-21 14:42
    一些说明:
    USI类似waifu2x, 需要对已有图片做放大训练积累参数, 训练和放大的图片风格越接近越好, 目前也确实对2D卡通图片效果最佳.
    不过与waifu2x使用DNN算法不同, USI只使用统计算法, 性能要高得多, 但质量与waifu2x还有些距离, 不过还有改进的空间, 目前至少在2D卡通图片上明显超越了lanczos等常用算法.
    10倍的性能差异是跟waifu2x-caffe且使用GPU加速的情况下, 相比USI还没有加入SIMD,多线程,GPU等优化.


    回复
    2楼2016-03-21 14:57
      大致看了下waifu2x的算法, 确实运算量高的吓人, 如果不支持GPU而使用纯CPU运算是很不现实的.
      scale2x需要经过7层卷积:
      1=>32 (32次卷积)
      32=>32 (32x32次卷积)
      32=>64 (32x64次卷积)
      64=>64 (64x64次卷积)
      64=>128 (64x128次卷积)
      128=>128 (128x128次卷积)
      128=>1 (128次卷积)
      一共是31904次卷积, 每次卷积都要计算把图片每个像素跟3x3矩阵做点乘运算.
      也就是说需要图片像素数量*287136的乘法加法组合.


      收起回复
      13楼2016-03-24 14:29