dwing吧 关注:5,322贴子:84,542

USI(Ultra Scaled Image) 比waifu2x快10倍以上的图像2倍放大算法

只看楼主收藏回复

自创的算法, 目前尚在实验中, 质量和性能仍有改进空间, 预览对比如下(左:原图, 中:USI, 右:waifu2x):


回复
1楼2016-03-21 14:42
    一些说明:
    USI类似waifu2x, 需要对已有图片做放大训练积累参数, 训练和放大的图片风格越接近越好, 目前也确实对2D卡通图片效果最佳.
    不过与waifu2x使用DNN算法不同, USI只使用统计算法, 性能要高得多, 但质量与waifu2x还有些距离, 不过还有改进的空间, 目前至少在2D卡通图片上明显超越了lanczos等常用算法.
    10倍的性能差异是跟waifu2x-caffe且使用GPU加速的情况下, 相比USI还没有加入SIMD,多线程,GPU等优化.


    回复
    2楼2016-03-21 14:57
      我是外行,进来看看热闹了。
      希望能早日成熟到可以用于视频处理。
      呵呵!


      回复
      3楼2016-03-21 16:07
        镇楼图用肉眼没能发现与waifu2x有什么区别


        收起回复
        来自Android客户端4楼2016-03-21 16:14
          确实不错,simd和多核优化一下,即使不用gpu都能到实时了。就效果和速度而言,和neddi比如何


          回复
          5楼2016-03-21 16:59
            似乎可以加入madvr(如果速度真的这么可观的话)


            收起回复
            7楼2016-03-21 20:01
              手机上看不清楚,但是手臂上的数字好像没有waifu锐利。


              回复
              来自Android客户端8楼2016-03-22 02:13
                不知道和nnedi相比如何


                收起回复
                来自Android客户端10楼2016-03-22 08:58
                  虽然看不懂原理但是效果摆在这里,希望楼主早日成功,造福社会


                  回复
                  来自Android客户端12楼2016-03-22 17:23
                    大致看了下waifu2x的算法, 确实运算量高的吓人, 如果不支持GPU而使用纯CPU运算是很不现实的.
                    scale2x需要经过7层卷积:
                    1=>32 (32次卷积)
                    32=>32 (32x32次卷积)
                    32=>64 (32x64次卷积)
                    64=>64 (64x64次卷积)
                    64=>128 (64x128次卷积)
                    128=>128 (128x128次卷积)
                    128=>1 (128次卷积)
                    一共是31904次卷积, 每次卷积都要计算把图片每个像素跟3x3矩阵做点乘运算.
                    也就是说需要图片像素数量*287136的乘法加法组合.


                    收起回复
                    13楼2016-03-24 14:29
                      从来不玩百度,注册了一个帐号进来为了膜拜楼主。


                      回复
                      14楼2016-03-25 16:00
                        希望有离线版,并且支持a卡和n卡


                        回复
                        15楼2016-04-10 17:41
                          以前我看到过一个对像素放大的算法,Depixelizing算法。
                          然后就没有然后了。
                          要是这种算法能用在模拟器上,功德无量啊。


                          回复
                          16楼2016-04-11 13:48
                            膜拜!
                            D大准备用OpenCL支持A卡吗?


                            回复
                            17楼2016-06-19 16:18
                              好厉害的样子
                              我等外行也只能是看看了


                              回复
                              来自Android客户端18楼2016-06-19 17:45