Google的图像压缩黑科技：RAISR

nkc3g4

               Google的图像压缩黑科技：RAISR


        在社交网络上，每天都有难以计数的图片被人们分享、存储。但有一个现实的问题是，大量的照片由于网络限制被人为压缩降低了画质。
而Apple在2010年的iPhone 4S推出了“视网膜”的概念后，各大手机商也推出了2K的手机，显示器也逐步走向了4K。但是高清显示一直缺乏内容，成了该行业发展的痛点。因为超分辨率技术受成本、硬件限制，未能广为普及。将低分辨率图片转化为高清版本，并可在多种设备上查看和分享，成了市场巨大的需求。
        如今，Google为了解决这一痛点，发布了黑科技，让人们看到了希望。

                       Google发布RAISR技术

        不久前，Google刚刚发布了一种名为RAISR（Rapid and Accurate Super Image Resolution，意为“快速、精确的超级图像分辨率技术”）的图像压缩技术，旨在保存宝贵的数据，而不牺牲照片质量；并在带宽受限的移动设备上提供清晰锐利的图像。
         Google声称，该技术可以降低高达75％的带宽，RAISR分析同一图像的低分辨率和高分辨率版本，了解到高分辨率版本出众的原因，然后在低分辨率版本模拟出来。实际上就是使用机器学习创建一个类似Instagram的过滤器，欺骗你的眼睛，让你相信低分辨率与高分辨率图像是一致的。

                         RAISR的现状与未来

登陆Google+

       早在2016年11月，Google已经将RAISR技术研发完成，希望可以在带宽有限的移动端上展现高清图片。
       上周，即2017年1月中，这项技术已经应用于大多数Google+ 的Android版。Google产品经理John Nack声称，RAISR在Google+上每周处理超过10亿张图片，将这些用户的总带宽节省了约三分之一。
        John Nack表示，当使用Android移动设备的用户观看Google+的图片时，Google+会发送一张仅为原图片大小的四分之一的版本，再通过RAISR算法来修复细节。最高时，RAISR可以为用户节省了大约75%的带宽。（图1）

图1

iOS端早有集成

       早在2016年12月，Google在自家的iOS应用Motion Stills就已经集成了RAISR技术，这其实才是RAISR的首次亮相。彼时，RAISR来改善视频的分辨率，可以自动锐化用户导出的每段视频。
        不过，目前尚不清楚具体何时会在iOS移动设备上为用户访问Google+时提供RAISR技术。Nack表示，Google将在未来几周内普及到iOS领域上。

下一个应用会是？

       如果用户不想仅仅在Google+中使用RAISR，还得等一段时间。Google计划在未来几个月内将RAISR逐步部署到更多的应用，比如Google Photos。

RAISR实现原理：机器学习、无混叠效应

       Google的这项黑技术利用了机器学习，它的效果能达到甚至超过现在的超分辨率解决方案，同时速度提升10~100倍，还能够在普通的移动设备上运行。Google还声称，他们的技术能够避免在重建低分辨率图像中产生混叠效应（aliasing artifacts）。
        在“填充”图片时，传统的升采样技术是通过周围已有的像素值计算需要添加的新像素值。这些方法速度很快，但它们并不是在放大图像中显示生动的细节的最好方法。如图片2，左图是原始图片，右图是经升采样处理后的图片，看起来很模糊，远不能称之为画质提升。

图2

         RAISR与它们不同之处在于，它采用了机器学习，用一对低品质和高分辨率图片进行训练的系统，因此它知道如何重建应用于低分辨率图片中的每个像素的过滤器，生成媲美原始图片的细节。RAISR选择最佳方式来增强低分辨率照片中的每个“像素邻域”，以创建更多的分辨率。
          换句话说，RAISR使用它从其他照片中学到的东西，以便有根据地猜测每个丢失像素区域中的高分辨率版本应该是什么样子。
           Google表示：“当这些过滤器应用于较低分辨率的图像时，它们会重现出相当于原始分辨率的细节，这大幅优于现行、双三（Bicubic）、兰索斯（Lancos）的解析方式。”
          左图是原始图片，右图是经RAISR放大后的效果。（图片3）

图3

    图片4：RAISR与Bicubic比较的一组示例：

图4

        此外，RAISR可以消除照片中的混叠效应，如莫尔条纹（Moire patterns）和锯齿，恢复照片的原始结构。
        如图5，左边是低分辨率的原始图片，3和5都有很明显的莫尔条纹，这就是混叠效应；右图是用RAISR算法恢复的图像。

图5

         Google声称，这种技术在未来，除了放大手机上的图片，还可以在低分辨率和超高清捕捉、存储、传输图像，使用更少的移动网络数据和存储空间，而且不会产生肉眼能观察到的画质降低。
          （来源： http://www.infoq.com/cn/news/2017/01/Google-RAISR）

Hashimoto

这个和PhotoZoom Pro的功能貌似一样？就是之前论坛那个老LOGO没高清图的时候我用PhotoZoom Pro硬是利用低画质版本作出了高清图