首页器材频道观点 > 5DMarkIV全像素双核RAW技术分析

5DMarkIV全像素双核RAW技术分析

色影无忌
随便看一下吧
梁爽
2016-10-17

  佳能这次的EOS 5D Mark IV新技术不多,这个全像素双核RAW文件(Dual Pixel RAW简称DPRAW)算是个令人感兴趣的新鲜内容,发布前就引起了很多猜测,根据这个DPRAW的名字,我也做了猜测,结果证明我的猜测基本是准确的。

 

 

随便看一下吧


还有一种可能的用法,这个双像素RAW文件里如果是存储了所有的半像素,那么就含有足够的相位差信息,可以计算出画面里每个物体的距离。

照片里含有每个物体的距离信息,这个可以带来大量相关的后期功能。

比如说,DPP里可以提供一个插件,自动按焦平面的距离计算照片里其他物体的虚化,从而让小光圈也能后期处理得到大光圈的虚化效果。这个因为有准确的距离数据,效果要比现在那些后期软件好很多。

 

  在佳能各个区域的官方网站中,欧洲官网一直是最注重技术细节的,相比之下,美国和其它区域往往集中在使用特点上,对底层技术细节语焉不详。佳能欧洲官网上对DPRAW进行了相对详细一点的介绍,原文连接:http://www·canon-europe·com/cameras/eos-5d-mark-iv/dual-pixel-raw/

 

  这里根据这网页提供的信息,结合基本的传感器和光学原理,对几个主要问题进行一下分析。

 

原文引用如下:

What is Dual Pixel RAW?
Dual Pixel RAW is a Canon innovation utilising both photodiodes on the EOS 5D Mark IV’s 30.4 Megapixel Dual Pixel CMOS AF sensor.

How it works
The Dual Pixel sensor’s pixels have a dual photodiode construction. This sensor design means the sensor can receive an A and B signals from the subject and to detect any phase differences between the two signals, allowing them to attain focus as part of the Dual Pixel AF system. When capturing the image, the sensor obtains the picture info from the combined A and B image signals. This technology making both focusing and image shooting possible with the same sensor.

During Dual Pixel RAW shooting, a single RAW file saves two images into the file. One image consists of the A+B combined image data and the other only the A image data.. This means the Dual Pixel RAW files contains both the normal image and also any parallax information, which can be measured and subject distance information extrapolated. As Dual Pixel RAW images contain two images they are therefore double the file size of normal RAW images.

 

文章来源5D4全像素双核RAW功能的技术分析(资料来源:佳能欧洲官网)

 

  根据佳能欧洲官网这个信息,下面对几个技术问题进行一下分析:

 

1、EOS 5D Mark IV的全像素双核传感器是不是每个像素都有两个光电管,总数真的有6080万个光电管?

 

  回答:是明确的,确实是这样的。每个像素里面都有两个独立的光电管A和B,DPRAW是对这个传感器结构的一种创新应用。

 

 

2、那么为什么双核对焦只能覆盖80%的边长?

 

  这个道理很简单,了解相位差对焦原理的就会清楚,相位差对焦本质上是一种三角测距,基线越长测距结果越准确,因此在进行对焦时,最外围的区域无法获得足够长的基线,因此难以保证足够的精度。这个80%的限制,只是佳能为了保证必要的相位对焦精度,对双核对焦方式进行的一种人为限制。各厂家的所有相位对焦覆盖范围,都有类似的限制。这个限制与每个像素都有两个光电管的技术实现无关。

 

3、DPRAW是怎么工作的?

 

  与之前的猜测不同的是,在EOS 5D Mark IV打开DPRAW选项之后,RAW文件里并不是分别存储A、B这两个光电管单独的数据,而是存储了一个与正常曝光完全相同的合并后的RAW图像(相当于A+B),再加上一个单独的A光电管数据。参考上面原文加粗的蓝色内容。

 

4、这样的工作方式优点是什么?带来哪些影响?

 

这个工作方式完全避免了DPRAW文件,输出正常图像时可能的信噪比下降问题。

 

  简单来说,单独的A光电管和B光电管面积都只有整个像素的一半,因此它们各自接受光线的能力都比整个像素要差,它们各自输出的物理信号,进行数字化以后就带着固有的比较高的噪声。如果仅仅输出A和B两个独立的数据,那么每个数据的信噪比都比较差,在外面无论进行哪种处理都要受到影响。

 

  而正常的双核像素图像输出过程,是先在像素内部进行物理信号合并,然后再进行数字化,这样大大改善了输出数据的信噪比,可以达到与每个像素只包含单个光电管相同的信噪比效果。

 

  在过去的佳能双核像素传感器型号中,都是在拍摄前的对焦过程中使用双核读出模式,采集相位差数据用于对焦,然后在拍摄时,用合并读出方式,保证输出图像的信噪比。

 

  在之前进行的DPRAW功能猜测中,曾经认为佳能会分别输出A、B两个光电管的数据,从而忍受原始信号信噪比的下降,在外面的图像处理过程再想办法弥补,或者采用两次拍摄方式,按快门以后先输出A、B两个数据,然后清零再曝光一次,输出合并后的信号。很显然,这两种办法都有各自的缺点。

 

  佳能没有选择这两种方式,而是让DPRAW包含一个完全正常的合并后的RAW图像,从而保证了正常图像的信噪比完全没有损失,也不会因为两次曝光带来运动模糊问题。同时包含一个独立的A光电管数据,也足以在后续图像处理计算出B光电管数据,从而获得完整相位差信息。

 

  但是,采用这种方式,要求传感器像素结构必须进行调整,像素里必须增加一个额外的A光电管信号保持寄存器,这样才能保证输出的DPRAW数据中,合并的像素数据和A光电管数据,这两个是同条件下同时采集的,这样才可以在后期处理时,用两个数据相减,还原出B光电管数据。

 

  这意味着,EOS 5D Mark IV的像素结构是新的,其它老型号的双核像素传感器,如果没有这样的像素设计,仅仅通过修改固件实现DPRAW,是完全不可能的。(当然,这并不排除某些之前发布的双核像素传感器,可能已经采用了同样的像素设计,那么修改固件还是可以开放这个功能。)

 

5、为什么进行双核相关操作有可能会带来额外噪点?

 

  这个工作方式下,要获得B光电管的数据,必须在图像处理过程先进行(A+B)-A的计算,也就是用正常的那部分RAW数据,减去A光电管数据,才能获得B光电管数据。很显然,由于单独A光电管面积较小,信噪比低于整个像素合并后输出的正常RAW数据,这样的计算过程会降低相关部分图像的信噪比。当然具体影响程度要看进行了哪些具体的处理。

 

6、DPRAW进行图像处理的基础是什么?

 

  这个基础就是根据DPRAW文件里的数据,可以获得每个像素里两个独立的光电管A和B的数据,从而按照与双核相位对焦DPAF类似的算法,计算出图像中各个部分的距离信息,所有的图像调整功能,除了消除眩光,都是以这个距离信息为基础进行的。

 

 

下面是DPRAW目前提供的三个应用方式分析:

 

7、DPRAW消除眩光鬼影的原理是什么?

 

  眩光鬼影主要是镜头内不同镜片互相反射形成的,一般都出现在画面的边缘,光线有很大的入射角度,在这个区域,每个像素的两个光电管获得的信息有很大差异,通过两个光电管数据的对比分析,就可以很容易消除眩光影响。因此,这个处理效果可以说是最有保证的。

 

8、DPRAW改变焦外虚化的原理是什么?

 

  DPRAW可以计算出画面里每个物体的距离,因此可以根据这个距离信息重新进行虚化处理,可以指定任何一个原本处于景深范围的物体,这个物体在画面里原本是清晰的,现在以它与焦平面的距离为基础,可以把相关距离范围的物体,根据相对距离全部重新计算虚化效果。

 

 

  把原来清晰的部分,变成虚化的,而且可以根据距离保证虚化的自然效果,我感觉这个可以说是DPRAW的一个主要应用了。基本上,可以让小光圈镜头模拟出相当接近大光圈虚化效果。

 

9、DPRAW进行焦点清晰度微调的原理是什么?有什么限制?

 

  镜头的光学原理,理论上一个光点如果处于焦平面上,并且通过镜头准确聚焦,那么就会在像平面也就是传感器上形成一个光点,这是最清晰的理想效果。而没有准确聚焦的光点,一般认为会形成一个模糊圈。但是这个模糊圈微观并不是均匀的,而是有结构的,也就是中心部分比较强,而往外围会按一定规律减弱。

 

  描述这个光点成像物理过程的数学工具称为PSF(Point Spread Function点扩散函数),下面就是一个简单的例子,可以看到一个虚焦的光点成像,其形成的模糊圈从内到外按一定的数学规律减弱。

 

 

  DPRAW提供的距离信息,结合镜头数据,理论上可以精确的计算出这个光点的PSF,从而获得从中心到外围的减弱程度,那么就可以进行反向补偿,也就是在外围点的RAW数据里,减掉按中心点算出来的外围点数据,这样就可以消除这个点外围的“模糊圈”,让这个点的成像重新变成一个清晰的点。

 

  这个过程在理论上是精确的,但是在实际使用中效果非常复杂,受到各种限制,因为很显然,如何从复杂的图像里,分析某个光点真正的成像中心点,并且排除其它光点的影响,就是个很复杂的问题。简单来说,虚焦程度越小,调整的精确度越大,因为这时候某个光点的成像中心点比较容易找,这个成像中心点受到其它光点的信息干扰也比较容易分离,从而获得较好的效果。

 

  也就是说,用这个功能,想从完全虚焦的一片焦外背景里还原出清晰的图像,是不可能的。

 

  这就是为什么佳能要给出使用提示,并且使用了“Microadjustment”(微调整)这样的词汇,这个调整的适用范围还是有很大限制的,基本上也就是让已经在景深范围内的物体,成像稍微更清晰一些。 

RAW(77)
佳能(7751)
全像素双核(4)
技术(110)
猜你喜欢