[轉載] 相機越貴畫質越好？聊聊CMOS設計

彷佛在不少人心目中，個位數機身就表明了品牌最強成像素質，這或許有「人不識貨錢識貨」的道理在做祟，但事實上如佳能1DX2或尼康D5，又或是索尼A9這種旗艦機真的就必定能表明本家的畫質巔峯麼？這一切都得從相機CMOS提及……

　　首先要作的是溯源，也即當下的CMOS主要都有哪些供應商，全世界的龍頭老大是索尼，緊接着是三星，而後還有豪威科技OmniVision（已被中資公司收購）、安森美ON Semi、佳能、東芝（東芝半導體已被索尼收購）、松下、海力士SK Hynix、Aptina、意法半導體，以及國產的格科、思比科、長光辰芯、比亞迪等等，其實你們不難發現這裏面正兒八經作相機CMOS的其實沒有幾家，很多都在專一汽車、醫療、安防、工業以及手機領域，最典型的就是三星了，雖然本身的相機作得沒啥動靜了，但在手機、汽車等領域仍是風生水起。

　　說到這兒可能你已經察覺到了一絲古怪，這些CMOS巨頭裏，咱們找不到熟悉的尼康，也沒有富士、奧林巴斯、適馬、甚至賓得、徠卡的大名，緣由在於要麼它們被歸類於「其餘」這個市佔率不到5%的的門類裏，好比適馬，要麼就是它們壓根本身就不製造CMOS，主要靠代工或買成品，其中最知名的可能就是尼康和索尼的PY關係了。

　　可能在大多數人的印象中，尼康單反所用的就是索尼CMOS，但事實可能會顛覆你的認知——除了索尼以外，東芝、瑞薩也都爲尼康提供過傳感器成品或代工，佳能也並非全部相機都用自家CMOS，好比G7X就是用的索尼IMX183CQJ……尼康其實一直也有在作傳感器設計，好比2003年的D2H採用的就是尼康自家研發的LBCAST傳感器（相似於CMOS，但把金氧半場效晶體管MOSFET換成了綜合型電場效果晶體管JFET，在當時可實現高速+低功耗，定位爲體育機）；D700和D3的CMOS也是尼康自研的NC83138L CMOS、D3s則是NC81361A CMOS……不過研發歸研發，製造就不必定是尼康本身作的了，主要仍是靠合做代工。

　　在尼康的代工機型中比較典型的案例的是D4，個位數機身表明的是各家的速度旗艦，這個趨勢從D四、1DX時代正式開始，告別了D3s/D3X或1D/1DS一快一高的佈局方式。而數碼相機速度的本源就是CMOS讀取，CMOS做爲半導體，刷速度聽起來不就是CPU/GPU那套高頻+製程一波流的事兒麼？有英特爾、蘋果、NVIDIA在前面開路還怕啥？但問題在於CMOS是模擬+數字電路的組合體，模擬電路對製程的要求很是低，常年被嘲笑的佳能祖傳500nm其實都綽綽有餘了，但無奈數字電路倒是妥妥的越快越好，而這也是實現高速的最關鍵前提，這個組合體沒有辦法直接沿用純數字電路的製程工藝，因此還真不是直接塞給臺積電、三星之類的純數字電路代工廠就能搞定。

　　在D4發佈那時候，也就是6年多之前的2012年，雖然英特爾都已經衝到了32nm、臺積電殺到了28nm，但索尼那時候也不過180nm，佳能天然是停留在500nm，這也就致使做爲數字電路之一的模數轉換器ADC，佳能只能把它和後端打包單獨作在片後，索尼的工藝雖然能夠作內置ADC，但性能實在是被製程拖了後腿，連拍速度達不到體育機的標準，所以，尼康D4和後來的D4s爲了高速，CMOS就找了瑞薩代工，作片外ADC，甚至索尼本身的視頻機A7S都只能作片外ADC來解決速度的問題，進而實現4K內錄。

　　其實這個節點也是頗爲有趣的，由於尋找解決速度問題的出路，索尼是各大品牌裏最積極的，第一步是背照式，也就是Exmor R，它的基本概念是把數字電路鋪到了模擬電路下方，由於數字電路要麼靠規模要麼靠製程，背照式把它移動到後面就能夠放心大膽地堆規模，而不會影響到上方模擬電路——也就是光電二極管效率。下圖應該演示得很明顯了，灰色的Light Sensitive Diodes就是光電二極管，即模擬電路：

　　

　　這裏同時也能體現出索尼精明的一面，背照式首先出如今了索尼自家的卡片機上，這是由於小畫幅良率高、成本低，所以很適合用來作CMOS的新設計實驗。2012年還有卡片機這個端口，佳能還算能夠跟進，但後來手機吃掉了卡片機市場，索尼小畫幅成功轉移到手機端，而佳能在這方面就幾乎被砍乾淨了，所以佳能的設計思路一直停留在猛堆高端，而後砍規格作主流作低端，造成了：技術研發成本高；產品定位等級深嚴的調性，但好處是如下犯上這種事情比起尼康索尼要少很是多。

　　不過背照式的優點其實也就是速度這一點而已，高開口率的高感等優點，隨着無縫微透鏡技術的全面普及也不復存在，並且新制程工藝的前照式CMOS也並不會在速度上輸給背照式，最好的例子就是A6500，它能夠作到6K分辨率2000萬像素超採30fps 4K，因此沒有用背照式並不能表明CMOS讀取性能低，別忘了時代（製程）的差距。

　　既然製程這麼重要，那爲何不猛刷？直接剛上最新工藝啊！前面其實提到了，對於成像CMOS的模擬電路來講，並不須要高製程，提製程對它來講屬於「只增成本，不增效益」的事兒。因此聰明的傳感器工程師們想出了一個新招：模擬、數字二合一不方便刷製程，那把它們分開不就歐了？沒錯，這就是堆棧式CMOS設計，在索尼這兒叫Exmor RS。

　　

　　具體結構設計就很少說了，上面這張圖也算是解析得很明白了。堆棧式的好處就是模擬電路（即上圖[1]）能夠繼續祖傳，數字電路（即上圖[2]）就交給臺積電，直接能夠用上與當代NVIDIA GPU相同的工藝製造，速度直接昇天，快到機內處理器都來不及處理，只能再堆一塊DRAM（即上圖[3]）來緩存數據。第一代堆棧式CMOS誕生於2014年，使用者蘋果iPhone 6，製造者索尼……沒錯，熟悉的大法，熟悉的小尺寸CMOS起家，讓iPhone 6成爲第一臺有240fps 720P升格慢動做視頻功能的手機。

　　很快在2015年，堆棧式1英寸CMOS就出如今索尼RX100M4身上，而後在2017年，堆棧式CMOS跳過APS-C，直接現身於全畫幅速度旗艦索尼A9當中，全電子快門帶對焦20fps連拍、每秒60次曝光/對焦檢測，靜音、快速並且還省電（FZ100電池實際拍攝超1000張續航基本沒問題，相對而言，佳能1DX2雖然搞定了片上ADC的問題，但功耗與發熱爆表，不只續航掉得媽都不認識，甚至還用了一根熱管輔助散熱……）。另外一大CMOS巨頭三星也在S9系列手機中引入了堆棧式設計，因此才能以960fps拍攝0.2秒，這也足足有192張了！

　　

　　

　　換句話說，在堆棧式CMOS引入的高速時代，單反機械結構已經成爲限制（光是反光鏡和機械幕簾設計要精準、穩定、長效達到20fps連拍就已經很是有挑戰，複雜程度參考上圖），據可靠消息，A9這塊CMOS甚至並無發揮所有速度，只是由於它若是再高就可能影響到高端4K電影機，這也同時爲你們提了個醒，電影機的CMOS性能也很快就會起飛……固然，電子快門的同步速度仍是不如機械快門精確，A9也只能作到1/160秒，因此纔有機械後簾的存在，不過按照當下的發展速度來看，突破甚至普及也只是時間問題，不存在明顯的結構限制。

　　那麼咱們回到一開始的話題：越是高端高價的機身，畫質就必定最好麼？其實講了這麼些CMOS設計的概念無非就是在告訴你們，越是先進的CMOS，研究的方向就越沒有單純朝向「畫質」，這是由於畫質這個東西實際上是有上限的，從硬件角度來看，咱們已經愈來愈靠近這個極限，這是由於當下的傳感器設計大基礎是光子電子轉換，有單光子探測器就避不開天然存在的散粒噪聲。即使CMOS讀取噪聲爲0，但光電二極管的阱容是有限的，阱容有限意味着進入二極管的光子量有限，以一塊最大阱容61000的CMOS爲例（佳能35MMFHDXS，全畫幅，19um超大畫素，總像素220萬喲~~），即使它的讀取/傳輸噪聲爲0，信噪比上限也只有不到48dB，即使把阱容衝到100000，仍是假設沒有讀取/傳輸等底噪，信噪比也只有50dB，這是老天爺給的限制，不改變最基礎的光電結構就繞不開。

　　

　　因此索尼爲何要刷速度，理由已經很清晰了吧。不過既然前面提到了「從硬件角度看，咱們已經愈來愈靠近極限」，也就是說其實仍是能夠經過一些拍攝手法，來實現信噪比的繼續增益。實現方式的原理很簡單，就是PS或LR裏的多張均值堆棧合成，拍攝N張堆棧升Log2（N）倍，好比拍1024張，信噪比提高10倍，即+10dB。具體拍攝手法以下：好比光圈F8，1/10秒正常曝光的環境，想出10秒長曝就只能上ND，這時候能夠不改變光圈，不用ND，直接以1/1000秒、10fps RAW連拍10秒，得到100張RAW照片，再到PS軟件中統一設置白平衡、拉陰影和高光，而後進行均值腳本的堆棧處理，在這種狀況下，信噪比相對單張能夠直接提高6.6dB，同時不存在ND致使的偏色問題，對燈泡頭友好度上升N個檔次，除此以外暗部的隨機噪聲也能獲得有效抑制，動態範圍天然也能順帶提高。

　　其實這也反映出：基準信噪比不足致使的先天差距是很難彌補的。好比A款CMOS信噪比比B款先天就低3dB，這意味着B的單張就須要A堆棧16張才能補上來，B拍攝32張A就要拍多達512張才能實現，並且這仍是在沒有考慮本底噪聲色彩偏移的狀況下，因此堆棧大法雖然好用，但也創建在自己信噪比就足夠出色的前提下。並且這種方法主要是對風光或靜態攝影管用，對後期處理的PC主機性能要求也很高，尤爲是吃內存，因此侷限性不容忽視。

　　

　　提高畫質還有一個重要的方向就是加像素，並且隨着前端集成電路性能提高，高速、高像素密度、無損編碼的兼容已經再也不是問題，典型案例就是索尼A7R3：4200萬像素、10fps、連拍也有14bit RAW。之因此只作5K超採4K我認爲更多仍是產品間定位差的問題，並非這塊CMOS速度不夠。

　　不少人對加像素後的高感表示擔心，但事實上高像素在觀看照片時，是能夠經過縮小照片尺寸來實現信噪比增益的，好比從4200萬縮到2100萬來觀看，信噪比提高有：

　　在無間隙微透鏡技術加持下，2N像素縮圖到N像素時開口率再也不是問題，光電轉換的量子效率能夠保持在統一水準。有不少朋友提到過「單像素信噪比」，但CMOS是整片曝光，只討論單個像素沒有意義，事實上在出圖分辨率一致的前提下，理想傳感器自己就能夠忽略原始像素的概念。這個能夠經過數學手段證實，好比相同尺寸的CMOS，A相機有100個像素，而B相機是1000個像素。當輸入信號爲10000時，總噪聲爲10000開方=100，A相機的單個像素信噪比爲100/10=10，B相機的信噪比爲10/3.162=3.162，此時均爲100%放大，B的輸出分辨率更高（畫面更大）。

　　但此時若是B相機縮圖到與A相機的100像素，單個像素的信號從10增長到100，而單個像素的噪聲則有如下算式：

　　

　　10個3.16的平方相加再開方，不難算出這就是100開方=10，單個像素信噪比回到100/10=10，即高像素縮圖到低像素後，信噪比能夠回到應有水準，同時也證實了一點，在畫幅不變的狀況下，高分辨率和高信噪比這兩個極端只能取其一。之前還會受像素之間的間隔的影響，但如今都是無縫微透鏡，這個問題已經獲得了很好的解決，並且高像素縮圖後還能獲取更高的空間頻率響應，換句話說就是銳度更出色，你們能夠自行下載A7S與A7R的RAW格式照片同等縮放對比，我其實發過好幾回了，就再也不贅述。

　　

　　除此以外小胖也不止一次強調過，對噪點的視覺感官受制於照片展現尺寸和觀看距離，由於人眼的敏感頻率範圍有限，而高頻部分纔是成像缺陷的「重災區」（由於空間頻率越高，成像系統響應率越低），縮圖或觀看距離增長會使高頻區域的頻率進一步增高，這時候缺點雖然還在，但頻率超過人眼辨識範圍，咱們的大腦就會直接選擇忽略，造成「畫質變好」的感受。

　　在縮圖後具有與低像素相同的信噪比的大前提下，加像素還能提升CMOS奈奎斯特頻率的上限，從而減小摩爾紋等混疊現象的發生概率，並且即使是一些分辨率很低的鏡頭，好比國產的那一堆超大光圈標頭（50mm F0.9五、35mm F0.95之類的），高像素也依然能夠帶來高解析力的優點，由於咱們拍攝的三維空間裏包含了無窮盡的高頻信號，CMOS奈奎斯特上限越高，還原得就越多。至於極限衍射光圈的問題，在F22下A7S2的空間頻率響應也仍是落後於A7R2至少三成，高像素採樣頻率高的優點在極限小光圈下也並不會抹滅。

　　

　　更況且當下顯示設備也都是往高分辨率發展，相機往高分辨率走也是大勢所趨。目前的低分辨率相機幾乎都是視頻定位，之因此作低分辨率主要想盡可能多利用CMOS面積，同時減小採樣倍率下降計算量，用以增長視頻碼率和色深等關鍵視頻規格。但即使如此，當下索尼以6K超採30fps視頻已經沒有問題，或在今年發佈的A7S3突破2000萬像素也並不會是一件讓人驚訝的事情，畢竟決定速度的技術基礎已經打好，更高採樣率的高品質視頻天然會呼之欲出。

　　因此，對於當代數碼相機傳感器而言，其實光談絕對的畫質已經再也不實用，更多主要仍是「按需定製」。這裏能夠簡單舉幾個例子，好比尼康D5，它沒有使用索尼A9的同底CMOS，一來由於這塊CMOS的進發方向是數字化的高速，在單反上受制於機械結構，用武之地不大（總不至於一直擡起反光板來拍吧，那也太尷尬了），花出去的成本換不回已在無反獲得印證的性能，還容易被diss，再加上索尼也不必定願意把這種高端貨賣給尼康。因此D5用實際上是東芝的CMOS（索尼：嘿嘿，其實這也是個人！），並且爲求高速，ADC依然是外置，除此以外傳言它的阱容調整偏低，方便作高倍程控電壓增益，原生ISO達到800的水準（事實上原生ISO都是由阱容以及增益倍率來決定的，增益能夠有1x、4x、16x，也能夠有0.5x等，但低倍率的問題是電荷轉移時的傳輸噪聲偏大）。

　　D5的高倍電壓增益使得一級模擬放大以前的前端傳輸噪聲相應下降，而前端噪聲會隨着ISO增益倍率的增大而增大——輸出信號=（輸入信號+前端噪聲）X放大器增益倍率+後端噪聲。不難看出括號中的數值越小，高ISO時整體噪聲會下降，從而提高高感性能。但問題也很明顯，在低放大器增益倍率，也就是低感光度時，ADC外置引入的大量後端本底噪聲，讓動態範圍這個尼康長期引覺得傲的規格在D5身上被佳能1DX2和索尼A9揍到懷疑人生。但這也正好體現了咱們的主題：專機專用，定製設計。

　　

　　與之相似的設計還有尼康天文專用機D810A，砍掉阱容以實現高感成像素質，畢竟星空甚至深空類攝影上萬的ISO也並不算少見，在這種感光度下的控噪和動態範圍纔是它的重點。D5做爲專爲奧運會等大型活動而生的速度機，高靈敏度下的成像素質天然也是它的核心，因此它們的CMOS都是專機專用，特應強化的類型。

　　既然有砍阱容求高感畫質的，天然也會有加阱容加強低感動態範圍的，由於滿阱容量/本底噪聲也是動態範圍的定義方式之一，在本地噪聲不變的狀況下，增一檔阱容就意味着增一檔動態範圍。而採用這種設計的是尼康D810——加大阱容實現原生ISO 64，因此它的動態範圍達到可與的44X33中畫幅（原生ISO 100）一戰的水平。但代價就是高感動態範圍驟降，相同縮放尺寸，ISO 1600之後甚至被祖傳5D3追上甚至反超：

　　

　　不過既然是不一樣阱容致使了兩種取向，想要一把抓，當代傳感器設計就又引入了雙增益的設計，你猜是誰先作出來？沒錯仍是索尼……基本思路就是設計一個開關，在必定ISO以前使用高阱容模式以實現高低感光度的高動態範圍，而當ISO設置到必定數值以後，下降阱容，下降前端噪聲，實現高感素質提高。如今使用這項技術的機身有很多，好比索尼A7R3（可參考下圖黃顏色線，在ISO 800時有一個明顯的反折）、尼康D850、松下GH5S……雖然D850沒有說是誰作的，但又是背照又是雙增益，其實已經提示得足夠明顯了……

　　

　　因此，不一樣定位的CMOS，就有不一樣的擅長領域，這世上不存在信噪比極高同時出圖分辨率極高的CMOS，想要實現這個目的只能靠拍攝手法，好比有手有腳靠本身的堆棧，好比抖像素……當下求極限高速的CMOS設計已經邁入數字電路時代，單反結構成爲限制，無反正在往高速/低功耗這個傳統半導體大方向搭着順風車高速邁進，具體會有多少驚喜，就看今年佳能尼康全畫幅無反的表現了。