拜爾濾色鏡

<image>

<image>

拜爾濾色鏡（Bayer filter）或可稱做拜爾濾鏡、拜爾濾色器、拜爾濾色片、貝爾濾鏡、貝爾濾色器，但貝爾為錯誤音譯。是一種將RGB濾色器排列在光傳感元件方格之上所形成的馬賽克彩色濾色陣列。數位相機、錄影器、掃描器等使用的單晶片數位感光元件大多數用這種特定排列的濾色陣列來製作彩色影像。這種濾色器的排列有50%是綠色，25%是紅色，另外25%是藍色，因此也稱做RGBG，GRGB，或者RGGB。

拜爾濾色鏡以發明者伊士曼柯達公司的布萊斯·拜爾命名。拜爾也以有序抖動法中使用的遞歸定義矩陣而聞名於世。

可以替代拜爾濾色鏡感光元件的方案包括對其顏色和排列的改良，還有其他完全不同的技術，如色彩共位取樣、Foveon X3感光元件、分色鏡、透明繞射式濾波矩陣等。

## 解釋

<image>

布萊斯·拜爾在1976年的專利（美國專利編號3,971,065）中將綠色光傳感器稱作光敏偵測元件，而紅、藍色則稱為色敏偵測元件。他使用兩倍於紅色或藍色的綠色元件來模仿人眼的生理性質。人類視網膜白天同時使用了M與L視錐細胞來感光，對綠光最敏感。這些元件稱作感應元件、像素感應器、感應單元格（sensel）或簡單像素等。被它們感應偵測到取樣數值後，使用插值（Interpolation）形成影像像素。拜爾申請專利時也提議使用另一種相對顏色的集合，即印刷四分色模式（CMY）組合。後者在當時並不實用，因為缺少所需的染色，不過一些新款的數位相機已有使用。CMY染色最大的好處是有更佳的光線吸收特性，也就是說，量子效率較高。

拜爾濾色鏡相機的原始圖檔稱作拜爾圖像影像。因為每個像素只過濾並記錄RGB三種顏色的一種，這些從單個像素獲取的資訊並不能完整表現紅、綠、藍各色的組成數值。為了得到全色彩影像，可用不同的去馬賽克演演算法來插值得到每個像素的紅、綠、藍色的組成數值。這些演算法利用週圍相同顏色的像素去估計一個特定像素的組成數值。

演演算法運算量需求不同，最後成像的品質也有差異。數位相機自身能產生JPEG或是TIFF影像，不用數位相機而直接使用感應元件也能進行此操作。

## 去馬賽克

去馬賽克有不同的實現方法。一些簡單的方式是對相鄰同色的像素數值進行內插。舉例來說，當晶片曝光得到一張影像後，每個像素就可以讀取出來。綠色過濾器的像素精確測量了綠色成分，而該像素紅色和藍色的成分則是從鄰區取得。一個綠色像素的紅色數值可由相鄰兩個紅色像素內插計算出來；同樣的，內插相鄰兩個藍色像素也能計算出藍色數值。

這種簡單的方法在顏色恆定或均勻變化時表現良好，但在顏色和亮度突變處卻會產生雜訊，比如滲色（Color bleeding），在銳利的邊角處特別明顯。因此，其它去馬賽克的方法嘗試辨認高對比的邊緣，然後僅僅順著這些邊緣做內插，而不越過邊緣。

別的演演算法則假設影像裡的一塊區域顏色是相對恆常的，即使光照不同也是如此，那麼色彩通道就高度相關。因此，首先內插綠色通道，然後是紅色，再接著是藍色，所以紅綠與藍綠的色彩比是恆定的。還有其它方法對影像內容有不同設定，並以此嘗試計算遺失顏色的數值。

## 雜訊

影像中接近數位感應器解析度的微小細節會給去馬賽克演演算法造成問題，容易產生不像原始圖像的結果。最常出現的雜訊是莫列波紋（Moiré pattern），指的是可能出現重覆的圖案，色彩雜訊（Color artifacts）, 或者像素排列成類似迷宮般不真實的圖案。

### 錯誤色彩雜訊

濾色矩陣去馬賽克後普遍且不適宜的雜訊叫做錯誤顏色。一般而言，這種雜訊是指沿著邊緣顯現出不連貫、不自然的色彩偏移，這是由穿越邊緣而不是順沿邊緣的錯誤內插導致的。有各種方法來防止以及移除這種錯誤顏色。均勻色調轉變內插法（Smooth hue transition interpolation）在去馬賽克過程中可防止錯誤色彩顯露在最終成像上。也有可以在去馬賽克後移除錯誤色彩的演演算法。後者的益處在於從影像移除錯誤色彩雜訊的同時可以使用更強大的去馬賽克演演算法對紅色跟藍色平面做內插。

<image>

### 拉鍊狀雜訊

拉鍊狀雜訊是另外一種CFA去馬賽克的副作用，同樣主要出現在沿著邊緣的地方。它也稱做拉鍊效應（Zipper effect）。簡而言之，拉鍊狀是邊緣模糊的另外一種說法，沿著邊緣出現開/閉的圖案時會有模糊。這種效應是由於去馬賽克演演算法計算邊緣上的像素值平均時，特別是在紅色與藍色平面上，會形成特有的模糊感。正如上文所述，防止這種效應最好的方法是用各種沿著邊緣，而不是穿越邊緣的演演算法做內插。圖案辨識內插法（Pattern recognition interpolation）、自我調整彩色平面內插法（Adaptive color plane interpolation）和方向權重內插法（Directionally weighted interpolation）都試圖防止在影像裡沿著偵測到的邊緣做內插時出現拉鍊狀的雜訊。

<image>

不過，即使使用理論上能夠各個感光單元上拍攝辨識所有顏色的完美無暇的感應器，莫列波紋與其它種類的雜訊仍有機會出現。這是任何以離散間隔或位置對連續訊號取樣的系統都無法避免的結果。有鑑於此，幾乎所有圖相數位感應器都帶有諸如光學低通濾波器（Optical low-pass filter，OLPF）或者抗混疊濾波器（Anti-aliasing filter）的東西。這東西通常是一個放置在感應器之前的薄層，作用是模糊掉比感應器的解析度更細緻的細節，以免出現潛在問題。

## 改良型

<image>

拜爾濾色鏡幾乎用於全世界的消費性數位相機。其他濾色鏡有CYGM濾色器(青綠色（Cyan）、黃色（Yellow）、綠色（Green）、洋紅色（Magenta））和RGBE濾色器 （紅色，綠色，藍色，翠綠色（Emerald）），同樣需要類似的去馬賽克處理。而Foveon X3感光元件（將紅色、綠色、藍色感光元件垂直疊起，而不是使用一般的馬賽克圖像）和三分離CCDs（一個CCD對應一種顏色）的排列則不需要去馬賽克。

### 全色單元(Panchromatic cells)

2007年6月14日，伊士曼柯達公司發布一種拜爾濾色鏡的替代品，這種濾色器憑藉能偵察所有可見光波長並蒐集大量照進感光元件的光線的全色單元，增強數位相機感光元件對光感測力。他們展示了數種圖案，但沒有一種是跟拜爾圖像2x2一樣小的重覆組合。

<image>

另外一種Edward T. Chang 2007年申請的美國專利是一種由2x2區塊像素感光元件構成的濾色器，每個區塊由一個紅色，一個藍色，一個綠色，以及一個透明像素建構而成。這種設定意圖增強對紅外線的感應，進而提高整體感測力。柯達公司的專利申請時間較早。

這樣的單元已在「CMYW」（青綠（Cyan）、洋紅（Magenta）、黃色（Yellow）、白色（White））以及「RGBW」（紅色、綠色、藍色、白色）的感光元件中使用，但是柯達公司尚未將新設計的濾色圖像與之比較。

### 富士相機「EXR」濾色陣列

<image>

富士相機（Fujifilm）的EXR濾色陣列可用於CCD製造（SuperCCD）和CMOS（BSI CMOS）。像SuperCCD一樣，濾色器本身旋轉45度。與常見的拜爾濾色鏡設計不同的是，總是有兩個鄰接的感光單元偵測相同的顏色。如此設計是為了促進像素合併（Pixel binning），即合併兩個鄰接的感光單元，以使感光元件本身對光線更敏感。另外一個原因是感光元件可記錄兩個不同的曝光值，然後合併產生具有較大動態範圍（Dynamic range）的影像。底層線路有兩條讀出（read-out）通道，可以每隔一列攜帶感光元件的資訊。這樣「EXR」濾色陣列可以當做兩個交錯的感光元件，曝光時間可以彼此不同。可以故意讓一半感光單元曝光不足，以完整拍攝景像較光亮的區域。得到的強光資訊可以與感光元件另外一半記錄著完全曝光的輸出混合，且可再次利用相似色彩感光單元的空間鄰近。

### 富士相機"X-Trans"濾色器

<image>

富士相機X-Trans CMOS感光元件用在許多Fujifilm X-series的相機裡，據稱比拜爾濾色鏡針對色彩莫列波紋擁有更好的抵抗性，所以製作相機時能夠不需要抗混疊濾波器(Anti-aliasing filter)。這讓使用這個感光元件的相機在畫素數量相同時解析度更高。這種新的設計還宣稱，由於各條線裡都有紅、藍、綠色像素，偽色（False colors）現象可以減少，像素的半隨機排列據稱可以產生更像膠卷的紋理。

## 相關條目

- 光彩色片（Autochrome Lumière）
- Pentile矩陣
- 去馬賽克

## 外部連結

- RGB "Bayer" Color and MicroLenses , Silicon Imaging (design, manufacturing and marketing of high-definition digital cameras and image processing solutions)
- eLynx image processing library , Big set of Bayer mosaic manipulation source code under GPL.
- Efficient, high-quality Bayer demosaic filtering on GPUs
- http://www.inf.fu-berlin.de/lehre/WS02/robotik/Vorlesungen/Vorlesung2/ComputerVision-2.pdf
- https://web.archive.org/web/20160304100515/http://www.arl.army.mil/arlreports/2010/ARL-TR-5061.pdf
- http://www.cambridgeincolour.com/tutorials/camera-sensors.htm