[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

TW202010114A - 用以控制影像擷取裝置的電路及相關的控制方法 - Google Patents

用以控制影像擷取裝置的電路及相關的控制方法 Download PDF

Info

Publication number
TW202010114A
TW202010114A TW107127740A TW107127740A TW202010114A TW 202010114 A TW202010114 A TW 202010114A TW 107127740 A TW107127740 A TW 107127740A TW 107127740 A TW107127740 A TW 107127740A TW 202010114 A TW202010114 A TW 202010114A
Authority
TW
Taiwan
Prior art keywords
digital
infrared light
circuit
image
value
Prior art date
Application number
TW107127740A
Other languages
English (en)
Other versions
TWI698010B (zh
Inventor
胡志豪
Original Assignee
大陸商廈門星宸科技有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 大陸商廈門星宸科技有限公司 filed Critical 大陸商廈門星宸科技有限公司
Priority to TW107127740A priority Critical patent/TWI698010B/zh
Priority to US16/188,420 priority patent/US10841553B2/en
Publication of TW202010114A publication Critical patent/TW202010114A/zh
Application granted granted Critical
Publication of TWI698010B publication Critical patent/TWI698010B/zh

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/646—Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/77—Circuits for processing the brightness signal and the chrominance signal relative to each other, e.g. adjusting the phase of the brightness signal relative to the colour signal, correcting differential gain or differential phase
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/88—Camera processing pipelines; Components thereof for processing colour signals for colour balance, e.g. white-balance circuits or colour temperature control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Image Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

本發明揭露一種用於一影像擷取裝置的控制方法，其中該影像擷取裝置包含了一感測元件、使用一類比增益值的一類比增益調整電路以及一類比數位轉換器，以及該控制方法包含有：使用一數位增益調整電路以依據一數位增益值調整該類比數位轉換器所產生的一數位影像以產生一調整後數位影像；依據該數位影像以產生該類比增益值以及該數位增益值，且計算出該數位影像中紅外光成分的一強度資訊；依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出一影像調整參數以對該調整後數位影像進行影像處理。

Description

用以控制影像擷取裝置的電路及相關的控制方法
本發明係有關於影像擷取裝置，尤指一種可以具有紅外光感測元件的影像擷取裝置。
在搭載紅綠藍與紅外光感測元件(RGB-IR sensor)的影像擷取裝置中，通常會設置一雙頻濾波器以及一彩色濾光陣列來允許可見光及紅外光進入到感測元件中，之後再透過內部電路來決定出所感測之影像的紅色成分、綠色成分、藍色成分以及紅外光成分，以進行後續的增益調整及影像處理。例如影像擷取裝置會依據所感測之影像的紅色成分、綠色成分、藍色成分的強度來對感測之影像進行影像處理以產生擷取之影像，該影像處理例如是雜訊消除、銳利度調整、飽和度調整等。然而，由於感測元件所感測到的初始紅色成分、初始綠色成分以及初始藍色成分實際上皆包含了紅外光成分，因此在產生所感測之影像之紅色成分、綠色成分、藍色成分的計算過程中需要進行扣除紅外光成分的操作，而此扣除紅外光成分的操作會對影像畫面影響產生影響，例如導致影像畫面的雜訊強度有所變動，因此，如何評估環境中的紅外光對所擷取之影像的影響，從而搭配適合的影像處理，是一個重要的課題。
因此，本發明的目的之一在於提供一種用以控制一影像擷取裝置的電路，其可以依據所及所擷取之影像的紅外光強度資訊來決定出至少一影像處理參數，以對影像進行適當的影像處理操作，以解決先前技術中的問題。
在本發明的一個實施例中，揭露了一種用以控制一影像擷取裝置的電路，其中該影像擷取裝置包含了一感測元件、一類比增益調整電路以及一類比數位轉換器，該感測元件係用以提供包含一紅外光成分的一輸入影像，該類比增益調整電路用以依據一類比增益值調整該輸入影像以產生一調整後輸入影像，以及該類比數位轉換器對該調整後輸入影像進行類比數位轉換以產生一數位影像資料，以及該電路包含有一數位增益調整電路、一計算與控制電路、一查表電路以及一影像處理電路。在該電路的操作中，該數位增益調整電路用以依據一類比增益值調整該數位影像資料以產生一調整後數位影像資料；該計算與控制電路用以依據該數位影像資料以產生該類比增益值以及該數位增益值，且計算出該紅外光成分的一強度資訊；該查表電路耦接於該計算與控制電路，且用以依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出一影像調整參數；以及該影像處理電路耦接於該數位增益調整電路以及該查表電路，且用以依據該影像調整參數以對該調整後數位影像資料進行影像處理以產生一輸出影像資料。
在本發明的另一個實施例中，揭露了一種用於一影像擷取裝置的控制方法，其中該影像擷取裝置包含了一感測元件、一類比增益調整電路以及一類比數位轉換器，該感測元件係用以提供包含一紅外光成分的一輸入影像，該類比增益調整電路用以依據一類比增益值調整該輸入影像以產生一調整後輸入影像，以及該類比數位轉換器對該調整後輸入影像進行類比數位轉換以產生一數位影像資料，以及該控制方法包含有：使用一數位增益調整電路以依據一數位增益值調整對該數位影像資料以產生一調整後數位影像資料；依據該數位影像資料以產生該類比增益值以及該數位增益值，且計算出該紅外光成分的一強度資訊；依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出一影像調整參數；以及依據該影像調整參數以對該調整後數位影像資料進行影像處理以產生一輸出影像資料。
第1圖為本發明一實施例之一電路160應用於一影像擷取裝置100的方塊圖。如第1圖所示，影像擷取裝置100包含了一感測電路130、一類比增益調整電路140、一類比數位轉換器150、一電路160以及兩個記憶體170、180，其中電路160包含了一數位增益調整電路162、一計算與控制電路164、一查找電路166以及一影像處理電路168。在本實施例中，影像擷取裝置100可以是一個網路監視器或是其他任何可以擷取影像的攝影裝置，且影像擷取裝置100另包含了一紅外光源以在環境亮度不足的時候開啟，以使得影像擷取裝置100可以順利地擷取到影像資料。此外，雖然本實施例中繪示了兩個記憶體170、180，但僅是為了方便說明而已，本領域技術人員應理解實作上記憶體170、180可採用同一個記憶體。
在影像擷取裝置100的操作中，首先，可利用彩色濾光片(未繪示)可對環境光進行彩色濾波，接著利用感測電路130進行感測以產生一輸入影像。具體來說，彩色濾光片上具有多個像素，每一個像素包含了一紅色區域、一綠色區域、一藍色區域以及一紅外光區域，因此感測電路130可以感測出每一個像素中所包含的紅色、綠色、藍色以及紅外光強度以產生該輸入影像。然而由於彩色濾光片上的紅色區域、綠色區域以及藍色區域實際上仍允許紅外光通過，因此在本實施例中，針對每一個像素，感測電路130所感測的四筆資料實際上分別是紅光加上紅外光的強度、綠光加上紅外光的強度、藍光加上紅外光的強度、以及單純紅外光的強度。接著，類比增益調整電路140依據計算與控制電路164所提供的類比增益值AG來調整該輸入影像的強度以產生一調整後輸入影像，而類比數位轉換器150對該調整後輸入影像進行類比數位轉換以產生一數位影像資料。
電路160中的計算與控制電路164自類比數位轉換器150接收該數位影像資料，並計算出該數位影像資料中的紅色成分資料、綠色成分資料、藍色成分資料以及紅外光強度索引值IR_index，其中該些顏色成分資料例如說是該輸入影像中對應全部像素或是部分區域像素的特定顏色光的強度平均值，而該紅色成分資料、該綠色成分資料以及該藍色成分資料係提供給數位增益調整電路162以依據數位增益值DG進行數位增益調整來產生一調整後數位影像資料，且該調整後數位影像資料係被暫存至記憶體170中。此外，計算與控制電路164亦會根據該調整後數位影像資料產生類比增益值AG以及數位增益值DG以分別供類比增益調整電路140以及數位增益調整電路162使用。計算與控制電路164另外將類比增益值AG、數位增益值DG以及紅外光強度索引值IR_index一併提供給查找電路166，以供自記憶體180中取得至少一影像調整參數IQ_index。最後，影像處理電路168自記憶體170中取得該調整後數位影像資料，並使用查找電路166所提供的至少一影像調整參數IQ_index來對該調整後數位影像資料進行影像處理以產生一輸出影像。
第2圖為本發明一實施例之影像處理電路168的方塊圖，其中影像處理電路168包含了至少一飽和度處理電路210、一雜訊消除電路220以及一銳利度調整電路230。在影像處理電路168的操作中，飽和度處理電路210、雜訊消除電路220以及銳利度調整電路230會分別根據影像調整參數IQ_index來對自記憶體170中取得之該調整後數位影像資料進行影像處理。具體來說，當紅外光強度索引值IR_index表示出該輸入影像中該紅外光成分所佔的比重較高時，影像調整參數IQ_index係控制影像處理電路168套用對應紅外光比重較高時的色彩設定，例如飽和度處理電路210會降低顏色飽和度、雜訊消除電路220會採用較強的雜訊消除操作、且銳利度調整電路230會採用較弱的銳利度消除操作；反之，當紅外光強度索引值IR_index表示出該輸入影像中該紅外光成分所佔的比重較低時，影像調整參數IQ_index係控制影像處理電路168套用對應紅外光比重較低時的色彩設定，例如飽和度處理電路210會維持原有的顏色飽和度、雜訊消除電路220會採用較弱的雜訊消除操作、且銳利度調整電路230會採用較強的銳利度消除操作。
需注意的是，飽和度處理電路210、雜訊消除電路220以及銳利度調整電路230的操作順序並不以第2圖所示的順序為限，且影像處理電路168亦可包含其他受調整參數IQ_index控制的色彩處理電路。
如上所述，由於影像處理電路168所使用之影像處理參數會考慮到紅外光強度索引值IR_index，因此，影像處理電路168可以對該調整後數位影像資料進行較適合的影像色彩處理，以產生具有較佳品質的輸出影像。
第3A圖為本發明一實施例之計算與控制電路164的細部方塊圖。如第3圖所示，計算與控制電路164包含了一色彩成分計算電路312、一亮度計算電路314以及一索引值產生電路316。此外，在本實施例中，如第3B、3C圖所示，查找電路166包含了一第一查找電路322、一第二查找電路324以及一第三查找電路326用來分別查找第3C圖所示之記憶體180中儲存的一第一對照表332、一第二對照表334以及一第三對照表336，但這僅是為了方便說明而已，本領域技術人員應理解實作上第一查找電路322、一第二查找電路324以及一第三查找電路326可共用同一個查找電路來查找記憶體180中儲存的多個對照表。在第3圖所示之實施例中，色彩成分計算電路312自類比數位轉換器150接收該數位影像資料，其中該數位影像資料中的每一個像素均包含了四筆資訊，亦即三筆色彩資訊：紅光加上紅外光的強度、綠光加上紅外光的強度、藍光加上紅外光的強度、以及一筆紅外光資訊：紅外光的強度；而色彩成分計算電路312係用來將上述三筆色彩資訊分別減去紅外光資訊，以得到紅色成分資料、綠色成分資料以及藍色成分資料，並傳送給數位增益調整電路162進行增益調整以得到該調整後數位影像資料。接著，亮度計算電路314自數位增益調整電路162接收該調整後數位影像資料，並自類比數位轉換器150接收該數位影像資料中的紅外光資訊(亦即，每一個像素的紅外光強度)，以決定出類比增益值AG、數位增益值DG以及紅外光成分的強度資訊IR_info。在本實施例中，當調整後數位影像資料指出畫面越暗，則類比增益值AG、數位增益值DG越大，此外紅外光成分的強度資訊IR_info可以是該數位影像資料中多個像素對應的紅外光成分資料(即紅外光資訊)的一平均值。接著，索引值產生電路316根據紅外光成分的強度資訊IR_info以及數位增益值DG以決定出該紅外光強度索引值IR_index，其中紅外光強度索引值IR_index係用以表示該輸入影像中該紅外光成分的強度。
雖然本實施例中亮度計算電路314係依據調整後數位影像資料來決定出更新的類比增益值AG及更新的數位增益值DG，然而由於數位增益調整電路162使用中的數位增益值DG就是由亮度計算電路314決定的，因此亮度計算電路314亦可直接依據色彩成分計算電路312的輸出來決定出更新的類比增益值AG及更新的數位增益值DG。此外，由於亮度計算電路314亦可自行依據數位影像資料計算出紅色成分資料、綠色成分資料以及藍色成分資料，且如前所述，使用中的數位增益值DG就是由亮度計算電路314決定的，因此在另一實施例中，亮度計算電路314可以直接依據數位影像資料計算出更新的類比增益值AG及更新的數位增益值DG，而不需要依據色彩成分計算電路312或者數位增益調整電路162的輸出。
在查找電路166的操作中，第一查找電路322會根據類比增益值AG以及數位增益值DG以自第一對照表332中取得一增益索引值ISO_index，該增益索引值ISO_index代表了輸入影像被增益的程度；第二查找電路322則根據增益索引值ISO_index以及紅外光強度索引值IR_index以自第二對照表334中取得一最終索引值F_index，該最終索引值F_index用來指示特定的至少一影像調整參數IQ_index；而第三查找電路326再根據最終索引值F_index以自第三對照表336中取得該至少一影像調整參數IQ_index，並提供給影像處理電路168使用。請注意，在其他實施例中，第一查找電路322可以直接以一增益索引值計算電路(未繪示)取代，例如說直接將類比增益值AG以及數位增益值DG相乘來得到增益索引值ISO_index，如此即可省略查表的步驟，且不需要儲存第一對照表332於記憶體180中。此外，在其他實施例中，第二對照表可與第三對照表整合，如此第二查找電路322可以直接查表得到該至少一影像調整參數IQ_index，並省略第三查找電路326。
由於進行相同增益幅度時，透過類比增益調整電路140進行增益所產生的雜訊較透過數位增益調整電路162進行增益來的低，因此在本實施例中優先使用類比增益調整電路140，而不使用數位增益調整電路162 (亦即數位增益值DG等於1)，以降低整體的雜訊；然而由於調整後數位影像資料係經色彩成分計算電路312移除了紅外光成分資料，因此當環境光中的紅外光成分較高時，將導致亮度計算電路314決定需要採用較大的增益幅度，此時若僅由類比增益調整電路140進行前述較大的增益，即有可能產生過曝的問題。
詳細來說，由於調整後輸入影像存在亮度的上限值，但輸入影像並未移除紅外光成分資料，因此一旦增益調整電路140採用了過大的增益幅度，將造成輸入影像中部分較亮區域的像素皆達到一最高像素值而無法分辨。有鑑於此，本實施例中，當環境光中的紅外光成分較高時，仍需利用數位增益調整電路162來對紅色成分資料、綠色成分資料以及藍色成分資料進行增益調整(亦即數位增益值DG大於1)。舉例來說，假設目前的類比增益值AG為“9”、目前的數位增益值DG為“1”、紅色/綠色/藍色成分資料的平均值為“10”、 紅外光的像素值平均為“200”、目標平均像素值為“40”、最高像素值為“255”則此時為了讓處理後的數位影像資料的亮度值達到目標平均像素值“40”，需要再讓目前的像素值(平均值“10”)提升4倍才可以達到目標平均像素值為“40”。而由於此時類比增益值AG只能由“9”提升到“(9*(255/200))”，亦即再將像素值提升(255/200)倍，故數位增益值DG需要設為“4/(255/200)”才可以再讓目前的像素值提升4倍。須注意的是，前述舉例只是為了方便理解本發明的概念而已，實際上操作上，以前述舉例來說，調整後的類比增益值AG必須要小於“(9*(255/200))”，這是因為如前所述，針對每一個像素，感測電路130所感測的四筆資料分別是紅光加上紅外光的強度、綠光加上紅外光的強度、藍光加上紅外光的強度、以及單純紅外光的強度，當調整後的類比增益值AG等於“(9*(255/200))”時，只能確保調整後輸入影像的紅外光的部分不超過上限值，但紅光加上紅外光的強度、綠光加上紅外光的強度、藍光加上紅外光的強度則必然超過上限值。
如上所述，由於數位增益值DG以及紅外光成分的強度資訊IR_info都可以在一定程度上反映出環境光中紅外光所佔的比重，故在一實施例中，索引值產生電路316係將數位增益值DG以及紅外光成分的強度資訊IR_info(例如，該數位影像資料中該紅外光成分資料的平均值)相乘以得到紅外光強度索引值IR_index，亦即IR_index=DG*IR_info。在以上公式中，紅外光強度索引值IR_index係可以反映出紅外光在通過類比增益調整後的強度，而數位增益值DG係可以反映出紅色成分資料、綠色成分資料以及藍色成分資料因為紅外光的因素而需要被調整的強度，故兩者相乘後的結果可以較全面地被反映出紅外光的影響程度。
在另外一個實施例中，除了考量過曝的問題，亮度計算電路314更需進一步考量類比增益調整電路140能夠增益的類比增益值AG的上限。以前述舉例來說，假設類比增益值AG的上限為“10”，且此時需要再讓目前的像素值(平均值“10”)提升4倍。由於類比增益值AG只能由“9”提升到“10”，亦即再將像素值提升(10/9)倍，故數位增益值DG需要設為“3.6”才可以再讓目前的像素值提升4倍((10/9)*3.6=4)。
第4圖為根據本發明一實施例之一種用於一影像擷取裝置的控制方法的流程圖。參考以上實施例所揭露內容，流程如下所述。
步驟400：流程開始。
步驟402：接收一輸入影像。
步驟404：依據一類比增益值調整該輸入影像以產生一調整後輸入影像。
步驟406：對該調整後輸入影像進行類比數位轉換操作以產生一數位影像資料。
步驟408：依據一數位增益值調整該數位影像資料以產生一調整後數位影像資料。
步驟410：依據該數位影像資料產生該類比增益值、該數位增益值以及該數位影像資料中的一紅外光成分的一強度資訊。
步驟412：依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊決定出一影像調整參數。
步驟414：依據該影像調整參數對該調整後數位影像資料進行影像處理以產生一輸出影像資料。
簡要歸納本發明，在本發明之用以控制一影像擷取裝置的電路及相關的控制方法中，影像資料中的紅外光強度係被用來決定影像處理有關於雜訊消除操作、銳利度調整以及顏色飽和度調整的強度。透過本發明可以讓影像資料進行最適合的處理，以提升影像品質。此外，雖然本發明之實施例係以搭載紅綠藍與紅外光感測元件(RGB-IR sensor)的影像擷取裝置做說明，但本發明不再此限，本領域技術人員應可理解，只要是搭載了紅外光感測元件的影像擷取裝置，無論其搭配了其他任何色彩空間的感測元件，皆為本發明可實施的範疇。 以上所述僅為本發明之較佳實施例，凡依本發明申請專利範圍所做之均等變化與修飾，皆應屬本發明之涵蓋範圍。
100‧‧‧影像擷取裝置130‧‧‧感測電路140‧‧‧類比增益調整電路150‧‧‧類比數位轉換器160‧‧‧電路162‧‧‧數位增益調整電路164‧‧‧計算與控制電路166‧‧‧查找電路168‧‧‧影像處理電路170、180‧‧‧記憶體210‧‧‧飽和度處理電路220‧‧‧雜訊消除電路230‧‧‧銳利度調整電路312‧‧‧色彩成分計算電路314‧‧‧亮度計算電路316‧‧‧索引值產生電路322‧‧‧第一查找電路324‧‧‧第二查找電路326‧‧‧第三查找電路332‧‧‧第一對照表334‧‧‧第二對照表336‧‧‧第三對照表400~414‧‧‧步驟AG‧‧‧類比增益值DG‧‧‧數位增益值IR_index‧‧‧紅外光強度索引值ISO_index‧‧‧增益索引值IR_info‧‧‧紅外光成分的強度資訊IQ_index‧‧‧影像調整參數
第1圖為本發明一實施例之一電路應用於一影像擷取裝置的方塊圖。 第2圖為本發明一實施例之影像處理電路的方塊圖。 第3A圖為本發明一實施例之計算與控制電路的細部方塊圖。 第3B圖為本發明一實施例之查找電路的細部方塊圖。 第3C圖為本發明一實施例之記憶體內所包含之多個對照表的方塊圖。 第4圖為依據本發明一實施例之一種用於一影像擷取裝置的之一電路的控制方法的流程圖。
100‧‧‧影像擷取裝置
130‧‧‧感測電路
140‧‧‧類比增益調整電路
150‧‧‧類比數位轉換器
160‧‧‧電路
162‧‧‧數位增益調整電路
164‧‧‧計算與控制電路
166‧‧‧查找電路
168‧‧‧影像處理電路
170、180‧‧‧記憶體
AG‧‧‧類比增益值
DG‧‧‧數位增益值
IR_index‧‧‧紅外光強度索引值
IQ_index‧‧‧影像調整參數

Claims (18)

  1. 一種用以控制一影像擷取裝置的電路，其中該影像擷取裝置包含了一感測電路、一類比增益調整電路以及一類比數位轉換器，該感測電路係用以提供包含一紅外光成分的一輸入影像，該類比增益調整電路用以依據一類比增益值調整該輸入影像以產生一調整後輸入影像，以及該類比數位轉換器對該調整後輸入影像進行類比數位轉換以產生一數位影像資料，該電路包含有： 一數位增益調整電路，用以依據一數位增益值調整該數位影像資料以產生一調整後數位影像資料； 一計算與控制電路，用以依據該數位影像資料產生該類比增益值以及該數位增益值，且計算出該紅外光成分的一強度資訊； 一查找電路，用以依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊決定出一影像調整參數；以及 一影像處理電路，用以依據該影像調整參數對該調整後數位影像資料進行影像處理以產生一輸出影像資料。
  2. 如申請專利範圍第1項所述之電路，其中該查找電路用以依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出一索引值，並依據該索引值以決定出該影像調整參數，其中該索引值係用以表示該輸入影像中該紅外光成分所佔的比重。
  3. 如申請專利範圍第2項所述之電路，其中該索引值表示該輸入影像中該紅外光成分所佔的比重越高時，該影像處理電路依據該影像調整參數以對該調整後數位影像資料進行較強的雜訊消除操作、較弱的銳利度調整或是較低的顏色飽和度調整，以產生該輸出影像資料。
  4. 如申請專利範圍第1項所述之電路，其中該計算與控制電路包含有： 一色彩成分計算電路，用以計算出該數位影像資料的一紅色成分資料、一綠色成分資料、一藍色成分資料，其中該數位增益調整電路對該紅色成分資料、該綠色成分資料、該藍色成分資料進行增益調整以產生該調整後數位影像資料；以及 一亮度計算電路，用以依據該調整後數位影像資料決定出該類比增益值以及該數位增益值，且另依據該數位影像資料中一紅外光成分資料以計算出該紅外光成分的該強度資訊。
  5. 如申請專利範圍第4項所述之電路，其中該亮度計算電路計算該數位影像資料中該紅外光成分資料的一平均值，以作為該紅外光成分的該強度資訊。
  6. 如申請專利範圍第4項所述之電路，其中該計算與控制電路另包含有： 一索引值產生電路，用以依據該數位增益值以及該紅外光成分的該強度資訊產生一紅外光強度索引值，其中該紅外光強度索引值係用以表示該輸入影像中該紅外光成分的強度； 其中該查找電路依據該類比增益值、該數位增益值以及該紅外光強度索引值以決定出該影像調整參數。
  7. 如申請專利範圍第6項所述之電路，其中該索引值產生電路將該數位增益值以及該紅外光成分的該強度資訊相乘以得到該紅外光強度索引值。
  8. 如申請專利範圍第6項所述之電路，其中該查找電路包含有： 一第一查找電路，用以依據該類比增益值以及該數位增益值決定出一增益索引值； 一第二查找電路，用以依據該增益索引值以及該紅外光強度索引值決定出一最終索引值；以及 一第三查找電路，用以依據該最終索引值決定出該影像調整參數。
  9. 如申請專利範圍第4項所述之電路，其中該亮度計算電路更依據該類比增益值的一上限值決定出該類比增益值以及該數位增益值。
  10. 一種用於一影像擷取裝置的控制方法，其中該影像擷取裝置包含了一感測電路、一類比增益調整電路以及一類比數位轉換器，該感測元件係用以提供包含一紅外光成分的一輸入影像，該類比增益調整電路用以依據一類比增益值調整該輸入影像以產生一調整後輸入影像，以及該類比數位轉換器對該調整後輸入影像進行類比數位轉換以產生一數位影像資料，以及該控制方法包含有： 使用一數位增益調整電路以依據一數位增益值調整該數位影像資料以產生一調整後數位影像資料； 依據該數位影像資料以產生該類比增益值以及該數位增益值，且計算出該紅外光成分的一強度資訊； 依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出一影像調整參數；以及 依據該影像調整參數對該調整後數位影像資料進行影像處理以產生一輸出影像資料。
  11. 如申請專利範圍第10項所述之控制方法，其中依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出該影像調整參數的步驟包含有： 依據該類比增益值、該數位增益值以及該紅外光成分的該強度資訊以決定出一索引值；以及 依據該索引值以決定出該影像調整參數，其中該索引值係用以表示該輸入影像中該紅外光成分所佔的比重。
  12. 如申請專利範圍第11項所述之控制方法，其中依據該影像調整參數以對該調整後數位影像資料進行影像處理以產生該輸出影像資料的步驟包含有： 該索引值表示該輸入影像中該紅外光成分所佔的比重越高時，依據該影像調整參數以對該調整後數位影像資料進行較強的雜訊消除操作、較弱的銳利度調整或是較低的顏色飽和度調整，以產生該輸出影像資料。
  13. 如申請專利範圍第10項所述之控制方法，其中依據該數位影像資料以產生該類比增益值以及該數位增益值，且計算出該紅外光成分的該強度資訊的步驟包含有： 計算出該調整後數位影像資料的一紅色成分資料、一綠色成分資料、一藍色成分資料，其中該數位增益調整電路對該紅色成分資料、該綠色成分資料、該藍色成分資料進行增益調整以產生該調整後數位影像資料，並依據該調整後數位影像資料以決定出該類比增益值以及該數位增益值； 依據該數位影像資料中該紅外光成分資料以計算出該紅外光成分的該強度資訊。
  14. 如申請專利範圍第13項所述之控制方法，其中依據該調整後數位影像資料中該紅外光成分資料以計算出該紅外光成分的該強度資訊的步驟包含有： 計算該數位影像資料中該紅外光成分資料的一平均值，以作為該紅外光成分的該強度資訊。
  15. 如申請專利範圍第13項所述之控制方法，其中決定出該影像調整參數的步驟包含有： 依據該數位增益值以及該紅外光成分的該強度資訊以產生一紅外光強度索引值，其中該紅外光強度索引值係用以表示該輸入影像中該紅外光成分的強度； 依據該類比增益值、該數位增益值以及該紅外光強度索引值以決定出該影像調整參數。
  16. 如申請專利範圍第15項所述之控制方法，其中產生該紅外光強度索引值的步驟包含有： 將該數位增益值以及該紅外光成分的該強度資訊相乘以得到該紅外光強度索引值。
  17. 如申請專利範圍第15項所述之控制方法，其中決定出該影像調整參數的步驟包含有： 使用一第一查找電路以依據該類比增益值以及該數位增益值來決定出一增益索引值； 使用一第二查找電路以依據該增益索引值以及該紅外光強度索引值以決定出一最終索引值；以及 使用一第三查找電路以依據該最終索引值以決定出該影像調整參數。
  18. 如申請專利範圍第13項所述之控制方法，另包含： 依據該類比增益值的一上限值決定出該類比增益值以及該數位增益值。
TW107127740A 2018-08-09 2018-08-09 用以控制影像擷取裝置的電路及相關的控制方法 TWI698010B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW107127740A TWI698010B (zh) 2018-08-09 2018-08-09 用以控制影像擷取裝置的電路及相關的控制方法
US16/188,420 US10841553B2 (en) 2018-08-09 2018-11-13 Circuit for controlling image capturing device and associated control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW107127740A TWI698010B (zh) 2018-08-09 2018-08-09 用以控制影像擷取裝置的電路及相關的控制方法

Publications (2)

Publication Number Publication Date
TW202010114A true TW202010114A (zh) 2020-03-01
TWI698010B TWI698010B (zh) 2020-07-01

Family

ID=69407309

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107127740A TWI698010B (zh) 2018-08-09 2018-08-09 用以控制影像擷取裝置的電路及相關的控制方法

Country Status (2)

Country Link
US (1) US10841553B2 (zh)
TW (1) TWI698010B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI715142B (zh) * 2019-08-07 2021-01-01 瑞昱半導體股份有限公司 影像感測裝置以及自動白平衡方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005101853A1 (ja) * 2004-04-05 2005-10-27 Mitsubishi Denki Kabushiki Kaisha 撮像装置
JP4534756B2 (ja) * 2004-12-22 2010-09-01 ソニー株式会社 画像処理装置、画像処理方法、撮像装置、プログラム、及び記録媒体
US8089532B2 (en) * 2008-01-25 2012-01-03 Aptina Imaging Corporation Method and apparatus providing pixel-wise noise correction
US8717464B2 (en) * 2011-02-09 2014-05-06 Blackberry Limited Increased low light sensitivity for image sensors by combining quantum dot sensitivity to visible and infrared light
US9077943B2 (en) * 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
US9332239B2 (en) * 2012-05-31 2016-05-03 Apple Inc. Systems and methods for RGB image processing
JP5617898B2 (ja) * 2012-11-02 2014-11-05 住友電気工業株式会社 撮像装置
JP6732726B2 (ja) * 2015-02-26 2020-07-29 ソニーセミコンダクタソリューションズ株式会社 撮像装置、撮像方法、およびプログラム
CN104918034A (zh) * 2015-05-29 2015-09-16 深圳奥比中光科技有限公司 一种3d图像捕获装置、捕获方法及3d图像系统
JP6611483B2 (ja) * 2015-06-25 2019-11-27 キヤノン株式会社 撮像システム、照明装置及び焦点検出方法
KR102368597B1 (ko) * 2015-11-11 2022-03-02 삼성전자주식회사 영상 촬영 장치 및 이의 제어 방법
US10375317B2 (en) * 2016-07-07 2019-08-06 Qualcomm Incorporated Low complexity auto-exposure control for computer vision and imaging systems
US20180295336A1 (en) * 2017-04-11 2018-10-11 Himax Imaging Limited IMAGING SYSTEM FOR SENSING 3D image
WO2019028067A1 (en) * 2017-08-04 2019-02-07 Seek Thermal, Inc. COLOR DISPLAY MODES FOR A THERMAL IMAGING SYSTEM
US10469749B1 (en) * 2018-05-01 2019-11-05 Ambarella, Inc. Temporal filter with criteria setting maximum amount of temporal blend
US11363221B2 (en) * 2018-06-08 2022-06-14 Facebook Technologies, Llc Image sensor post processing

Also Published As

Publication number Publication date
US20200053333A1 (en) 2020-02-13
US10841553B2 (en) 2020-11-17
TWI698010B (zh) 2020-07-01

Similar Documents

Publication Publication Date Title
US20240137658A1 (en) Global tone mapping
TWI395472B (zh) 對目標影像施予階調修正之影像處理裝置及方法
US7969480B2 (en) Method of controlling auto white balance
JP3784806B2 (ja) デジタルオートホワイトバランス装置
TWI497320B (zh) 色調對應方法及影像處理裝置
JP5223742B2 (ja) エッジ強調画像処理装置
TWI549511B (zh) 影像感測裝置及色彩校正矩陣修正方法與查找表建立方法
JP5392560B2 (ja) 画像処理装置および画像処理方法
JP2000171304A (ja) カラ―照明色温度の検出方法及び該装置
JP6849696B2 (ja) 画像の色を拡張する低コストの色拡張モジュール
JP5901667B2 (ja) 画像処理装置及び方法、画像処理プログラム、撮像装置
US8120670B2 (en) Apparatus and method for controlling gain of color signal
WO2019104047A1 (en) Global tone mapping
US9013594B1 (en) Preventing color artifacts in overexposed regions and preserving maximum signals in near-overexposed regions of digital images
JP2015201731A (ja) 画像処理装置及び方法、画像処理プログラム、撮像装置
US7701462B2 (en) Simple and robust color saturation adjustment for digital images
WO2018165023A1 (en) Method of decaying chrominance in images
TWI698010B (zh) 用以控制影像擷取裝置的電路及相關的控制方法
JP2006114005A (ja) 階調変換装置、プログラム、電子カメラ、およびその方法
CN110876042B (zh) 用以控制图像捕获设备的电路及相关的控制方法
JP2011120299A (ja) 階調変換装置、プログラム、電子カメラ、及びその方法
JP5520135B2 (ja) 画像処理装置
JP5754929B2 (ja) 画像処理装置及び画像処理方法
JPH09147098A (ja) カラー画像処理方法及び装置
JP2009044628A (ja) 画像処理装置及び画像処理方法