JP5185849B2 - 画像処理装置、プログラム、及び方法、並びに撮像システム - Google Patents
画像処理装置、プログラム、及び方法、並びに撮像システム Download PDFInfo
- Publication number
- JP5185849B2 JP5185849B2 JP2009022886A JP2009022886A JP5185849B2 JP 5185849 B2 JP5185849 B2 JP 5185849B2 JP 2009022886 A JP2009022886 A JP 2009022886A JP 2009022886 A JP2009022886 A JP 2009022886A JP 5185849 B2 JP5185849 B2 JP 5185849B2
- Authority
- JP
- Japan
- Prior art keywords
- gradation conversion
- processing
- characteristic
- calculation
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 32
- 238000000034 method Methods 0.000 title claims description 30
- 238000006243 chemical reaction Methods 0.000 claims description 208
- 230000009467 reduction Effects 0.000 claims description 95
- 230000003321 amplification Effects 0.000 claims description 25
- 238000003199 nucleic acid amplification method Methods 0.000 claims description 25
- 230000008569 process Effects 0.000 claims description 23
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 claims description 12
- 238000011946 reduction process Methods 0.000 claims description 10
- 230000002194 synthesizing effect Effects 0.000 claims description 7
- 230000015572 biosynthetic process Effects 0.000 claims description 5
- 238000003786 synthesis reaction Methods 0.000 claims description 5
- 230000006835 compression Effects 0.000 description 6
- 238000007906 compression Methods 0.000 description 6
- 230000000875 corresponding effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 4
- 238000000926 separation method Methods 0.000 description 4
- 238000005070 sampling Methods 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 238000005282 brightening Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/28—Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Studio Devices (AREA)
Description
本発明の第1の態様は、入力された画像信号を複数の領域に分割し、分割した領域毎に、階調変換処理前の画素値と該画素値の増幅率の関数である第1の階調変換算特性を算出する第1の階調変換特性算出手段と、該第1の階調変換算出手段により算出された前記第1の階調変換算特性を用いて、前記画像信号に対して前記領域毎に階調変換を行う階調変換手段と、該階調変換手段により階調変換された画像信号から、多重解像度変換処理により互いに異なる周波数帯域を有する前記入力された画像信号より解像度が縮小された複数の帯域信号を生成する帯域信号生成手段と、前記第1の階調変換算出手段により算出された第1の階調変換特性から、前記画素値の増幅率と前記帯域信号生成手段により生成された各前記帯域信号の解像度が合うように、前記各画素値の増幅率の解像度を縮小し、分割した領域毎に、各前記帯域信号と前記各画素の増幅率の関数である第2の階調変換算特性算出する第2の階調変換特性算出手段と、該第2の階調変換特性算出手段により算出された前記第2の階調変換算特性を用いて、各前記帯域信号に対してノイズの低減処理を行うノイズ低減手段と、該ノイズ低減手段によりノイズの低減処理が行われた各前記帯域信号を合成する画像合成手段とを備える画像処理装置である。
なお、「領域」とは、複数の画素を含む領域だけでなく、単一の画素のみを含む領域も含むものとする。
これにより、帯域信号毎に算出された第2の階調変換特性に基づいて、各帯域信号に対してノイズの低減処理を行うことができるため、階調変換処理を施した後の画像信号のノイズを効果的に低減することができる。
以下に、本発明の第1の実施形態に係る画像処理装置および撮像システムについて、図面を参照して説明する。ここでは、本発明に係る画像処理装置を撮像システムに適用した例について説明する。
図1は、本実施形態に係る画像処理装置を備える撮像システム1の概略構成を示すブロック図である。図1に示すように、撮像システム1は、レンズ等の光学系11と、光学系11により結像された被写体の像を画像信号として取得するCCD等の撮像系(撮像手段)13と、撮像系13により取得された画像信号を処理する画像処理部15と、画像処理部15により処理された画像信号からスペースバリアントな第1の階調変換特性を算出する第1の階調変換特性算出部(第1の階調変換特性算出手段)16と、第1の階調変換特性算出部16により算出された第1の階調変換特性を用いて画像処理部15により処理された画像信号に対してスペースバリアントな階調変換処理を行う階調変換部(階調変換手段)17と、第1の階調変換特性算出部16により算出された第1の階調変換特性から第2の階調変換特性を算出する第2の階調変換特性算出部(第2の階調変換特性算出手段)19と、第2の階調変換特性算出部19により算出された第2の階調変換特性を用いて階調変換部17により階調変換処理が行われた画像信号に対してノイズの低減処理を行うノイズ低減部21と、ノイズ低減部21によりノイズの低減処理が行われた画像信号を圧縮する画像圧縮部23と、画像圧縮部23により圧縮された画像信号を記録する記録メディア25とを備えている。
光学系11により撮像系13表面に結像された被写体の像は、撮像系13により電気信号に変換され、CDS(Correlated Double Sampling)/差動サンプリング、アナログゲインの調整等が行われる。その後、A/D変換部(図示略)によりデジタル信号に変換され、画像処理部15により、例えば、γ補正、色分離、および色差マトリックス補正等の画像を高画質化するための各種処理が施される。画像処理部15により処理された画像信号は、第1の階調変換特性算出部16および階調変換部17に出力される。
図2は、第2の階調変換特性算出部19およびノイズ低減部21の詳細な機能を示すブロック図である。図2に示すように、第2の階調変換特性算出部19は、N−1(Nは1以上の整数)段のフィルタ処理・縮小処理部101,111を有している。なお、本実施形態では、N=3の場合を一例に挙げて説明する。
多重解像度変換処理では、帯域ごとに解像度(サイズ)が異なる画像が生成される。階調変換特性は、各画素の画素値の増幅率なので画像と同じサイズを持っている。ある帯域の画像に階調変換特性を作用させるためには、その帯域の画像と同じサイズに変換する必要がある。サイズの変換方法としては、例えばアレストネイバーなどの任意のリサイズ手段を用いる。各帯域の画像と階調変換特性が同じサイズとすることで、対応する画素ごとに処理を行うことができる。
1段目のフィルタ処理・縮小処理部201は、入力画像信号200にローパスフィルタ処理を施した後、所定のサイズに縮小する。これにより、例えば、入力画像信号200の画像サイズは、水平方向、垂直方向ともに半分とされる。フィルタ処理・縮小処理部201により生成された縮小画像は、拡大処理部202及び後段のフィルタ処理・縮小処理部211に供給される。
3段目の拡大処理部225は、フィルタ処理・縮小処理部221からの縮小画像を拡大処理し、加算部226に出力する。加算部226は、NR処理部224から供給されるノイズ低減済みの帯域信号と拡大処理部225から供給される縮小画像とを加算して拡大処理部215に出力する。
これにより、帯域信号毎に算出された第2の階調変換特性に基づいて、各帯域信号に対してノイズの低減処理を行うことができるため、階調変換処理を施した後の画像信号のノイズを効果的に低減することができる。
次に、本発明の第2の実施形態について、図3を用いて説明する。
本実施形態に係る撮像システム2が第1の実施形態と異なる点は、画像信号を輝度信号と色差信号とに分離して、それぞれの信号に対してノイズの低減処理を行う点である。以下、本実施形態に係る撮像システム2について、第1の実施形態と共通する点については説明を省略し、異なる点について主に説明する。
なお、Nは1以上の整数であり、ここではN=3の場合を一例に挙げて説明する。
撮像系13により取得された画像信号は、画像信号分離部により輝度信号および色差信号に分離される。輝度信号、色差信号はそれぞれ前述の第1の実施形態と同様に各帯域でフィルタ処理・縮小処理、拡大処理、減算処理が行われる。
G’=α*G+1−α・・・(1)
また、Gが1より大きな値の場合、αを0に近づけるほどG’は1に近い値になりノイズ低減が強くかからなくなる。
また、本実施形態において、階調変換部17により階調変換が行われた画像信号を輝度信号と色差信号に分離し、輝度信号と色差信号のそれぞれに対して複数の帯域信号を生成することとして説明したが、これに代えて、階調変換が行われた画像信号から複数の帯域信号を生成し、各帯域信号を輝度信号と色差信号に分離することとしてもよい。
例えば、上述した各実施形態では、本発明に係る画像処理装置を撮像システムに適用した例を説明したが、具体的な撮像システムとして、放送用据え置き型カメラ、ENGカメラ、民生用ハンディカメラ、デジタルカメラ等の製品や、動画を扱う画像信号補正プログラム(CGプログラム)、画像編集装置としてもよい。
また、第1の階調変換特性は、第1の階調変換特性算出部16の各フィルタ処理・縮小処理部によりローパスフィルタ処理後に縮小されることとして説明したが、縮小処理のみを行うこととしてもよい。
11 光学系
13 撮像系
15 画像処理部
16 第1の階調変換特性算出部
17 階調変換部
19 第2の階調変換特性算出部
21,22 ノイズ低減部
23 画像圧縮部
25 記録メディア
101,111,201、211,221,301、311,321,401、411,421 フィルタ処理・縮小処理部
200 入力画像信号
250 出力画像信号
204,214,224,304,314,324,404,414,424 NR処理部
206,216,226,306,316,326,406,416,426 加算部
300 入力輝度信号
350 出力輝度信号
400 入力色差信号
450 出力色差信号
Claims (5)
- 入力された画像信号を複数の領域に分割し、分割した領域毎に、階調変換処理前の画素値と該画素値の増幅率の関数である第1の階調変換算特性を算出する第1の階調変換特性算出手段と、
該第1の階調変換算出手段により算出された前記第1の階調変換算特性を用いて、前記画像信号に対して前記領域毎に階調変換を行う階調変換手段と、
該階調変換手段により階調変換された画像信号から、多重解像度変換処理により互いに異なる周波数帯域を有する前記入力された画像信号より解像度が縮小された複数の帯域信号を生成する帯域信号生成手段と、
前記第1の階調変換算出手段により算出された第1の階調変換特性から、前記画素値の増幅率と前記帯域信号生成手段により生成された各前記帯域信号の解像度が合うように、前記各画素値の増幅率の解像度を縮小し、分割した領域毎に、各前記帯域信号と前記各画素の増幅率の関数である第2の階調変換算特性を算出する第2の階調変換特性算出手段と、
該第2の階調変換特性算出手段により算出された前記第2の階調変換算特性を用いて、各前記帯域信号に対してノイズの低減処理を行うノイズ低減手段と、
該ノイズ低減手段によりノイズの低減処理が行われた各前記帯域信号を合成する画像合成手段と
を備える画像処理装置。 - 前記帯域信号生成手段により生成された各帯域の輝度信号および色差信号に対応させて、前記第2の階調変換算特性を補正する階調変換特性補正手段を備え、
前記ノイズ低減手段が、
前記階調変換特性補正手段により補正された第2の階調変換算特性を用いて、各帯域の前記輝度信号および前記色差信号のそれぞれに対してノイズの低減処理を行う請求項1記載の画像処理装置。 - 被写体を撮影する撮像手段と、
前記撮像手段にて取得された画像信号を処理する請求項1又は請求項2記載の画像処理装置と
を具備する撮像システム。 - 入力された画像信号を複数の領域に分割し、分割した領域毎に、階調変換処理前の画素値と該画素値の増幅率の関数である第1の階調変換算特性を算出する第1の階調変換特性算出処理と、
該第1の階調変換算出手段により算出された前記第1の階調変換算特性を用いて、前記画像信号に対して前記領域毎に階調変換を行う階調変換処理と、
該階調変換手段により階調変換された画像信号から、多重解像度変換処理により互いに異なる周波数帯域を有する前記入力された画像信号より解像度が縮小された複数の帯域信号を生成する帯域信号生成処理と、
前記第1の階調変換算出手段により算出された第1の階調変換特性から、前記画素値の増幅率と前記帯域信号生成手段により生成された各前記帯域信号の解像度が合うように、前記各画素値の増幅率の解像度を縮小し、分割した領域毎に、各前記帯域信号と前記各画素の増幅率の関数である第2の階調変換算特性を算出する第2の階調変換特性算出処理と、
該第2の階調変換特性算出手段により算出された前記第2の階調変換算特性を用いて、各前記帯域信号に対してノイズの低減処理を行うノイズ低減処理と、
該ノイズ低減手段によりノイズの低減処理が行われた各前記帯域信号を合成する画像合成処理と
をコンピュータに実行させる画像処理プログラム。 - 入力された画像信号を複数の領域に分割し、分割した領域毎に、階調変換処理前の画素値と該画素値の増幅率の関数である第1の階調変換算特性を算出する第1の階調変換特性算出工程と、
該第1の階調変換算出手段により算出された前記第1の階調変換算特性を用いて、前記画像信号に対して前記領域毎に階調変換を行う階調変換工程と、
該階調変換手段により階調変換された画像信号から、多重解像度変換処理により互いに異なる周波数帯域を有する前記入力された画像信号より解像度が縮小された複数の帯域信号を生成する帯域信号生成工程と、
前記第1の階調変換算出手段により算出された第1の階調変換特性から、前記画素値の増幅率と前記帯域信号生成手段により生成された各前記帯域信号の解像度が合うように、前記各画素値の増幅率の解像度を縮小し、分割した領域毎に、各前記帯域信号と前記各画素の増幅率の関数である第2の階調変換算特性を算出する第2の階調変換特性算出工程と、
該第2の階調変換特性算出手段により算出された前記第2の階調変換算特性を用いて、各前記帯域信号に対してノイズの低減処理を行うノイズ低減工程と、
該ノイズ低減手段によりノイズの低減処理が行われた各前記帯域信号を合成する画像合成工程と
を含む画像処理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009022886A JP5185849B2 (ja) | 2009-02-03 | 2009-02-03 | 画像処理装置、プログラム、及び方法、並びに撮像システム |
US12/697,442 US8659684B2 (en) | 2009-02-03 | 2010-02-01 | Image processing apparatus, program, method and image capturing system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009022886A JP5185849B2 (ja) | 2009-02-03 | 2009-02-03 | 画像処理装置、プログラム、及び方法、並びに撮像システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010183182A JP2010183182A (ja) | 2010-08-19 |
JP5185849B2 true JP5185849B2 (ja) | 2013-04-17 |
Family
ID=42397379
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009022886A Expired - Fee Related JP5185849B2 (ja) | 2009-02-03 | 2009-02-03 | 画像処理装置、プログラム、及び方法、並びに撮像システム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8659684B2 (ja) |
JP (1) | JP5185849B2 (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5719148B2 (ja) * | 2010-11-10 | 2015-05-13 | キヤノン株式会社 | 撮像装置及びその制御方法、プログラム |
JP5762756B2 (ja) * | 2011-01-20 | 2015-08-12 | オリンパス株式会社 | 画像処理装置、画像処理方法、画像処理プログラム、および撮影装置 |
JP5595585B2 (ja) * | 2011-03-24 | 2014-09-24 | 三菱電機株式会社 | 画像処理装置及び方法 |
JP6087612B2 (ja) * | 2012-12-17 | 2017-03-01 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP5741610B2 (ja) | 2013-02-08 | 2015-07-01 | トヨタ自動車株式会社 | 接合装置および接合方法 |
JP2017091352A (ja) * | 2015-11-13 | 2017-05-25 | ソニー株式会社 | 画像処理装置及び画像処理方法 |
JP6929174B2 (ja) * | 2017-09-13 | 2021-09-01 | キヤノン株式会社 | 画像処理装置及び画像処理方法及びプログラム |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6825884B1 (en) * | 1998-12-03 | 2004-11-30 | Olympus Corporation | Imaging processing apparatus for generating a wide dynamic range image |
JP3465226B2 (ja) | 1999-10-18 | 2003-11-10 | 学校法人慶應義塾 | 画像濃度変換処理方法 |
JP2005348005A (ja) * | 2004-06-02 | 2005-12-15 | Konica Minolta Holdings Inc | 撮像装置、撮像システム及び撮像システム動作プログラム |
JP4293174B2 (ja) * | 2005-09-28 | 2009-07-08 | ソニー株式会社 | 撮像装置および画像処理装置 |
JP2008199448A (ja) * | 2007-02-15 | 2008-08-28 | Matsushita Electric Ind Co Ltd | 撮像装置、画像処理装置および画像処理方法 |
JP2008293424A (ja) * | 2007-05-28 | 2008-12-04 | Olympus Corp | ノイズ除去装置並びにプログラムおよび方法 |
JP4946795B2 (ja) * | 2007-10-29 | 2012-06-06 | ソニー株式会社 | 画像処理装置及び画像処理方法 |
JP2009284309A (ja) * | 2008-05-23 | 2009-12-03 | Casio Comput Co Ltd | 撮像装置、表示制御プログラム及び表示制御方法 |
-
2009
- 2009-02-03 JP JP2009022886A patent/JP5185849B2/ja not_active Expired - Fee Related
-
2010
- 2010-02-01 US US12/697,442 patent/US8659684B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US8659684B2 (en) | 2014-02-25 |
JP2010183182A (ja) | 2010-08-19 |
US20100194934A1 (en) | 2010-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4290193B2 (ja) | 画像処理装置 | |
JP5185849B2 (ja) | 画像処理装置、プログラム、及び方法、並びに撮像システム | |
US8526729B2 (en) | Image processing apparatus and method, and program | |
US8514302B2 (en) | Image processing equipment and digital camera that filter noise | |
JP4810473B2 (ja) | 画像処理装置および画像処理プログラム | |
JP3208762B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2013218487A (ja) | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム | |
JP4504412B2 (ja) | 画像処理装置及び画像処理方法 | |
JP2008311874A (ja) | 画像処理装置、画像処理プログラム、画像処理方法 | |
JP2004363853A (ja) | 画像信号のノイズ低減方法及びノイズ低減装置 | |
KR20120127627A (ko) | 화상 처리 장치 및 촬상 장치 | |
JP5249111B2 (ja) | 画像処理装置、方法、プログラム、及び撮像システム | |
JP5649927B2 (ja) | 画像処理装置、画像処理方法、および、画像処理プログラム | |
JP2011015277A (ja) | 画像処理装置、画像処理方法、画像処理プログラムおよび画像処理プログラムが記録された記録媒体 | |
JP2009005166A (ja) | 色補間装置及び画像処理システム | |
JP2006050042A (ja) | 画像処理装置 | |
JP3813362B2 (ja) | 画像処理装置及び画像処理方法 | |
WO2007011067A1 (ja) | 画像処理装置 | |
JP5682443B2 (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP2010147840A (ja) | 画像処理装置及び撮像装置 | |
JP2000149014A (ja) | 画像処理装置及び画像処理方法 | |
JP2009027537A (ja) | 画像処理装置、画像処理方法及び画像処理プログラム | |
JP2000152264A (ja) | 画像処理装置及び画像処理方法 | |
JP2009284269A (ja) | 画像処理装置、撮像装置、画像処理方法、およびプログラム | |
JP2010193384A (ja) | 画像処理装置及び方法並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20111219 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20121004 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20121009 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130108 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130118 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5185849 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160125 Year of fee payment: 3 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |