[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP3709981B2 - Gradation correction apparatus and method - Google Patents

Gradation correction apparatus and method Download PDF

Info

Publication number
JP3709981B2
JP3709981B2 JP2001165053A JP2001165053A JP3709981B2 JP 3709981 B2 JP3709981 B2 JP 3709981B2 JP 2001165053 A JP2001165053 A JP 2001165053A JP 2001165053 A JP2001165053 A JP 2001165053A JP 3709981 B2 JP3709981 B2 JP 3709981B2
Authority
JP
Japan
Prior art keywords
luminance signal
maximum value
minimum value
correction
luminance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001165053A
Other languages
Japanese (ja)
Other versions
JP2002359754A (en
Inventor
哲郎 塩田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2001165053A priority Critical patent/JP3709981B2/en
Priority to CN02801877A priority patent/CN1463534A/en
Priority to PCT/JP2002/003033 priority patent/WO2002100093A1/en
Priority to CA002417169A priority patent/CA2417169C/en
Priority to EP02707200A priority patent/EP1359746A4/en
Priority to US10/343,060 priority patent/US7199840B2/en
Publication of JP2002359754A publication Critical patent/JP2002359754A/en
Application granted granted Critical
Publication of JP3709981B2 publication Critical patent/JP3709981B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Picture Signal Circuits (AREA)
  • Television Receiver Circuits (AREA)
  • Processing Of Color Television Signals (AREA)
  • Facsimile Image Signal Circuits (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、階調補正装置に関し、より特定的には、映像輝度信号を補正することによって表示画像の階調を補正する階調補正装置に関する。
【0002】
【従来の技術】
従来、画像表示装置における画質補正では、表示画面の有効表示期間のほぼ全域をサンプリング窓とし、輝度信号の最大値または最小値から補正データを算出し、フィールドあるいはフレーム毎に入力映像輝度信号の補正を行って高画質化を実現している。
【0003】
例えば、有効表示期間内の映像輝度信号の最小値と最大値をフィールドあるいはフレーム毎に検出し、検出された輝度信号の最大値及び最小値を映像信号処理系のダイナミックレンジの最大値(デジタル8ビット処理では255)及び最小値(通常は0)に変換するとともに、それら最小値と最大値の間の輝度信号についても全て線形に内挿補間することにより、どのような映像輝度信号の入力に対しても、信号処理系が保有するダイナミックレンジのすべてを使いきるように補正する、黒伸張、白伸張という方式がある。特開平10−248024号公報に、その一例が開示されている。
【0004】
【発明が解決しようとする課題】
しかしながら、上述の従来の方法では、実際に検出された映像輝度信号の最大値および最小値に基づいて補正テーブルを算出するため、補正が不十分となる場合がある。例えば、映画のシーンなどで、有効表示期間内の大部分が暗いシーンにおいて、シーンの中の一画素にでも処理系のダイナミックレンジの最大値(8ビット処理では255)が存在している場合、従来の方法では、白方向の伸張による補正は行われない。このため、表示画像によっては十分な階調表現を行うことができないという問題がある。
【0005】
それ故に、本発明の目的は、表示画像によらず、特に映像輝度信号の輝度分布幅が広い場合であっても、表示画像の性質に応じて十分な階調表現を行うことのできる画像表示装置を提供することである。
【0006】
また、上述の従来の方法に限らないが、一般に入力映像輝度信号を補正することにより階調補正を行う場合には、輝度信号を補正したことによる映像の見え方の変化を補償するために、輝度信号の補正度合に応じて色差信号(U,V)も同時に補正する。このとき、輝度信号の補正度合が大きすぎる場合には、その補正度合に基づいて色差信号を補正すると、色差信号が飽和してしまい、すなわち補正前の色差信号における一定値以上の値が、補正後には色差信号が本来とりうる値の最大値となってしまい、それらの色差に関する情報が失われてしまうという問題がある。また、PCディスプレイなどで、これらの輝度信号および色差信号からRGB信号に変換して画像表示する際には、さらに、これら輝度信号および色差信号のいずれも飽和していない状態であるにもかかわらず、RGB信号が飽和してしまう状態が起こり得る。この場合も、色差信号の場合と同様に、補正後のRGB信号において飽和した部分の色差に関する情報は失われてしまう。これらの結果として、表示画像の品位が低下してしまう。
【0007】
それ故に、本発明の他の目的は、階調補正する際、輝度信号の補正度合の如何に関わらず、色差信号またはRGB信号が飽和してしまうことのない画像表示装置を提供することである。
【0008】
【課題を解決するための手段および発明の効果】
第1の発明は、入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正装置であって、
入力映像輝度信号の最小値を検出する最小値検出手段と、
入力映像輝度信号の輝度分布情報を検出するヒストグラム検出手段と、
ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が多い場合に最小値検出手段によって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が少ない場合に最小値検出手段によって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正手段と、
入力映像輝度信号の輝度レベルが補正最小値のときに、出力映像輝度信号の輝度レベルが処理系のダイナミックレンジの最小値となるように、入力映像輝度信号を伸張するように補正し出力映像輝度信号として出力する輝度信号補正手段とを備える。
【0009】
上記のように、第1の発明によれば、映像輝度信号から検出された最小値を、映像輝度信号の輝度分布に応じて映像輝度信号を補正することにより、検出された最小値の値にのみ依存することなく、表示映像に応じて階調を最適に調整することができる。
【0010】
第2の発明は、第1の発明において、輝度分布情報が、入力映像輝度信号のヒストグラム分布の所定の輝度範囲における分布量であることを特徴とする。
【0011】
上記のように、第2の発明によれば、映像輝度信号のヒストグラム分布の所定の輝度範囲における分布量を参照することにより、表示映像の特徴を適切に判断することができる。
【0012】
第3の発明は、第2の発明において、所定の輝度範囲が、ヒストグラム分布における最小の輝度区分範囲であることを特徴とする。
【0013】
上記のように、第3の発明によれば、映像輝度信号のヒストグラム分布の最小の輝度区分範囲を参照することにより、表示映像の黒近辺特徴を簡易に判断することができる。
【0014】
第4の発明は、第1の発明において、輝度信号補正手段は、所定の折れ曲げ点より小さい輝度範囲において入力映像輝度信号を補正することを特徴とする。
【0015】
上記のように、第4の発明によれば、所定の折れ曲げ点より小さい範囲の輝度信号を補正することにより、特に黒近辺の階調を強調した補正を行うことができる。
【0016】
第5の発明は、第4の発明において、ヒストグラム検出手段によって検出された輝度分布情報に応じて所定の折れ曲げ点を補正する折れ曲げ点補正手段をさらに備える。
【0017】
上記のように、第5の発明によれば、映像輝度信号の輝度分布に応じて折れ曲げ点を補正することにより、表示映像に応じて、黒近辺の階調をより最適に調整することができる。
【0018】
第6の発明は、第1の発明において、最小値検出手段が検出する最小値が、入力映像輝度信号をサンプリングまたはローパスフィルタに通過させた後の信号の最小値であり、
最小値補正手段は、ヒストグラム検出手段によって検出された輝度分布情報に基づいて、最小値検出手段によって検出された最小値を、より小さくなる方向に補正して補正最小値を得ることを特徴とする。
【0019】
上記のように、第6の発明によれば、映像輝度信号の輝度分布に応じて最小値検出手段によって検出された最小値を、より小さくなる方向に補正することにより、サンプリングやローパスフィルタによって除去されてしまった信号を拾って黒つぶれによる画質の悪化を回避することができる。
【0020】
第7の発明は、入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正装置であって、
入力映像輝度信号の最大値を検出する最大値検出手段と、
入力映像輝度信号の輝度分布情報を検出するヒストグラム検出手段と、
ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が多い場合に最大値検出手段によって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が少ない場合に最大値検出手段によって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正手段と、
入力映像輝度信号の輝度レベルが補正最大値のときに、出力映像輝度信号の輝度レベルが処理系のダイナミックレンジの最大値となるように、入力映像輝度信号を伸張するように補正し出力映像輝度信号として出力する輝度信号補正手段とを備える。
【0021】
上記のように、第7の発明によれば、映像輝度信号から検出された最大値のみでなく、映像輝度信号の輝度分布に応じて映像輝度信号を補正することにより、検出された最大値の値にのみ依存することなく、表示映像に応じて階調を最適に調整することができる。
【0022】
第8の発明は、第7の発明において、輝度分布情報が、入力映像輝度信号のヒストグラム分布の所定の輝度範囲における分布量であることを特徴とする。
【0023】
上記のように、第8の発明によれば、映像輝度信号のヒストグラム分布の所定の輝度範囲における分布量を参照することにより、表示映像の特徴を適切に判断することができる。
【0024】
第9の発明は、第8の発明において、所定の輝度範囲が、ヒストグラム分布における最大の輝度区分範囲であることを特徴とする。
【0025】
上記のように、第9の発明によれば、映像輝度信号のヒストグラム分布の最大の輝度区分範囲を参照することにより、表示映像の白近辺の特徴を簡易に判断することができる。
【0026】
第10の発明は、第7の発明において、輝度信号補正手段は、所定の折れ曲げ点より大きい輝度範囲において入力映像輝度信号を補正することを特徴とする。
【0027】
上記のように、第10の発明によれば、所定の折れ曲げ点より大きい範囲の輝度信号を補正することにより、特に白近辺の階調を強調した補正を行うことができる。
【0028】
第11の発明は、第10の発明において、ヒストグラム検出手段によって検出された輝度分布情報に応じて所定の折れ曲げ点を補正する折れ曲げ点補正手段をさらに備える。
【0029】
上記のように、第11の発明によれば、映像輝度信号の輝度分布に応じて折れ曲げ点を補正することにより、表示映像に応じて、白近辺の階調をより最適に調整することができる。
【0030】
第12の発明は、第7の発明において、最大値検出手段が検出する最大値が、入力映像輝度信号をサンプリングまたはローパスフィルタに通過させた後の信号の最大値であり、
最大値補正手段は、ヒストグラム検出手段によって検出された輝度分布情報に基づいて、最大値検出手段によって検出された最大値を、より大きくなる方向に補正して補正最大値を得ることを特徴とする。
【0031】
上記のように、第12の発明によれば、映像輝度信号の輝度分布に応じて最大値検出手段によって検出された最大値を、より小さくなる方向に補正することにより、サンプリングやローパスフィルタによって除去されてしまった信号を拾って白つぶれによる画質の悪化を回避することができる。
【0032】
第13の発明は、入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正装置であって、
入力映像輝度信号の最小値を検出する最小値検出手段と、
入力映像輝度信号の最大値を検出する最大値検出手段と、
入力映像輝度信号の輝度分布情報を検出するヒストグラム検出手段と、
ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が多い場合に最小値検出手段によって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が少ない場合に最小値検出手段によって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正手段と、
ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が多い場合に最大値検出手段によって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が少ない場合に最大値検出手段によって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正手段と、
入力映像輝度信号の輝度レベルが補正最小値及び補正最大値のときに、出力映像輝度信号の輝度レベルがそれぞれ処理系のダイナミックレンジの最小値及び最大値となるように、入力映像輝度信号を伸張するように補正し出力映像輝度信号として出力する輝度信号補正手段とを備える。
【0033】
上記のように、第13の発明によれば、映像輝度信号から検出された最小値や最大値を、映像輝度信号の輝度分布に応じて補正することにより、検出された最小値や最大値の値にのみ依存することなく、表示映像に応じて階調を最適に調整することができる。
【0042】
第14の発明は、入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正方法であって、
入力映像輝度信号の最小値を検出する最小値検出ステップと、
入力映像輝度信号の輝度分布情報を検出するヒストグラム検出ステップと、
ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が多い場合に最小値検出ステップによって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が少ない場合に最小値検出ステップによって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正ステップと、
入力映像輝度信号の輝度レベルが補正最小値のときに、出力映像輝度信号の輝度レベルが処理系のダイナミックレンジの最小値となるように、入力映像輝度信号を伸張するように補正し出力映像輝度信号として出力する輝度信号補正ステップとを備える。
【0043】
上記のように、第14の発明によれば、映像輝度信号から検出された最小値を、映像輝度信号の輝度分布に応じて映像輝度信号を補正することにより、検出された最小値の値にのみ依存することなく、表示映像に応じて階調を最適に調整することができる。
【0044】
第15の発明は、入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正方法であって、
入力映像輝度信号の最大値を検出する最大値検出ステップと、
入力映像輝度信号の輝度分布情報を検出するヒストグラム検出ステップと、
ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が多い場合に最大値検出ステップによって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が少ない場合に最大値検出ステップによって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正ステップと、
入力映像輝度信号の輝度レベルが補正最大値のときに、出力映像輝度信号の輝度レベルが処理系のダイナミックレンジの最大値となるように、入力映像輝度信号を伸張するように補正し出力映像輝度信号として出力する輝度信号補正ステップとを備える。
【0045】
上記のように、第15の発明によれば、映像輝度信号から検出された最大値のみでなく、映像輝度信号の輝度分布に応じて映像輝度信号を補正することにより、検出された最大値の値にのみ依存することなく、表示映像に応じて階調を最適に調整することができる。
【0046】
第16の発明は、入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正方法であって、
入力映像輝度信号の最小値を検出する最小値検出ステップと、
入力映像輝度信号の最大値を検出する最大値検出ステップと、
入力映像輝度信号の輝度分布情報を検出するヒストグラム検出ステップと、
ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が多い場合に最小値検出ステップによって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が少ない場合に最小値検出ステップによって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正ステップと、
ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が多い場合に最大値検出ステップによって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が少ない場合に最大値検出ステップによって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正ステップと、
入力映像輝度信号の輝度レベルが補正最小値及び補正最大値のときに、出力映像輝度信号の輝度レベルがそれぞれ処理系のダイナミックレンジの最小値及び最大値となるように、入力映像輝度信号を伸張するように補正し出力映像輝度信号として出力する輝度信号補正ステップとを備える。
【0047】
上記のように、第16の発明によれば、映像輝度信号から検出された最小値や最大値を、映像輝度信号の輝度分布に応じて補正することにより、検出された最小値や最大値の値にのみ依存することなく、表示映像に応じて階調を最適に調整することができる。
【0050】
【発明の実施の形態】
以下、図面を参照して、本発明の種々の実施形態について説明する。
(第1の実施形態)
図1は、本発明の第1の実施形態に係る階調補正装置の構成を示すブロック図である。図1において、階調補正装置は、ローパスフィルタ1と、ヒストグラム検出回路2と、最大値検出回路3と、最小値検出回路4と、最大値補正回路5と、最小値補正回路6と、第1の減算回路7と、第2の減算回路8と、除算回路9と、乗算回路10とを備える。
【0051】
以下、本実施形態の動作について説明する。まず、入力映像輝度信号がローパスフィルタ1に入力される。ローパスフィルタ1は、入力映像輝度信号から孤立点情報を除去して出力する。その出力信号は、水平方向及び垂直方向について、それぞれ適当なサンプリングレートでサンプリングが行われた後、ヒストグラム検出回路2、最大値検出回路3及び最小値検出回路4に供給される。これらヒストグラム検出回路2、最大値検出回路3及び最小値検出回路4では、それぞれ、画面内に設定した検出WINDOW内での最大値Kmax、最小値Kmin、及び階調方向の分布情報がフィールド毎に検出される。
【0052】
なお、サンプリングレートは、例えば水平4ドット毎、垂直4ライン毎のように離散的に設定してもよいし、全画素サンプリングしてもよい。また、これら最大値等の検出値を更新するレートとしては、フィールド毎でもよいし、フレーム毎でもよいし、さらに遅いレートでもよい。検出WINDOWは、画像と無関係な黒レベル(例えばワイド画面映画の上下の黒)や白レベル(映画等の字幕)を含まないように設定してもよい。
【0053】
検出された最大値Kmax及び最小値Kminは、最大値補正回路5及び最小値補正回路6において、ヒストグラム検出回路2の出力結果に応じてそれぞれ補正され、補正最大値Lmax及び補正最小値Lminとして出力される。この補正内容については後述する。入力映像輝度信号は、この補正最大値Lmax及び補正最小値Lminに基づいて補正され、出力映像輝度信号として階調補正装置より出力される。より具体的に説明すると、第1の減算回路では、補正最大値Lmax及び補正最小値Lminに基づいて(Lmax−Lmin)が算出される。除算回路9では、第1の減算回路の演算結果(Lmax−Lmin)及び補正後の輝度信号の最大値MAX(信号処理系の最大値)に基づいてMAX/(Lmax−Lmin)の除算が為される。第2の減算回路8では、入力映像輝度信号Lと補正最小値Lminに基づいて(L−Lmin)の演算が行われる。乗算回路10では、除算回路9の出力及び第2の算回路8の出力に基づいてMAX/(Lmax−Lmin)×(L−Lmin)の演算が為され、この演算結果が出力映像輝度信号として出力される。
【0054】
ここで、本実施形態における階調補正の効果を説明する前に、まず、従来の階調補正方法について説明する。図2に、従来の階調補正装置の入出力の関係を示す。従来の階調補正装置では、検出された入力映像輝度信号の最大値Kmax及び最小値Kminは、図2に示すように、それぞれ出力信号の最大値MAX及び最小値MINまで伸張される。最大値MAXは、処理系のダイナミックレンジの最大値(10BIT処理では1023に相当)であり、最小値MINは、処理系のダイナミックレンジの最小値(通常は0)である。入力映像輝度信号における最大値Kmax〜最小値Kmin間のレベルのデータは、最大値MAX〜最小値MIN間に変換される。これにより、例えばフィールド毎に処理系のダイナミックレンジをすべて使用した信号が出力されるので、表示画像のコントラストを高めることができる。しかしながら、この方法では、例えば暗いシーンであるにも関わらず検出された最大値Kmaxがほぼ最大値MAXに一致しているような場合には、十分な補正効果が得られない。そこで、本実施形態に係る階調補正装置では、最大値Kmax及び最小値Kminをそのまま利用するのではなく、画面のシーンに応じてこれらを最適に補正することにより得られる補正最大値Lmax及び補正最小値Lminを利用して階調補正を行う。以下、本実施形態における階調補正方法について説明する。
【0055】
本実施形態に係る階調補正装置では、まず入力映像輝度信号から検出された最大値Kmax及び最小値Kmin(図示せず)に基づいて、補正最大値Lmax及び補正最小値Lminが算出される。これら補正最大値Lmax及び補正最小値Lminの算出方法の詳細は後述する。その後、前述した従来の階調補正方法と同様に、補正最大値Lmax及び補正最小値Lminを、それぞれ出力信号の最大値MAX及び最小値MINまで伸張するように入力映像輝度信号を補正する。これは、前述のMAX/(Lmax−Lmin)×(L−Lmin)の演算に相当する。
【0056】
ところで、前述したような、暗いシーンであるにも関わらず検出された最大値Kmaxがほぼ最大値MAXに一致しているような場合には、従来のようにコントラストを全体的に均一に上げるよりも、むしろ、僅かに存在する明るい部分における白つぶれを許容してでも、その分、画面の大部分を占める暗い部分のコントラストを上げることにより、画面全体として、より良好な映像表示が可能となる。本実施形態では、このような観点に基づいて、補正最大値Lmax及び補正最小値Lminを算出する。
【0057】
以下、補正最大値Lmax及び補正最小値Lminの算出方法について具体的に説明する。まず、ヒストグラム検出回路2において、ローパスフィルタ1の出力信号からヒストグラム情報を検出する。以下では、仮に、ヒストグラム情報として、図3(a)に示すような4分割ヒストグラムの一段目の分割区分における分布量n1を用いる場合について説明する。最大値補正回路5及び最小値補正回路6は、ヒストグラム検出回路2によって検出されたヒストグラム情報に基づいて、最大値検出回路3及び最小値検出回路4から出力された最大値Kmax及び最小値Kminをそれぞれ補正する。ここで、最小値補正回路6は、ヒストグラム検出回路2からヒストグラム情報として供給される4分割ヒストグラムの1段目の分布量n1が十分多い場合は、最小値Kminを減少させる方向に補正を行い、逆にn1が十分少ない場合は、最小値Kminを増加させる方向に補正を行う。これにより、黒の分布が少ない場合は黒を締め、黒の分布が多い場合は黒の階調を保つことが可能となる。この補正方法を図示したものが図3(b)である。図3(b)において、分布量n1と補正量D(=補正最小値Lmin−最小値Kmin)の変換関数をD=f(n1)で表しているが、この関数は表示ディスプレイに応じて最適化する必要がある。同様に、白の階調に関しては、4分割ヒストグラムの4段目の分布量n4が十分多い場合は、最大値Kmaxを増加させる方向に補正を行い、逆にn4が十分少ない場合は、最大値Kmaxを減少させる方向に補正を行う。
【0058】
なお、ヒストグラム情報としては、4分割ヒストグラムの1段目や4段目の分布量に限らず、1段目や4段目以外の情報を参照してもよい。また、ヒストグラムの分割数も4つに限らず、例えば8や16など、細かく分割してもよい。また、ヒストグラム分布情報による補正は、最小値だけでもよいし最大値だけでもよい。また、補正後のRGBの各色の比率を一定に保つため、映像輝度信号の補正に加えて、映像輝度信号の補正に見合うだけ色差信号を補正してもよい。
【0059】
本実施形態に係る階調補正装置による上記の動作により、例えば、前述したような、暗いシーンであるにも関わらず検出された最大値Kmaxがほぼ最大値MAXに一致しているような場合であっても、図4に示すように、画面の大部分を占める黒の分布が多い輝度レベル範囲において、処理系のダイナミックレンジを活かした十分な階調補正が行えるようになる。なお、この補正を行うことにより、補正最大値Lmax〜最大値Kmax間のデータについては最大値MAXとして出力され、白つぶれが生じることになるが、もともとこの範囲のデータは僅かに存在するのみであるので、これを許容することによって、画面全体として、より良好な映像表示を実現できる。
【0060】
なお、本実施形態では、ヒストグラム情報によっては、補正最小値Lminが最小値Kminよりも小さくなったり、補正最大値Lmaxが最大値Kmaxよりも大きくなったりするような補正を行っているが、この意味について以下に簡単に説明する。
【0061】
本実施形態において、最大値検出回路3及び最小値検出回路4で検出される最大値Kmax及び最小値Kminは、実際には、本来の入力映像輝度信号からローパスフィルタによってある程度の孤立点の情報が除去され、さらに所定のサンプリングレートでサンプリングが行われた後の信号における最大値及び最小値である。したがって、実際の入力映像輝度信号には、図4に示す最小値Kminよりも小さいにも関わらず、本来必要な映像情報が存在することが考えられる。最大値Kmaxより大きいものについても同様である。そうした場合、例えば図2に示す従来の補正方法では、これらのデータについては、最大値MINまたは最小値MINのデータとして扱われ、階調情報はつぶれてしまう。しかしながら、例えば図4に示すように、ヒストグラム結果によって暗いシーンであると判定されるような場合に、補正最小値Lminを最小値Kminよりも小さくすれば、最小値Kminよりも小さいけれども本来必要な映像情報をつぶすことなく拾うことが可能となり、シーンに応じてより良好な画像表示を行うことができる。
【0062】
なお、補正最小値Lminを最小値Kminよりも小さくしたり、補正最大値Lmaxを最大値Kmaxよりも大きくするような補正は、上述のような意味があるからであって、もし仮に、最大値検出回路3及び最小値検出回路4において、本来必要な映像情報を全て含んだ上での最大値Kmax及び最小値Kminを検出するような構成であれば、そのような方向への補正には特に意味はないであろう。
【0063】
以上のように、第1の実施形態によれば、入力映像輝度信号の最大値及び最小値をダイナミックレンジに拡大する補正を行う際、最大値及び最小値に対してヒストグラム分布情報に基づく補正を行うことにより、シーンに応じた最適な補正効果が得られるとともに、同補正時に問題であった黒つぶれ、白つぶれの問題を解決し、黒白レベルの階調性とコントラストを両立することができる。
【0064】
(第2の実施形態)
図5に、本発明の第2の実施形態に係る階調補正装置の構成を示す。なお、図5において、図1に示す階調補正装置と同様の構成には同一の参照符号を付し、説明を省略する。
【0065】
本実施形態における最小値補正の考え方は、第1の実施形態と同様である。加えて、折れ曲げ点補正回路11により、ヒストグラムの分布情報に基づいて黒伸張の折れ曲げ点の補正を行う。黒伸張補正回路12の動作原理を図9を参照して説明する。黒伸補正回路12には、最小値補正回路6から出力される1フィールド毎の検出WINDOW内の補正最小値Lminと、折れ曲げ点初期値Kioを折れ曲げ点補正回路11によって補正して得られた折れ曲げ点Lioと、入力映像輝度信号とが入力される。黒伸張補正回路12では、入力されたLmin以下の信号レベルは存在しないとの判断から、折れ曲げ点Lio以下の範囲を図示の補正後特性のように折り曲げて黒レベルを伸張する。この回路は、FPGA等のハードで実現してもよいし、マイコン等のソフトで実現してもよい。なお、補正最小値Lminの算出方法については、前述の第1の実施形態と同様であるので説明を省略する。
【0066】
折れ曲げ点補正回路11は、ヒストグラム検出回路2によって検出された分布情報、例えば、図3(a)に示したような4分割ヒストグラムの1段目の分布量n1に基づいて、図7に示すように、折れ曲げ点の補正量Dを算出する。関数D=g(n1)は、表示ディスプレイに応じて最小値補正量と組み合わせて検討することにより最適化する必要がある。
【0067】
なお、本実施形態では、以上の動作によって入力映像輝度信号の補正を行うが、補正後のRGBの各色の比率を一定に保つため、映像輝度信号の補正に見合うだけ色差信号を補正してもよい。
【0068】
以上のように、第2の実施形態によれば、フィールド毎の最小値を検出し、検出した最小値をそのフィールドの輝度分布に基づいて補正し、さらに伸張する範囲を決める折れ曲げ点も輝度分布に基づいて補正し、こうして補正した最小値及び折れ曲げ点に基づいて黒伸張補正を行う。よって、黒伸補正時の問題であった黒つぶれ等の問題を解決し、黒の階調性とコントラストを両立させることが可能となる。
【0069】
(第3の実施形態)
図8に、本発明の第3の実施形態に係る階調補正装置の構成を示す。なお、図8において、図1に示す第一、第二の発明の実施の形態の図1、図2と同一要素については同一符号を付し、同一の動作をするものとする。
【0070】
本実施形態における最大値補正の考え方は、第1の実施形態と同様である。また、折れ曲げ点補正の考え方は、第2の実施形態と同様である。白伸張補正回路13の動作原理を図9を参照して説明する。白伸補正回路13には、最大値補正回路5から出力される1フィールド毎の検出WINDOW内の補正最大値Lmaxと、折れ曲げ点初期値を折れ曲げ点補正回路11によって補正して得られた折れ曲げ点Laoと、入力映像輝度信号とが入力される。白伸張補正回路13では、入力されたLmax以上の信号レベルは存在しないとの判断から、折れ曲げ点Lao以上の範囲を図示の補正後特性のように折り曲げて白レベルを伸張する。この回路は、FPGA等のハードで実現してもよいしマイコン等のソフトで実現してもよい。なお、補正最大値Lmaxの算出方法については、前述の第1の実施形態と同様であるので説明を省略する。
【0071】
折れ曲げ点補正回路11は、ヒストグラム検出回路2によって検出された分布情報、例えば、図3(a)に示したような4分割ヒストグラムの4段目の分布量n4から、折れ曲げ点を算出する。
【0072】
なお、本実施形態では、以上の動作によって入力映像輝度信号の補正を行うが、補正後のRGBの各色の比率を一定に保つため、映像輝度信号の補正に見合うだけ色差信号を補正してもよい。
【0073】
以上のように、第3の実施形態によれば、フィールド毎の最大値を検出し、検出した最大値をそのフィールドの輝度分布に基づいて補正し、さらに伸張する範囲を決める折れ曲げ点も輝度分布に基づいて補正し、こうして補正した最大値及び折れ曲げ点に基づいて白伸補正を行う。よって、白伸補正時の問題であった白つぶれ等の問題を解決し、白の階調性とコントラストを両立させることが可能となる。
【0074】
(第4の実施形態)
図10に、本発明の第4の実施形態に係る階調補正装置の構成を示す。本実施形態では入力映像輝度信号を補正して出力輝度信号として出力するが、本実施形態に係る階調補正装置は、特に、この出力輝度信号に基づいて映像色差信号も補正して画像表示を行う場合に適用される。また、さらには、これら補正された映像輝度信号及び映像色差信号をRGB信号に変換して画像表示を行う場合に適用される。以下、本実施形態の動作について説明する。
【0075】
入力映像輝度信号は、階調補正回路14によって、例えば黒伸張、白伸張のような、ダイナミックレンジを拡大するように補正される。通常、輝度信号のゲインが補正された場合、RGB信号変換後のRGBの比率を保つため、色差信号にも画素毎で考えて輝度信号と同様のゲインの補正を行う必要がある。このとき、輝度信号Yの補正度合が大きい場合、色差信号U、Vの補正時に色差信号U、Vの少なくともいずれかの信号が信号処理系のダイナミックレンジを越えて飽和する問題がある。さらには、たとえ色差信号の補正時にダイナミックレンジを越えなくとも、補正後のYUV信号からRGB信号への変換時にRGBの少なくとも一色が信号処理系のダイナミックレンジを越えて飽和する問題がある。このように、色差信号U、VまたはRGB信号が信号処理系のダイナミックレンジを越えて飽和してしまった場合、ダイナミックレンジから溢れてしまったデータに関しては、もとの階調情報が失われてしまって色がつぶれてしまう。
【0076】
本実施形態では、上記の問題を回避するために、入力色差信号レベルを検出し、色差信号U、Vが一定の値より大きい場合、輝度信号の補正にリミットをかける。これにより、補正後の色差信号U、V、さらにはRGBに変換後のRGB信号の飽和を防ぐ。
【0077】
そのために、まず、色差信号レベル検出回路16において、入力映像色差信号の大きさ成分|C|を検出する。この|C|は、例えばU、V信号の大きさ成分のうちの大きい方をとってもよいし、U、V信号の大きさ成分のどちらか一方のみに注目してもよい。補正輝度信号リミッタ回路15は、入力映像輝度信号つまり階調補正前信号Y1と、階調補正回路14から出力される階調補正後信号Y2と、色差信号レベル検出回路16の検出結果に応じて、出力映像輝度信号を出力する。図11に、補正輝度信号リミッタ回路15に入力される色差信号レベル|C|と、補正輝度信号リミッタ回路15の出力つまり出力映像輝度信号Youtの関係を示す。図11に示すように、補正輝度信号リミッタ回路15は、色差信号レベル|C|がしきい値C2よりも小さい範囲の画素については、前述の飽和の問題は起こらないと考え、階調補正回路14によって補正された階調補正後信号Y2を補正結果Youtとしてそのまま出力する。一方、色差信号レベル|C|がしきい値C2以上C1以下の範囲の画素については、補正後の輝度信号レベルによっては前述の飽和の問題が起こりうると考え、前述の階調補正後信号Y2から階調補正前信号Y1までの間のレベルで色差信号レベル|C|に応じた信号を補正結果Youtとして出力する。具体的には、例えば、階調補正後信号Y2を、階調補正前信号Y1及び色差信号レベル|C|に基づいて(C1−|C|)×(Ym−Yin)/(C1−C2)となるように補正して、補正結果Youtとして出力する。一方、色差信号レベル|C|がしきい値C1よりも大きい場合は、前述の飽和の問題が起こりうると考え、階調補正前信号Y1をそのまま出力、つまり画素の輝度信号を補正せずに出力する。
【0078】
なお色差信号については、本実施形態の階調補正装置によって得られた出力映像輝度信号Youtと入力映像輝度信号Y1の比に基づいて、補正後色差信号Cout=補正前色差信号Cin×Yout/Y1という補正がなされ、RGBの比率が一定に保たれる。このようにして得られた出力映像輝度信号Yout及び補正後色差信号Cout(YUV)からRGBにマトリクス変換した場合、RGBの単色で信号処理系のダイナミックレンジを越えることはなく、前述の飽和の問題が回避できる。
【0079】
なお、本実施形態の以上の説明では、映像信号を最終的にRGB信号に変換して画像表示する場合について説明したが、YUV信号によって画像表示する場合については、図11に示した補正輝度信号リミッタ回路15における入出力の関係を、少なくともU、V信号について飽和しない程度に設定すればよい。
【0080】
なお、本実施形態では、補正輝度信号リミッタ回路15における入出力の関係を、図11に示す関係としたが、これに限らず、この入出力の関係は、前述の飽和の問題を回避できる範囲において、自由に設定しても構わない。
【0081】
以上のように、第4の実施形態によれば、黒伸、白伸のように、入力映像輝度信号のダイナミックレンジを拡大するような補正がなされる場合において、この補正結果に基づいて色差信号を補正する際に、補正後の色差信号が信号処理系のダイナミックレンジを越えて飽和してしまうのを防ぐことができる。また、補正された輝度信号及び色差信号をRGB信号に変換して画像表示する際にも、RGB信号が信号処理系のダイナミックレンジを越えて飽和してしまうのを防ぐことができる。よって、輝度補正した結果、色がつぶれてしまうといった問題が回避でき、階調補正による表示品位の低下を防ぐことができる。
【図面の簡単な説明】
【図1】本発明の第1の実施形態に係る階調補正装置の構成を示すブロック図である。
【図2】従来の階調補正装置の補正動作について説明するための図である。
【図3】ヒストグラム検出回路2の検出結果及びこの検出結果に基づく最小値補正回路6における補正最小値の算出方法について説明するための図である。
【図4】第1の実施形態の補正動作について説明するための図である。
【図5】本発明の第2の実施形態に係る階調補正装置の構成を示すブロック図である。
【図6】第2の実施形態の補正動作について説明するための図である。
【図7】折れ曲げ点補正回路11における折れ曲げ点の算出方法について説明するための図である。
【図8】本発明の第3の実施形態に係る階調補正装置の構成を示すブロック図である。
【図9】第3の実施形態の補正動作について説明するための図である。
【図10】本発明の第4の実施形態に係る階調補正装置の構成を示すブロック図である。
【図11】補正輝度信号リミッタ回路15の動作について説明するための図である。
【符号の説明】
1 ローパスフィルタ
2 ヒストグラム検出回路
3 最大値検出回路
4 最小値検出回路
5 最大値補正回路
6 最小値補正回路
7 第1の減算回路
8 第2の減算回路
9 除算回路
10 乗算回路
11 折れ曲げ点補正回路
12 黒伸補正回路
13 白伸補正回路
14 階調補正回路
15 補正輝度信号リミッタ回路
16 色差信号レベル検出回路
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a gradation correction apparatus, and more particularly to a gradation correction apparatus that corrects the gradation of a display image by correcting a video luminance signal.
[0002]
[Prior art]
Conventionally, in image quality correction in an image display device, correction data is calculated from the maximum value or minimum value of the luminance signal using almost the entire effective display period of the display screen, and the input video luminance signal is corrected for each field or frame. To achieve high image quality.
[0003]
For example, the minimum value and maximum value of the video luminance signal within the effective display period are detected for each field or frame, and the maximum value and minimum value of the detected luminance signal are detected as the maximum value of the dynamic range of the video signal processing system (digital 8). In the bit processing, it is converted into 255) and the minimum value (usually 0), and all the luminance signals between the minimum value and the maximum value are linearly interpolated to obtain any video luminance signal input. On the other hand, there are methods such as black expansion and white expansion that perform correction so that the entire dynamic range of the signal processing system is used. An example is disclosed in Japanese Patent Laid-Open No. 10-248024.
[0004]
[Problems to be solved by the invention]
However, in the above-described conventional method, the correction table is calculated based on the maximum value and the minimum value of the actually detected video luminance signal, so that correction may be insufficient. For example, in a scene of a movie, etc., where the effective display period is mostly dark, when the maximum value of the dynamic range of the processing system (255 in 8-bit processing) exists in one pixel in the scene, In the conventional method, correction by expansion in the white direction is not performed. Therefore, there is a problem that sufficient gradation expression cannot be performed depending on the display image.
[0005]
Therefore, an object of the present invention is to provide an image display capable of sufficient gradation expression according to the properties of the display image, even when the luminance distribution width of the video luminance signal is wide, regardless of the display image. Is to provide a device.
[0006]
In addition, although not limited to the above-described conventional method, in general, in the case of performing gradation correction by correcting the input video luminance signal, in order to compensate for the change in the appearance of the video due to the correction of the luminance signal, The color difference signals (U, V) are simultaneously corrected according to the correction level of the luminance signal. At this time, if the correction level of the luminance signal is too large, if the color difference signal is corrected based on the correction level, the color difference signal is saturated, that is, a value of a certain value or more in the color difference signal before correction is corrected. Later, there is a problem that the color difference signal becomes the maximum value that can be originally taken, and information about the color difference is lost. Further, when displaying these images by converting these luminance signals and color difference signals into RGB signals on a PC display or the like, the luminance signals and the color difference signals are not saturated. The RGB signal may be saturated. Also in this case, as in the case of the color difference signal, information regarding the color difference of the saturated portion in the corrected RGB signal is lost. As a result of these, the quality of the display image is degraded.
[0007]
Therefore, another object of the present invention is to provide an image display device that does not saturate the color difference signal or the RGB signal regardless of the correction level of the luminance signal when performing gradation correction. .
[0008]
[Means for Solving the Problems and Effects of the Invention]
A first invention is a gradation correction device that corrects gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputs it as an output video luminance signal,
Minimum value detecting means for detecting the minimum value of the input video luminance signal;
Histogram detecting means for detecting luminance distribution information of the input video luminance signal;
Based on the luminance distribution information detected by the histogram detection means When there is a lot of black distribution The minimum value detected by the minimum value detection means In a smaller direction Correct to obtain the minimum correction value Or, when the black distribution is small based on the luminance distribution information detected by the histogram detection means, the minimum value detected by the minimum value detection means is corrected in a larger direction to obtain a corrected minimum value. Minimum value correction means;
When the luminance level of the input video luminance signal is the minimum correction value, the output video luminance signal is corrected to be expanded so that the luminance level of the output video luminance signal becomes the minimum value of the dynamic range of the processing system. Luminance signal correction means for outputting as a signal.
[0009]
As described above, according to the first aspect, the minimum value detected from the video luminance signal is corrected to the minimum value detected by correcting the video luminance signal according to the luminance distribution of the video luminance signal. Therefore, it is possible to optimally adjust the gradation according to the display image.
[0010]
According to a second aspect, in the first aspect, the luminance distribution information is a distribution amount in a predetermined luminance range of the histogram distribution of the input video luminance signal.
[0011]
As described above, according to the second aspect, it is possible to appropriately determine the characteristics of the display video by referring to the distribution amount in the predetermined luminance range of the histogram distribution of the video luminance signal.
[0012]
According to a third aspect, in the second aspect, the predetermined luminance range is a minimum luminance division range in the histogram distribution.
[0013]
As described above, according to the third aspect, it is possible to easily determine the black vicinity feature of the display image by referring to the minimum luminance division range of the histogram distribution of the video luminance signal.
[0014]
According to a fourth invention, in the first invention, the luminance signal correction means corrects the input video luminance signal in a luminance range smaller than a predetermined bending point.
[0015]
As described above, according to the fourth aspect of the invention, it is possible to perform correction that particularly emphasizes the gradation near black by correcting the luminance signal in a range smaller than the predetermined bending point.
[0016]
According to a fifth invention, in the fourth invention, a bending point correcting means for correcting a predetermined bending point according to the luminance distribution information detected by the histogram detecting means is further provided.
[0017]
As described above, according to the fifth aspect, by correcting the bending point according to the luminance distribution of the video luminance signal, the gradation near black can be adjusted more optimally according to the display image. it can.
[0018]
In a sixth aspect based on the first aspect, the minimum value detected by the minimum value detecting means is the minimum value of the signal after the input video luminance signal has been sampled or passed through the low-pass filter,
The minimum value correction means corrects the minimum value detected by the minimum value detection means in a smaller direction based on the luminance distribution information detected by the histogram detection means to obtain a corrected minimum value. .
[0019]
As described above, according to the sixth invention, the minimum value detected by the minimum value detecting means is corrected in a smaller direction according to the luminance distribution of the video luminance signal, and is removed by sampling or a low-pass filter. It is possible to avoid the deterioration of image quality due to blackout by picking up the signal that has been made.
[0020]
A seventh invention is a gradation correction device that corrects gradation by extending a part of the luminance level range of the input video luminance signal to the dynamic range of the processing system and outputs it as an output video luminance signal,
Maximum value detection means for detecting the maximum value of the input video luminance signal;
Histogram detecting means for detecting luminance distribution information of the input video luminance signal;
Based on the luminance distribution information detected by the histogram detection means When there is a lot of white distribution The maximum value detected by the maximum value detection means In a direction to become larger Correct to obtain the maximum correction value Alternatively, when the white distribution is small based on the luminance distribution information detected by the histogram detection means, the maximum value detected by the maximum value detection means is corrected in a smaller direction to obtain a corrected maximum value. Maximum value correction means;
When the luminance level of the input video luminance signal is the maximum correction value, the output video luminance signal is corrected to be expanded so that the luminance level of the output video luminance signal becomes the maximum value of the dynamic range of the processing system. Luminance signal correction means for outputting as a signal.
[0021]
As described above, according to the seventh aspect, not only the maximum value detected from the video luminance signal, but also the correction of the video luminance signal according to the luminance distribution of the video luminance signal, The gradation can be optimally adjusted according to the display image without depending only on the value.
[0022]
According to an eighth aspect, in the seventh aspect, the luminance distribution information is a distribution amount in a predetermined luminance range of the histogram distribution of the input video luminance signal.
[0023]
As described above, according to the eighth aspect, it is possible to appropriately determine the characteristics of the display video by referring to the distribution amount in the predetermined luminance range of the histogram distribution of the video luminance signal.
[0024]
In a ninth aspect based on the eighth aspect, the predetermined luminance range is a maximum luminance division range in the histogram distribution.
[0025]
As described above, according to the ninth aspect, it is possible to easily determine the characteristics of the vicinity of the white of the display image by referring to the maximum luminance division range of the histogram distribution of the image luminance signal.
[0026]
According to a tenth aspect, in the seventh aspect, the luminance signal correcting means corrects the input video luminance signal in a luminance range larger than a predetermined bending point.
[0027]
As described above, according to the tenth aspect of the invention, it is possible to perform correction that particularly emphasizes the gradation near white by correcting the luminance signal in a range larger than the predetermined bending point.
[0028]
In an eleventh aspect based on the tenth aspect, the eleventh aspect of the invention further comprises a bending point correcting means for correcting a predetermined bending point according to the luminance distribution information detected by the histogram detecting means.
[0029]
As described above, according to the eleventh aspect, by correcting the bending point according to the luminance distribution of the video luminance signal, it is possible to more optimally adjust the gradation near white according to the display video. it can.
[0030]
In a twelfth aspect based on the seventh aspect, the maximum value detected by the maximum value detecting means is the maximum value of the signal after the input video luminance signal is sampled or passed through the low-pass filter,
The maximum value correcting means corrects the maximum value detected by the maximum value detecting means in a direction of increasing based on the luminance distribution information detected by the histogram detecting means to obtain a corrected maximum value. .
[0031]
As described above, according to the twelfth aspect, the maximum value detected by the maximum value detecting means is corrected in a smaller direction according to the luminance distribution of the video luminance signal, and is removed by sampling or a low-pass filter. By picking up the signal that has been generated, it is possible to avoid deterioration in image quality due to white-out.
[0032]
A thirteenth aspect of the present invention is a gradation correction apparatus for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal.
Minimum value detecting means for detecting the minimum value of the input video luminance signal;
Maximum value detection means for detecting the maximum value of the input video luminance signal;
Histogram detecting means for detecting luminance distribution information of the input video luminance signal;
Based on the luminance distribution information detected by the histogram detection means When there is a lot of black distribution The minimum value detected by the minimum value detection means In a smaller direction Correct to obtain the minimum correction value Or, when the black distribution is small based on the luminance distribution information detected by the histogram detection means, the minimum value detected by the minimum value detection means is corrected in a larger direction to obtain a corrected minimum value. Minimum value correction means;
Based on the luminance distribution information detected by the histogram detection means When there is a lot of white distribution The maximum value detected by the maximum value detection means In a direction to become larger Correct to obtain the maximum correction value Alternatively, when the white distribution is small based on the luminance distribution information detected by the histogram detection means, the maximum value detected by the maximum value detection means is corrected in a smaller direction to obtain a corrected maximum value. Maximum value correction means;
When the luminance level of the input video luminance signal is the minimum correction value and maximum correction value, the input video luminance signal is expanded so that the luminance level of the output video luminance signal becomes the minimum value and maximum value of the dynamic range of the processing system, respectively. And a luminance signal correcting means for correcting the output and outputting it as an output video luminance signal.
[0033]
As described above, according to the thirteenth aspect, by correcting the minimum value and the maximum value detected from the video luminance signal according to the luminance distribution of the video luminance signal, The gradation can be optimally adjusted according to the display image without depending only on the value.
[0042]
A fourteenth aspect of the present invention is a gradation correction method for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal.
A minimum value detecting step for detecting a minimum value of the input video luminance signal;
A histogram detection step for detecting luminance distribution information of the input video luminance signal;
Based on the luminance distribution information detected by the histogram detection step When there is a lot of black distribution The minimum value detected by the minimum value detection step In a smaller direction Correct to obtain the minimum correction value Alternatively, when the black distribution is small based on the luminance distribution information detected by the histogram detection step, the minimum value detected by the minimum value detection step is corrected in a larger direction to obtain a corrected minimum value. A minimum value correction step;
When the luminance level of the input video luminance signal is the minimum correction value, the output video luminance signal is corrected to be expanded so that the luminance level of the output video luminance signal becomes the minimum value of the dynamic range of the processing system. And a luminance signal correcting step for outputting as a signal.
[0043]
As above, 14 According to the invention, the minimum value detected from the video luminance signal is corrected by correcting the video luminance signal according to the luminance distribution of the video luminance signal, so that the display can be performed without depending only on the detected minimum value. The gradation can be optimally adjusted according to the image.
[0044]
A fifteenth aspect of the present invention is a gradation correction method for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
A maximum value detecting step for detecting the maximum value of the input video luminance signal;
A histogram detection step for detecting luminance distribution information of the input video luminance signal;
Based on the luminance distribution information detected by the histogram detection step When there is a lot of white distribution The maximum value detected by the maximum value detection step In a direction to become larger Correct to obtain the maximum correction value Or, when the white distribution is small based on the luminance distribution information detected by the histogram detection step, the maximum value detected by the maximum value detection step is corrected in a smaller direction to obtain a corrected maximum value. A maximum value correction step;
When the luminance level of the input video luminance signal is the maximum correction value, the output video luminance signal is corrected to be expanded so that the luminance level of the output video luminance signal becomes the maximum value of the dynamic range of the processing system. And a luminance signal correcting step for outputting as a signal.
[0045]
As above, 15 According to this invention, not only the maximum value detected from the video luminance signal but also the video luminance signal is corrected according to the luminance distribution of the video luminance signal, so that it does not depend only on the detected maximum value. The gradation can be optimally adjusted according to the display image.
[0046]
A sixteenth aspect of the invention is a gradation correction method for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal.
A minimum value detecting step for detecting a minimum value of the input video luminance signal;
A maximum value detecting step for detecting the maximum value of the input video luminance signal;
A histogram detection step for detecting luminance distribution information of the input video luminance signal;
Based on the luminance distribution information detected by the histogram detection step When there is a lot of black distribution The minimum value detected by the minimum value detection step In a smaller direction Correct to obtain the minimum correction value Alternatively, when the black distribution is small based on the luminance distribution information detected by the histogram detection step, the minimum value detected by the minimum value detection step is corrected in a larger direction to obtain a corrected minimum value. A minimum value correction step;
Based on the luminance distribution information detected by the histogram detection step When there is a lot of white distribution The maximum value detected by the maximum value detection step In a direction to become larger Correct to obtain the maximum correction value Or, when the white distribution is small based on the luminance distribution information detected by the histogram detection step, the maximum value detected by the maximum value detection step is corrected in a smaller direction to obtain a corrected maximum value. A maximum value correction step;
When the luminance level of the input video luminance signal is the minimum correction value and maximum correction value, the input video luminance signal is expanded so that the luminance level of the output video luminance signal becomes the minimum value and maximum value of the dynamic range of the processing system, respectively. And a luminance signal correcting step for correcting the output and outputting as an output video luminance signal.
[0047]
As above, 16 According to the invention, the minimum value and the maximum value detected from the video luminance signal are corrected according to the luminance distribution of the video luminance signal, so that it does not depend only on the detected minimum value or maximum value. The gradation can be optimally adjusted according to the display image.
[0050]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, various embodiments of the present invention will be described with reference to the drawings.
(First embodiment)
FIG. 1 is a block diagram showing a configuration of a gradation correction apparatus according to the first embodiment of the present invention. In FIG. 1, the gradation correction apparatus includes a low-pass filter 1, a histogram detection circuit 2, a maximum value detection circuit 3, a minimum value detection circuit 4, a maximum value correction circuit 5, a minimum value correction circuit 6, 1 subtracting circuit 7, second subtracting circuit 8, dividing circuit 9, and multiplying circuit 10.
[0051]
Hereinafter, the operation of this embodiment will be described. First, the input video luminance signal is input to the low-pass filter 1. The low-pass filter 1 removes isolated point information from the input video luminance signal and outputs it. The output signal is sampled at appropriate sampling rates in the horizontal direction and the vertical direction, and then supplied to the histogram detection circuit 2, the maximum value detection circuit 3, and the minimum value detection circuit 4. In the histogram detection circuit 2, the maximum value detection circuit 3, and the minimum value detection circuit 4, the maximum value Kmax, the minimum value Kmin, and the distribution information in the gradation direction in the detection window set in the screen are respectively displayed for each field. Detected.
[0052]
The sampling rate may be set discretely, for example, every horizontal 4 dots or every vertical 4 lines, or all pixel sampling may be performed. Further, the rate at which the detection value such as the maximum value is updated may be for each field, for each frame, or may be a slower rate. The detection WINDOW may be set so as not to include a black level irrelevant to the image (for example, the upper and lower blacks of a wide-screen movie) or a white level (caption of a movie or the like).
[0053]
The detected maximum value Kmax and minimum value Kmin are corrected by the maximum value correction circuit 5 and the minimum value correction circuit 6 according to the output result of the histogram detection circuit 2, respectively, and output as the correction maximum value Lmax and the correction minimum value Lmin. Is done. Details of the correction will be described later. The input video luminance signal is corrected based on the maximum correction value Lmax and the minimum correction value Lmin, and is output from the gradation correction device as the output video luminance signal. . Yo More specifically, First Subtraction circuit 7 Then, (Lmax−Lmin) is calculated based on the maximum correction value Lmax and the minimum correction value Lmin. In the division circuit 9, First Subtraction circuit 7 The division of MAX / (Lmax−Lmin) is performed based on the calculation result (Lmax−Lmin) and the maximum value MAX of the luminance signal after correction (maximum value of the signal processing system). In the second subtraction circuit 8, (L−Lmin) is calculated based on the input video luminance signal L and the corrected minimum value Lmin. In the multiplication circuit 10, the output of the division circuit 9 and the second Decrease Based on the output of the arithmetic circuit 8, MAX / (Lmax−Lmin) × (L−Lmin) is calculated, and the calculation result is output as an output video luminance signal.
[0054]
Here, before describing the effect of gradation correction in this embodiment, first, a conventional gradation correction method will be described. FIG. 2 shows the input / output relationship of the conventional gradation correction apparatus. In the conventional gradation correction apparatus, the maximum value Kmax and the minimum value Kmin of the detected input video luminance signal are expanded to the maximum value MAX and the minimum value MIN of the output signal, respectively, as shown in FIG. The maximum value MAX is the maximum value of the dynamic range of the processing system (corresponding to 1023 in the 10-bit processing), and the minimum value MIN is the minimum value (usually 0) of the dynamic range of the processing system. Data of a level between the maximum value Kmax and the minimum value Kmin in the input video luminance signal is converted between the maximum value MAX and the minimum value MIN. Thereby, for example, a signal using the entire dynamic range of the processing system is output for each field, so that the contrast of the display image can be increased. However, with this method, for example, when the detected maximum value Kmax substantially matches the maximum value MAX in spite of a dark scene, a sufficient correction effect cannot be obtained. Therefore, in the gradation correction apparatus according to the present embodiment, the maximum value Kmax and the minimum value Kmin are not used as they are, but the correction maximum value Lmax and the correction obtained by optimally correcting them according to the scene on the screen. Tone correction is performed using the minimum value Lmin. Hereinafter, the gradation correction method in the present embodiment will be described.
[0055]
In the gradation correction apparatus according to the present embodiment, first, the maximum correction value Lmax and the minimum correction value Lmin are calculated based on the maximum value Kmax and the minimum value Kmin (not shown) detected from the input video luminance signal. Details of the calculation method of the maximum correction value Lmax and the minimum correction value Lmin will be described later. Thereafter, the input video luminance signal is corrected so that the maximum correction value Lmax and the minimum correction value Lmin are expanded to the maximum value MAX and the minimum value MIN of the output signal, respectively, as in the conventional gradation correction method described above. This corresponds to the above-described calculation of MAX / (Lmax−Lmin) × (L−Lmin).
[0056]
By the way, in the case where the detected maximum value Kmax is substantially equal to the maximum value MAX in spite of the dark scene as described above, the contrast is generally increased uniformly as in the conventional case. On the other hand, even if white shadows in a slightly bright part are allowed, the contrast of a dark part that occupies most of the screen is increased accordingly, thereby making it possible to display a better image as a whole screen. . In the present embodiment, the maximum correction value Lmax and the minimum correction value Lmin are calculated based on such a viewpoint.
[0057]
Hereinafter, a method for calculating the maximum correction value Lmax and the minimum correction value Lmin will be described in detail. First, histogram detection circuit 2, the histogram information is detected from the output signal of the low-pass filter 1. Hereinafter, a case will be described in which the distribution amount n1 in the first division of the four-division histogram as shown in FIG. 3A is used as the histogram information. The maximum value correction circuit 5 and the minimum value correction circuit 6 calculate the maximum value Kmax and the minimum value Kmin output from the maximum value detection circuit 3 and the minimum value detection circuit 4 based on the histogram information detected by the histogram detection circuit 2. Correct each one. Here, the minimum value correction circuit 6 performs correction in a direction to decrease the minimum value Kmin when the distribution amount n1 of the first stage of the four-division histogram supplied as histogram information from the histogram detection circuit 2 is sufficiently large. On the contrary, when n1 is sufficiently small, correction is performed in the direction of increasing the minimum value Kmin. This makes it possible to tighten black when the black distribution is small and to maintain the black gradation when the black distribution is large. FIG. 3B illustrates this correction method. In FIG. 3B, the conversion function of the distribution amount n1 and the correction amount D (= correction minimum value Lmin−minimum value Kmin) is represented by D = f (n1). This function is optimal for the display. It is necessary to make it. Similarly, with respect to the white gradation, when the distribution amount n4 in the fourth stage of the four-division histogram is sufficiently large, correction is performed in the direction of increasing the maximum value Kmax, and conversely, when n4 is sufficiently small, the maximum value Correction is performed in the direction of decreasing Kmax.
[0058]
Note that the histogram information is not limited to the first and fourth distribution amounts of the four-part histogram, and information other than the first and fourth stages may be referred to. Further, the number of divisions of the histogram is not limited to four, and may be finely divided, for example, 8 or 16. Further, the correction based on the histogram distribution information may be only the minimum value or only the maximum value. In addition to correcting the video luminance signal, the color difference signal may be corrected to match the correction of the video luminance signal in order to keep the ratio of the RGB colors after correction constant.
[0059]
By the above operation by the gradation correction apparatus according to the present embodiment, for example, as described above, the detected maximum value Kmax is substantially equal to the maximum value MAX in spite of the dark scene. Even in such a case, as shown in FIG. 4, sufficient gradation correction can be performed by taking advantage of the dynamic range of the processing system in the luminance level range where the black distribution occupying most of the screen is large. By performing this correction, the data between the corrected maximum value Lmax and the maximum value Kmax is output as the maximum value MAX, resulting in whiteout. However, there is only a slight amount of data in this range originally. Therefore, by allowing this, a better video display can be realized for the entire screen.
[0060]
In this embodiment, depending on the histogram information, correction is performed such that the minimum correction value Lmin is smaller than the minimum value Kmin or the maximum correction value Lmax is larger than the maximum value Kmax. The meaning is briefly described below.
[0061]
In the present embodiment, the maximum value Kmax and the minimum value Kmin detected by the maximum value detection circuit 3 and the minimum value detection circuit 4 are actually low pass filters from the original input video luminance signal. 1 Is the maximum value and the minimum value in the signal after a certain amount of isolated point information is removed and further sampling is performed at a predetermined sampling rate. Therefore, it is conceivable that the actual input video luminance signal contains video information that is originally necessary although it is smaller than the minimum value Kmin shown in FIG. The same applies to a value larger than the maximum value Kmax. In such a case, for example, in the conventional correction method shown in FIG. 2, these data are handled as data of the maximum value MIN or the minimum value MIN, and the gradation information is lost. However, for example, as shown in FIG. 4, when it is determined that the scene is a dark scene based on the histogram result, if the correction minimum value Lmin is made smaller than the minimum value Kmin, it is smaller than the minimum value Kmin, but it is originally necessary. The video information can be picked up without being crushed, and a better image display can be performed according to the scene.
[0062]
The correction that makes the correction minimum value Lmin smaller than the minimum value Kmin or the correction maximum value Lmax larger than the maximum value Kmax has the above-mentioned meaning. If the detection circuit 3 and the minimum value detection circuit 4 are configured so as to detect the maximum value Kmax and the minimum value Kmin after including all necessary video information, the correction in such a direction is particularly effective. There will be no meaning.
[0063]
As described above, according to the first embodiment, when performing the correction for expanding the maximum value and the minimum value of the input video luminance signal to the dynamic range, the correction based on the histogram distribution information is performed on the maximum value and the minimum value. By doing so, it is possible to obtain an optimal correction effect according to the scene, solve the problem of blackout and whiteout that was a problem at the time of the correction, and achieve both black and white level gradation and contrast.
[0064]
(Second Embodiment)
FIG. 5 shows a configuration of a gradation correction apparatus according to the second embodiment of the present invention. In FIG. 5, the same components as those in the gradation correction apparatus shown in FIG.
[0065]
The concept of minimum value correction in this embodiment is the same as that in the first embodiment. In addition, the bending point correction circuit 11 corrects the black expansion bending point based on the distribution information of the histogram. The operating principle of the black stretch correction circuit 12 will be described with reference to FIG. Black extension Zhang The correction circuit 12 includes a detection WINDOW within each field output from the minimum value correction circuit 6. correction The bending value Lio obtained by correcting the minimum value Lmin, the bending point initial value Kio by the bending point correction circuit 11, and the input video luminance signal are input. The black expansion correction circuit 12 extends the black level by bending the range below the bending point Lio as shown in the characteristic after correction, based on the determination that there is no signal level less than the input Lmin. This circuit may be realized by hardware such as an FPGA or software such as a microcomputer. The method for calculating the corrected minimum value Lmin is the same as that in the first embodiment described above, and a description thereof will be omitted.
[0066]
The bending point correction circuit 11 is shown in FIG. 7 on the basis of the distribution information detected by the histogram detection circuit 2, for example, the distribution amount n1 in the first stage of the 4-part histogram shown in FIG. Thus, the correction amount D of the bending point is calculated. The function D = g (n1) needs to be optimized by considering it in combination with the minimum value correction amount according to the display.
[0067]
In this embodiment, the input video luminance signal is corrected by the above operation. However, even if the color difference signal is corrected to match the correction of the video luminance signal, the ratio of each RGB color after correction is kept constant. Good.
[0068]
As described above, according to the second embodiment, the minimum value for each field is detected, the detected minimum value is corrected based on the luminance distribution of the field, and the bending point that determines the expansion range is also the luminance. Correction is performed based on the distribution, and black stretch correction is performed based on the minimum value and the bending point thus corrected. Therefore, Black Shin Zhang It is possible to solve the problem such as black crushing, which was a problem at the time of correction, and to achieve both black gradation and contrast.
[0069]
(Third embodiment)
FIG. 8 shows the configuration of a gradation correction apparatus according to the third embodiment of the present invention. In FIG. 8, the same elements as those in FIGS. 1 and 2 of the embodiment of the first and second inventions shown in FIG. 1 are denoted by the same reference numerals and the same operations are performed.
[0070]
The concept of maximum value correction in this embodiment is the same as that in the first embodiment. Further, the concept of bending point correction is the same as in the second embodiment. The operation principle of the white stretch correction circuit 13 will be described with reference to FIG. White stretch Zhang The correction circuit 13 includes a detection WINDOW in each field output from the maximum value correction circuit 5. correction The maximum value Lmax, the bending point Lao obtained by correcting the bending point initial value by the bending point correction circuit 11, and the input video luminance signal are input. The white expansion correction circuit 13 extends the white level by bending the range above the bending point Lao as shown in the characteristic after correction based on the determination that there is no signal level higher than the input Lmax. This circuit may be realized by hardware such as an FPGA or software such as a microcomputer. Note that a method for calculating the maximum correction value Lmax is the same as that in the first embodiment described above, and thus the description thereof is omitted.
[0071]
The bending point correction circuit 11 calculates a bending point from the distribution information detected by the histogram detection circuit 2, for example, the distribution amount n4 in the fourth stage of the four-division histogram as shown in FIG. .
[0072]
In this embodiment, the input video luminance signal is corrected by the above operation. However, even if the color difference signal is corrected to match the correction of the video luminance signal, the ratio of each RGB color after correction is kept constant. Good.
[0073]
As described above, according to the third embodiment, the maximum value for each field is detected, the detected maximum value is corrected based on the luminance distribution of the field, and the bending point that determines the expansion range is also the luminance. Correction based on the distribution and white extension based on the maximum value and the bending point corrected in this way. Zhang Make corrections. Therefore, white extension Zhang It is possible to solve the problem such as white-out which has been a problem at the time of correction, and to achieve both white gradation and contrast.
[0074]
(Fourth embodiment)
FIG. 10 shows the configuration of a gradation correction apparatus according to the fourth embodiment of the present invention. In this embodiment, the input video luminance signal is corrected and output as an output luminance signal. However, the gradation correction device according to this embodiment particularly corrects the video color difference signal based on this output luminance signal to display an image. Applies when doing. Further, the present invention is applied to the case where the corrected video luminance signal and video color difference signal are converted into RGB signals to display an image. Hereinafter, the operation of this embodiment will be described.
[0075]
The input video luminance signal is corrected by the gradation correction circuit 14 so as to expand the dynamic range, for example, black expansion or white expansion. Normally, when the gain of the luminance signal is corrected, it is necessary to correct the gain similar to that of the luminance signal for the color difference signal in consideration of each pixel in order to maintain the RGB ratio after the RGB signal conversion. At this time, when the correction degree of the luminance signal Y is large, there is a problem that at least one of the color difference signals U and V is saturated beyond the dynamic range of the signal processing system when the color difference signals U and V are corrected. Furthermore, even if the dynamic range is not exceeded during correction of the color difference signal, there is a problem that at least one color of RGB exceeds the dynamic range of the signal processing system when converted from the corrected YUV signal to the RGB signal. As described above, when the color difference signal U, V, or RGB signal is saturated beyond the dynamic range of the signal processing system, the original gradation information is lost for the data overflowing from the dynamic range. The color will collapse.
[0076]
In the present embodiment, in order to avoid the above problem, the input color difference signal level is detected, and when the color difference signals U and V are larger than a certain value, the correction of the luminance signal is limited. This prevents saturation of the corrected color difference signals U and V, and further RGB signals after conversion to RGB.
[0077]
For this purpose, first, the color difference signal level detection circuit 16 detects the magnitude component | C | of the input video color difference signal. This | C | may take, for example, the larger one of the magnitude components of the U and V signals, or may focus on only one of the magnitude components of the U and V signals. The corrected luminance signal limiter circuit 15 corresponds to the input video luminance signal, that is, the signal Y1 before gradation correction, the signal Y2 after gradation correction output from the gradation correction circuit 14, and the detection result of the color difference signal level detection circuit 16. The output video luminance signal is output. FIG. 11 shows the relationship between the color difference signal level | C | input to the corrected luminance signal limiter circuit 15 and the output of the corrected luminance signal limiter circuit 15, that is, the output video luminance signal Yout. As shown in FIG. 11, the correction luminance signal limiter circuit 15 considers that the above-mentioned saturation problem does not occur for pixels in the range where the color difference signal level | C | is smaller than the threshold value C2, and therefore the gradation correction circuit The post-tone correction signal Y2 corrected by 14 is output as it is as the correction result Yout. On the other hand, regarding pixels in which the color difference signal level | C | is in the range of the threshold value C2 or more and C1 or less, it is considered that the saturation problem described above may occur depending on the corrected luminance signal level. And a signal corresponding to the color difference signal level | C | at a level from the signal before gradation correction Y1 is output as the correction result Yout. Specifically, for example, the post-tone correction signal Y2 is converted into (C1- | C |) × (Ym-Yin) / (C1-C2) based on the pre-tone correction signal Y1 and the color difference signal level | C |. The correction result is output as a correction result Yout. On the other hand, when the color difference signal level | C | is larger than the threshold value C1, it is considered that the above-mentioned saturation problem may occur, and the pre-tone correction signal Y1 is output as it is, that is, without correcting the luminance signal of the pixel. Output.
[0078]
As for the color difference signal, the corrected color difference signal Cout = the corrected color difference signal Cin × Yout / Y1 based on the ratio of the output video luminance signal Yout and the input video luminance signal Y1 obtained by the gradation correction apparatus of the present embodiment. Thus, the RGB ratio is kept constant. When matrix conversion from the output video luminance signal Yout thus obtained and the corrected color difference signal Cout (YUV) to RGB does not exceed the dynamic range of the signal processing system with a single RGB color, the aforementioned saturation problem Can be avoided.
[0079]
In the above description of the present embodiment, the case where the video signal is finally converted into the RGB signal and the image is displayed has been described. However, when the image is displayed using the YUV signal, the corrected luminance signal shown in FIG. The input / output relationship in the limiter circuit 15 may be set so that at least the U and V signals are not saturated.
[0080]
In the present embodiment, the input / output relationship in the corrected luminance signal limiter circuit 15 is the relationship shown in FIG. 11, but the present invention is not limited to this, and the input / output relationship is within a range where the above-described saturation problem can be avoided. In this case, it may be set freely.
[0081]
As described above, according to the fourth embodiment, the black extension is performed. Zhang , White stretch Zhang Thus, when correction is performed to expand the dynamic range of the input video luminance signal, when the color difference signal is corrected based on the correction result, the corrected color difference signal will increase the dynamic range of the signal processing system. It is possible to prevent saturation beyond this. Further, when the corrected luminance signal and color difference signal are converted into RGB signals to display an image, the RGB signals can be prevented from being saturated beyond the dynamic range of the signal processing system. Therefore, it is possible to avoid the problem that the color is lost as a result of the luminance correction, and it is possible to prevent the display quality from being deteriorated due to the gradation correction.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of a gradation correction apparatus according to a first embodiment of the present invention.
FIG. 2 is a diagram for explaining a correction operation of a conventional gradation correction apparatus.
FIG. 3 is a diagram for explaining a detection result of the histogram detection circuit 2 and a method of calculating a correction minimum value in the minimum value correction circuit 6 based on the detection result.
FIG. 4 is a diagram for explaining a correction operation according to the first embodiment.
FIG. 5 is a block diagram showing a configuration of a gradation correction apparatus according to a second embodiment of the present invention.
FIG. 6 is a diagram for explaining a correction operation according to the second embodiment.
FIG. 7 is a diagram for explaining a calculation method of a bending point in the bending point correction circuit 11;
FIG. 8 is a block diagram showing a configuration of a gradation correction apparatus according to a third embodiment of the present invention.
FIG. 9 is a diagram for explaining a correction operation according to the third embodiment.
FIG. 10 is a block diagram showing a configuration of a gradation correction apparatus according to a fourth embodiment of the present invention.
FIG. 11 is a diagram for explaining the operation of the corrected luminance signal limiter circuit 15;
[Explanation of symbols]
1 Low-pass filter
2 Histogram detection circuit
3 Maximum value detection circuit
4 Minimum value detection circuit
5 Maximum value correction circuit
6 Minimum value correction circuit
7 First subtraction circuit
8 Second subtraction circuit
9 Division circuit
10 Multiplier circuit
11 Bending point correction circuit
12 Black Shin Zhang Correction circuit
13 Hakushin Zhang Correction circuit
14 Gradation correction circuit
15 Correction luminance signal limiter circuit
16 Color difference signal level detection circuit

Claims (16)

入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正装置であって、
前記入力映像輝度信号の最小値を検出する最小値検出手段と、
前記入力映像輝度信号の輝度分布情報を検出するヒストグラム検出手段と、
前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が多い場合に前記最小値検出手段によって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が少ない場合に前記最小値検出手段によって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正手段と、
前記入力映像輝度信号の輝度レベルが前記補正最小値のときに、前記出力映像輝度信号の輝度レベルが前記処理系のダイナミックレンジの最小値となるように、前記入力映像輝度信号を伸張するように補正し前記出力映像輝度信号として出力する輝度信号補正手段とを備える、階調補正装置。
A gradation correction apparatus for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
Minimum value detecting means for detecting a minimum value of the input video luminance signal;
Histogram detection means for detecting luminance distribution information of the input video luminance signal;
When the black distribution is large based on the luminance distribution information detected by the histogram detection means, the minimum value detected by the minimum value detection means is corrected in a smaller direction to obtain a corrected minimum value , or Minimum value correction means for correcting the minimum value detected by the minimum value detection means in a larger direction and obtaining a corrected minimum value when the black distribution is small based on the luminance distribution information detected by the histogram detection means When,
When the luminance level of the input video luminance signal is the minimum correction value, the input video luminance signal is expanded so that the luminance level of the output video luminance signal becomes the minimum value of the dynamic range of the processing system. A gradation correction device comprising: luminance signal correction means for correcting and outputting the output video luminance signal.
前記輝度分布情報が、前記入力映像輝度信号のヒストグラム分布の所定の輝度範囲における分布量であることを特徴とする、請求項1に記載の階調補正装置。  The gradation correction apparatus according to claim 1, wherein the luminance distribution information is a distribution amount in a predetermined luminance range of a histogram distribution of the input video luminance signal. 前記所定の輝度範囲が、前記ヒストグラム分布における最小の輝度区分範囲であることを特徴とする、請求項2に記載の階調補正装置。  The gradation correction apparatus according to claim 2, wherein the predetermined luminance range is a minimum luminance division range in the histogram distribution. 前記輝度信号補正手段は、所定の折れ曲げ点より小さい輝度範囲において前記入力映像輝度信号を補正することを特徴とする、請求項1に記載の階調補正装置。  The gradation correction apparatus according to claim 1, wherein the luminance signal correction unit corrects the input video luminance signal in a luminance range smaller than a predetermined bending point. 前記ヒストグラム検出手段によって検出された輝度分布情報に応じて前記所定の折れ曲げ点を補正する折れ曲げ点補正手段をさらに備える、請求項4に記載の階調補正装置。  The gradation correction device according to claim 4, further comprising a bending point correction unit that corrects the predetermined bending point according to the luminance distribution information detected by the histogram detection unit. 前記最小値検出手段が検出する最小値が、前記入力映像輝度信号をサンプリングまたはローパスフィルタに通過させた後の信号の最小値であり、
前記最小値補正手段は、前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて、前記最小値検出手段によって検出された最小値を、より小さくなる方向に補正して前記補正最小値を得ることを特徴とする、請求項1に記載の階調補正装置。
The minimum value detected by the minimum value detection means is the minimum value of the signal after the input video luminance signal has been sampled or passed through a low-pass filter,
The minimum value correcting means corrects the minimum value detected by the minimum value detecting means in a smaller direction based on the luminance distribution information detected by the histogram detecting means to obtain the corrected minimum value. The gradation correction apparatus according to claim 1, wherein:
入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正装置であって、
前記入力映像輝度信号の最大値を検出する最大値検出手段と、
前記入力映像輝度信号の輝度分布情報を検出するヒストグラム検出手段と、
前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が多い場合に前記最大値検出手段によって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が少ない場合に前記最大値検出手段によって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正手段と、
前記入力映像輝度信号の輝度レベルが前記補正最大値のときに、前記出力映像輝度信号の輝度レベルが前記処理系のダイナミックレンジの最大値となるように、前記入力映像輝度信号を伸張するように補正し前記出力映像輝度信号として出力する輝度信号補正手段とを備える、階調補正装置。
A gradation correction apparatus for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
Maximum value detecting means for detecting the maximum value of the input video luminance signal;
Histogram detection means for detecting luminance distribution information of the input video luminance signal;
When the white distribution is large based on the luminance distribution information detected by the histogram detection means, the maximum value detected by the maximum value detection means is corrected in a larger direction to obtain a corrected maximum value , or Maximum value correcting means for obtaining a corrected maximum value by correcting the maximum value detected by the maximum value detecting means in a smaller direction when the white distribution is small based on the luminance distribution information detected by the histogram detecting means. When,
When the luminance level of the input video luminance signal is the maximum correction value, the input video luminance signal is expanded so that the luminance level of the output video luminance signal becomes the maximum value of the dynamic range of the processing system. A gradation correction device comprising: luminance signal correction means for correcting and outputting the output video luminance signal.
前記輝度分布情報が、前記入力映像輝度信号のヒストグラム分布の所定の輝度範囲における分布量であることを特徴とする、請求項7に記載の階調補正装置。  The gradation correction apparatus according to claim 7, wherein the luminance distribution information is a distribution amount in a predetermined luminance range of a histogram distribution of the input video luminance signal. 前記所定の輝度範囲が、前記ヒストグラム分布における最大の輝度区分範囲であることを特徴とする、請求項8に記載の階調補正装置。  The gradation correction apparatus according to claim 8, wherein the predetermined luminance range is a maximum luminance division range in the histogram distribution. 前記輝度信号補正手段は、所定の折れ曲げ点より大きい輝度範囲において前記入力映像輝度信号を補正することを特徴とする、請求項7に記載の階調補正装置。  The gradation correction apparatus according to claim 7, wherein the luminance signal correction unit corrects the input video luminance signal in a luminance range larger than a predetermined bending point. 前記ヒストグラム検出手段によって検出された輝度分布情報に応じて前記所定の折れ曲げ点を補正する折れ曲げ点補正手段をさらに備える、請求項10に記載の階調補正装置。  The gradation correction apparatus according to claim 10, further comprising a bending point correction unit that corrects the predetermined bending point according to the luminance distribution information detected by the histogram detection unit. 前記最大値検出手段が検出する最大値が、前記入力映像輝度信号をサンプリングまたはローパスフィルタに通過させた後の信号の最大値であり、
前記最大値補正手段は、前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて、前記最大値検出手段によって検出された最大値を、より大きくなる方向に補正して前記補正最大値を得ることを特徴とする、請求項7に記載の階調補正装置。
The maximum value detected by the maximum value detection means is the maximum value of the signal after the input video luminance signal has been sampled or passed through a low-pass filter,
The maximum value correcting means corrects the maximum value detected by the maximum value detecting means in a direction of increasing based on the luminance distribution information detected by the histogram detecting means to obtain the corrected maximum value. The gradation correction apparatus according to claim 7, wherein:
入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正装置であって、
前記入力映像輝度信号の最小値を検出する最小値検出手段と、
前記入力映像輝度信号の最大値を検出する最大値検出手段と、
前記入力映像輝度信号の輝度分布情報を検出するヒストグラム検出手段と、
前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が多い場合に前記最小値検出手段によって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて黒の分布が少ない場合に前記最小値検出手段によって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正手段と、
前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が多い場合に前記最大値検出手段によって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、前記ヒストグラム検出手段によって検出された輝度分布情報に基づいて白の分布が少ない場合に前記最大値検出手段によって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正手段と、
前記入力映像輝度信号の輝度レベルが前記補正最小値及び前記補正最大値のときに、前記出力映像輝度信号の輝度レベルがそれぞれ前記処理系のダイナミックレンジの最小値及び最大値となるように、前記入力映像輝度信号を伸張するように補正し前記出力映像輝度信号として出力する輝度信号補正手段とを備える、階調補正装置。
A gradation correction apparatus for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
Minimum value detecting means for detecting a minimum value of the input video luminance signal;
Maximum value detecting means for detecting the maximum value of the input video luminance signal;
Histogram detection means for detecting luminance distribution information of the input video luminance signal;
When the black distribution is large based on the luminance distribution information detected by the histogram detection means, the minimum value detected by the minimum value detection means is corrected in a smaller direction to obtain a corrected minimum value , or Minimum value correction means for correcting the minimum value detected by the minimum value detection means in a larger direction and obtaining a corrected minimum value when the black distribution is small based on the luminance distribution information detected by the histogram detection means When,
When the white distribution is large based on the luminance distribution information detected by the histogram detection means, the maximum value detected by the maximum value detection means is corrected in a larger direction to obtain a corrected maximum value , or Maximum value correcting means for obtaining a corrected maximum value by correcting the maximum value detected by the maximum value detecting means in a smaller direction when the white distribution is small based on the luminance distribution information detected by the histogram detecting means. When,
When the luminance level of the input video luminance signal is the minimum correction value and the maximum correction value, the luminance level of the output video luminance signal is the minimum value and the maximum value of the dynamic range of the processing system, respectively. A gradation correction apparatus comprising: a luminance signal correction unit that corrects an input video luminance signal to be expanded and outputs it as the output video luminance signal.
入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正方法であって、
前記入力映像輝度信号の最小値を検出する最小値検出ステップと、
前記入力映像輝度信号の輝度分布情報を検出するヒストグラム検出ステップと、
前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が多い場合に前記最小値検出ステップによって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が少ない場合に前記最小値検出ステップによって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正ステップと、
前記入力映像輝度信号の輝度レベルが前記補正最小値のときに、前記出力映像輝度信号の輝度レベルが前記処理系のダイナミックレンジの最小値となるように、前記入力映像輝度信号を伸張するように補正し前記出力映像輝度信号として出力する輝度信号補正ステップとを備える、階調補正方法。
A gradation correction method for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
A minimum value detecting step for detecting a minimum value of the input video luminance signal;
A histogram detection step for detecting luminance distribution information of the input video luminance signal;
When the black distribution is large based on the luminance distribution information detected by the histogram detection step, the minimum value detected by the minimum value detection step is corrected in a smaller direction to obtain a corrected minimum value , or A minimum value correction step for obtaining a corrected minimum value by correcting the minimum value detected by the minimum value detection step in a larger direction when the black distribution is small based on the luminance distribution information detected by the histogram detection step. When,
When the luminance level of the input video luminance signal is the minimum correction value, the input video luminance signal is expanded so that the luminance level of the output video luminance signal becomes the minimum value of the dynamic range of the processing system. And a luminance signal correcting step of correcting and outputting as the output video luminance signal.
入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正方法であって、
前記入力映像輝度信号の最大値を検出する最大値検出ステップと、
前記入力映像輝度信号の輝度分布情報を検出するヒストグラム検出ステップと、
前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が多い場合に前記最大値検出ステップによって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が少ない場合に前記最大値検出ステップによって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正ステップと、
前記入力映像輝度信号の輝度レベルが前記補正最大値のときに、前記出力映像輝度信号の輝度レベルが前記処理系のダイナミックレンジの最大値となるように、前記入力映像輝度信号を伸張するように補正し前記出力映像輝度信号として出力する輝度信号補正ステップとを備える、階調補正方法。
A gradation correction method for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
A maximum value detecting step for detecting a maximum value of the input video luminance signal;
A histogram detection step for detecting luminance distribution information of the input video luminance signal;
When the white distribution is large based on the luminance distribution information detected by the histogram detection step, the correction maximum value is obtained by correcting the maximum value detected by the maximum value detection step in a larger direction , or Maximum value correction step for obtaining a correction maximum value by correcting the maximum value detected by the maximum value detection step in a smaller direction when the white distribution is small based on the luminance distribution information detected by the histogram detection step When,
When the luminance level of the input video luminance signal is the maximum correction value, the input video luminance signal is expanded so that the luminance level of the output video luminance signal becomes the maximum value of the dynamic range of the processing system. And a luminance signal correcting step of correcting and outputting as the output video luminance signal.
入力映像輝度信号の輝度レベル範囲の一部を処理系のダイナミックレンジにまで伸張することにより階調を補正し出力映像輝度信号として出力する階調補正方法であって、
前記入力映像輝度信号の最小値を検出する最小値検出ステップと、
前記入力映像輝度信号の最大値を検出する最大値検出ステップと、
前記入力映像輝度信号の輝度分布情報を検出するヒストグラム検出ステップと、
前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が多い場合に前記最小値検出ステップによって検出された最小値をより小さくなる方向に補正して補正最小値を得る、または、前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて黒の分布が少ない場合に前記最小値検出ステップによって検出された最小値をより大きくなる方向に補正して補正最小値を得る、最小値補正ステップと、
前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が多い場合に前記最大値検出ステップによって検出された最大値をより大きくなる方向に補正して補正最大値を得る、または、前記ヒストグラム検出ステップによって検出された輝度分布情報に基づいて白の分布が少ない場合に前記最大値検出ステップによって検出された最大値をより小さくなる方向に補正して補正最大値を得る、最大値補正ステップと、
前記入力映像輝度信号の輝度レベルが前記補正最小値及び前記補正最大値のときに、前記出力映像輝度信号の輝度レベルがそれぞれ前記処理系のダイナミックレンジの最小値及び最大値となるように、前記入力映像輝度信号を伸張するように補正し前記出力映像輝度信号として出力する輝度信号補正ステップとを備える、階調補正方法。
A gradation correction method for correcting a gradation by extending a part of a luminance level range of an input video luminance signal to a dynamic range of a processing system and outputting it as an output video luminance signal,
A minimum value detecting step for detecting a minimum value of the input video luminance signal;
A maximum value detecting step for detecting a maximum value of the input video luminance signal;
A histogram detection step for detecting luminance distribution information of the input video luminance signal;
When the black distribution is large based on the luminance distribution information detected by the histogram detection step, the minimum value detected by the minimum value detection step is corrected in a smaller direction to obtain a corrected minimum value , or A minimum value correction step for obtaining a corrected minimum value by correcting the minimum value detected by the minimum value detection step in a larger direction when the black distribution is small based on the luminance distribution information detected by the histogram detection step. When,
When the white distribution is large based on the luminance distribution information detected by the histogram detection step, the correction maximum value is obtained by correcting the maximum value detected by the maximum value detection step in a larger direction , or Maximum value correction step for obtaining a correction maximum value by correcting the maximum value detected by the maximum value detection step in a smaller direction when the white distribution is small based on the luminance distribution information detected by the histogram detection step When,
When the luminance level of the input video luminance signal is the minimum correction value and the maximum correction value, the luminance level of the output video luminance signal is the minimum value and the maximum value of the dynamic range of the processing system, respectively. A gradation correction method comprising: a luminance signal correction step of correcting an input video luminance signal so as to expand and outputting as an output video luminance signal.
JP2001165053A 2001-05-31 2001-05-31 Gradation correction apparatus and method Expired - Fee Related JP3709981B2 (en)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP2001165053A JP3709981B2 (en) 2001-05-31 2001-05-31 Gradation correction apparatus and method
CN02801877A CN1463534A (en) 2001-05-31 2002-03-28 Image processing appts. and image processing method
PCT/JP2002/003033 WO2002100093A1 (en) 2001-05-31 2002-03-28 Image processing apparatus and image processing method
CA002417169A CA2417169C (en) 2001-05-31 2002-03-28 Image processing apparatus and image processing method
EP02707200A EP1359746A4 (en) 2001-05-31 2002-03-28 APPARATUS AND METHOD FOR IMAGE PROCESSING
US10/343,060 US7199840B2 (en) 2001-05-31 2002-03-28 Dynamic gray scale range adjustment apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001165053A JP3709981B2 (en) 2001-05-31 2001-05-31 Gradation correction apparatus and method

Publications (2)

Publication Number Publication Date
JP2002359754A JP2002359754A (en) 2002-12-13
JP3709981B2 true JP3709981B2 (en) 2005-10-26

Family

ID=19007777

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001165053A Expired - Fee Related JP3709981B2 (en) 2001-05-31 2001-05-31 Gradation correction apparatus and method

Country Status (1)

Country Link
JP (1) JP3709981B2 (en)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3873918B2 (en) 2003-03-14 2007-01-31 セイコーエプソン株式会社 Image processing apparatus, image processing method, and image processing program
JP4549723B2 (en) * 2004-04-19 2010-09-22 株式会社メガチップス Image signal enhancement device
JP3698710B1 (en) 2004-04-28 2005-09-21 三菱電機株式会社 Gradation improvement circuit and display system
JP4082393B2 (en) 2004-07-09 2008-04-30 セイコーエプソン株式会社 Gradation characteristic control according to image characteristics
JP4073477B2 (en) 2005-03-25 2008-04-09 三菱電機株式会社 Image processing apparatus and image display apparatus
US7907135B2 (en) 2005-03-29 2011-03-15 Panasonic Corporation Image display and image displaying method for gradation correction
JP4617989B2 (en) 2005-04-28 2011-01-26 株式会社日立製作所 Video processing device
KR100776134B1 (en) * 2005-12-23 2007-11-15 매그나칩 반도체 유한회사 How to adjust image sensor and image brightness distribution
JP2007311889A (en) 2006-05-16 2007-11-29 Sony Corp Image correction circuit, image correction method, and image display apparatus
KR100757737B1 (en) 2006-08-21 2007-09-11 삼성전자주식회사 Black kidney device and method
JP5201038B2 (en) * 2009-03-18 2013-06-05 株式会社Jvcケンウッド Video signal processing method and video signal processing apparatus
JP5596948B2 (en) * 2009-09-18 2014-09-24 キヤノン株式会社 Image processing apparatus, image processing method, and program
KR20130015179A (en) * 2011-08-02 2013-02-13 삼성디스플레이 주식회사 Display apparatus and method for driving the same
JP6164922B2 (en) * 2013-05-14 2017-07-19 キヤノン株式会社 Image display apparatus and control method thereof
JP6720012B2 (en) * 2016-08-01 2020-07-08 オリンパス株式会社 Image processing device, imaging device, image processing method, and image processing program
JP2021113872A (en) * 2020-01-17 2021-08-05 アルパイン株式会社 Image display device

Also Published As

Publication number Publication date
JP2002359754A (en) 2002-12-13

Similar Documents

Publication Publication Date Title
US7199840B2 (en) Dynamic gray scale range adjustment apparatus and method
JP3709981B2 (en) Gradation correction apparatus and method
JP4011122B2 (en) Image quality correction circuit for video signals
EP1858247B1 (en) Image correction circuit, image correction method and image display
JP4273428B2 (en) Image processing apparatus, image processing method, program for image processing method, and recording medium recording program for image processing method
JP3201449B2 (en) Image display processing method and apparatus for electronic display
JP4967454B2 (en) Image correction circuit, image correction method, and image display apparatus
JP5034436B2 (en) Image processing apparatus, image processing method, and camera system
US20060256240A1 (en) Image processing apparatus
CA2036100C (en) Gradation correcting apparatus
JP3208814B2 (en) Video signal correction device
KR20070111381A (en) Image Correction Circuit, Image Correction Method, and Image Display
JP2008072450A (en) Image processor and image processing method
JP4930781B2 (en) Image correction circuit, image correction method, and image display apparatus
EP0467602A2 (en) Contrast corrector for video signal
JP2004328564A (en) Color correcting apparatus, color correcting method, color correcting program, and digital camera using color correcting apparatus
WO2002102059A1 (en) Gradation correction apparatus
US7075574B2 (en) Shading correction circuit and digital camera signal processing circuit using the same
JPH06339017A (en) Saturation emphasizing method and device for color picture
JPH07322179A (en) Video display processing method for electronic display and its device
JP4397623B2 (en) Tone correction device
JP2003046807A (en) Image display device and image display method
JP5012195B2 (en) Image correction circuit, image correction method, and image display apparatus
US8564725B2 (en) Video data processing apparatus and contrast correcting method
JP4373128B2 (en) Tone correction device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050303

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050420

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050713

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050803

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050803

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080819

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090819

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090819

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100819

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110819

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120819

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130819

Year of fee payment: 8

LAPS Cancellation because of no payment of annual fees