JP3200900B2 - 画像の手振れ判定装置 - Google Patents

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、画像の手振れ判定装置
に関し、例えばハンディタイプのビデオカメラの撮像出
力等をビデオデータに含まれる所謂手振れによる画像の
移動量を検出して補正する画像の手振れ補正装置に適用
される。

【０００２】

【従来の技術】一般に、ハンディタイプのビデオカメラ
では、撮影時の手振れすなわちカメラの振動が画像の振
動となって現れる。そこで、このような手振れによる画
像の振動を補正する画像の手振れ補正装置として、例え
ば特開昭６３−１６６３７０号公報に開示されているよ
うに、画像の動きベクトルを検出し、この動きベクトル
に基づいて、画像メモリに貯えられているビデオデータ
を補正するものが提案されている。

【０００３】画像の動きベクトルの検出には、例えばブ
ロックマッチング法が採用される。このブロックマッチ
ング法による画像の動きベクトルの検出では、画面を多
数の領域（ブロックと称する）に分割し、各ブロックの
中心に位置する前フィールドの代表点画素と現フィール
ドのブロック内の各画素の画像データとのフィールド差
の絶対値を演算し、各ブロックのフィールド差分絶対値
を対応する画素毎に積算して相関積分値を求めて、１ブ
ロック分の画素配列に対応する座標を有する相関積算値
表を形成する。そして、この相関積算値表における相関
積分値の最小値の座標値を画像の動きベクトルの座標値
として画面全体の動きベクトルを決定している。

【０００４】そして、画像の手振れ補正装置では、検出
された動きベクトルを補正信号に変換し、この補正信号
により現画像を移動する補正を行っている。このような
画像の手振れ補正装置における補正精度は、画像の動き
ベクトルの検出精度に依存する。

【０００５】

【発明が解決しようとする課題】ところで、上述のよう
に相関積算値表における相関積分値の最小値の座標値を
画像の動きベクトルの座標値として画面全体の動きベク
トルを決定するようにした従来のブロックマッチング法
による画像の動きベクトルの検出では、カメラの手振れ
による動きベクトルと被写体の移動による動きベクトル
とが同時に発生する。従って、画像の手振れ補正装置で
は、上記手振れによる動きベクトルと被写体の移動によ
る動きベクトルとを判別し、上記手振れによる動きベク
トルのみにより手振れ補正信号を形成して手振れ補正を
行う必要がある。上記被写体の移動による動きベクトル
を手振れによる動きベクトルと誤って判定して、手振れ
補正を行った場合には、静止しているべき背景画像など
が手振れ補正により移動してしまうことになり、不自然
が画像となってしまう。逆に、上記手振れによる動きベ
クトルを被写体の移動による動きベクトルと誤って判定
した場合には、手振れ補正がきかなくなってしまう。

【０００６】本発明は、このような実情に鑑みてなされ
たものであり、ハンディタイプのビデオカメラなどにお
ける高性能の手振れ補正を可能にすることを目的とし、
検出した画像の動きベクトルが手振れによる画像の動き
ベクトルであるか被写体の移動による動きベクトルであ
るかを確実に判定することのできる画像の手振れ判定装
置を提供するものである。

【０００７】

【課題を解決するための手段】本発明に係る画像の手振
れ判定装置は、上述の課題を解決するために、入力ビデ
オ信号で構成される１フィールドの画像を複数に分割し
た各ブロック毎の代表点画素の画像データＩ_k （０，
０）をメモリに１フィールド期間記憶し、現フィールド
のブロックの各画素の画像データＩ_k （ｘ，ｙ）と上記
メモリから読み出される前フィールドのブロックの代表
点画素の画像データＩ_k-1 （０，０）との差分の絶対値
｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜を検出するフィ
ールド差分検出部と、上記フィールド差分検出部により
得られるフィールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ
_k （ｘ，ｙ）｜に基づいて画像の動きベクトルを検出す
る動きベクトル検出部と、互いに隣接しないマクロブロ
ックが生じる形態で１画面を複数のマクロブロックに分
割し、上記フィールド差分検出部により得られるフィー
ルド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜
を各マクロブロック毎に積算した相関積算値表につい
て、代表点画素に対応する座標の積算値が極小値である
ことを検出する極小値検出部と、上記入力ビデオ信号で
構成される１フィールドの画像を複数に分割した各ブロ
ック毎に複数の代表点画素の画像データＩ_k （ｘ₀ ，ｙ
₀ ）をメモリに１フィールド期間記憶し、現フィールド
のブロックの各画素の画像データＩ_k （ｘ，ｙ）と上記
メモリから読み出される前フィールドのブロックの各代
表点画素の画像データＩ_k-1 （ｘ₀ ，ｙ₀ ）との差分の
絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜が、 Ｉ_k-1 （０，０）≒Ｉ_k （０，０） なる第１の判定条件を満たし、且つ、判定の閾値をＴｈ
_I として、 ｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜≧Ｔｈ_I なる第２の判定条件を満たす画素を検出する毎に１ブロ
ック分の画素配列に対応する座標の度数ｆ（ｘ，ｙ）を
インクリメントした度数分布表を形成し、この度数分布
表に基づいて、上記動きベクトル検出部により検出され
た動きベクトルが固定カメラシーンのものであるか否か
の判定を行う固定カメラシーン判定部と、上記固定カメ
ラシーン判定部による判定出力と上記極小値検出部によ
る検出出力に基づいて、上記動きベクトル検出部により
検出された動きベクトルが手振れに起因するものである
か否かを判定する手振れ判定部とを備えてなることを特
徴とするものである。

【０００８】

【作用】本発明に係る画像の手振れ判定装置では、入力
ビデオ信号で構成される１フィールドの画像を複数に分
割した各ブロック毎の代表点画素の画像データＩ
_k （０，０）をメモリに１フィールド期間記憶し、現フ
ィールドのブロックの各画素の画像データＩ_k （ｘ，
ｙ）と上記メモリから読み出される前フィールドのブロ
ックの代表点画素の画像データＩ_k-1 （０，０）との差
分の絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜をフ
ィールド差分検出部により検出し、このフィールド差分
絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜に基づい
て画像の動きベクトルをベクトル検出部により検出す
る。そして、極小値検出部は、互いに隣接しないマクロ
ブロックが生じる形態で１画面を複数のマクロブロック
に分割し、上記フィールド差分検出部により得られるフ
ィールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，
ｙ）｜を各マクロブロック毎に積算した相関積算値表に
ついて、代表点画素に対応する座標の積算値が極小値で
あることを検出する。また、固定カメラシーン判定部
は、入力ビデオ信号で構成される１フィールドの画像を
複数に分割した各ブロック毎に複数の代表点画素の画像
データＩ_k （ｘ₀ ，ｙ₀ ）をメモリに１フィールド期間
記憶し、現フィールドのブロックの各画素の画像データ
Ｉ_k （ｘ，ｙ）と上記メモリから読み出される前フィー
ルドのブロックの各代表点画素の画像データＩ_k-1 （ｘ
₀ ，ｙ₀ ）との差分の絶対値｜Ｉ_k-1 （０，０）−Ｉ_k
（ｘ，ｙ）｜が、 Ｉ_k-1 （０，０）≒Ｉ_k （０，０） なる第１の判定条件を満たし、且つ、判定の閾値をＴｈ
_I として、 ｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜≧Ｔｈ_I なる第２の判定条件を満たす画素を検出する毎に１ブロ
ック分の画素配列に対応する座標の度数ｆ（ｘ，ｙ）を
インクリメントした度数分布表を形成し、この度数分布
表に基づいて、上記動きベクトル検出部により検出され
た動きベクトルが固定カメラシーンのものであるか否か
の判定を行う。

【０００９】そして、手振れ判定部は、上記固定カメラ
シーン判定部による判定出力と上記極小値検出部による
検出出力に基づいて、上記動きベクトル検出部により検
出された動きベクトルが手振れに起因するものであるか
否かを判定する。

【００１０】

【実施例】以下、本発明に係る画像の手振れ判定装置の
一実施例について図面に従い詳細に説明する。本発明に
係る画像の手振れ判定装置は、例えば図１に示すように
構成される。

【００１１】この図１に示した画像の手振れ判定装置１
０は、ハンディタイプのビデオカメラにおける手振れに
よる画像の動きを補正する手振れ補正装置に本発明を適
用したもので、補正量発生部２０及び補正部３０ととも
に手振れ補正装置を構成している。

【００１２】図１において、信号入力端子１には、上記
ビデオカメラの図示しない撮像部による撮像出力として
得られるビデオ信号をディジタル化した入力ビデオデー
タが供給される。

【００１３】この手振れ判定装置１０は、上記入力ビデ
オデータが上記信号入力端子１を介して供給されるフィ
ールド差分検出部１１及び固定カメラシーン判定部１２
と、上記フィールド差分検出部１１によるフィールド差
分出力が供給される動きベクトル検出部１３及び極小値
検出部１４と、上記固定カメラシーン判定部１２による
検定出力及び上記極小値検出部１４による極小値検出出
力が供給される手振れ判定部１５を備えてなる。

【００１４】上記フィールド差分検出部１１は、上記入
力ビデオデータが上記信号入力端子１を介して供給され
る代表点メモリ１１Ａと減算回路１１Ｂとからなる。

【００１５】上記代表点メモリ１１Ａは、入力ビデオデ
ータで構成される１フィールドの画像を複数に分割した
各ブロック毎の代表点画素の画像データＩ_k（０，０）
を記憶する。具体的には、例えば図２に示すように、１
フィールドの画面をｍ画素×ｎラインのブロックに分割
し、図３に示すように各ブロックの中心の画素Ｓ（０，
０）を代表点とし、各代表点画素の画像データＩ
_k （０，０）を上記代表点メモリ１１Ａに１フィールド
期間記憶する。なお、上記代表点は、画面上で均一のば
らまかれている。そして、この代表点メモリ１１Ａから
読み出される１フィールド前の各代表点画素の画像デー
タＩ_k-1（０，０）が上記減算回路１１Ｂに供給され
る。また、上記減算回路１１Ｂは、上記信号入力端子１
を介して供給される入力ビデオデータすなわち現フィー
ルドの画像データについて、ブロック毎のｍ×ｎ個の各
画素の画像データＩ_k （ｘ，ｙ）と上記代表点メモリ１
１Ａから読み出される前フィールドの対応するブロック
の代表点画素の画像データＩ_k-1 （０，０）との差分す
なわちフィールド間差の絶対値｜Ｉ_k-1 （０，０）−Ｉ
_k （ｘ，ｙ）｜を検出する。

【００１６】そして、このフィールド差分検出部１１
は、上記減算回路１１Ｂによる減算出力データとして得
られるフィールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ_k
（ｘ，ｙ）｜を上記動きベクトル検出部１３及び極小値
検出部１４に供給する。

【００１７】上記動きベクトル検出部１３は、上記フィ
ールド差分検出部１１により得られた各ブロックのフィ
ールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）
｜を対応する画素毎に１フィールド期間に亘って積算
し、１ブロック分の画素配列に対応するｍ×ｎの整数座
標を有する相関積算値表を形成し、その相関積算値の最
小値の座標を検出する。上記相関積算値表は、ｍ×ｎ個
のフィールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ
_k（ｘ，ｙ）｜の積算値すなわち相関積算値の分布を示
すもので、相関の強い画素に対応する座標ほど小さな値
となり、フィールド相関の最も強い動きベクトルに対応
する座標の相関積算値が最小値となる。すなわち、上記
動きベクトル検出部１３は、動きベクトルを示す座標と
して、上記相関積算値表の相関積算値の最小値の座標を
検出する。

【００１８】そして、この動きベクトル検出部１３によ
り検出された上記相関積算値の最小値の座標すなわち動
きベクトルは、上記固定カメラシーン判定部１２と上記
補正量発生部２０に供給される。

【００１９】また、この手振れ判定装置において、上記
極小値検出部１４は、例えば図４に示す３×３の９個の
マクロブロックＢ１〜Ｂ９のように互いに隣接しないマ
クロブロックが生じる形態で１画面を複数のマクロブロ
ックに分割し、上記フィールド差分検出部１１により得
られたフィールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ_k
（ｘ，ｙ）｜をマクロブロック毎に積算した相関積算値
表を形成し、各マクロブロックＢ１〜Ｂ９毎の相関積算
値表について、各ブロックの中心画素Ｓ（０，０）すな
わち代表点画素に対応する座標の積算値を周辺座標の積
算値と比較することにより、上記代表点画素に対応する
座標の積算値が極小値であることを検出する。この極小
値検出部１４は、上記各マクロブロックＢ１〜Ｂ９の相
関積算値表の代表点画素Ｓ（０，０）に対応する座標の
積算値が極小値であることをいずれかのマクロブロック
で検出すると論理「１」の検出出力Ｑを出力する。

【００２０】ここで、動きを伴わない静止画の場合に
は、上記各マクロブロックＢ１〜Ｂ９の相関積算値表の
代表点画素に対応する座標の積算値が極小値となり、例
えば固定したビデオカメラによる撮像出力すなわち手振
れを伴わない撮像出力では、移動する被写体により画面
全体が覆われない限り、いずれかのマクロブロックの相
関積算値表の代表点画素に対応する座標の積算値が極小
値となる可能性が極めて高い。そこで、上記極小値検出
部１４は、いずれかのマクロブロックの相関積算値表の
代表点画素Ｓ（０，０）に対応する座標の積算値が極小
値であることを検出した場合に、固定カメラシーンであ
る可能性が高いことを示す論理「１」の検出出力Ｑを出
力するようになっている。

【００２１】そして、上記極小値検出部１４の検出出力
Ｑは、上記手振れ判定部１５に供給されている。

【００２２】また、上記固定カメラシーン判定部１２
は、上記入力ビデオデータが上記信号入力端子１を介し
て供給される代表点メモリ１２Ａ、減算回路１２Ｂ及び
条件判定回路１２Ｃと、この条件判定回路１２Ｃによる
判定出力に基づいて度数分布表を形成する度数分布表形
成回路１２Ｄと、上記動きベクトル検出部１３により検
出された画像の動きベクトルが固定カメラシーンのもの
である否かの判定処理を上記度数分布表形成回路１２Ｄ
により形成された度数分布表に基づいて行う固定カメラ
シーン判定回路１２Ｅを備えてなる。

【００２３】この固定カメラシーン判定部１２におい
て、上記代表点メモリ１２Ａは、上記入力ビデオ信号で
構成される１フィールドの画像を複数に分割した各ブロ
ック毎の代表点画素の各画像データＩ_k （０，０）を１
フィールド期間記憶する。なお、上記各ブロックは、上
述の動きベクトル検出部１３において１フィールドの画
像を複数に分割したｍ画素×ｎラインの各ブロックに対
応している。そして、上記代表点メモリ１２Ａから１フ
ィールド前の各代表点画素の画像データＩ_k-1 （０，
０）が読み出されて、上記減算回路１２Ｂに供給され
る。

【００２４】上記減算回路１２Ｂは、上記信号入力端子
１から供給される入力ビデオデータすなわち現フィール
ドの画像データについて、ブロック毎のｍ×ｎ個の各画
素の画像データＩ_k （ｘ，ｙ）と上記代表点メモリ１２
Ａから読み出される１フィールド前の各代表点画素の画
像データＩ_k-1 （０，０）との差分の絶対値｜Ｉ
_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜すなわちフィールド
間差の絶対値を検出する。そして、この減算回路１２Ｂ
による減算出力データとして得られるフィールド差分絶
対値が上記条件判定回路１２Ｃに供給される。

【００２５】上記条件判定回路１２Ｃは、上記減算回路
１２Ｂにより検出された各ブロックのフィールド差分絶
対値｜Ｉ_k-1 （０，０）−Ｉ_k（ｘ，ｙ）｜について、 Ｉ_k-1 （０，０）≒Ｉ_k （０，０） なる第１の判定条件を満たすフィールド間相関の強い中
心代表点画素Ｓ（０，０）を有するブロックを検出し、
このブロックについて、 ｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜≧Ｔｈ₁ なる第２の判定条件を満たす上記中心代表点画素Ｓ
（０，０）に対して画素相関の強い画素を検出する。

【００２６】すなわち、上記条件判定回路１２Ｃでは、
上記第１の判定条件によりフィールド相関が強い代表点
画素を有する静止ブロック候補を検出し、この静止ブロ
ック候補について、大きな動きベクトルＶ_t （ｘ，ｙ）
に対して第２の判定条件により代表点画素Ｓ（０，０）
の画像データＩ_k-1 （０，０）に対する各画素のＩ
_k （ｘ，ｙ）の相関に基づく静止判定を行っている。

【００２７】そして、この条件判定回路１２Ｃによる判
定出力が上記度数分布表形成回路１２Ｄに供給される。

【００２８】上記度数分布表形成回路１２Ｄは、１ブロ
ック分の画素配列に対応する座標を有するメモリテーブ
ルを備え、上記条件判定回路１２Ｄによる判定出力に基
づいて、上記第１及び第２の判定条件を満たす画素が検
出される毎に対応する座標の度数ｆ（ｘ，ｙ）をインク
リメントして１フィールド間の相関を示す条件付度数分
布表を上記メモリテーブルに形成する。

【００２９】そして、この度数分布表形成回路１２Ｄに
より形成された１フィールド間の相関を示す度数分布表
の度数値が上記固定カメラシーン判定回路１２Ｅに供給
される。

【００３０】上記固定カメラシーン判定回路１２Ｅは、
上記度数分布表形成回路１２Ｄにより形成された条件付
度数分布表について、上記動きベクトル検出部１４によ
り検出された画像の動きベクトルに対応する座標の度数
値が、所定値よりも大きい場合には上記動きベクトル検
出部１４により検出された画像の動きベクトルが固定カ
メラシーンにおける被写体の移動に起因するものである
と判定し、固定カメラシーンである可能性が高いことを
示す論理「１」の判定出力Ｐを出力する。また、所定値
よりも小さい場合には上記動きベクトル検出部１４によ
り検出された上記被写体の移動に起因するものでないと
判定し、手振れによる動きベクトルである可能性が高い
ことを示す論理「０」の判定出力Ｐを出力する。

【００３１】そして、上記固定カメラシーン判定回路１
２Ｅの判定出力Ｐは、上記手振れ判定部１５に供給され
ている。

【００３２】上記手振れ判定部１５は、上記固定カメラ
シーン判定回路１２Ｅの判定出力Ｐと上記極小値検出部
１４の検出出力Ｑに基づいて、上記動きベクトル検出部
１４により検出された画像の動きベクトルが固定カメラ
シーンにおける被写体の移動によるものであるか、手振
れに起因するものであるかの判定処理を次のようにして
行う。すなわち、上記手振れ判定部１５は、上記固定カ
メラシーン判定回路１２Ｅの判定出力Ｐと上記極小値検
出部１４の検出出力Ｑとの論理積出力が論理「１」であ
る場合には固定カメラシーンにおける被写体の移動によ
る動きベクトルであると判定し、上記論理積出力が論理
「０」である場合には手振れによる動きベクトルである
と判定する。

【００３３】このように、上記手振れ判定部１５では、
上記固定カメラシーン判定回路１２Ｅによる上記条件付
度数分布表に基づく固定カメラシーンの判定出力Ｐと上
記極小値検出部１４によるマクロブロック毎の相関積算
値表に基づく固定カメラシーンの検出出力Ｑの論理積を
とることにより、上記動きベクトル検出部１４により検
出された画像の動きベクトルが固定カメラシーンにおけ
る被写体の移動によるものであるか、手振れに起因する
ものであるかの判定を確実に行うことができる。

【００３４】そして、この手振れ判定部１５の判定出力
が上記補正量発生部２０に供給される。

【００３５】上記補正量発生部２０は、上記動きベクト
ル検出部１４が検出した動きベクトルが画像の手振れに
起因するものであることを示す判定出力が上記手振れ判
定部１５から供給されると、上記動きベクトル検出部１
４が検出した上記動きベクトルを手振れベクトルＶ_t ’
として、 Ｘ_t ＝Ｘ_t-1 −Ｖ_t ’ なる補正量Ｘ_t の手振れ補正信号を形成し、この手振れ
補正信号を上記補正部３０に供給する。また、この補正
量発生部３０は、上記動きベクトル検出部１４が検出し
た動きベクトルが画像の手振れに起因するものでないこ
とを示す判定出力が上記手振れ判定部１５から供給され
ると、手振れベクトルＶ_t’を零ベクトルＶ〔０，０〕
として手振れ補正信号を形成し、この手振れ補正信号を
上記補正部４０に供給する。

【００３６】また、上記補正部３０は、例えば図５に示
すように、上記補正量発生部２０から手振れ補正信号が
供給されるアドレス制御回路３１及びセレクト信号発生
回路４２と、上記アドレス制御回路３１から供給される
アドレス信号に従ってビデオデータの書き込み／読み出
しが行われるフィールドメモリ３３及び周辺メモリ３４
と、上記フィールドメモリ３３及び周辺メモリ３４から
読み出されるビデオデータを上記セレクト信号発生回路
３２から供給されるセレクト信号に応じて選択的に出力
するセレクタ３５とを備えてなる。

【００３７】上記フィールドメモリ３３には、上記信号
入力端子１を介して供給される入力ビデオデータが順次
書き込まれる。そして、このフィールドメモリ３３の読
み出しアドレスが上記手振れ補正信号により上記手振れ
ベクトルに応じて制御される。これにより、上記フィー
ルドメモリ３３からは、１フィールドの入力ビデオデー
タが上記手振れベクトルに応じて移動されたビデオデー
タが得られる。そして、このフィールドメモリ３３から
読み出されるビデオデータと上記周辺メモリ３４から読
み出される周辺ビデオデータとが上記セレクタ３５によ
る選択によって合成され、手振れ補正処理済のビデオデ
ータとして信号出力端子２から出力される。

【００３８】なお、上記周辺メモリ３４には、上記セレ
クタ３５を介して出力される手振れ補正処理済のビデオ
データによる画像の補正範囲に相当する周辺部分のビデ
オデータが周辺ビデオデータとして逐次書き込まれる。

【００３９】この実施例の手振れ補正装置では、上述の
ように上記動きベクトル検出部１４により検出された画
像の動きベクトルが手振れに起因するものであるか否か
の手振れ判定を上記手振れ判定部１５により確実に行う
ことができるので、手振れ補正を確実に行うことがで
き、自然な画像出力が得られる。

【００４０】

【発明の効果】以上の説明からも明らかなように、本発
明に係る画像の手振れ判定装置では、入力ビデオ信号で
構成される一定単位の画像を複数に分割した各ブロック
毎の代表点画素の画像データＩ_k （０，０）をメモリに
一定単位期間記憶し、現フィールドのブロックの各画素
の画像データＩ_k （ｘ，ｙ）と上記メモリから読み出さ
れる前フィールドのブロックの代表点画素の画像データ
Ｉ_k-1 （０，０）との差分の絶対値｜Ｉ_k-1 （０，０）
−Ｉ_k （ｘ，ｙ）｜をフィールド差分検出部により検出
し、このフィールド差分絶対値｜Ｉ_k-1 （０，０）−Ｉ
_k （ｘ，ｙ）｜に基づいて画像の動きベクトルをベクト
ル検出部により検出する。そして、極小値検出部は、互
いに隣接しないマクロブロックが生じる形態で１画面を
複数のマクロブロックに分割し、上記フィールド差分検
出部により得られるフィールド差分絶対値｜Ｉ
_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜を各マクロブロック
毎に積算した相関積算値表について、代表点画素に対応
する座標の積算値が極小値であることを検出することに
より、上記ベクトル検出部により検出された動きベクト
ルが固定カメラシーンにおける被写体の動きによるもの
であること示す検出出力を出力する。また、固定カメラ
シーン判定部は、入力ビデオ信号で構成される一定単位
の画像を複数に分割した各ブロック毎に複数の代表点画
素の画像データＩ_k （ｘ₀ ，ｙ₀ ）をメモリに一定単位
期間記憶し、現フィールドのブロックの各画素の画像デ
ータＩ_k （ｘ，ｙ）と上記メモリから読み出される前フ
ィールドのブロックの各代表点画素の画像データＩ_k-1
（ｘ₀ ，ｙ₀ ）との差分の絶対値｜Ｉ_k-1（０，０）−
Ｉ_k （ｘ，ｙ）｜が、 Ｉ_k-1 （０，０）≒Ｉ_k （０，０） なる第１の判定条件を満たし、且つ、判定の閾値をＴｈ
_I として、 ｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜≧Ｔｈ_I なる第２の判定条件を満たす画素を検出する毎に１ブロ
ック分の画素配列に対応する座標の度数ｆ（ｘ，ｙ）を
インクリメントした度数分布表を形成し、この度数分布
表に基づいて、上記動きベクトル検出部により検出され
た動きベクトルが固定カメラシーンのものであるか否か
の判定を行う。

【００４１】そして、手振れ判定部は、上記固定カメラ
シーン判定部による判定出力と上記極小値検出部による
検出出力に基づいて、上記動きベクトル検出部により検
出された動きベクトルが手振れに起因するものであるか
否かを判定するので、上記動きベクトル検出部により検
出された動きベクトルが手振れに起因するものであるか
否かを確実に判定することができる。

【００４２】従って、発明によれば、画像の動きベクト
ルが手振れに起因するものであるか否かを確実に判定す
ることのできる画像の手振れ判定装置を提供することが
でき、ハンディタイプのビデオカメラなどにおける高性
能の手振れ補正を可能にすることができる。

【図面の簡単な説明】

【図１】本発明に係る画像の手振れ判定装置を適用した
手振れ補正装置の構成を示すブロック図である。

【図２】上記手振れ判定装置の動きベクトル検出部にお
ける画面のブロック分割の状態を示す図である。

【図３】上記ブロック分割された画面の１ブロックの構
造を示す図である。

【図４】１画面を３×３に９分割したマクロブロックの
状態を示す図である。

【図５】上記手振れ補正装置の補正部の構成を示すブロ
ック図である。

【符号の説明】

１０・・・・・・・・・手振れ判定装置 １１・・・・・・・・・フィールド差分検出部 １２・・・・・・・・・固定カメラシーン判定部 １３・・・・・・・・・動きベクトル検出部 １４・・・・・・・・・極小値検出部 １５・・・・・・・・・手振れ判定部 ２０・・・・・・・・・補正量発生部 ３０・・・・・・・・・補正部

───────────────────────────────────────────────────── フロントページの続き (72)発明者 堀士 賢 東京都品川区北品川６丁目７番35号 ソ ニー株式会社内 (72)発明者 橋野 司 東京都品川区北品川６丁目７番35号 ソ ニー株式会社内 (56)参考文献 特開 平２−246680（ＪＰ，Ａ) 特開 平２−31570（ＪＰ，Ａ) 特開 平３−259672（ＪＰ，Ａ) 特開 平５−137052（ＪＰ，Ａ) 特開 昭61−201588（ＪＰ，Ａ) (58)調査した分野(Int.Cl.⁷，ＤＢ名) H04N 5/225 - 5/247

Claims (1)

(57)【特許請求の範囲】
1. 【請求項１】 入力ビデオ信号で構成される一定単位の
   画像を複数に分割した各ブロック毎の代表点画素の画像
   データＩ_k （０，０）をメモリに一定単位期間記憶し、
   現フィールドのブロックの各画素の画像データＩ
   _k （ｘ，ｙ）と上記メモリから読み出される前フィール
   ドのブロックの代表点画素の画像データＩ_k-1（０，
   ０）との差分の絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，
   ｙ）｜を検出するフィールド差分検出部と、 上記フィールド差分検出部により得られるフィールド差
   分絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜に基づ
   いて画像の動きベクトルを検出する動きベクトル検出部
   と、 互いに隣接しないマクロブロックが生じる形態で１画面
   を複数のマクロブロックに分割し、上記フィールド差分
   検出部により得られるフィールド差分絶対値｜Ｉ
   _k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜を各マクロブロック
   毎に積算した相関積算値表について、代表点画素に対応
   する座標の積算値が極小値であることを検出する極小値
   検出部と、 上記入力ビデオ信号で構成される一定単位の画像を複数
   に分割した各ブロック毎に複数の代表点画素の画像デー
   タＩ_k （ｘ₀ ，ｙ₀ ）をメモリに一定単位期間記憶し、
   現フィールドのブロックの各画素の画像データＩ
   _k （ｘ，ｙ）と上記メモリから読み出される前フィール
   ドのブロックの各代表点画素の画像データＩ_k-1 （０，
   ０）との差分の絶対値｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，
   ｙ）｜が、 Ｉ_k-1 （０，０）≒Ｉ_k （０，０） なる第１の判定条件を満たし、且つ、判定の閾値をＴｈ
   _I として、 ｜Ｉ_k-1 （０，０）−Ｉ_k （ｘ，ｙ）｜≧Ｔｈ_I なる第２の判定条件を満たす画素を検出する毎に１ブロ
   ック分の画素配列に対応する座標の度数ｆ（ｘ，ｙ）を
   インクリメントした度数分布表を形成し、この度数分布
   表に基づいて、上記動きベクトル検出部により検出され
   た動きベクトルが固定カメラシーンのものであるか否か
   の判定を行う固定カメラシーン判定部と、 上記固定カメラシーン判定部による判定出力と上記極小
   値検出部による検出出力に基づいて、上記動きベクトル
   検出部により検出された動きベクトルが手振れに起因す
   るものであるか否かを判定する手振れ判定部とを備えて
   なる画像の手振れ判定装置。