JP4967045B2 - 背景判別装置、方法及びプログラム - Google Patents

Description

本発明は、コンピュータを用いた画像処理に関する。

近年、インターネットのウェブサイトなどにおいて、ユーザの指定した画像に類似した画像をコンピュータで検索し結果を表示する、いわゆる類似画像検索のサービスが提案されている。類似画像検索では、画像に含まれる色や形などの特徴を表す情報（「特徴量」と呼ぶ）を用いるが、画像に写っている物体などの対象物（「オブジェクト」とも呼ぶ）に注目した類似画像検索を行う場合、背景領域の特徴量が検索精度を低下させる問題がある。

そのため、画像から背景領域を判別・除去することで背景の影響を抑制し、検索精度の向上を図る技術が提案されている。この種の技術では、画像中の部分毎の特徴量をクラスタリングすることによって、特徴量が似通った範囲をそれぞれ独立した領域として抽出する。また、部分や領域について、その特徴量を基に背景か否かを判別する手法の例として、特許文献１では、空の青や芝生の緑など背景となる特定色の部分を背景と判別したり（段落００６７）、画像を分割した領域ごとに、線や濃淡のパターンなどの特徴量を基に背景か判別する例を示している（段落００６８）。

特開平９−１３８４７０号公報

しかし、上記のようにクラスタリングを用いると、画像におけるオブジェクトや背景の種類や写り方によっては、独立した領域が複数抽出され、そのなかから主たるオブジェクトを認識するのが困難な場合が多いという課題があった。

例えば、特許文献１では、部分や領域の色形などの特徴量如何で背景かを判別するが、オブジェクトの色や形などが必ずしも背景とかけ離れているとは限らない。逆に、オブジェクトの周囲に位置している他のオブジェクトや背景が、必ずしも特定の色や質感で写っているとも限らない。さらに、空や植物以外の何らかの物体（オブジェクト）ではあるが、画像の意図する主なオブジェクトとの関係では、背景としての位置付けに過ぎない場合も多い。

以上のように、クラスタリングでオブジェクトなど複数の領域が抽出されるような画像の場合には、主たるオブジェクトと背景とを適切に判別して抽出等の処理を行うことは困難であった。

上記の課題に対し、本発明の目的は、主たるオブジェクトと背景とを精度よく判別することである。

上記の目的をふまえ、本発明の一態様（１）は、画像内の背景を判別する背景判別装置であって、判別の対象とする元画像の全画素に対応するブロック毎に特徴量を抽出する特徴量抽出手段と、抽出された前記ブロックの特徴量に基づいてブロックをクラスタリングすることにより、前記画像を複数の領域に分割する分割手段と、画像の各ブロック毎に背景である確率を設定する設定手段と、分割された前記領域に対応する位置の前記ブロック毎に設定されている前記確率の平均値を前記領域毎に算出し、この平均値に基づいて各領域が背景であるか否かを判別する判別手段と、分割された前記各領域毎に、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出し、抽出した前記元画像の全画素に対応するブロック毎の前記特徴量がいずれの領域の前記代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別する画素判定手段と、を備えることを特徴とする。

本発明の他の態様（４）は、上記態様を方法のカテゴリで捉えたもので、画像内の背景をコンピュータが判別する背景判別方法であって、コンピュータが、判別の対象とする元画像の全画素に対応するブロック毎に特徴量を抽出する特徴量抽出ステップと、コンピュータが、抽出された前記ブロックの特徴量に基づいてブロックをクラスタリングすることにより、前記画像を複数の領域に分割する分割ステップと、コンピュータが、画像の各ブロック毎に背景である確率を設定する設定ステップと、コンピュータが、分割された前記領域に対応する位置の前記ブロック毎に設定されている前記確率の平均値を前記領域毎に算出し、この平均値に基づいて各領域が背景であるか否かを判別する判別ステップと、コンピュータが、分割された前記各領域毎に、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出し、抽出した前記元画像の全画素に対応するブロック毎の前記特徴量がいずれの領域の前記代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別する画素判定ステップと、を含むことを特徴とする。

本発明の他の態様（５）は、上記態様をコンピュータ・プログラムのカテゴリで捉えたもので、画像内の背景をコンピュータに判別させる背景判別プログラムであって、コンピュータに、判別の対象とする元画像の全画素に対応するブロック毎に特徴量を抽出させ、コンピュータに、抽出された前記ブロックの特徴量に基づいてブロックをクラスタリングさせることにより、前記画像を複数の領域に分割させ、コンピュータに、画像の各ブロック毎に背景である確率を設定させ、コンピュータに、分割された前記領域に対応する位置の前記ブロック毎に設定されている前記確率の平均値を前記領域毎に算出させ、この平均値に基づいて各領域が背景であるか否かを判別させ、コンピュータに、分割された前記各領域毎に、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出し、抽出した前記元画像の全画素に対応するブロック毎の前記特徴量がいずれの領域の前記代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別させることを特徴とする。

このように、画像中央から離れるほど背景の可能性が高いなど画像の部分ごとに背景である確率を設定し、画像から特徴量の共通性によるクラスタリングで分割した領域について、領域内に分布する前記確率の平均値を算出する。この平均値は、画像中の各領域が背景である度合いを表すため、この平均値を基に背景かを判別することにより、オブジェクトや背景の色や形などに拘わらず、主たるオブジェクトと背景を精度よく判別することができる。また、全画素から特徴量を抽出するが、クラスタリング対象とする特徴量は間引いたり複数画素のブロック単位として処理負荷を軽減する。一方、クラスタリング結果の領域ごとに代表特徴量を算出し、この代表特徴量と画素ごとの特徴量との類似性により各画素についても背景か判別する。これにより、クラスタリング負荷の抑制による処理の効率化と、領域境界付近の画素も含む判別精度が両立できる。

本発明の他の態様（２）は、上記いずれかの態様において、学習用データとしてジャンルごとの画像を記憶している学習用データ記憶手段を有し、前記設定手段は、画像のブロックごとに背景である確率を対応付けたデータである背景確率分布を、前記学習用データ記憶手段に記憶されている前記学習用データを用いてジャンルごとに予め生成して所定の確率分布記憶手段に記憶させ、前記確率分布記憶手段に記憶されている前記背景確率分布に基づいて前記元画像の各ブロック毎に背景である確率を設定することを特徴とする。

このように、学習用データに基づいて、画像のジャンルごとに背景確率分布を予め生成し背景の判別に活用することにより判別精度が一層改善できる。

本発明の他の態様（３）は、上記いずれかの態様において、前記設定手段は、前記ジャンル毎の前記背景である確率の分布を、二次元正規分布に関する係数を用いて表現することを特徴とする。

このように、背景確率分布を二次元正規分布（ガウス分布）を用いて表現し、ジャンルごとに平均値や偏差などの係数を設定することにより、ジャンル毎の背景確率分布を容易にかつ少ないデータ量で記憶することが可能となる。

なお、上記の各態様とは異なるカテゴリ（装置に対し方法、方法に対しプログラムなど）や、以下に説明するさらに具体的な各態様も本発明に含まれる。異なるカテゴリについては、「手段」を「ステップ」のように適宜読み替えるものとする。

本発明によれば、主たるオブジェクトと背景とを精度よく判別することができる。

本発明の実施形態の構成を示す機能ブロック図。 本発明の実施形態で用いる情報（データ）を例示する図。 本発明の実施形態における処理手順を示すフローチャート。 本発明の実施形態における背景確率分布を示す概念図。 本発明の実施形態における特徴量抽出の一例を表す概念図。 本発明の実施形態における特徴量抽出の一例を表す概念図。 本発明の実施形態における元画像の一例を示す図。 本発明の実施形態における領域を示す概念図。 本発明の実施形態における領域と背景確率分布の関係を示す概念図。 本発明の実施形態における領域ごとの背景確率の平均値を白っぽさで示す概念図。 本発明の実施形態において背景を除去した画像を示す図。

次に、本発明を実施するための形態（「実施形態」と呼ぶ）について、図に沿って説明する。なお、背景技術や課題などで既に述べた内容と共通の前提事項については適宜省略する。

〔１．構成〕
本実施形態は、図１（構成図）に示すように、画像内の背景を判別する背景判別装置１（以下「本装置１」又は「本装置」と呼ぶ）に関する。本装置１は、通信ネットワークＮ経由で端末Ｔに類似画像検索サービスを提供する機能を持つサーバを兼ねるが、そのような機能を兼ねず背景の判別だけの装置としてもよい。

本装置１は、一般的なコンピュータの構成として少なくとも、ＣＰＵなどの演算制御部６と、外部記憶装置（ＨＤＤ等）や主メモリ等の記憶装置７と、通信ネットワークＮ（インターネット、携帯電話網、ＬＡＮなど）との通信手段８（ＬＡＮアダプタなど）と、を有する。また、端末Ｔは、ユーザの用いるパーソナル・コンピュータ（ＰＣ）、スマートフォンや携帯電話端末装置といった情報処理装置で、その数は問わない。

そして、本装置１では、記憶装置７に予め記憶（インストール）した図示しない所定のコンピュータ・プログラムが演算制御部６を制御することで、図１に示す各手段などの要素（１１，１２，１３など）を実現する。これら各要素のうち、情報の記憶手段は、記憶装置７において各種のデータベース（「ＤＢ」とも表す）やファイル、配列等の変数、各種スタックやレジスタ、システム設定値など任意の形式で実現できる。

このような記憶手段のうち、元画像記憶手段１１は、背景を判別する対象とする画像である元画像（例えば類似画像検索の候補として特徴量などの情報を蓄積しておく多数の画像など）を記憶しておく手段である。また、学習用データ記憶手段１２は、背景である確率を画像中の各ブロック毎に設定するのに用いる学習用データとして、ジャンルごとの画像を記憶している手段である。なお、記憶手段以外の各手段は、以下のような情報処理の機能・作用を実現・実行する処理手段である。

〔２．作用〕
上記のような本装置１において、背景を判別する処理手順を図３のフローチャートに示す。
〔２−１．背景確率分布の生成〕
ここで、設定手段１３は、画像の各ブロック毎に背景である確率（「背景確率」と呼ぶこととする）を設定するが、本実施形態における背景確率の設定は、背景の判別（図３）に先立って、画像全体における背景確率の分布（「背景確率分布」と呼ぶこととする）を、画像のジャンル（例えば、人物、商品、風景など）ごとに予め定める処理と、背景の判別時に背景確率分布を適用することで個々の元画像のブロック毎に背景確率を設定する処理と、からなる。ここで、背景確率分布の例を図４の概念図に示す。この例では、破線の同心円で示すように、黒っぽい部分ほど主たるオブジェクトである確率が高く背景確率が低く、逆に、周囲の白っぽい色の部分ほど背景確率が高い。

このような背景確率分布を求めるには、画像の端の方が背景である確率が高いことを前提として、画像中の座標ごとに何らかの適宜な計算式又は手動設定などで得てもよいが、本実施形態では、画像のジャンルごとに、人手により背景を判別し背景部分のみを抽出したサンプル画像を学習用データとして学習用データ記憶手段１２に予め多数用意した上で、それらを統計処理することで各ピクセルの背景の確率を算出する。

すなわち、設定手段１３は、画像のブロックごとに背景である確率を対応付けたデータである背景確率分布を、学習用データ記憶手段１２に記憶されている学習用データを用いてジャンルごとに予め生成し、所定の確率分布記憶手段１４に記憶させる。背景確率分布を得るための統計処理としては、画像上の画素やブロック、座標などごとに、そのジャンルの学習用データにおいてその部分が背景となっている割合を集計すればよい。

〔２−２．背景確率分布の一例〕
上記のように、設定手段１３が生成して記憶しておく背景確率分布の表現形式は自由であるが、その一例として、ジャンル毎の背景確率分布を、二次元正規分布に関する係数を用いて表現することができる。すなわち、まず、背景確率は、基本的に画像の中心ほど低く辺縁部ほど高いので、主たるオブジェクトである確率（仮に「対象確率」と呼ぶ）と逆であり、背景確率と対象確率は足して１になるいわゆる補数の関係にある。

そこで、補数である対象確率で説明すると、対象確率は、画像中心ほど高く、三次元空間上ならば画像のｘ軸、ｙ軸平面上で、ｚ軸（対象確率）方向に盛り上がる山形を描く二次元正規分布をとる。この場合、画像の横方向をｘ軸、縦方向をｙ軸とすると、画像の中心付近が二次元正規分布の山形の頂点となる平均値にあたる。

例えば、ｘ，ｙの分散をσ_ｘ ^２，σ_ｙ ^２とし、相関係数をσ_ｘｙとし、二次元正規分布の密度関数における指数部を「−ｃ^２／２」と表すと、密度関数は相似な楕円を表し、楕円上の点（ｘ，ｙ）を全て二次元正規分布の密度関数で

と表すことができる。

但し、背景確率に利用する場合はｘ，ｙの相関はないと仮定することができるので、相関係数を０とすると背景確率分布は

のように表される。なお、σ_ｘ ^２，σ_ｙ ^２や、指数部に含まれる平均μ_ｘ，μ_ｙは、識別結果より適当な値を決めてもよいし、平均は画像の中心座標としてもよい。

以上のような二次元正規分布を用いて、背景確率分布を対象確率との補数関係に関連付けて表す場合、ジャンル毎の係数としては、例えば、確率（山形）の中心となる中心座標をｘ軸方向やｙ軸方向の平均値などで画像中で任意の位置に設定したり、確率の集中度を分散、標準偏差などで設定することにより、ジャンルに応じた背景確率分布のパターンを表して記憶しておくことができる（例えば図２）。

〔２−３．特徴量の抽出〕
以上のように背景確率分布が生成され、記憶されている前提で、背景を判別して抽出する処理手順（図３）について説明する。まず、特徴量抽出手段１５が、元画像記憶手段１１から、背景判別の対象とする元画像（「対象画像」又は単に「画像」とも呼ぶこととする）をブロックに分割し、分割した画像のブロック毎に特徴量を計算などで抽出する（ステップＳ１１）。ここで抽出する特徴量は、カラーヒストグラムやテクスチャ特徴量など一般的なものでよい。

また、特徴量抽出の基礎とするブロックとしては、個々の画素をそのままブロックとしてもよいが、図５に例示するように、例えば画素Ｇ１を中心とするブロックＢ１から特徴量Ｃ１を抽出し、隣の画素Ｇ２を中心とするブロックＢ２から特徴量Ｃ２を抽出、のように複数のピクセルを単位とする窓のようなブロックの範囲をずらしていきながらそれぞれの位置で特徴量を抽出すれば、特徴量の情報量が充実し判別精度の向上が期待できる。

なお、この後行うクラスタリングの負荷が過大になることを防ぐには、図５の例のように全画素に対応して特徴量を抽出する場合は抽出対象とする画素を間引くか、又は、図６に例示するように所定数の画素をまとめたブロックＢ１１やＢ１２などを単位に特徴量Ｃ１１やＣ１２などを抽出すればよい。これらの対応により、クラスタリングの対象となる特徴量を削減して処理負荷を抑制し、処理速度の向上が見込める。

〔２−４．特徴量に基づくクラスタリング〕
続いて、分割手段１６が、上記のように抽出されたブロックの特徴量に基づいてブロックをクラスタリングして同一クラスタに属するブロック群ごとに領域（「部分領域」とも呼ぶこととする）を生成することにより、画像を複数の領域に分割する（ステップＳ１２）。この特徴量のクラスタリングは特徴量空間内で行い、クラスタリングした特徴量ごとに、元画像中における領域として配置するが、その例を以下に示す。

例えば、図７のような元画像を基に、特徴量を抽出してクラスタリングした結果、図８に示すような領域Ｒ１からＲ５に分割されたとする。この例で、領域Ｒ２は、領域Ｒ１，Ｒ３，Ｒ４，Ｒ５を除いた残る領域である。なお、特徴量空間では同一のクラスタであっても、対応するブロックの位置やまとまりなどによっては、画像上では独立した領域になる可能性がある。また、図７以降の説明では、符号Ｒ１〜Ｒ５で各領域を示すが、実装上は、各領域を識別するＩＤ、ラベル、番号などの識別情報やその順序については、例えばクラスタリング直後はクラスタリングにおける順序などであるものを、画像中の位置順に振り直すなど、適宜付け直しすればよい。

〔２−５．確率の平均値の算出と背景の判別〕
さらに、判別手段１７は、分割された領域に対応する位置のブロック毎に設定されている確率の平均値を領域毎に算出する。この処理では、判別手段１７は、まず、確率分布記憶手段１４に記憶されている背景確率分布のうち、その対象画像と同一ジャンルに対応する背景確率分布を選択する（ステップＳ１３）。そして、判別手段１７は、その背景確率分布に基づいて即ちその背景確率分布のサイズを対象画像に合わせて拡大縮小し（ステップＳ１４）、それを対象画像に当てはめることで、部分領域ごとに含まれる画像の各ブロック毎に対応する背景確率を求め、その平均値を算出する（ステップＳ１５）。

例えば、図４に示した背景確率分布と、図８に示した各部分領域を、図９に示すようにサイズを合わせて重ね合わせ、背景確率のうち各領域における個々のブロックと重なる背景確率の平均値を求めれば、例えば図１０に例示するように、部分領域ごとの背景確率の平均値が得られる。図１０では、白っぽいほど背景確率が高いものとする。

そして、判別手段１７は、上記のように各部分領域ごとに算出された背景確率の平均値に基づいて各領域が背景であるか否かを判別し、背景領域を抽出する（ステップＳ１６）。このように判別、抽出した背景領域を元画像から除去すれば、オブジェクトの特徴を精度よく表した類似画像検索用の画像が得られる。

領域が背景であるか否かの判別基準としては、例えば、予め閾値を決定しておき、領域の背景確率の平均値がその閾値を超えた場合（図１０の例では、白に近い場合）にその領域を背景と判断することが考えられる。他にも例えば、個別具体的な画像に応じ、領域間における背景確率の平均値のギャップや差の比率などが所定値以上開いている場合に、それを背景か否かの区切りとしたり、画像の面積のうち、所定の割合が背景となるように、個別の元画像に応じて平均値の閾値を求めるなどしてもよい。

以上のような処理によって、例えば、図７の元画像を基に、図１０に示した領域Ｒ４とＲ５以外の領域Ｒ１，Ｒ２，Ｒ３が背景と判別された場合、それらに該当する立ち木などの画像部分を除去し、領域Ｒ４とＲ５に該当する建物２棟だけが残った図１１のような画像を、処理の結果とする。このような処理の結果の画像は、例えば判別手段１７が結果記憶手段１８に記憶させ、端末Ｔからの類似画像検索要求を受けた検索エンジンなどの類似画像検索手段１９が、画像同士の比較による検索処理の対象として利用する。

〔３．効果〕
本実施形態では、以上のように、画像中央から離れるほど背景の可能性が高いなど画像の部分ごとに背景である確率を設定し（例えば図４、図９）、画像から特徴量の共通性によるクラスタリングで分割した領域について（例えば図８）、領域内に分布する前記確率の平均値を算出しそれを基に背景かを判別することにより（例えば図１０）、オブジェクトや背景の色や形などに拘わらず、主たるオブジェクトと背景を精度よく判別することができる。これにより、画像中のオブジェクトの特徴を精度よく表すことで、類似画像検索の精度を高めることができる。

特に、本実施形態では、学習用データに基づいて、画像のジャンルごとに背景確率分布を予め生成し背景の判別に活用することにより判別精度が一層改善できる。

また、本実施形態では、背景確率分布を二次元正規分布（ガウス分布）を用いて表現し、ジャンルごとに平均値や偏差などの係数を設定することにより（例えば図２）、ジャンル毎の背景確率分布を容易にかつ少ないデータ量で記憶することが可能となる。

〔４．第２実施形態〕
上記実施形態（以下「第１実施形態」と呼ぶ）に対し、背景判別の手法を更に改良することで処理の精度と効率を両立させる例を第２実施形態として示す。すなわち、図５の例において特徴量を抽出する対象の画素を間引いたり、また、図６に例示したように特徴量をブロック単位に抽出することで特徴量を削減した場合、元画像の画素単位に背景か否かを判定する処理をさらに加えれば、処理効率を維持しつつ、特に領域間の境界付近における判定精度を改善することができる。

この場合、特徴量抽出手段１５は、背景の判別対象とする元画像から、全画素に対応するブロック毎に特徴量を抽出する一方、画素判定手段２０は、分割された各領域ごとに、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出する。各領域の代表特徴量は、例えば、特徴量ベクトルの平均をとって求めることができる。

そして、画素判定手段２０は、元画像から抽出したブロック毎の各特徴量がいずれの領域の代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別する。すなわち、画素判定手段２０は、最も類似する領域が背景領域と判定されていれば、その画素を背景と判定し、そうでなければ背景ではないと判定する。これにより、処理の精度と効率が両立できる。

以上のように、第２実施形態では、全画素から特徴量を抽出するが、クラスタリング対象とする特徴量は間引いたり複数画素のブロック単位として処理負荷を軽減する。一方、クラスタリング結果の領域ごとに代表特徴量を算出し、この代表特徴量と画素ごとの特徴量との類似性により各画素についても背景か判別する。これにより、クラスタリング負荷の抑制による処理の効率化と、領域境界付近の画素も含む判別精度が両立できる。

なお、画素がどの領域と類似するかの基準としては、上記のような領域の代表特徴量と画素の特徴量との類似性以外にも、各領域の背景確率の平均値と、元画像の各画素の特徴量と、の類似度を用いることもできる。即ち、元画像の各画素の特徴量が、領域の背景確率の平均値と類似している場合には、その画素が背景であると判定する。

〔５．他の実施形態〕
なお、上記各実施形態は例示に過ぎず、本発明は、以下に例示するものやそれ以外の他の実施態様も含むものである。例えば、ブロック毎の背景確率の設定について、ジャンル毎の背景確率分布を予め用意することは必須ではなく、ある固定された背景確率の基準に基づいて個々の元画像を構成するブロック毎に背景確率を計算して設定してもよい。

また、手段などの各要素は、コンピュータの演算制御部に限らず、ワイヤードロジック等に基づく電子回路など他の情報処理機構で実現してもよい。また、各構成図、データや画像、画面などの図、フローチャートの図などは例示に過ぎず、各要素の有無、その順序や具体的内容などは適宜変更可能である。例えば、本発明の装置は、サーバなどの装置を複数用いて実現してもよく、個々の記憶手段を別個独立のサーバ装置やシステムで実現する構成も一般的である。また、機能によっては、外部のプラットフォーム等をＡＰＩ（アプリケーション・プログラム・インタフェース）やネットワークコンピューティング（いわゆるクラウドなど）で呼び出して実現するなど、構成は柔軟に変更できる。

１ 背景判別装置
６ 演算制御部
７ 記憶装置
８ 通信手段
１１ 元画像記憶手段
１２ 学習用データ記憶手段
１３ 設定手段
１４ 確率分布記憶手段
１５ 特徴量抽出手段
１６ 分割手段
１７ 判別手段
１８ 結果記憶手段
１９ 類似画像検索手段
Ｂ１，Ｂ２，Ｂ１１，Ｂ１２ ブロック
Ｃ１，Ｃ２，Ｃ１１，Ｃ１２ 特徴量
Ｇ，Ｇ１，Ｇ２ 画素
Ｎ 通信ネットワーク
Ｒ１〜Ｒ５ 領域
Ｔ 端末

Claims (5)

1. 画像内の背景を判別する背景判別装置であって、
   判別の対象とする元画像の全画素に対応するブロック毎に特徴量を抽出する特徴量抽出手段と、
   抽出された前記ブロックの特徴量に基づいてブロックをクラスタリングすることにより、前記画像を複数の領域に分割する分割手段と、
   画像の各ブロック毎に背景である確率を設定する設定手段と、
   分割された前記領域に対応する位置の前記ブロック毎に設定されている前記確率の平均値を前記領域毎に算出し、この平均値に基づいて各領域が背景であるか否かを判別する判別手段と、
   分割された前記各領域毎に、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出し、抽出した前記元画像の全画素に対応するブロック毎の前記特徴量がいずれの領域の前記代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別する画素判定手段と、
   を備えることを特徴とする背景判別装置。
2. 学習用データとしてジャンルごとの画像を記憶している学習用データ記憶手段を有し、
   前記設定手段は、
   画像のブロックごとに背景である確率を対応付けたデータである背景確率分布を、前記学習用データ記憶手段に記憶されている前記学習用データを用いてジャンルごとに予め生成して所定の確率分布記憶手段に記憶させ、
   前記確率分布記憶手段に記憶されている前記背景確率分布に基づいて前記元画像の各ブロック毎に背景である確率を設定する
   ことを特徴とする請求項１記載の背景判別装置。
3. 前記設定手段は、前記背景である確率の分布を、二次元正規分布に関する係数を用いて表現することを特徴とする請求項１又は２記載の背景判別装置。
4. 画像内の背景をコンピュータが判別する背景判別方法であって、
   コンピュータが、判別の対象とする元画像の全画素に対応するブロック毎に特徴量を抽出する特徴量抽出ステップと、
   コンピュータが、抽出された前記ブロックの特徴量に基づいてブロックをクラスタリングすることにより、前記画像を複数の領域に分割する分割ステップと、
   コンピュータが、画像の各ブロック毎に背景である確率を設定する設定ステップと、
   コンピュータが、分割された前記領域に対応する位置の前記ブロック毎に設定されている前記確率の平均値を前記領域毎に算出し、この平均値に基づいて各領域が背景であるか否かを判別する判別ステップと、
   コンピュータが、分割された前記各領域毎に、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出し、抽出した前記元画像の全画素に対応するブロック毎の前記特徴量がいずれの領域の前記代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別する画素判定ステップと、
   を含むことを特徴とする背景判別方法。
5. 画像内の背景をコンピュータに判別させる背景判別プログラムであって、
   コンピュータに、判別の対象とする元画像の全画素に対応するブロック毎に特徴量を抽出させ、
   コンピュータに、抽出された前記ブロックの特徴量に基づいてブロックをクラスタリングさせることにより、前記画像を複数の領域に分割させ、
   コンピュータに、画像の各ブロック毎に背景である確率を設定させ、
   コンピュータに、分割された前記領域に対応する位置の前記ブロック毎に設定されている前記確率の平均値を前記領域毎に算出させ、この平均値に基づいて各領域が背景であるか否かを判別させ、
   コンピュータに、分割された前記各領域毎に、その領域に含まれる各ブロックの特徴量に基づいて、領域の代表特徴量を算出し、抽出した前記元画像の全画素に対応するブロック毎の前記特徴量がいずれの領域の前記代表特徴量に最も類似するかを判定し、最も類似する領域が背景と判別されているかに基づいて、その画素が背景かを判別させる
   ことを特徴とする背景判別プログラム。

Images