JP5304294B2 - 電子スチルカメラ - Google Patents

Description

本発明は、被写体画像中の人物の顔表情レベルを評価する機能を有する電子スチルカメラに関する。

従来、撮影された画像中の人物の顔表情を評価し、その評価に基づいて複数の撮影画像を顔表情の良い順に並べて表示する機能を有する画像評価装置が知られている（例えば、特許文献１参照）。

特開２００４−４６５９１号公報

しかしながら、引用文献１の装置においては、撮影画像毎に顔表情の評価値が与えられ、これらの撮影画像が顔表情の良い順に並べて表示されるが、複数の画像を２次元的に配列する通常の表示の場合、画像同士を比べていずれの画像が評価値が高いのかが分かり難いという問題がある。

（１）請求項１の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記選択手段によって選択された前記サムネイル画像を拡大表示すると共に前記顔表情レベルに応じて拡大表示時間を変更することを特徴とする。
（２）請求項２の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示し、当該サムネイル画像の各々に、前記ランキングと前記個人識別情報と数値化またはグラフ化された顔表情レベルとを付記表示する表示手段と、前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、前記選択手段により、前記一覧表示された複数の前記サムネイル画像に付記表示された前記顔表情レベルから任意の顔表情レベルが選択されると、前記表示手段は、前記選択手段によって選択された前記顔表情レベルと等しい顔表情レベルを有する被写体画像データのサムネイル画像を一覧表示することを特徴とする。
（３）請求項７の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、前記ランキング決定手段によってランキング一位と決定された被写体画像データの被写体人物を優先者と選定する第１の優先者選定手段と、を備え、前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第１の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする。
（４）請求項８の発明による電子スチルカメラは、被写体画像データを出力する撮像手段と、前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、前記被写体人物を表す個人識別情報を入力する入力手段と、前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、前記ランキング決定手段によってランキング最下位と決定された被写体画像データの被写体人物を優先者と選定する第２の優先者選定手段と、を備え、前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第２の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする。

本発明の電子スチルカメラによれば、被写体画像データの顔表情レベルに基づいて複数の被写体画像データのランキングを決定し、これらの被写体画像データのサムネイル画像とともにランキングも表示するので、表示画面を一見しただけで、いずれの画像が評価レベルが高いのかを容易に把握できる。

本発明の実施の形態に係る電子スチルカメラの構成を示すブロック図である。 本実施の形態に係る電子スチルカメラのサムネイル一覧表示されたディスプレイ画面を模式的に示す図である。 本実施の形態に係る電子スチルカメラの第１の変形例であり、サムネイル一覧表示されたディスプレイ画面を模式的に示す図である。 本実施の形態に係る電子スチルカメラの第２の変形例であり、サムネイル一覧表示されたディスプレイ画面を模式的に示す図である。 本実施の形態に係る電子スチルカメラの第３の変形例であり、サムネイル一覧表示されたディスプレイ画面を模式的に示す図である。

以下、本発明の実施の形態による電子スチルカメラについて、図面を参照しながら説明する。
図１は、本発明の実施の形態による電子スチルカメラの構成を示すブロック図である。
図１に示されるように、電子スチルカメラは、撮影レンズ１１、絞り１２、撮像素子１３、バッファメモリ１４および画像処理部１５を備える。また、デジタルカメラは、画像記録部１６、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１７、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１８、バス１９、画像読出し部２０、識別データ入力部３５、顔表情設定部３６、優先者選定部３７、表示制御部４１、ディスプレイ４２および画像選択部４３を備える。

画像処理部１５、画像記録部１６、ＣＰＵ１７、ＲＯＭ１８、画像読出し部２０、識別データ入力部３５、顔表情設定部３６、優先者選定部３７、表示制御部４１および画像選択部４３は、バス１９を介して互いに接続されている。

ＣＰＵ１７は、顔検出部２１、顔表情検出部２３、顔表情レベル評価部２５、自動撮影部２７およびランキング決定部２８として機能する。
ＲＯＭ１８は、顔データ記憶部２２、顔表情データ記憶部２４、顔表情レベルデータ記憶部２６および顔登録データ記憶部２９として機能する。

撮影レンズ１１は、ズームレンズやフォーカスレンズを含む複数のレンズで構成され、被写体像を撮像素子１３上に結像する。図１では簡単のため、撮影レンズ１１は１枚のレンズで示されている。撮像素子１３は、撮影レンズ１１からの被写体光Ｌ１を光電変換することにより画像信号を生成する。

撮像素子１３から出力される画像信号は、バッファメモリ１４を介して画像処理部１５に送られ、ここで所定の種々の画像処理が施される。撮影開始前の段階では、撮像素子１３からの画像信号は、バッファメモリ１４、画像処理部１５を経てバス１９を介してディスプレイ４２に送られ、スルー画像として表示される。撮影段階では、撮像素子１３からの画像信号は、バッファメモリ１４、画像処理部１５を経てバス１９を介して画像記録部１６にて記録される。

画像記録部１６は、画像データとその画像データに関する属性データ（タグ情報）とを関連付けて不揮発性のメモリ（記憶媒体）１６ａに記録する。画像データには、被写体を撮影レンズ１１、絞り１２、撮像素子１３によって撮影した被写体画像や、外部機器から画像記録部１６に入力された被写体画像が含まれる。

画像読出し部２０は、画像記録部１６のメモリ１６ａに記録されている画像データの検索や属性データに基づいて画像の再生を行う操作部である。

顔検出部２１は、被写体画像データを入力し、これを顔データ記憶部２２に予め記憶されている顔データと比較することにより、画像中の被写体人物の顔を検出する。被写体人物が複数人の場合は各人の顔を検出する。顔データ記憶部２２は、例えば、眉、眼、鼻、唇の形状に関する特徴点のデータを記憶している。

顔検出には、例えば、特開２００１−１６５７３号公報に開示されている検出手法を用いることができる。この検出手法は、入力画像中から特徴点を抽出して被写体の顔領域、顔の大きさ等を検出するものである。特徴点としては、眉、眼、鼻、唇の各端点、および顔の輪郭点、例えば頭頂点や顎の下端点が挙げられる。

他の顔検出としては、例えば、特開２００５−１５７６７９号公報に開示されている検出手法を用いることができる。この検出手法は、先ず、入力画像中の２画素間の輝度差を特徴量として学習しておき、その特徴量に基づいて入力画像中の所定領域に顔が存在するか否かを示す推定値を算出し、推定値が１以上のときにその所定領域に顔が存在すると判別するものである。

顔表情検出部２３は、顔検出部２１により検出された顔領域の画像の顔表情を顔表情データ記憶部２４に予め記憶されている所定の顔表情データと比較することにより、被写体画像データ中の被写体人物の顔表情が所定の顔表情に対応することを検出する。また、顔表情検出部２３は、被写体人物が複数人の場合は所定の人物の顔について顔表情を検出する。
顔表情には、笑顔、泣き顔、怒り顔、驚き顔、寝顔などの様々な種類があり、顔表情データ記憶部２４は、これらの複数の顔表情データを記憶している。顔表情検出部２３は、例えば、被写体画像中の被写体人物の顔表情が笑顔であることを検出すると、その旨の検出信号を出力する。

顔表情検出部２３が顔領域の画像の顔表情を検出する場合には、特開２００８−４２３１９号公報に開示されている検出手法を用いることができる。この検出手法は、例えば笑顔であることを検出するには、検出された画像の顔が笑顔と通常時の顔という２つの顔表情のいずれに近いかに基づいて表情の種類を判断するものである。

顔表情レベル評価部２５は、顔検出部２１により検出された顔領域の画像の顔表情を顔表情レベルデータ記憶部２６に予め記憶されている複数の顔表情レベルデータと比較することにより、顔領域の画像中の被写体人物の顔表情がいずれの顔表情レベルに対応するかを評価する。顔表情レベル評価部２５は、被写体人物の顔表情レベルに対応する評価信号を出力する。画像記録部１６は、被写体画像データと、評価信号に基づく属性データ（顔表情の種類とその顔表情レベル）とを関連付けて１つの画像ファイルとしてメモリ１６ａに記録する。

顔表情レベルデータ記憶部２６は、顔表情の度合い（顔表情レベル）、例えば、笑顔の度合い（笑顔レベル）が１０％、２０％、３０％、・・・、１００％であるときの各笑顔の特徴を表す笑顔レベルデータ（例えば、特徴点同士の間隔）を笑顔レベル毎に記憶している。笑顔レベルの数値が高まるにつれて、笑顔表情は微笑程度から大笑いへとその笑顔の度合いが大きくなってゆく。同様に、顔表情レベルデータ記憶部２６は、泣き顔、怒り顔などについてもレベルデータを記憶している。

笑顔の度合いを判定する手法には、例えば、特開２００４−４６５９１号公報に開示されている手法を用いることができる。この判定手法は、入力された部分画像の笑顔について笑顔の度合いの評価を行い、笑顔評価値を算出する。笑顔評価の際は、予め記憶されている笑顔データを参照して眉、瞳孔、唇の各要素の形状の評価ポイントを算出し、各評価ポイントを係数により重み付けした上で合算した値を笑顔評価値としている。

自動撮影部２７は、顔表情検出部２３からの検出信号に応じて撮影レンズ１１、絞り１２および撮像素子１３に動作信号を出力して被写体の自動撮影を行う。この自動撮影は、顔表情検出部２３が所定の顔表情、例えば笑顔を検出する毎に１枚の画像を撮像する。

ランキング決定部２８は、画像読出し部２０によってメモリ１６ａから読み出された被写体画像データについてランク付けを行う。すなわち、ランキング決定部２８は、被写体画像データ毎に付加されている属性データ、例えば、笑顔レベル８０％、６０％というレベル値に基づいて複数の被写体画像データについて順位を付ける。そして、ランキング結果を表す信号を出力する。

顔登録データ記憶部２９は、カメラに登録した登録人物の顔画像に基づいた特徴的な顔情報を登録データとして記憶する。なお、この特徴的な顔情報とは、例えば、眉、眼、鼻、唇などの特徴点が持つ特徴量のデータである。

識別データ入力部３５は、メモリ１６ａに記録されている画像ファイル中の属性データとして被写体人物を表す個人識別データ、例えば、その人物の名前やニックネームを入力する操作部である。個人識別データの入力により、属性データには、被写体人物の顔表情の種類とその顔表情レベル（例えば、笑顔レベル：８０％）と個人名（例えば、Ａさん）とが含まれる。そして、画像記録部１６は、被写体画像データと、属性データとを関連付けてメモリ１６ａに記録する。

顔表情設定部３６は、被写体人物の顔表情の種類を外部から設定する操作部であり、笑顔を含む複数の顔表情の設定ができる。例えば、顔表情の設定が笑顔であれば、顔表情検出部２３は笑顔を検出して検出信号を発生し、自動撮影が行われる。また、顔表情設定部３６が笑顔を設定すれば、画像読出し部２０は、メモリ１６ａに記録されている被写体画像データのうち笑顔の被写体画像データを読み出す。

優先者選定部３７は、ランキング決定部２８によってランク付けが行われた複数の被写体画像データについて、最上位にランクされた被写体画像データの被写体人物を選定する第１の選定部および最下位にランクされた被写体画像データの被写体人物を選定する第２の選定部を有し、第１の選定部と第２の選定部との間で切換え可能に構成されている。

これにより、被写体画像データ中に複数の被写体人物が存在し、複数の被写体人物中に第１の選定部によって選定された人物（ランク：最上位）が存在した場合、その人物を他の人物に優先して顔表情を検出して自動撮影を行うことができる。同様に、複数の被写体人物中に第２の選定部によって選定された人物（ランク：最下位）が存在した場合、その人物を他の人物に優先して顔表情を検出して自動撮影を行うことができる。
最上位および最下位にランクされた被写体画像データの被写体人物については、被写体画像データから顔の特徴を表す顔登録データが作成され、この顔登録データが顔登録データ記憶部２９に記録される。

表示制御部４１は、ディスプレイ４２による表示を制御する。すなわち、表示制御部４１は、ディスプレイ４２がスルー画像の表示、バッファメモリ１４に一時的に記録されている被写体画像の表示、画像記録部１６のメモリ１６ａに保存された被写体画像の再生表示を行なう時の表示態様を制御する。例えば、表示制御部４１は、ディスプレイ４２に被写体画像のみを表示させたり、属性情報を付加した被写体画像を表示させる。また、表示制御部４１は、被写体画像データのサムネイル画像の一覧表示の態様、例えば、サムネイル画像の画面上での配置、ランキング決定部２８からの信号に基づくランク表示を制御する。

ディスプレイ４２は、表示制御部４１の指令により、スルー画像、バッファメモリ１４に一時的に記録されている被写体画像、メモリ１６ａに保存された被写体画像の表示を行い、被写体画像に関連する属性情報の表示を行う。また、ディスプレイ４２は、表示制御部４１の指令により、サムネイル画像の一覧表示を行う。

画像選択部４３は、ディスプレイ４２に一覧表示された複数のサムネイル画像の中から任意のサムネイル画像を選択する操作部であり、例えば圧力センサ付きの表示画面（タッチパネル）の場合は、任意のサムネイル画像にタッチすることにより選択操作が可能である。

以上のように構成された電子スチルカメラは、次のように動作する。
先ず、顔表情設定部３６によって所定の顔表情として「笑顔」を設定する。顔検出部２１は、スルー画像を顔データ記憶部２２の顔データと比較することにより、スルー画像中の被写体人物の顔を検出する。

顔表情検出部２３は、顔検出部２１により検出された顔領域の画像の顔表情を顔表情データ記憶部２４に予め記憶されている所定の顔表情データと比較することにより、スルー画像中の被写体人物の顔表情が笑顔であることを検出する。顔表情検出部２３は、この笑顔検出により検出信号を出力し、自動撮影部３４は、笑顔が検出された被写体の自動撮影を行う。自動撮影によって得られた被写体画像データは、笑顔検出された画像データであることを示す属性データとともにメモリ１６ａに記録される。

顔表情レベル評価部２５は、自動撮影によって得られた被写体画像データ中の被写体人物の笑顔について、顔表情レベルデータ記憶部２６に記憶された笑顔レベルデータと比較して、この笑顔の度合い（笑顔レベル）を評価し、その評価した笑顔レベルを表す判定信号を出力する。
画像記録部１６は、被写体画像データと、その画像データに関する属性データ（例えば、笑顔レベル９０％）とを関連付けてメモリ１６ａに記録する。

画像読出し部２０は、メモリ１６ａから所定の被写体画像データを読み出す。顔表情設定部３６によって所定の顔表情として「笑顔」を設定すると、画像読出し部２０は、上記の属性データ（例えば、笑顔レベル９０％）を利用して検索し、笑顔の被写体人物の被写体画像データを読み出す。

読み出された被写体画像データに基づく再生画像をディスプレイ４２に表示させ、識別データ入力部３５によってその再生画像中の被写体人物を表す個人識別データ、例えば、その人物名「Ａさん」を入力する。これにより、読み出された被写体画像データの属性データには、笑顔レベル９０％のデータに加えて「Ａさん」のデータが追記される。そして、画像記録部１６は、被写体画像データと、笑顔レベルデータおよび人物名データが含まれる属性データとをメモリ１６ａに記録する。

上述した動作を繰り返すことにより、複数の被写体画像データについて属性データが作成され、複数の被写体画像データと属性データとがメモリ１６ａに記録される。
続いて、これら複数の被写体画像データについて笑顔レベルに基づくランキングを決定する動作が行われる。画像読出し部２０は、属性データを利用して「笑顔」を検索し、複数の被写体画像データをメモリ１６ａから読み出す。

ランキング決定部２８は、これらの読み出された被写体画像データについて、笑顔レベル９０％、８０％というレベル値に基づいて順位を付ける。例えば、笑顔レベル値が９０％、８０％、８０％、７０％、６０％の属性データにそれぞれ関連する５つの被写体画像データがあった場合、ランキングは、順に第１位、第２位、第２位、第４位、第５位となる。

このようにして、ランキングが決定された複数の被写体画像データのサムネイル画像は、ディスプレイ４２に一覧表示される。
図２は、サムネイル一覧表示されたディスプレイ４２の画面を模式的に示す図である。図２には、５つのサムネイル画像が属性データとともに示されており、左上段のサムネイル画像に注目すると、サムネイル画像１０１、ランキングである「第１位」１１１、人物名である「Ａさん」１２１、笑顔レベルである「９０％」１３１が表示されている。同様に、画面の中央上段のサムネイル画像では、サムネイル画像１０２、「第２位」１１２、「Ｂさん」１２２、「８０％」１３２が表示されている。他の３つのサムネイル画像についても、符号は省略したが、同様である。

なお、図２では、５つのサムネイル画像をランキングの順に配置して表示しているが、５つのサムネイル画像にはそれぞれ順位が付記されているので、必ずしもランキングの順に配置する必要はない。例えば、複数のサムネイル画像を撮影順に配置して表示してもよい。また、図２では、笑顔レベルを数値で表示しているが、グラフ化して、例えば棒グラフのバーの長さで表示してもよい。

本実施の形態による電子スチルカメラは以下の作用効果を奏する。
（１）複数のサムネイル画像を被写体人物の笑顔のランキングを付けて一覧表示するので、画面を一見しただけで、笑顔評価の高い画像を認識できる。
（２）複数のサムネイル画像を被写体人物の笑顔のランキングと人物名とを付けて一覧表示するので、画面を一見しただけで、笑顔評価の高い被写体人物の画像を認識できる。
（３）複数のサムネイル画像を被写体人物の笑顔のランキングと人物名と笑顔レベルとを付けて一覧表示するので、画面を一見しただけで、笑顔評価の高い被写体人物の画像を認識でき、同時に笑顔レベルも知ることができる。

本実施の形態による電子スチルカメラは、以下の動作を行うこともできる。
（１）画像の拡大表示
ディスプレイ４２に一覧表示された複数のサムネイル画像のうち、画像選択部４３によって任意のサムネイル画像を選択することにより、そのサムネイル画像について画像を画面全体に拡大表示することができる。このとき、拡大表示時間を笑顔レベルの高さに応じて変更し、笑顔レベルが高い程、拡大表示時間を長く設定してもよい。例えば、笑顔レベル８０％の被写体画像であれば拡大表示時間を５秒間と長くし、笑顔レベル４０％の被写体画像であれば拡大表示時間を２秒間と短くする。また、スライドショーの場合は、笑顔レベルが高い被写体画像は、表示再生時間を長く、且つ表示サイズを拡大し、笑顔レベルが低い被写体画像は、表示再生時間を短く、且つ表示サイズを縮小してもよい。

（２）同一人物のサムネイル画像の一覧表示
ディスプレイ４２に笑顔ランキングを付けて一覧表示された複数のサムネイル画像のうち、画像選択部４３によって任意の人物名を選択することにより、その人物のサムネイル画像から成るサムネイル一覧表示に切り換えることができる。このとき、笑顔レベルに応じて各サムネイル画像の表示サイズを変更し、笑顔レベルが高い程、表示サイズを大きく設定してもよい。

（３）同一レベルのサムネイル画像の一覧表示
ディスプレイ４２に笑顔ランキングを付けて一覧表示された複数のサムネイル画像のうち、画像選択部４３によって任意の笑顔レベルを選択することにより、その笑顔レベルに等しいレベルのサムネイル画像から成るサムネイル一覧表示に切り換えることができる。

（４）笑顔ランキングに基づいて選定された人物の優先撮影
ランキング決定部２８により、複数の被写体画像データについて笑顔レベルに基づいて順位付けが行われ、最上位と最下位とが決定されると、次の撮影に際して、最上位にランクされた被写体画像データの被写体人物、または最下位にランクされた被写体画像データの被写体人物を優先して笑顔を検出し自動撮影を行うことができる。
先ず、優先者選定部３７が最上位にランクされた被写体画像データの被写体人物を優先者として選定する。撮影に際して、スルー画像中に複数の被写体人物がおり、その中に優先者が存在している場合、顔表情検出部２３は、顔登録データ記憶部２９に記録されている顔登録データにより優先者を認識し、笑顔検出動作を開始する。そして、顔表情検出部２３が優先者の笑顔を検出すると、自動撮影部２７により自動撮影が行われる。

優先者に対しては、他の被写体人物に優先して笑顔検出と自動撮影が行われる。顔表情検出部２３は、優先者の笑顔検出のみを行い、他の被写体人物の笑顔検出は行わず、優先者の笑顔が検出されれば撮影を行う場合と、顔表情検出部２３は、スルー画像中の全員の笑顔検出を行うが、優先者は笑顔が１回検出されると撮影を行い、他の被写体人物は笑顔が３回検出されて初めて撮影を行うというように撮影する頻度を異ならせる場合がある。

以上の説明は、最上位にランクされた被写体画像データの被写体人物を優先者と選定した場合であり、最下位にランクされた被写体画像データの被写体人物を優先者と選定した場合も全く同様である。なお、優先者選定部３７により、最上位にランクされた被写体画像データの被写体人物の選定と最下位にランクされた被写体画像データの被写体人物の選定とは自由に切り換えることができる。

以下、本実施の形態の電子スチルカメラの変形例について説明する。
上記の実施の形態では、ランキングが決定された複数の被写体画像データのサムネイル画像は、図２に示したように、「第１位」、「第２位」などの順位を付記してディスプレイ４２に一覧表示される。図３〜５に示す以下の変形例は、順位を付記しないサムネイル一覧表示の表示態様に関するものであり、同一表示内容には同一符号を付している。

図３は、サムネイル一覧表示の第１の変形例であり、図２に示したランキング表示の代わりに、笑顔レベルに応じてサムネイル画像の表示サイズを変更し、笑顔レベル「９０％」１３１のサムネイル画像１０１ａは最も大きいサイズで表示し、笑顔レベル「８０％」１３２のサムネイル画像１０２ａは次に大きいサイズとし、笑顔レベルが低くなるにつれてサイズを小さく表示する。このように表示すると、ランキングが高いサムネイル画像を直観的に識別できる。

図４は、サムネイル一覧表示の第２の変形例であり、図２に示したランキング表示の代わりに、ランク順にサムネイル画像をスクロール表示するものである。各サムネイル画像は、図中の矢印で示されるように、次々に画面の下から上へ向かってスクロール表示される。
図５は、サムネイル一覧表示の第３の変形例であり、図２に示したランキング表示の代わりに、サムネイル画像の配置によってランキングも分かるようにしたものである。図５では、画面の左上段の位置を第１位とし、図中の矢印で示されるように、サムネイル画像がランク順に配置される。

上記の実施の形態では、笑顔などの顔表情を検出すると自動的に撮影する電子スチルカメラについて説明したが、自動撮影部２７を有さず、撮影者の意思で撮影を行う電子スチルカメラにも本発明は適用できる。このマニュアル撮影の場合でも、顔表情検出部２３により笑顔を検出し、顔表情レベル評価部２５により笑顔レベルは評価する。
上記の実施の形態では、電子スチルカメラについて説明したが、本発明は、アプリケーションソフトウエア（画像閲覧編集ソフト）にも適用可能である。
本発明は、その特徴を損なわない限り、以上説明した実施の形態に何ら限定されない。

１６：画像記録部 １６ａ：メモリ
２０：画像読出し部 ２３：顔表情検出部
２４：顔表情データ記憶部 ２５：顔表情レベル評価部
２６：顔表情レベルデータ記憶部 ２７：自動撮影部
２８：ランキング決定部 ３５：識別データ入力部
３７：優先者選定部 ４１：表示制御部
４３：画像選択部 １０１，１０２：サムネイル画像

Claims (8)

1. 被写体画像データを出力する撮像手段と、
   前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
   前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
   前記被写体人物を表す個人識別情報を入力する入力手段と、
   前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
   前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
   前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
   前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、
   前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、
   前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、前記選択手段によって選択された前記サムネイル画像を拡大表示すると共に前記顔表情レベルに応じて拡大表示時間を変更することを特徴とする電子スチルカメラ。
2. 被写体画像データを出力する撮像手段と、
   前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
   前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
   前記被写体人物を表す個人識別情報を入力する入力手段と、
   前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
   前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
   前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
   前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示し、当該サムネイル画像の各々に、前記ランキングと前記個人識別情報と数値化またはグラフ化された顔表情レベルとを付記表示する表示手段と、
   前記一覧表示された複数のサムネイル画像から任意のサムネイル画像を選択する選択手段と、を備え、
   前記選択手段により、前記一覧表示された複数の前記サムネイル画像に付記表示された前記顔表情レベルから任意の顔表情レベルが選択されると、
   前記表示手段は、前記選択手段によって選択された前記顔表情レベルと等しい顔表情レベルを有する被写体画像データのサムネイル画像を一覧表示することを特徴とする電子スチルカメラ。
3. 請求項１または２に記載の電子スチルカメラにおいて、
   前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段を更に備えることを特徴とする電子スチルカメラ。
4. 請求項１または２に記載の電子スチルカメラにおいて、
   前記個人識別情報は、前記被写体人物の名前とニックネームとの少なくとも一方であることを特徴とする電子スチルカメラ。
5. 請求項１に記載の電子スチルカメラにおいて、
   前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記顔表情レベルを数値化またはグラフ化して付記表示することを特徴とする電子スチルカメラ。
6. 請求項１または２に記載の電子スチルカメラにおいて、
   前記選択手段により、前記一覧表示された複数の前記サムネイル画像に付記表示された前記個人識別情報から任意の個人識別情報が選択されると、
   前記表示手段は、前記選択手段によって選択された前記個人識別情報を有する被写体画像データのサムネイル画像を一覧表示することを特徴とする電子スチルカメラ。
7. 被写体画像データを出力する撮像手段と、
   前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
   前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
   前記被写体人物を表す個人識別情報を入力する入力手段と、
   前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
   前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
   前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
   前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、
   前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、
   前記ランキング決定手段によってランキング一位と決定された被写体画像データの被写体人物を優先者と選定する第１の優先者選定手段と、を備え、
   前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、
   前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第１の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、
   前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする電子スチルカメラ。
8. 被写体画像データを出力する撮像手段と、
   前記被写体画像データ中の被写体人物の顔表情が所定の顔表情であることを検出する顔表情検出手段と、
   前記顔表情検出手段により検出された前記被写体人物の顔表情レベルを評価するレベル評価手段と、
   前記被写体人物を表す個人識別情報を入力する入力手段と、
   前記被写体画像データを前記個人識別情報と前記顔表情レベルとに関連付けて記憶する記憶手段と、
   前記記憶手段から複数の前記被写体画像データを読み出す読出し手段と、
   前記読出し手段によって読み出された前記被写体画像データに関連付けられた前記顔表情レベルに基づき、前記読み出された複数の被写体画像データのランキングを決定するランキング決定手段と、
   前記読み出された複数の前記被写体画像データのサムネイル画像を一覧表示する表示手段と、
   前記顔表情検出手段の検出出力に応じて自動的に撮影する自動撮影手段と、
   前記ランキング決定手段によってランキング最下位と決定された被写体画像データの被写体人物を優先者と選定する第２の優先者選定手段と、を備え、
   前記表示手段は、前記一覧表示した前記サムネイル画像の各々に、前記ランキングと前記個人識別情報とを付記表示し、
   前記顔表情検出手段は、前記被写体画像データ中に複数の被写体人物が存在しかつ前記第２の優先者選定手段によって選定された優先者が前記複数の被写体人物中に存在した場合に、その優先者の顔表情が所定の顔表情であることを前記被写体画像データ中の他の被写体人物に優先して検出し、
   前記自動撮影手段は、前記顔表情検出手段の検出出力に応じて自動的に撮影することを特徴とする電子スチルカメラ。

Images