JP2009152719A - カメラを用いたお勧め番組情報提供装置 - Google Patents

Abstract

【課題】カメラに多人数の利用者が一度に撮像された場合、カメラに写された利用者全員あるいは利用者の大半が、ともに楽しめるお勧め番組情報を提供することができず、また、提供されたお勧め番組情報が気に入らない場合に、それを変更する手立てがなかった。
【解決手段】利用者を撮像するカメラと、個々の人物を特定する情報や個人情報やお勧めパターン情報などを保持する判定要素ＤＢと、番組データおよびこれに関連する番組情報データを保持するコンテンツＤＢと、判定要素ＤＢの情報を基に撮像された個々の人物を特定し、特定した人物の個人情報から撮像した人物全体の特徴を把握した上で予め作成したお勧めパターンからお勧めタイプ情報を選定する判定手段と、判定手段が選定したお勧めタイプ情報を検索キーワードとしてコンテンツＤＢを検索してお勧め番組を抽出／出力するお勧め検索手段と、利用者の検索命令等を受信する入力Ｉ／Ｆを備える装置とした。
【選択図】図１

Description

本発明は、デジタルテレビジョン（以下、ＤＴＶと略す）、Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ（以下、ＨＤＤと略す）を内蔵するＤＶＤレコーダなどの記録再生機器および該記録再生機器と一体になったＤＴＶなどの機器と、内蔵またはオプションの形態で組み合わせて使用されるカメラを用いたお勧め番組情報提供装置であって、カメラに写った全員で楽しめると思われる番組情報、すなわち、お勧め番組情報を提供する装置に関する。

近年、デジタル放送が徐々に普及しつつあるが、デジタル放送の特徴として多チャンネル化が挙げられる。このような多チャンネル化の時代を迎え、番組の利用者は、自ら見たい番組を新聞や雑誌の番組情報欄から探し出すのが困難になりつつある。そのため、予め利用者の好みを登録し、デジタル放送のサービスの１つである電子ガイド（Ｅｌｅｃｔｒｉｃ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ、略してＥＰＧ）を利用して番組を自動的に記録することが行われている。

特許文献１には、視聴履歴情報からユーザの嗜好を判定し、その判定結果を基にＥＰＧ情報の番組群から再生のための録画推薦番組表を生成し表示する、電子番組ガイド受信装置に関する発明が開示されている。特許文献１に開示されている技術においては、家族など複数の利用者がこの電子番組ガイド受信装置を利用する場合、好みの番組は各人により異なるため、各利用者すなわち家族全員の好みを個別に登録することが必要になる。家族全員のそれぞれの好みに応じた番組をすべて記録することは、ＨＤＤの記録容量が数百ギガバイトを超える現在では可能であるが、例えば、数百種類の記録された番組から個人の好みに応じた最適な番組を探し出すのは容易ではないし、また、複数の利用者がいる場合は、ユーザＩＤ（ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）を登録して入力する必要があり、手間がかかるなどの課題があった。

特許文献２には、このような課題を解決するために、撮像装置を用いて利用者を自動的に認識し、認識した各利用者の好みに応じた番組情報を自動的に呈示することができる従来技術が開示されている。
特開２００２−１１２１８６号公報 特開２００６−１００８８１号公報

しかしながら、特許文献１に開示されている従来技術においては、カメラ（撮像装置）に多人数の利用者が一度に撮像された（写された）場合、多人数の利用者の中の個々の利用者の認識が困難であるばかりでなく、仮に、個々の利用者の認識ができたとしても、個々の利用者のお勧め番組情報が人数分だけ別々に表示されるだけで、カメラに写された利用者全員が、あるいは、カメラに写された利用者の大半が、ともに楽しめるお勧め番組情報を呈示することができないという課題を有していた。

また、カメラに写された利用者全員が、あるいは、カメラに写された利用者の大半が、気に入らないお勧め番組情報を呈示された場合に、呈示されたお勧め番組情報が気に入らないことを意思表示し、再度お勧め番組情報の呈示を求める手段がないという課題を有していた。

本発明は、以上のような課題を解決し、カメラに写された利用者全員が、あるいは、カメラに写された利用者の大半が、ともに楽しめるあるいは気に入るお勧め番組情報を提供することができ、さらに、カメラに写された利用者全員が、あるいは、カメラに写された利用者の大半が、気に入らないお勧め番組情報を提供された場合に、利用者の再度のお勧め番組情報の提供要求に対応して、検索条件を変えて取得した新たなお勧め番組情報を提供することができるカメラを用いたお勧め番組情報提供装置を提供することを目的とする

上記目的を達成するために、本願の第１の発明のカメラを用いたお勧め番組情報提供装置は、デジタルテレビジョン（以下、ＤＴＶと略す）、ＤＶＤレコーダなどの記録再生機器および前記記録再生機器と一体型のＤＴＶなどの機器（以下、機器Ａと称す）と、内蔵またはオプションの形態で組み合わせて使用されるカメラを用いたお勧め番組情報提供装置であって、撮像手段であるカメラ、判定手段、判定要素データベース（以下、ＤＢと略す）、お勧め検索手段、コンテンツＤＢおよび入力インタフェース（以下、Ｉ／Ｆと略す）で構成され、前記カメラは、前記機器Ａあるいは前記機器Ａの近傍に取り付けられ、前記入力Ｉ／Ｆがリモコンなどを用いて送信されたユーザのお勧め番組の検索命令を受信したことに対応して、前記機器Ａの周辺にいて前記機器Ａに保存されている番組を視聴しているあるいは視聴しようとしている人々を撮像して、その撮像した画像を前記判定手段に送信し、前記判定要素ＤＢは、個々の人物を特定するための顔の特徴情報、前記個々の人物を特定するための顔の特徴情報が登録されている個々の人物に関する年齢、性別および好みの番組やジャンルなどの個人情報および予め作成したお勧めパターンの一覧情報、すなわち、人数、年齢、男女の構成などを想定し、想定した各要素の組み合わせから推定した推定グループ毎に、お勧めのジャンル情報やタイトル情報およびどの人物の前記個人情報を優先させるかを示す優先順位などを含むお勧めタイプ情報を予め作成したお勧めパターンの一覧情報などの情報を保持しており、前記コンテンツＤＢは、前記機器Ａが受信し録画したＤＴＶ放送番組の番組データや他のパッケージメディアなどから記録し蓄積している番組データ、およびこれらの番組に関連する番組情報データ、すなわち、番組名や番組が属するジャンルなどの情報に関するデータを保存しており、前記判定手段は、前記カメラから受信した画像を解析し、前記画像に含まれているすべての人物について、前記判定要素ＤＢに保持されている個人を特定するための顔の特徴情報と個々に照らし合わせることで個々の人物を特定し、特定した個々の人物に関する前記個人情報を前記判定要素ＤＢから取得し、前記画像に含まれている人数を含む人物全体の特徴を把握して、把握した人物全体の特徴を基に、予め作成し前記判定要素ＤＢに保存されている前記お勧めパターンの一覧から、前記カメラから受信した画像に含まれている人物全体の好みに合うと推定される前記お勧めタイプ情報を選定するとともに、特定した人物全員の個人毎の好みのジャンルやタイトルなどに関する情報を前記判定要素ＤＢから取得して、これらの選定あるいは取得した情報を前記お勧め検索手段に送信し、前記お勧め検索手段は、前記判定手段において選定された前記お勧めタイプ情報に含まれるジャンル情報またはタイトル情報を検索キーワード（イ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（イ）として取得するとともに、前記判定手段から受信した前記判定手段において取得された特定した人物全員の個人毎の好みのジャンルやタイトルなどに関する情報を検索キーワード（ロ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ロ）として取得し、前記検索結果（イ）と前記検索結果（ロ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される人物の好みの番組順に並べたものをお勧め番組として出力し、前記入力Ｉ／Ｆは、ユーザがリモコンなどを用いて送信したお勧め番組の検索命令やお勧め番組の再検索命令などの信号を受信し、受信した信号を前記お勧め検索手段などに送信することを特徴とするものである。

また、第２の発明のカメラを用いたお勧め番組情報提供装置は、本願の第１の発明のカメラを用いたお勧め番組情報提供装置において、前記入力Ｉ／Ｆが１回目のお勧め番組の再検索命令の信号を受信すると、前記お勧め検索手段は、前記カメラで撮像された人物の中の予め定めた順番で決められる人物（人物α）の好みのジャンルやタイトルなどに関する情報を、前記検索キーワード（ロ）から削除したキーワードを検索キーワード（ハ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ハ）として取得し、前記検索結果（イ）と前記検索結果（ハ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される前記人物αを除く人物の好みの番組順に並べたものをお勧め番組として出力し、さらに、２回目、３回目と前記入力Ｉ／Ｆがお勧め番組の再検索命令の信号を受信した場合は、前記カメラで撮像された人物の中の前記予め定めた順番で決められる人物（人物ｘ）の好みのジャンルやタイトルなどに関する情報を順次前記検索キーワード（ハ）から削除したキーワードを検索キーワード（ｎ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ｎ）として取得し、前記検索結果（イ）と前記検索結果（ｎ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される前記人物αから前記人物ｘまでの人物を除く人物の好みの番組順に並べたものをお勧め番組として出力する、ことを特徴とするものである。

また、第３の発明のカメラを用いたお勧め番組情報提供装置は、本願の第１の発明のカメラを用いたお勧め番組情報提供装置において、前記お勧めタイプ情報に含まれる優先順位に関係なく最優先させる特定の人物を予め定めておき、前記判定手段が前記カメラで撮像された人物の中に前記特定の人物が存在することを確認した場合は、前記お勧めタイプ情報に含まれる優先順位に関係なく最優先される人物として扱うことを特徴とするものである。

また、第４の発明のカメラを用いたお勧め番組情報提供装置は、本願の第２の発明のカメラを用いたお勧め番組情報提供装置において、前記お勧めタイプ情報に含まれる優先順位に関係なく最優先させる特定の人物を予め定めておき、前記入力Ｉ／Ｆが１回目のお勧め番組の再検索命令の信号を受信すると、前記お勧め検索手段は、前記カメラで撮像された人物の中の予め定めた順番に関係なく、前記特定の人物の好みのジャンルやタイトルなどに関する情報を、前記検索キーワード（ロ）から削除したキーワードを検索キーワード（ハ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ハ）として取得し、前記検索結果（イ）と前記検索結果（ハ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される前記特定の人物を除く人物の好みの番組順に並べたものをお勧め番組として出力することを特徴とするものである。

本発明のカメラを用いたお勧め番組情報提供装置によれば、利用者は、カメラに写された利用者全員が、あるいは、カメラに写された利用者の大半が、ともに楽しめるあるいは気に入るお勧め番組情報の呈示を受けることができ、さらに、カメラに写された利用者全員が、あるいは、カメラに写された利用者の大半が、気に入らないお勧め番組情報が呈示された場合、利用者は、再度お勧め番組情報の呈示を求めることにより、検索条件を変えて取得された新たなお勧め番組情報の呈示を受けることがきる。

以下に、本発明を実施するための最良の形態について、図面を参照しながら説明する。

（実施の形態１）
図１は、本発明の実施の形態１におけるカメラを用いたお勧め番組情報提供装置の構成を示すブロック図である。なお、本発明の実施の形態１におけるカメラを用いたお勧め番組情報提供装置は、ＤＴＶ、ＨＤＤを内蔵するＤＶＤレコーダなどの記録再生機器および該記録再生機器と一体になったＤＴＶなどの機器（以下、機器Ａと称す）と、内蔵またはオプションの形態で組み合わせて使用される装置である。このことは、後述する本発明の実施の形態２においても同様である。

図１において、カメラ（撮像手段）１０１は、機器Ａに取り付けられているか、あるいは機器Ａの近傍に取り付けられ、後述する入力Ｉ／Ｆがリモコンなどを用いて送信されたユーザのお勧め番組の検索命令を受信したことに対応して、機器Ａの周辺にいて番組を視聴しているあるいは視聴しようとしている人々を撮像し、撮像した画像を判定手段１０２に送信する。なお、カメラ１０１の撮像範囲は、固定もしくはユーザおよび／または自動により可変できる構成となっている。

判定手段１０２は、カメラ１０１から受信した画像を画像処理技術を用いて解析し、該画像に含まれているすべての人物について、判定要素データベース（以下、ＤＢと称す）１０３に保持されている個人を特定するための顔の特徴情報と個々に照らし合わせることで個々人を特定し、特定した個々人に関する情報、例えば、年齢、性別、嗜好および好みの番組やジャンルなどの情報を、判定要素ＤＢ１０３に保持されている個人に関する情報から取得して該画像に含まれている人数を含む人物全体の特徴を把握し、把握した人物全体の特徴を基に予め作成し保存しているお勧めパターンの一覧からお勧めタイプ情報を選定する。

判定要素ＤＢ１０３は、個人を特定するための顔の特徴情報やお勧めパターンの一覧および個人を特定するための顔の特徴情報が登録されている個々の人物に関する情報などを保持している。なお、判定要素ＤＢ１０３に保持されている個人に関する情報は、予めユーザが入力して保持させた情報であるが、個人の好みの番組に関する情報については、個々人が過去に視聴した番組の履歴に基づく情報を活用してもかまわない。

お勧め検索手段１０４は、判定手段１０２において取得し判定した個人情報およびお勧めパターンに基づいて、コンテンツＤＢ１０５に保持されている番組情報を検索し、その検索結果をディスプレイ（表示手段）１０９に表示する。

コンテンツＤＢ１０５は、録画済番組（コンテンツ）データおよび番組情報データを蓄えており、番組情報としては、番組の開始・終了時刻、放送チャンネル（以下、ＣＨと称す）、録画時に番組表から取得した番組名、属するジャンルなどがある。なお、ジャンルとしては、例えば、大ジャンルが５つと各大ジャンルに小ジャンルが２〜５つ存在するといった構成になっている。また、コンテンツＤＢ１０５は、本発明のお勧め番組情報提供装置が独自に備えてもよいし、お勧め番組情報提供装置と組み合わせて使用される機器Ａが備えているコンテンツＤＢを兼用してもかまわない。

入力Ｉ／Ｆ１０６は、ユーザがリモコン１０８などを用いて送信したお勧め再検索命令などの信号を受信し、受信した信号をお勧め検索手段１０４や制御手段１０７などに送信するものである。なお、リモコン１０８から送信される信号は近距離無線通信を想定しており、ここでは赤外線リモコンを利用するものとする。

制御手段１０７は、お勧め番組情報提供装置全体を制御するものであり、一般的にはマイクロコンピュータで構成される。なお、制御手段１０７が担っている役割を、お勧め番組情報提供装置と組み合わせて使用される機器Ａが備えている制御手段に担わしてもかまわない。

ディスプレイ（表示手段）１０９は、お勧め番組情報提供装置が自ら備えてもよいが、一般的にはお勧め番組情報提供装置と組み合わせて使用される機器Ａが備えているか、あるいはオプションとして活用しているディスプレイであり、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）およびＰＤＰ（Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）などが用いられる。

次に、本発明の実施の形態１におけるカメラを用いたお勧め番組情報提供装置の具体的な動作について説明する。

まず、コンテンツＤＢ１０５には、番組の開始・終了時刻、放送ＣＨや番組表に含まれる番組データなどの番組情報に関するデータ（番組情報データ）が、番組録画時に番組コンテンツとともに保存され、予め、多くの番組コンテンツデータと番組情報データが蓄えられている。

この様な状況において、ユーザが、お勧め番組を知りたいとの思いからリモコン１０８の「お勧め番組」キーを押すと、カメラ１０１が機器Ａの前あるいは周辺にいる人々の撮像を開始し、撮像した画像を判定手段１０２に送信する。

判定手段１０２は、まず、カメラ１０１から受信した画像を画像処理技術を用いて解析し、該画像に含まれているすべての人物について、判定要素ＤＢ１０３に保持されている個人を認識し特定するための顔の特徴情報と個々に照らし合わせることで個々の人物を特定する。具体的には、一般的に知られている目、口および鼻の形を基に個人を認識し特定する顔認証技術を用いて個々の人物を特定する。複数の人物が写っている画像から個々の人物を認識する順番は、図２に示すように、画像位置が撮像画面に向かって最も左側に位置する人物から始めて順次右側に位置する人物に移行する順番で、また、左右が同じ位置、すなわち縦方向に同じ位置に位置する場合は、撮像画面の上側に位置する人物を優先させる順番で人物を認識し特定する。なお、図２は、本発明の実施の形態１および２におけるカメラに写された人物を認識し特定する順番の一例を示す図である。

次に、判定手段１０２は、カメラ１０１により写された人物の人数を把握するとともに、カメラ１０１により写され特定された人物全員の年齢、性別の情報を判定要素ＤＢ１０３から取得し、取得した年齢、性別および男女の構成を含む人数などの組合せ情報から如何なるグループ（集団）かを推定して予め作成され判定要素ＤＢ１０３に保存されているお勧めパターンと照合し、推定したグループに適していると思われるお勧めタイプ情報を決定する。

図７は、年代、学校、職場などが同じであるグループ（集団）の場合におけるお勧めパターンの一例を示す図である。図７に示すように、お勧めパターンは、年齢、男女の構成、年齢と男女の構成から如何なるグループかを推定した推定グループ、およびこれらの組み合わせ条件毎に作成されたお勧めタイプ情報とで構成されている。なお、お勧めタイプ情報には、コンテンツＤＢ１０５を検索する場合の検索キーワードとなる番組のジャンル情報、番組のタイトル情報およびどの人物の個人情報（例えば、嗜好などの個人情報）を優先するかを示す優先順位などの情報が含まれている。

判定手段１０２は、上記のようにして決定したお勧めタイプ情報および認識し特定した人物全員の個人毎の好みの小ジャンルやタイトルなどに関する情報を、お勧め検索手段１０４に対して送信する。

次に、図３を用いて、お勧め検索手段１０４が、カメラに写された利用者全員あるいはカメラに写された利用者の大半が、ともに楽しめるあるいは気に入ると思われるお勧め番組を検索し呈示する手順について説明する。なお、図３は、本発明の実施の形態１におけるお勧め検索手段１０４がお勧め番組を検索する場合の手順を示すフローチャートである。

お勧め検索手段１０４は、判定手段１０２から受信したお勧めタイプ情報に含まれる番組のジャンル情報を検索キーワードとしてコンテンツＤＢ１０５を検索（Ｓ３０１）し、検索キーワードとして用いたジャンル情報に含まれる番組を抽出する（Ｓ３０２）とともに、判定手段１０２からお勧めタイプ情報とともに受信した認識し特定した人物全員の個人毎の好みの小ジャンルを検索キーワードとしてそれぞれコンテンツＤＢ１０５を検索（Ｓ３０３）し、検索キーワードとして用いた小ジャンルに含まれる番組を抽出（Ｓ３０４）して、両者において共に抽出された番組を検索結果として取得（Ｓ３０５）する。さらに、お勧め検索手段１０４は、検索結果として取得した番組を、お勧めタイプ情報に含まれる優先順位にしたがって優先される人物の好みの番組順に並べ替えたものを、図５に示すようなお勧め番組としてディスプレイ１０９に呈示（Ｓ３０６）する。なお、図５は、本発明の実施の形態１におけるお勧め番組の表示の一例を示す図である。

ディスプレイ１０９に呈示されたお勧め番組の中に、グループ全員またはグループの大半が気に入った番組がある場合は、ユーザ（ここではグループのメンバー）はその気に入った番組を選択して再生することになるが、ディスプレイ１０９の画面上に呈示されたお勧め番組の中にグループ全員またはグループの大半が気に入った番組がない場合に、気に入った番組を見出すための手順について、図４を用いて以下に説明する。なお、図４は、本発明の実施の形態１におけるお勧め検索手段１０４がお勧め番組の再検索を行う場合の手順を示すフローチャートである。

ユーザは、例えば、リモコン１０８に設けられた「お勧め番組再検索」釦を押し、カメラを用いたお勧め番組情報提供装置に対してお勧め番組の再検索を開始するように指示する。リモコン１０８からのお勧め番組再検索命令を入力Ｉ／Ｆ１０６を経由して、あるいは入力Ｉ／Ｆ１０６および制御手段１０７を経由して受信（Ｓ４０１）したお勧め検索手段１０４は、グループメンバーの中で最初に認識し特定した人物（人物ａ）を確定（Ｓ４０２）した上で、図３に示すステップＳ３０１からステップＳ３０６のそれぞれのステップに相当するステップＳ４０３からステップＳ４０８の処理を実行する。ただし、お勧め番組を検索する場合の図３に示す手順とは、次に示す２つの点で違いがある。その１つは、ステップＳ４０５（図３におけるステップＳ３０３に相当）において、認識し特定した人物全員の個人毎の好みの小ジャンルからステップ４０２において確定した人物ａの好みの小ジャンルを削除した小ジャンルを検索キーワードとしてそれぞれコンテンツＤＢを検索する点である。他の１つは、ステップＳ４０７において検索結果として取得した番組を、お勧めタイプ情報に含まれる優先順位にしたがって優先される人物ａを除く人物の好みの番組順に並び替えたものをお勧め番組として呈示する（Ｓ４０８）点である。ステップＳ４０８において呈示されたお勧め番組は、図５に示すようなお勧め番組の情報としてディスプレイ１０９に表示される。

なお、最初に認識し特定した人物ａの好みの小ジャンルについての情報を削除した上で、再度検索した結果として呈示されたお勧め番組の中に気に入った番組がない場合は、さらに２番目に認識し特定した人物（人物ｂ）の好みの小ジャンルについての情報を削除して検索を行い、お勧め番組の中に気に入った番組が見出せる状態になるまで、順次３番目の人物ｃ、４番目の人物ｄの好みの小ジャンルについての情報を削除して検索を繰り返す。

また、ユーザのお勧め番組の再検索開始の指示に対応して、グループメンバーの中で最初に認識し特定した人物ａの好みの小ジャンルについての情報を削除した上で再検索したがこれに限るものではなく、例えば、グループメンバーの中で最後に認識し特定した人物の好みの小ジャンルについての情報を削除した上で再検索してもよく、どの人物の好みの小ジャンルについての情報を削除するかの順番は任意である。

上記の説明においては、カメラ１０１に写されたすべての人物（利用者）に関して、個人を特定するための顔の特徴情報および個人に関する情報などが判定要素ＤＢ１０３に登録され保持されているものとして説明したが、カメラ１０１に写された人物（利用者）の中に、個人を特定するための顔の特徴情報や個人に関する情報などが判定要素ＤＢ１０３に登録されていない人物（以下、人物αと称す）が存在した場合の処理方法について、以下に説明する。

ここでは、上記の説明と違う点についてのみ説明する。まず、上記の説明との違いの１つである、お勧めタイプ情報を決定するやり方について説明する。

判定手段１０２は、カメラ１０１から受信した画像を画像処理技術を用いて解析し、該画像に含まれているすべての人物について、判定要素ＤＢ１０３に登録し保持されている個人を特定するための顔の特徴情報と個々に照らし合わせた結果、判定要素ＤＢ１０３に個人に関する情報が登録し保持されていない人物αが存在することを識別すると、カメラ１０１から受信した画像の中の人物αの特徴を画像処理技術を用いて解析し、その解析データと判定要素ＤＢ１０３に保存されている性別および年齢の推定基準データを照らし合わせることにより、人物αの性別および年齢を推定する。

一方、人物α以外の人物、すなわち、判定要素ＤＢ１０３に個人に関する情報が登録され保持されている人物については、判定手段１０２は、上記の説明のとおり、判定要素ＤＢ１０３に登録し保持されている個人に関する情報を基に個々の人物を特定し、特定した個々人に関する情報、例えば、年齢、性別、嗜好および好みの番組やジャンルなどの情報を取得する。

判定手段１０２は、以上のようにして取得あるいは推定した情報を基にして、カメラ１０１により写された人物の人数を把握するとともに、カメラ１０１により写されたグループの年齢、性別および男女の構成を把握し、グループの人数、年齢構成および男女構成などの組み合わせ情報から、このグループは如何なるグループ（集団）かを推定して予め作成され判定要素ＤＢ１０３に保存されているお勧めパターンと照合し、推定したグループに適していると思われるお勧めタイプ情報を決定する。

次に、上記の説明との違いの他の１つである、お勧め検索手段１０４が個人毎の好みの小ジャンルを検索キーワードとしてそれぞれコンテンツＤＢ１０５を検索するやり方について説明する。

お勧め検索手段１０４が、判定手段１０２から受信したお勧めタイプ情報に含まれる認識し特定した人物全員の個人毎の好みの小ジャンルを検索キーワードとしてそれぞれコンテンツＤＢ１０５を検索して、検索キーワードとして用いた小ジャンルに含まれる番組を抽出する場合に、当然のことながら、認識し特定した人物全員の中には人物αが含まれていない。したがって、この場合は、人物αを除く認識し特定した人物全員の個人毎の好みの小ジャンルを検索キーワードとしてそれぞれコンテンツＤＢ１０５を検索して、検索キーワードとして用いた小ジャンルに含まれる番組を抽出することになる。

さらに、お勧め検索手段１０４は、検索結果として取得した番組を、お勧めタイプ情報に含まれる優先順位にしたがって優先される人物の好みの番組順に並べ替えたものを、図５に示すようなお勧め番組としてディスプレイ１０９に呈示するが、当然のことながら、お勧めタイプ情報に含まれる優先順位を示す人物の中には人物αは含まれていないので、人物αを除く優先順位にしたがって優先される人物の好みの番組順に並べ替えたものを、お勧め番組としてディスプレイ１０９に呈示することになる。

なお、ここでは、人物αは一人として説明したが、これに限るものではなく、人物αが複数人であっても同様に処理できることは明らかである。

以上のように構成することにより、カメラ１０１に写された利用者全員が、あるいは、カメラに写された利用者の大半が、ともに楽しめるあるいは気に入るお勧め番組を提供することができる。さらに、カメラ１０１に写された利用者全員が、あるいは、カメラ１０１に写された利用者の大半が、気に入らないお勧め番組を呈示された場合に、呈示されたお勧め番組が気に入らないことを意思表示し、検索条件を変えて再度お勧め番組の呈示を求めることができる。すなわち、カメラ１０１に写された利用者に対してお勧め番組を提示する際に、装置が呈示したお勧め番組があまりにも無難すぎて、カメラ１０１に写された利用者全員または利用者の大半が気に入らなければ、お勧め番組の対象範囲を少し狭めることにより、利用者全員または利用者の大半が楽しめて少し特色のあるお勧め番組を呈示することができる。

なお、本発明の実施の形態１においては、コンテンツＤＢ１０５に記録し保存されている番組の中からお勧め番組を検索し呈示する場合を例に取って説明したが、コンテンツＤＢ１０５にＥＰＧ（Ｅｌｅｃｔｒｉｃ Ｐｒｏｇｒａｍ Ｇｕｉｄｅ）等の番組情報を記録しておき、記録し保存されている番組を検索する代わりにこのＥＰＧ等の番組情報を検索することにより、カメラ１０１に写された利用者全員あるいはカメラ１０１に写された利用者の大半が、ともに楽しめるあるいは気に入る現在放映（放送）中のお勧め番組を検索し呈示することも可能である。

（実施の形態２）
図６は、本発明の実施の形態２におけるカメラを用いたお勧め番組情報提供装置の構成を示すブロック図である。基本的な構成は図１に示した本発明の実施の形態１と同じであるので、同じブロックについては同じ符号を付し説明を省略する。

図６において、判定要素ＤＢ２０３は、図１における判定要素ＤＢ１０３と同様に、個人を特定するための顔の特徴情報やお勧めパターンの一覧および個人を特定するための顔の特徴情報が登録されている個人に関する情報などを保持しているが、これに加えて特定人物として指定した人物、例えば、本装置（カメラを用いたお勧め番組情報提供装置）および／または機器Ａの所有者（以下、単に所有者と称す）を特定するための顔の特徴情報および所有者に関する嗜好などの情報が必ず保持されており、判定手段２０２は、カメラ１０１で撮像された人物の中に所有者が存在することを認識した場合、お勧め検索手段２０４に対し、カメラ１０１で撮像された人物の中に所有者が存在しているとの情報を他の情報とともに送信する。お勧め検索手段２０４は、判定手段２０２からカメラ１０１で撮像された人物の中に所有者が存在しているとの情報を受信すると、検索結果として取得した番組をお勧めタイプ情報に含まれる優先順位にしたがって優先される人物の好みの番組順に並べる場合、お勧めタイプ情報に含まれる優先順位に関係なく、所有者を最優先者として所有者の好みの番組を最初に並べるように処理し、検索した結果として呈示されたお勧め番組の中に気に入った番組がなく再検索をする場合は、認識し特定した人物の順番などとは関係なく、最初に所有者の好みの小ジャンルについての情報を削除した上で、再度検索するようになっている。

次に、本発明の実施の形態２におけるカメラを用いたお勧め番組情報提供装置の具体的な動作について説明する。

まず、コンテンツＤＢ１０５には、番組の開始・終了時刻、放送ＣＨや番組表に含まれる番組データなどの番組情報に関するデータ（番組情報データ）が、番組録画時に番組コンテンツとともに保存され、予め、多くの番組コンテンツデータと番組情報データが蓄えられている。

この様な状況において、ユーザが、お勧め番組を知りたいとの思いからリモコン１０８の「お勧め番組」キーを押すと、カメラ１０１が機器Ａの前あるいは周辺にいる人々の撮像を開始し、撮像した画像を判定手段２０２に送信する。

判定手段２０２は、まず、カメラ１０１から受信した画像を画像処理技術を用いて解析し、該画像に含まれているすべての人物について、判定要素ＤＢ２０３に保持されている個人を認識し特定するための顔の特徴情報と個々に照らし合わせることで個々人を特定する。具体的には、一般的に知られている目、口および鼻の形を基に個人を認識し特定する顔認証技術を用いて個々の人物を特定する。複数の人物が写っている画像から個々人を認識する順番は、図２に示すように、画像位置が撮像画面に向かって最も左側に位置する人物から始めて順次右側に位置する人物に移行する順番で、また、左右が同じ位置、すなわち縦方向に同じ位置に位置する場合は、撮像画面の上側に位置する人物を優先させる順番で人物を認識し特定する。

次に、判定手段２０２は、カメラ１０１により写された人物の人数を把握するとともに、カメラ１０１により写され特定された人物全員の年齢、性別の情報を判定要素ＤＢ２０３から取得し、取得した年齢、性別および男女の構成を含む人数などの組合せ情報から如何なるグループ（集団）かを推定して予め作成され判定要素ＤＢ２０３に保存されているお勧めパターンと照合し、推定したグループに適していると思われるお勧めタイプ情報を決定する。

判定手段２０２は、カメラ１０１から受信した画像の中に所有者が存在することを認識した場合、お勧め検索手段２０４に対し、カメラ１０１で撮像された人物の中に所有者が存在しているとの情報、すなわち、お勧めタイプ情報に含まれる優先順位に関係なく所有者を最優先人物とするとの情報を、お勧めタイプ情報や認識し特定した所有者を含む人物全員の個人毎の好みの小ジャンルやタイトルなどに関する情報などとともに送信する。

お勧め検索手段２０４は、判定手段２０２からお勧めタイプ情報や認識し特定した所有者を含む人物全員の個人毎の好みの小ジャンルやタイトルなどに関する情報および所有者を最優先人物とするとの情報などを受信すると、受信したお勧めタイプ情報に含まれる番組のジャンル情報を検索キーワードとしてコンテンツＤＢ１０５を検索し、検索キーワードとして用いたジャンル情報に含まれる番組を抽出するとともに、判定手段１０２から受信したお勧めタイプ情報に含まれる認識し特定した所有者を含む人物全員の個人毎の好みの小ジャンルを検索キーワードとしてそれぞれコンテンツＤＢ１０５を検索して、検索キーワードとして用いた小ジャンルに含まれる番組を抽出し、両者において共に抽出された番組を検索結果として取得する。さらに、お勧め検索手段２０４は、検索結果として取得した番組を、お勧めタイプ情報に含まれる優先順位にしたがって、ただし、所有者を優先順位に関係なく最優先させる順位にしたがって、優先される人物の好みの番組順に並べたものを、図５に示すようなお勧め番組としてディスプレイ１０９に呈示する。なお、図５は、本発明の実施の形態２におけるお勧め番組の表示の一例を示す図でもある。

このように構成することにより、所有者を最優先に位置づけているので、所有者の嗜好を色濃く反映させることができる。

ここで、所有者の嗜好を色濃く反映させるのではなく、所有者を除く他の人々の嗜好を反映させたい場合は、ユーザは、例えば、リモコン１０８に設けられたお勧め番組再検索釦を押し、カメラを用いたお勧め番組情報提供装置に対してお勧め番組の再検索を開始するように指示する。リモコン１０８からのお勧め番組再検索命令を入力Ｉ／Ｆ１０６経由で受信したお勧め検索手段２０４は、所有者を含む人物全員の個人毎の好みの小ジャンルについての情報から所有者の好みの小ジャンルについての情報を削除した上で、再度上記手順によりコンテンツＤＢ１０５を検索して両者において共に抽出された番組を検索結果として取得し、検索結果として取得した番組を、お勧めタイプ情報に含まれる所有者を削除した優先順位にしたがって優先される人物の好みの番組順に並べたものを、図５に示すようなお勧め番組の情報としてディスプレイ１０９に呈示する。

以上のように構成することにより、本発明の実施の形態１における場合と比べて、所有者の嗜好の影響を削除して所有者以外の人々、例えば、お客の好みを反映したお勧めタイプ情報を取得するために、所有者を特定してその影響を削除しようと何度もお勧め番組再検索のための操作をする必要がなく、簡単にお客の好みを反映したお勧めタイプ情報を取得することができる。

なお、本発明の実施の形態２においては、お勧めタイプ情報に含まれる優先順位に関係なく最優先させる特定の人物を所有者としたがこれに限るものではなく、例えば、本発明のカメラを用いたお勧め番組情報提供装置および／または機器Ａの所有者の家族（父親、母親、兄弟／姉妹、子供等）であってもかまわない。また、最優先させる特定の人物は複数人であってもかまわない。ただし、最優先させる特定の人物が複数人の場合は、特定の人物の中で優先順位を定めておくことが望ましい。

また、上記の説明においては、カメラ１０１に写された所有者を含むすべての人物（利用者）に関して、個人を特定するための顔の特徴情報および個人に関する情報などが判定要素ＤＢ２０３に登録され保持されているものとして説明したが、カメラ１０１に写された所有者を含む人物（利用者）の中に、個人を特定するための顔の特徴情報や個人に関する情報などが判定要素ＤＢ２０３に登録されていない人物（人物α）が存在する場合が考えられるが、この場合の処理方法については、本発明の実施の形態１における場合と同様であるので、ここでは説明を省略する。

本発明に係るカメラを用いたお勧め番組情報提供装置は、カメラに写った人物の全員あるいは大多数が満足するお勧め番組を検索して呈示することができ、また、満足するお勧め番組が無かった場合には、簡単に別の条件で検索したお勧め番組を呈示することが出来るため、大量の録画済番組を蓄積するＤＶＤレコーダなどの画像記録再生装置や大量の番組表を保持する画像記録再生装置を内蔵するＤＴＶなどと組み合わせて使用する場合に有用である。

本発明の実施の形態１におけるカメラを用いたお勧め番組情報提供装置の構成を示すブロック図 本発明の実施の形態１および２におけるカメラに写された人物を認識し特定する順番の一例を示す図 本発明の実施の形態１におけるお勧め検索手段がお勧め番組を検索する場合の手順を示すフローチャート 本発明の実施の形態１におけるお勧め検索手段がお勧め番組の再検索を行う場合の手順を示すフローチャート 本発明の実施の形態１におけるお勧め番組の表示の一例を示す図 本発明の実施の形態２におけるカメラを用いたお勧め番組情報提供装置の構成を示すブロック図 年代、学校、職場などが同じであるグループ（集団）の場合におけるお勧めパターンの一例を示す図

符号の説明

１０１ カメラ（撮像手段）
１０２ 判定手段
１０３ 判定要素ＤＢ
１０４ お勧め検索手段
１０５ コンテンツＤＢ
１０６ 入力Ｉ／Ｆ
１０７ 制御手段
１０８ リモコン
１０９ ディスプレイ（表示手段）
２０２ 判定手段
２０３ 判定要素ＤＢ
２０４ お勧め検索手段

Claims (4)

1. デジタルテレビジョン（以下、ＤＴＶと略す）、ＤＶＤレコーダなどの記録再生機器および前記記録再生機器と一体型のＤＴＶなどの機器（以下、機器Ａと称す）と、内蔵またはオプションの形態で組み合わせて使用されるカメラを用いたお勧め番組情報提供装置であって、
   撮像手段であるカメラ、判定手段、判定要素データベース（以下、ＤＢと略す）、お勧め検索手段、コンテンツＤＢおよび入力インタフェース（以下、Ｉ／Ｆと略す）で構成され、
   前記カメラは、前記機器Ａあるいは前記機器Ａの近傍に取り付けられ、前記入力Ｉ／Ｆがリモコンなどを用いて送信されたユーザのお勧め番組の検索命令を受信したことに対応して、前記機器Ａの周辺にいて前記機器Ａに保存されている番組を視聴しているあるいは視聴しようとしている人々を撮像して、その撮像した画像を前記判定手段に送信し、
   前記判定要素ＤＢは、個々の人物を特定するための顔の特徴情報、前記個々の人物を特定するための顔の特徴情報が登録されている個々の人物に関する年齢、性別および好みの番組やジャンルなどの個人情報および予め作成したお勧めパターンの一覧情報、すなわち、人数、年齢、男女の構成などを想定し、想定した各要素の組み合わせから推定した推定グループ毎に、お勧めのジャンル情報やタイトル情報およびどの人物の前記個人情報を優先させるかを示す優先順位などを含むお勧めタイプ情報を予め作成したお勧めパターンの一覧情報などの情報を保持しており、
   前記コンテンツＤＢは、前記機器Ａが受信し録画したＤＴＶ放送番組の番組データや他のパッケージメディアなどから記録し蓄積している番組データおよびこれらの番組に関連する番組情報データ、すなわち、番組名や番組が属するジャンルなどの情報に関するデータを保存しており、
   前記判定手段は、前記カメラから受信した画像を解析し、前記画像に含まれているすべての人物について、前記判定要素ＤＢに保持されている個人を特定するための顔の特徴情報と個々に照らし合わせることで個々の人物を特定し、特定した個々の人物に関する前記個人情報を前記判定要素ＤＢから取得し、前記画像に含まれている人数を含む人物全体の特徴を把握して、把握した人物全体の特徴を基に、予め作成し前記判定要素ＤＢに保存されている前記お勧めパターンの一覧から、前記カメラから受信した画像に含まれている人物全体の好みに合うと推定される前記お勧めタイプ情報を選定するとともに、特定した人物全員の個人毎の好みのジャンルやタイトルなどに関する情報を前記判定要素ＤＢから取得して、これらの選定あるいは取得した情報を前記お勧め検索手段に送信し、
   前記お勧め検索手段は、前記判定手段において選定された前記お勧めタイプ情報に含まれるジャンル情報またはタイトル情報を検索キーワード（イ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（イ）として取得するとともに、前記判定手段から受信した前記判定手段において取得された特定した人物全員の個人毎の好みのジャンルやタイトルなどに関する情報を検索キーワード（ロ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ロ）として取得し、前記検索結果（イ）と前記検索結果（ロ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される人物の好みの番組順に並べたものをお勧め番組として出力し、
   前記入力Ｉ／Ｆは、ユーザがリモコンなどを用いて送信したお勧め番組の検索命令やお勧め番組の再検索命令などの信号を受信し、受信した信号を前記お勧め検索手段などに送信する
   ことを特徴とするカメラを用いたお勧め番組情報提供装置。
2. 前記入力Ｉ／Ｆが１回目のお勧め番組の再検索命令の信号を受信すると、前記お勧め検索手段は、前記カメラで撮像された人物の中の予め定めた順番で決められる人物（人物α）の好みのジャンルやタイトルなどに関する情報を、前記検索キーワード（ロ）から削除したキーワードを検索キーワード（ハ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ハ）として取得し、前記検索結果（イ）と前記検索結果（ハ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される前記人物αを除く人物の好みの番組順に並べたものをお勧め番組として出力し、さらに、２回目、３回目と前記入力Ｉ／Ｆがお勧め番組の再検索命令の信号を受信した場合は、前記カメラで撮像された人物の中の前記予め定めた順番で決められる人物（人物ｘ）の好みのジャンルやタイトルなどに関する情報を順次前記検索キーワード（ハ）から削除したキーワードを検索キーワード（ｎ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ｎ）として取得し、前記検索結果（イ）と前記検索結果（ｎ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される前記人物αから前記人物ｘまでの人物を除く人物の好みの番組順に並べたものをお勧め番組として出力する、ことを特徴とする請求項１記載のカメラを用いたお勧め番組情報提供装置。
3. 前記お勧めタイプ情報に含まれる優先順位に関係なく最優先させる特定の人物を予め定めておき、前記判定手段が前記カメラで撮像された人物の中に前記特定の人物が存在することを確認した場合は、前記お勧めタイプ情報に含まれる優先順位に関係なく最優先される人物として扱うことを特徴とする請求項１記載のカメラを用いたお勧め番組情報提供装置。
4. 前記お勧めタイプ情報に含まれる優先順位に関係なく最優先させる特定の人物を予め定めておき、前記入力Ｉ／Ｆが１回目のお勧め番組の再検索命令の信号を受信すると、前記お勧め検索手段は、前記カメラで撮像された人物の中の予め定めた順番に関係なく、前記特定の人物の好みのジャンルやタイトルなどに関する情報を、前記検索キーワード（ロ）から削除したキーワードを検索キーワード（ハ）にして、前記コンテンツＤＢに保持されている前記番組情報を検索し抽出した番組を検索結果（ハ）として取得し、前記検索結果（イ）と前記検索結果（ハ）の両者において共に取得された番組を、前記お勧めタイプ情報に含まれる優先順位にしたがって優先される前記特定の人物を除く人物の好みの番組順に並べたものをお勧め番組として出力することを特徴とする請求項２記載のカメラを用いたお勧め番組情報提供装置。

Images