JP3968260B2 - 映像関連情報提示装置、方法、プログラムおよびこのプログラムを記録した記録媒体 - Google Patents
映像関連情報提示装置、方法、プログラムおよびこのプログラムを記録した記録媒体 Download PDFInfo
- Publication number
- JP3968260B2 JP3968260B2 JP2002079947A JP2002079947A JP3968260B2 JP 3968260 B2 JP3968260 B2 JP 3968260B2 JP 2002079947 A JP2002079947 A JP 2002079947A JP 2002079947 A JP2002079947 A JP 2002079947A JP 3968260 B2 JP3968260 B2 JP 3968260B2
- Authority
- JP
- Japan
- Prior art keywords
- related information
- scene
- video
- information
- icon
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、映像を再生する際に、該映像に関連付けられた関連情報を提示するための装置および方法に関する。
【０００２】
【従来の技術】
従来、映像と、その映像に関連する関連情報を提示する装置や方法として、映像と同期して関連情報を提示するものがある。例えば、ＳＭＩＬ（Synchronized Multimedia Integration Language）を用いて映像と関連情報の提示タイミングを記述しておき、映像と同時に関連情報を提示する仕組みが、Real Networks,Inc.のReal Player等のストリーム映像再生装置において実現されている。
【０００３】
同様に、ＡＲＩＢ ＳＴＤ−Ｂ２４“デジタル放送におけるデータ放送符号化方式と伝送方式”により既定されるシステムでは、ＢＳ／ＣＳデジタル放送などのデジタル放送の受信装置において、映像、音声放送チャネルで放送されるテレビ番組やラジオ番組に関する関連情報を、当該番組映像と同時に提示することが可能である。
【０００４】
上述の装置における映像および関連情報の閲覧インタフェースは、一般に、関連情報がブラウザに表示され、Picture in Pictureでブラウザ上に映像が提示される形式であり、再生映像の進行に同期して対応する関連情報が提示される。
【０００５】
また、映像中の特定の被写体を選択することにより該被写体に関連する情報が提示される関連情報の閲覧インタフェースが提案されている。例えば、Jonathan Dakss,Stefan Agamanolis,Edmond Chalom,V.Michael Bove,jr.,“Hyperlinked Video,"Proc.SPIE Multimedia Systems and Applications,v.352,(inpress),1998では、ＴＶ映像中の特定の被写体を選択することにより該被写体に関連する情報がＴＶ内の映像に重畳して提示されるシステムが提案されている。
【０００６】
【発明が解決しようとする課題】
しかしながら、再生映像の進行に同期して対応する関連情報を提示する関連情報の閲覧インタフェースでは、視聴者は、映像視聴と同時に関連情報を視聴しなければならないため、関連情報の情報量が多いと十分に該情報の内容を把握できない。したがって、あまり多くの関連情報を提示できない問題がある。
【０００７】
さらに、上述のインタフェースでは、視聴者にとって興味のない関連情報も提示されるため、映像と同時に関連情報を表示する機能が、視聴者にとってわずらわしいと感じられる問題がある。
【０００８】
一方、映像中の特定の被写体を選択することにより該被写体に関連する情報が提示される関連情報の閲覧インタフェースでは、視聴者が特定の被写体に興味を示し、これを選択するまでは、再生映像のみが提示されているので視聴者にとっては上述のようなわずらわしさはない。
【０００９】
しかしながら、映像中のどのような関連情報が関連付けられているかを知る手段がない。このため、視聴者は興味を持った被写体に対して選択操作を行うが、視聴者が選択した被写体に関連情報が関連付けられていない場合には、関連情報が提示されない。このように選択操作に対する結果として関連情報が提示されたりされなかったりするため、視聴者にストレスを感じさせる問題がある。
【００１０】
あるいは、同様に映像中のどのような関連情報が関連付けられているかを知ることに起因して、興味深い関連情報が映像中の被写体に関連付けられているのにも関わらず、これを視聴者が見逃してしまう問題がある。
【００１１】
また、映像中の被写体そのものを選択するという操作は、映像中の被写体が高速に移動している場合などには極めて困難であるという問題がある。
【００１２】
さらに、ＶＯＤシステムによってネットワークを介して提供される配信映像や、蓄積映像を再生する場合においては、利用者は、早送りや巻き戻しや映像シーンのスキップ等の映像再生制御を行うことが可能である。この場合、前記の各種映像再生制御によって映像中の興味のあるシーンや被写体を検索することによって、該シーンもしくは被写体に関連付けられた関連情報を検索することが考えられる。
【００１３】
しかしながら、前述の関連情報提示インタフェースを用いて、前記の各種映像再生制御によって映像を制御しつつ、所望の関連情報を検索することは、上述した問題に起因して、必ずしも容易ではない。
【００１４】
本発明は、上述の問題を鑑みてなされたものであり、映像と同時に映像に関連する情報を提供する装置において、利便性に優れた関連情報提示インタフェースを実現することを目的とする。
【００１５】
ＶＯＤシステムによってネットワークを介して提供される配信映像や、蓄積映像を再生する場合においては、利用者は、早送りや巻き戻しや映像シーンのスキップ等の映像再生制御を行うことが可能である。本発明では、特に、このような映像再生制御が可能な映像を視聴する際に、効果的に関連情報の存在を通知し必要に応じて提示できるインタフェースを実現する。
【００１６】
【課題を解決するための手段】
上記の課題を解決するために本発明では、映像に関連する情報である関連情報を提示する装置において、映像を表示する映像表示手段と、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段と、制御手段より構成され、前記制御手段が、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段と、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段と、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示する手段とを有することを特徴とする映像関連情報提示装置を解決手段とする。
【００１７】
あるいは、映像を表示する映像表示手段と、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段と、制御手段より構成され、映像に関連する情報である関連情報を提示する装置における、関連情報を提示する方法であって、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶するステップと、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させるステップと、前記制御手段が、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示するステップとを有することを特徴とする映像関連情報提示方法を解決手段とする。
【００１８】
上記の発明によれば、上記のように映像中のシーン毎に、該シーンに関連付けられた各関連情報に対応する関連情報アイコンを表示することによって、視聴者は、関連情報の存在、および、その個数を把握することが可能であり、関連情報アイコンを選択するという簡単な操作で、関連情報を閲覧できる。また、関連情報そのものを提示するのではなく、関連情報の内容を抽象した図形等である前記関連情報アイコンのみを提示し、選択された関連情報のみ提示することで、視聴者にとって興味のない情報を不要に提示することを避けることができる。
【００２２】
また、本発明では、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させる手段を有することを特徴とする映像関連情報提示装置を解決手段とする。
【００２３】
あるいは、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させるステップを有することを特徴とする映像関連情報提示方法を解決手段とする。
【００２４】
上記の発明によって、視聴者は、前記関連情報アイコン表示手段に表示された関連情報アイコンが、映像中のどのシーンに関連付けられたものかということを、前記関連情報アイコンを選択することによって確認できる。
【００２５】
以上、本発明による映像関連情報提示装置を用いれば、視聴者は、効果的に再生映像に関連付けられた関連情報の存在を認識でき、簡単かつ迅速に所望の関連情報を選択し閲覧することが可能な関連情報提示インタフェースが実現される。
【００２６】
また本発明は、コンピュータを、映像を表示する映像表示手段、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段と、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示する手段、として機能させるためのプログラム、を解決手段とする。
また本発明は、コンピュータを、映像を表示する映像表示手段、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させる手段、として機能させるためのプログラム、を解決手段とする。
また本発明は、前記プログラムを記録したコンピュータ読み取り可能な記録媒体を解決手段とする。
【００２７】
【発明の実施の形態】
以下、本発明の実施の形態について図を用いて詳細に説明する。
【００２８】
本発明の一実施形態例における映像関連情報提示装置の基本構成例について図１を用いて説明する。
【００２９】
本発明の映像関連情報提示装置は、図１に示すように、映像を表示する映像表示手段１と、関連情報に対応するアイコンである関連情報アイコンを表示する関連情報アイコン表示手段２と、制御手段３より構成される。本発明の映像関連情報提示装置は、さらに、映像中において任意の２つのカット間にある連続した映像フレームの集合をシーンとする場合に、任意のシーンを選択するためのシーン選択手段４を具備する場合がある。また、制御手段３は、該映像のシーン構造を示すシーン構造情報、および、該映像中の各シーンにどのような関連情報が関連付けられているかを示す関連情報リンク情報を保持している。なお、図１には、詳細に記載していないが、本発明の映像関連情報提示装置は、デコーダー等、映像再生のために必要な各種手段は、基本機能として制御手段３に組み込むことができる。また、必要に応じて、ブラウザ等、関連情報を提示するための手段を具備する場合がある。
【００３０】
上記の映像関連情報提示装置は、映像再生と該映像に関連する情報を提供することに特化したハードウェアとして実装することができる。また、同様に、ＭｉｃｒｏＳｏｆｔ Ｗｉｎｄｏｗｓ（登録商標、以下同じ），ＭａｃＯＳ，Ｌｉｎｕｘ，ＵＮＩＸ（登録商標）などの汎用のＯＳが提供するＧＵＩ上で動作するソフトウェアアプリケーションプログラムとして実装することができる。ＯＳ上で動作するソフトウェアアプリケーションプログラムとして実装される場合、上記の映像再生のために必要な各種手段や、関連情報を提示するための手段は、ＯＳ上に実装され該手段を提供するモジュールを、本発明の映像関連情報提示装置の制御手段３が流用する構成とすることができる。
【００３１】
図２には、本発明による映像関連情報提供装置のユーザインタフェースの一例を示す。本発明の映像関連情報提供装置のユーザインタフェースは、（米）ＭｉｃｒｏＳｏｆｔ社より提供されているＷｉｎｄｏｗｓ Ｍｅｄｉａ Ｐｌａｙｅｒ、（米）Ｒｅａｌ Ｎｅｔｗｏｒｋｓ，Ｉｎｃ．より提供されているＲｅａｌＰｌａｙｅｒ、（米）Ａｐｐｌｅ Ｃｏｍｐｕｔｅｒ，Ｉｎｃ．より提供されているＱｕｉｃｋ Ｔｉｍｅ等、汎用の映像再送用プレイヤー装置のユーザインタフェースが一般に具備する映像表示手段１などに加えて、映像シーンごとの関連情報アイコンが表示される関連情報アイコン表示手段２が具備されることが特徴である。さらに、図２に示すようにシーンを選択するためのシーン選択手段４が具備されている場合もある。
【００３２】
該映像関連情報提示装置は、上述の汎用的な映像再生プレイヤー装置の機能を具備することができる。すなわち、該映像関連情報提示装置のユーザインタフェースには、図２に示すように、映像の再生、一時停止、早送り、巻き戻し等を指示するためのボタンや、音量の調整のためのボタン等が基本機能として具備される場合がある。
【００３３】
次に、上記の映像関連情報提示装置を構成する各手段等について説明する。
【００３４】
該映像関連情報提示装置の扱う映像は、映像関連情報提示装置が具備されたＰＣ等の装置が有する記憶装置に蓄積された映像である場合や、ＶＯＤシステム等によりネットワークを介して配信される映像である場合などがある。映像表示手段１は、前述の各種映像リソースを再生表示するための領域を提供する手段である。
【００３５】
関連情報アイコン表示手段２は、関連情報に対応するアイコンである関連情報アイコンを表示する領域を提供する手段である。関連情報アイコン表示手段２は、同時に複数のシーンに関する関連情報アイコンを表示可能である。図２に示した例における映像関連情報提示装置では、関連情報アイコン表示手段２は、現在再生されているシーンに関する関連情報アイコンを表示する領域に加え、一つ前のシーンに関する関連情報アイコンを表示する領域と、次のシーンに関する関連情報アイコンを表示する領域とを提供している。
【００３６】
また、関連情報アイコン表示手段２に表示される関連情報アイコンは、関連情報の内容を抽象した図形や、関連情報の内容を代表する文字等を含むよう構成することができる。例えば、対応する関連情報が映像中に登場するタレントのプロフィールである場合には、関連情報アイコンは、該タレントの顔画像や名前、または、プロフィール情報といったコンテンツの種類を示す文字を含むように構成できる。
【００３７】
シーン選択手段４は、該映像関連情報提示装置を利用する視聴者が、無作為に映像中の所望するシーンを選択することを可能にするための手段である。シーン選択手段４は、例えば、全てのシーン番号を視聴者に提示し、視聴者がシーンを選択する構成でも良い。あるいは、視聴者が入力手段によりシーン番号などのシーンを特定するための情報を入力することによりシーンを選択する構成でも良い。あるいは、次のシーンを選択するボタンと、前のシーンを選択するボタンを具備し、視聴者が複数回、該ボタンを操作することによって所望のシーンを選択する構成でも良い。なお、図２には、映像関連情報提示装置のシーン選択手段４が、次のシーンを選択するボタンと、前のシーンを選択するボタンを具備し、視聴者が複数回、該ボタンを操作することによって所望のシーンを選択する構成となっている場合を示している。
【００３８】
シーン構造情報は、常に再生対象となっている映像に対応するものであり、該映像にシーン構造に関する情報が記述される。シーン構造は、例えば、ＭＰＥＧ７におけるシーン構造記述子によって記述することができる。図３には、ＸＭＬ形式でシーン構造を記述したシーン構造情報の記述例を示す。図３に示す記述例では、＜ｓｃｅｎｅ ｉｄ＝”ｉ”ｓｔａｒｔ＝”ｓ”ｄｕｒａｔｉｏｎ＝”ｔ”／＞タグによって、シーン番号ｉのシーンが、該映像中の再生位置ｓから長さｔの範囲に対応することが記述されている。
【００３９】
関連情報リンク情報は、常に再生対象となっている映像に対応するものであり、該映像中の各シーンにどのような関連情報が関連付けられているかを示す情報が記述される。図４には、ＸＭＬ形式で記述した関連情報リンク情報の記述例を示す。図４に示す記述例では、＜ｓｃｅｎｅ ｉｄ＝”ｉ”＞…＜／ｓｃｅｎｅ＞で囲まれる記述が、シーン番号ｉのシーンに関連付けられた関連情報属性情報を示している。関連情報属性情報は＜ＲＤＦ＞…＜／ＲＤＦ＞で囲まれる部分が一つの関連情報に対応しており、各関連情報の関連情報属性情報には、関連情報を特定するための情報、関連情報アイコンとして利用する画像を特定するための情報、および、関連情報のタイトルなどが記述されている。なお、関連情報を特定するための情報、および、関連情報アイコンとして利用する画像を特定するための情報として、ＵＲＬを用いることができる。
【００４０】
上述のシーン構造情報と関連情報リンク情報は、個々のファイルとして扱っても良いし、二つの情報を一つにまとめたうえ一つのファイルとして扱っても良い。
【００４１】
次に、本実施形態例の映像関連情報提示装置の動作とともに、本発明の方法の動作例について説明する。
【００４２】
映像関連情報提示装置は、これを利用する視聴者によって特定の映像の再生が指示された時点で動作を開始する。
【００４３】
まず、映像関連情報提示装置の制御手段３は、再生が指示された該映像に対応するシーン構造情報および関連情報リンク情報を取得する。このために、映像関連情報提示装置には、シーン構造情報および関連情報リンク情報を取得するための手順を予め設定しておくことができる。例えば、再生が指示された該映像に対応するシーン構造情報および関連情報リンク情報は、該映像リソースファイルが存在するフォルダと同じフォルダ内に所定のファイル名で保持されるという規則を設定しておき、この規則に基づいて、映像関連情報提示装置の制御手段３が、必要なシーン構造情報および関連情報リンク情報を特定し、これらを取得する。
【００４４】
また、あるいは、シーン構造情報および関連情報リンク情報を一つにまとめた映像メタ情報ファイルを構成し、該映像メタ情報ファイル内に、対応する映像を特定するための情報を記述しておく。そして、視聴者は、前記のように構成された映像メタ情報ファイルを、映像関連情報提示装置に取り込むことによって、該映像メタ情報ファイル内に記述された映像を特定するための情報によって特定される映像の再生を指示するという手順を取ることができる。この手順の場合には、映像関連情報提示装置の制御手段３には、視聴者によって特定の映像の再生が指示されると同時に、該映像メタ情報ファイルの形式でシーン構造情報および関連情報リンク情報が取得される。
【００４５】
いずれにせよ、上述した手順などにより、本映像関連情報提示装置において、映像再生が開始される時点においては、映像関連情報提示装置の制御手段３は、再生する映像に対応するシーン構造情報および関連情報リンク情報を保持する。
【００４６】
映像再生が開始された後、映像関連情報提示装置の制御手段３は、シーン構造情報および関連情報リンク情報を参照して、映像表示手段１で再生中のシーンに関する関連情報アイコンを関連情報アイコン表示手段２に逐次表示していく。
【００４７】
また、視聴者によって、関連情報アイコン表示手段２に表示された関連情報アイコンが選択された時点で、選択された関連情報アイコンに対応する関連情報を提示する。具体的には、選択された関連情報アイコンに対応する関連情報属性情報の記述を関連情報リンク情報の中から特定し、該関連情報属性情報に含まれる関連情報を特定するための情報を参照して、対応する関連情報を提示する。関連情報の提示は、関連情報属性情報に含まれる関連情報を特定するための情報がＵＲＬであるならば、ブラウザを起動し、該ＵＲＬをブラウザで参照することに相当する。
【００４８】
なお、関連情報は、映像表示手段１が提供する映像表示のための領域に提示することができる。図５には、本発明の映像関連情報提示装置において、映像表示手段１が提供する映像表示のための領域を利用して関連情報を提示した場合のユーザインタフェースの例を示している。
【００４９】
関連情報を提示する際には、映像再生を一時停止する場合がある。一つの関連情報の提示方法では、映像再生を一時停止し、図５に示すように、映像表示手段１が提供する映像表示のための領域において関連情報を提示するよう動作することができる。この場合、視聴者が関連情報の提示の終了を指示した時点で、関連情報の提示を取りやめるとともに、再び、映像表示手段１に、映像を表示し、一時停止を解除して再生を開始するよう動作することができる。
【００５０】
また、一方の関連情報の提示方法では、映像再生を一時停止せずに、映像表示手段１が提供する映像表示のための領域とは別に、新たに関連情報を提示するための領域を構築し、新たに構築された領域において関連情報を提示することができる。後者の方法に関して、いわゆるマルチウィンドウのデスクトップＧＵＩを提供するＯＳ上で動作するソフトウェアアプリケーションプログラムとして該映像関連情報提示装置が実装されている場合には、新たに構築する関連情報の提示のための領域は、ＧＵＩ上に新たに構築されるウィンドウとすることができる。
【００５１】
図６には、上述の例において、デスクトップＧＵＩを提供するＯＳ上で動作するソフトウェアアプリケーションプログラムとして実装された本発明の映像関連実装提示装置が、ＧＵＩ上に新たに構築されるウィンドウを利用して、関連情報を提示する場合のユーザインタフェースの例を示している。
【００５２】
シーン選択手段４によるシーン選択処理が発生した時点における動作を下記に説明する。
【００５３】
映像を再生している状態、あるいは、関連情報が提示されている状態において、映像関連情報提示装置の制御手段３は、視聴者が、前述の各種シーン選択手段４によってシーンを選択した時点で、シーン構造情報および関連情報リンク情報を参照して、選択されたシーンに関する関連情報の関連情報アイコンを関連情報アイコン表示手段２へ表示する。
【００５４】
上述の動作は、必ずしもシーン選択手段４を用いてシーンが選択された場合にのみ発生するものではない。前述したように映像関連情報提示装置が、基本機能として映像の早送り、巻き戻しを指示するボタンを視聴者に提供する場合がある。この場合、視聴者の早送りもしくは巻き戻し操作によって、映像表示手段１において再生されているシーンが変化した時点で、映像関連情報提示装置の制御手段３は、映像表示手段１において再生されているシーンに関する関連情報の関連情報アイコンを関連情報アイコン表示手段２へ表示するよう動作することができる。
【００５５】
上述の説明においては、関連情報アイコン表示手段２に表示される関連情報アイコンを選択した場合には、該関連情報アイコンに対応する関連情報が提示されるのみであったが、以下には、関連情報の提示と同時に、該関連情報が関連付けられたシーンが表示される場合について説明する。
【００５６】
先に説明したように、関連情報アイコン表示手段２は、現在、映像表示手段１において表示されるシーンに関する関連情報アイコン以外の関連情報アイコンを提示する領域を具備する場合もある。
【００５７】
さらに、図６に示すように、映像表示手段１が提供する映像表示のための領域とは別に、新たに関連情報を提示するための領域を構築し、新たに構築された領域において、関連情報を提示する場合がある。
【００５８】
このような場合において、本発明の映像関連情報提示装置の制御手段３は、視聴者により、関連情報アイコン表示手段２に表示された関連情報アイコンが選択された時点で、映像表示手段１が提供する映像表示のための領域とは別に、新たに関連情報を提示するための領域を構築し、新たに構築された領域において、関連情報を提示するとともに、シーン構造情報および関連情報リンク情報を参照し、選択された関連情報アイコンに対応する関連情報が関連付けられたシーンを映像表示手段１に表示する。
【００５９】
なお、図１で示した装置における各部の一部もしくは全部の機能をコンピュータのプログラムで構成し、そのプログラムをコンピュータを用いて実行して本発明を実現することができること、あるいは、図１〜図６を用いて説明した方法の手順をコンピュータのプログラムで構成し、そのプログラムをコンピュータに実行させることができることは言うまでもなく、コンピュータでその機能を実現するためのプログラム、あるいは、コンピュータにその処理の手順を実行させるためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、ＦＤ（フロッピーディスク（登録商標））や、ＭＯ、ＲＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録して、保存したり、配布したりすることが可能である。また、上記のプログラムをインターネットや電子メールなど、ネットワークを通して提供することも可能である。
【００６０】
【発明の効果】
本発明によれば、映像中のシーン毎に、該シーンに関連付けられた各関連情報に対応する関連情報アイコンを表示することによって、視聴者は、関連情報の存在、および、その個数を把握することが可能であり、関連情報アイコンを選択するという簡単な操作で、関連情報を閲覧できる。また、関連情報そのものを提示するのではなく、関連情報の内容を抽象した図形等である前記関連情報アイコンのみを提示し、選択された関連情報のみ提示することで、視聴者にとって興味のない情報を不要に提示することを避けることができる。
【００６３】
また、本発明によれば、視聴者は、前記関連情報アイコン表示手段２に表示された関連情報アイコンが、映像中のどのシーンに関連付けられたものかということを、前記関連情報アイコンを選択することによって確認できる。
【００６４】
すなわち、本発明を用いれば、視聴者は、効果的に再生映像に関連付けられた関連情報の存在を認識でき、簡単かつ迅速に所望の関連情報を選択し閲覧することが可能な関連情報提示インタフェースが実現される。
【図面の簡単な説明】
【図１】本発明による映像関達情報提示装置の一実施形態例の基本構成を示す図
【図２】本発明による映像関連情報提供装置のユーザインタフェースの一例を示す図
【図３】ＸＭＬ形式でシーン構造を記述したシーン構造情報の記述例を示す図
【図４】ＸＭＬ形式で記述した関連情報リンク情報の記述例を示す図
【図５】本発明における映像表示手段が提供する映像表示のための領域を利用して簡単になる情報を提示した場合のユーザインタフェースの例を示す図
【図６】本発明における新たに構築されるウィンドウを利用して、関連情報を提示する場合のユーザインタフェースの例を示す図
【符号の説明】
１…映像表示手段
２…関連情報アイコン表示手段
３…制御手段
４…シーン選択手段
【発明の属する技術分野】
本発明は、映像を再生する際に、該映像に関連付けられた関連情報を提示するための装置および方法に関する。
【０００２】
【従来の技術】
従来、映像と、その映像に関連する関連情報を提示する装置や方法として、映像と同期して関連情報を提示するものがある。例えば、ＳＭＩＬ（Synchronized Multimedia Integration Language）を用いて映像と関連情報の提示タイミングを記述しておき、映像と同時に関連情報を提示する仕組みが、Real Networks,Inc.のReal Player等のストリーム映像再生装置において実現されている。
【０００３】
同様に、ＡＲＩＢ ＳＴＤ−Ｂ２４“デジタル放送におけるデータ放送符号化方式と伝送方式”により既定されるシステムでは、ＢＳ／ＣＳデジタル放送などのデジタル放送の受信装置において、映像、音声放送チャネルで放送されるテレビ番組やラジオ番組に関する関連情報を、当該番組映像と同時に提示することが可能である。
【０００４】
上述の装置における映像および関連情報の閲覧インタフェースは、一般に、関連情報がブラウザに表示され、Picture in Pictureでブラウザ上に映像が提示される形式であり、再生映像の進行に同期して対応する関連情報が提示される。
【０００５】
また、映像中の特定の被写体を選択することにより該被写体に関連する情報が提示される関連情報の閲覧インタフェースが提案されている。例えば、Jonathan Dakss,Stefan Agamanolis,Edmond Chalom,V.Michael Bove,jr.,“Hyperlinked Video,"Proc.SPIE Multimedia Systems and Applications,v.352,(inpress),1998では、ＴＶ映像中の特定の被写体を選択することにより該被写体に関連する情報がＴＶ内の映像に重畳して提示されるシステムが提案されている。
【０００６】
【発明が解決しようとする課題】
しかしながら、再生映像の進行に同期して対応する関連情報を提示する関連情報の閲覧インタフェースでは、視聴者は、映像視聴と同時に関連情報を視聴しなければならないため、関連情報の情報量が多いと十分に該情報の内容を把握できない。したがって、あまり多くの関連情報を提示できない問題がある。
【０００７】
さらに、上述のインタフェースでは、視聴者にとって興味のない関連情報も提示されるため、映像と同時に関連情報を表示する機能が、視聴者にとってわずらわしいと感じられる問題がある。
【０００８】
一方、映像中の特定の被写体を選択することにより該被写体に関連する情報が提示される関連情報の閲覧インタフェースでは、視聴者が特定の被写体に興味を示し、これを選択するまでは、再生映像のみが提示されているので視聴者にとっては上述のようなわずらわしさはない。
【０００９】
しかしながら、映像中のどのような関連情報が関連付けられているかを知る手段がない。このため、視聴者は興味を持った被写体に対して選択操作を行うが、視聴者が選択した被写体に関連情報が関連付けられていない場合には、関連情報が提示されない。このように選択操作に対する結果として関連情報が提示されたりされなかったりするため、視聴者にストレスを感じさせる問題がある。
【００１０】
あるいは、同様に映像中のどのような関連情報が関連付けられているかを知ることに起因して、興味深い関連情報が映像中の被写体に関連付けられているのにも関わらず、これを視聴者が見逃してしまう問題がある。
【００１１】
また、映像中の被写体そのものを選択するという操作は、映像中の被写体が高速に移動している場合などには極めて困難であるという問題がある。
【００１２】
さらに、ＶＯＤシステムによってネットワークを介して提供される配信映像や、蓄積映像を再生する場合においては、利用者は、早送りや巻き戻しや映像シーンのスキップ等の映像再生制御を行うことが可能である。この場合、前記の各種映像再生制御によって映像中の興味のあるシーンや被写体を検索することによって、該シーンもしくは被写体に関連付けられた関連情報を検索することが考えられる。
【００１３】
しかしながら、前述の関連情報提示インタフェースを用いて、前記の各種映像再生制御によって映像を制御しつつ、所望の関連情報を検索することは、上述した問題に起因して、必ずしも容易ではない。
【００１４】
本発明は、上述の問題を鑑みてなされたものであり、映像と同時に映像に関連する情報を提供する装置において、利便性に優れた関連情報提示インタフェースを実現することを目的とする。
【００１５】
ＶＯＤシステムによってネットワークを介して提供される配信映像や、蓄積映像を再生する場合においては、利用者は、早送りや巻き戻しや映像シーンのスキップ等の映像再生制御を行うことが可能である。本発明では、特に、このような映像再生制御が可能な映像を視聴する際に、効果的に関連情報の存在を通知し必要に応じて提示できるインタフェースを実現する。
【００１６】
【課題を解決するための手段】
上記の課題を解決するために本発明では、映像に関連する情報である関連情報を提示する装置において、映像を表示する映像表示手段と、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段と、制御手段より構成され、前記制御手段が、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段と、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段と、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示する手段とを有することを特徴とする映像関連情報提示装置を解決手段とする。
【００１７】
あるいは、映像を表示する映像表示手段と、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段と、制御手段より構成され、映像に関連する情報である関連情報を提示する装置における、関連情報を提示する方法であって、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶するステップと、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させるステップと、前記制御手段が、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示するステップとを有することを特徴とする映像関連情報提示方法を解決手段とする。
【００１８】
上記の発明によれば、上記のように映像中のシーン毎に、該シーンに関連付けられた各関連情報に対応する関連情報アイコンを表示することによって、視聴者は、関連情報の存在、および、その個数を把握することが可能であり、関連情報アイコンを選択するという簡単な操作で、関連情報を閲覧できる。また、関連情報そのものを提示するのではなく、関連情報の内容を抽象した図形等である前記関連情報アイコンのみを提示し、選択された関連情報のみ提示することで、視聴者にとって興味のない情報を不要に提示することを避けることができる。
【００２２】
また、本発明では、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させる手段を有することを特徴とする映像関連情報提示装置を解決手段とする。
【００２３】
あるいは、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させるステップを有することを特徴とする映像関連情報提示方法を解決手段とする。
【００２４】
上記の発明によって、視聴者は、前記関連情報アイコン表示手段に表示された関連情報アイコンが、映像中のどのシーンに関連付けられたものかということを、前記関連情報アイコンを選択することによって確認できる。
【００２５】
以上、本発明による映像関連情報提示装置を用いれば、視聴者は、効果的に再生映像に関連付けられた関連情報の存在を認識でき、簡単かつ迅速に所望の関連情報を選択し閲覧することが可能な関連情報提示インタフェースが実現される。
【００２６】
また本発明は、コンピュータを、映像を表示する映像表示手段、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段と、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示する手段、として機能させるためのプログラム、を解決手段とする。
また本発明は、コンピュータを、映像を表示する映像表示手段、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段、少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段、前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させる手段、として機能させるためのプログラム、を解決手段とする。
また本発明は、前記プログラムを記録したコンピュータ読み取り可能な記録媒体を解決手段とする。
【００２７】
【発明の実施の形態】
以下、本発明の実施の形態について図を用いて詳細に説明する。
【００２８】
本発明の一実施形態例における映像関連情報提示装置の基本構成例について図１を用いて説明する。
【００２９】
本発明の映像関連情報提示装置は、図１に示すように、映像を表示する映像表示手段１と、関連情報に対応するアイコンである関連情報アイコンを表示する関連情報アイコン表示手段２と、制御手段３より構成される。本発明の映像関連情報提示装置は、さらに、映像中において任意の２つのカット間にある連続した映像フレームの集合をシーンとする場合に、任意のシーンを選択するためのシーン選択手段４を具備する場合がある。また、制御手段３は、該映像のシーン構造を示すシーン構造情報、および、該映像中の各シーンにどのような関連情報が関連付けられているかを示す関連情報リンク情報を保持している。なお、図１には、詳細に記載していないが、本発明の映像関連情報提示装置は、デコーダー等、映像再生のために必要な各種手段は、基本機能として制御手段３に組み込むことができる。また、必要に応じて、ブラウザ等、関連情報を提示するための手段を具備する場合がある。
【００３０】
上記の映像関連情報提示装置は、映像再生と該映像に関連する情報を提供することに特化したハードウェアとして実装することができる。また、同様に、ＭｉｃｒｏＳｏｆｔ Ｗｉｎｄｏｗｓ（登録商標、以下同じ），ＭａｃＯＳ，Ｌｉｎｕｘ，ＵＮＩＸ（登録商標）などの汎用のＯＳが提供するＧＵＩ上で動作するソフトウェアアプリケーションプログラムとして実装することができる。ＯＳ上で動作するソフトウェアアプリケーションプログラムとして実装される場合、上記の映像再生のために必要な各種手段や、関連情報を提示するための手段は、ＯＳ上に実装され該手段を提供するモジュールを、本発明の映像関連情報提示装置の制御手段３が流用する構成とすることができる。
【００３１】
図２には、本発明による映像関連情報提供装置のユーザインタフェースの一例を示す。本発明の映像関連情報提供装置のユーザインタフェースは、（米）ＭｉｃｒｏＳｏｆｔ社より提供されているＷｉｎｄｏｗｓ Ｍｅｄｉａ Ｐｌａｙｅｒ、（米）Ｒｅａｌ Ｎｅｔｗｏｒｋｓ，Ｉｎｃ．より提供されているＲｅａｌＰｌａｙｅｒ、（米）Ａｐｐｌｅ Ｃｏｍｐｕｔｅｒ，Ｉｎｃ．より提供されているＱｕｉｃｋ Ｔｉｍｅ等、汎用の映像再送用プレイヤー装置のユーザインタフェースが一般に具備する映像表示手段１などに加えて、映像シーンごとの関連情報アイコンが表示される関連情報アイコン表示手段２が具備されることが特徴である。さらに、図２に示すようにシーンを選択するためのシーン選択手段４が具備されている場合もある。
【００３２】
該映像関連情報提示装置は、上述の汎用的な映像再生プレイヤー装置の機能を具備することができる。すなわち、該映像関連情報提示装置のユーザインタフェースには、図２に示すように、映像の再生、一時停止、早送り、巻き戻し等を指示するためのボタンや、音量の調整のためのボタン等が基本機能として具備される場合がある。
【００３３】
次に、上記の映像関連情報提示装置を構成する各手段等について説明する。
【００３４】
該映像関連情報提示装置の扱う映像は、映像関連情報提示装置が具備されたＰＣ等の装置が有する記憶装置に蓄積された映像である場合や、ＶＯＤシステム等によりネットワークを介して配信される映像である場合などがある。映像表示手段１は、前述の各種映像リソースを再生表示するための領域を提供する手段である。
【００３５】
関連情報アイコン表示手段２は、関連情報に対応するアイコンである関連情報アイコンを表示する領域を提供する手段である。関連情報アイコン表示手段２は、同時に複数のシーンに関する関連情報アイコンを表示可能である。図２に示した例における映像関連情報提示装置では、関連情報アイコン表示手段２は、現在再生されているシーンに関する関連情報アイコンを表示する領域に加え、一つ前のシーンに関する関連情報アイコンを表示する領域と、次のシーンに関する関連情報アイコンを表示する領域とを提供している。
【００３６】
また、関連情報アイコン表示手段２に表示される関連情報アイコンは、関連情報の内容を抽象した図形や、関連情報の内容を代表する文字等を含むよう構成することができる。例えば、対応する関連情報が映像中に登場するタレントのプロフィールである場合には、関連情報アイコンは、該タレントの顔画像や名前、または、プロフィール情報といったコンテンツの種類を示す文字を含むように構成できる。
【００３７】
シーン選択手段４は、該映像関連情報提示装置を利用する視聴者が、無作為に映像中の所望するシーンを選択することを可能にするための手段である。シーン選択手段４は、例えば、全てのシーン番号を視聴者に提示し、視聴者がシーンを選択する構成でも良い。あるいは、視聴者が入力手段によりシーン番号などのシーンを特定するための情報を入力することによりシーンを選択する構成でも良い。あるいは、次のシーンを選択するボタンと、前のシーンを選択するボタンを具備し、視聴者が複数回、該ボタンを操作することによって所望のシーンを選択する構成でも良い。なお、図２には、映像関連情報提示装置のシーン選択手段４が、次のシーンを選択するボタンと、前のシーンを選択するボタンを具備し、視聴者が複数回、該ボタンを操作することによって所望のシーンを選択する構成となっている場合を示している。
【００３８】
シーン構造情報は、常に再生対象となっている映像に対応するものであり、該映像にシーン構造に関する情報が記述される。シーン構造は、例えば、ＭＰＥＧ７におけるシーン構造記述子によって記述することができる。図３には、ＸＭＬ形式でシーン構造を記述したシーン構造情報の記述例を示す。図３に示す記述例では、＜ｓｃｅｎｅ ｉｄ＝”ｉ”ｓｔａｒｔ＝”ｓ”ｄｕｒａｔｉｏｎ＝”ｔ”／＞タグによって、シーン番号ｉのシーンが、該映像中の再生位置ｓから長さｔの範囲に対応することが記述されている。
【００３９】
関連情報リンク情報は、常に再生対象となっている映像に対応するものであり、該映像中の各シーンにどのような関連情報が関連付けられているかを示す情報が記述される。図４には、ＸＭＬ形式で記述した関連情報リンク情報の記述例を示す。図４に示す記述例では、＜ｓｃｅｎｅ ｉｄ＝”ｉ”＞…＜／ｓｃｅｎｅ＞で囲まれる記述が、シーン番号ｉのシーンに関連付けられた関連情報属性情報を示している。関連情報属性情報は＜ＲＤＦ＞…＜／ＲＤＦ＞で囲まれる部分が一つの関連情報に対応しており、各関連情報の関連情報属性情報には、関連情報を特定するための情報、関連情報アイコンとして利用する画像を特定するための情報、および、関連情報のタイトルなどが記述されている。なお、関連情報を特定するための情報、および、関連情報アイコンとして利用する画像を特定するための情報として、ＵＲＬを用いることができる。
【００４０】
上述のシーン構造情報と関連情報リンク情報は、個々のファイルとして扱っても良いし、二つの情報を一つにまとめたうえ一つのファイルとして扱っても良い。
【００４１】
次に、本実施形態例の映像関連情報提示装置の動作とともに、本発明の方法の動作例について説明する。
【００４２】
映像関連情報提示装置は、これを利用する視聴者によって特定の映像の再生が指示された時点で動作を開始する。
【００４３】
まず、映像関連情報提示装置の制御手段３は、再生が指示された該映像に対応するシーン構造情報および関連情報リンク情報を取得する。このために、映像関連情報提示装置には、シーン構造情報および関連情報リンク情報を取得するための手順を予め設定しておくことができる。例えば、再生が指示された該映像に対応するシーン構造情報および関連情報リンク情報は、該映像リソースファイルが存在するフォルダと同じフォルダ内に所定のファイル名で保持されるという規則を設定しておき、この規則に基づいて、映像関連情報提示装置の制御手段３が、必要なシーン構造情報および関連情報リンク情報を特定し、これらを取得する。
【００４４】
また、あるいは、シーン構造情報および関連情報リンク情報を一つにまとめた映像メタ情報ファイルを構成し、該映像メタ情報ファイル内に、対応する映像を特定するための情報を記述しておく。そして、視聴者は、前記のように構成された映像メタ情報ファイルを、映像関連情報提示装置に取り込むことによって、該映像メタ情報ファイル内に記述された映像を特定するための情報によって特定される映像の再生を指示するという手順を取ることができる。この手順の場合には、映像関連情報提示装置の制御手段３には、視聴者によって特定の映像の再生が指示されると同時に、該映像メタ情報ファイルの形式でシーン構造情報および関連情報リンク情報が取得される。
【００４５】
いずれにせよ、上述した手順などにより、本映像関連情報提示装置において、映像再生が開始される時点においては、映像関連情報提示装置の制御手段３は、再生する映像に対応するシーン構造情報および関連情報リンク情報を保持する。
【００４６】
映像再生が開始された後、映像関連情報提示装置の制御手段３は、シーン構造情報および関連情報リンク情報を参照して、映像表示手段１で再生中のシーンに関する関連情報アイコンを関連情報アイコン表示手段２に逐次表示していく。
【００４７】
また、視聴者によって、関連情報アイコン表示手段２に表示された関連情報アイコンが選択された時点で、選択された関連情報アイコンに対応する関連情報を提示する。具体的には、選択された関連情報アイコンに対応する関連情報属性情報の記述を関連情報リンク情報の中から特定し、該関連情報属性情報に含まれる関連情報を特定するための情報を参照して、対応する関連情報を提示する。関連情報の提示は、関連情報属性情報に含まれる関連情報を特定するための情報がＵＲＬであるならば、ブラウザを起動し、該ＵＲＬをブラウザで参照することに相当する。
【００４８】
なお、関連情報は、映像表示手段１が提供する映像表示のための領域に提示することができる。図５には、本発明の映像関連情報提示装置において、映像表示手段１が提供する映像表示のための領域を利用して関連情報を提示した場合のユーザインタフェースの例を示している。
【００４９】
関連情報を提示する際には、映像再生を一時停止する場合がある。一つの関連情報の提示方法では、映像再生を一時停止し、図５に示すように、映像表示手段１が提供する映像表示のための領域において関連情報を提示するよう動作することができる。この場合、視聴者が関連情報の提示の終了を指示した時点で、関連情報の提示を取りやめるとともに、再び、映像表示手段１に、映像を表示し、一時停止を解除して再生を開始するよう動作することができる。
【００５０】
また、一方の関連情報の提示方法では、映像再生を一時停止せずに、映像表示手段１が提供する映像表示のための領域とは別に、新たに関連情報を提示するための領域を構築し、新たに構築された領域において関連情報を提示することができる。後者の方法に関して、いわゆるマルチウィンドウのデスクトップＧＵＩを提供するＯＳ上で動作するソフトウェアアプリケーションプログラムとして該映像関連情報提示装置が実装されている場合には、新たに構築する関連情報の提示のための領域は、ＧＵＩ上に新たに構築されるウィンドウとすることができる。
【００５１】
図６には、上述の例において、デスクトップＧＵＩを提供するＯＳ上で動作するソフトウェアアプリケーションプログラムとして実装された本発明の映像関連実装提示装置が、ＧＵＩ上に新たに構築されるウィンドウを利用して、関連情報を提示する場合のユーザインタフェースの例を示している。
【００５２】
シーン選択手段４によるシーン選択処理が発生した時点における動作を下記に説明する。
【００５３】
映像を再生している状態、あるいは、関連情報が提示されている状態において、映像関連情報提示装置の制御手段３は、視聴者が、前述の各種シーン選択手段４によってシーンを選択した時点で、シーン構造情報および関連情報リンク情報を参照して、選択されたシーンに関する関連情報の関連情報アイコンを関連情報アイコン表示手段２へ表示する。
【００５４】
上述の動作は、必ずしもシーン選択手段４を用いてシーンが選択された場合にのみ発生するものではない。前述したように映像関連情報提示装置が、基本機能として映像の早送り、巻き戻しを指示するボタンを視聴者に提供する場合がある。この場合、視聴者の早送りもしくは巻き戻し操作によって、映像表示手段１において再生されているシーンが変化した時点で、映像関連情報提示装置の制御手段３は、映像表示手段１において再生されているシーンに関する関連情報の関連情報アイコンを関連情報アイコン表示手段２へ表示するよう動作することができる。
【００５５】
上述の説明においては、関連情報アイコン表示手段２に表示される関連情報アイコンを選択した場合には、該関連情報アイコンに対応する関連情報が提示されるのみであったが、以下には、関連情報の提示と同時に、該関連情報が関連付けられたシーンが表示される場合について説明する。
【００５６】
先に説明したように、関連情報アイコン表示手段２は、現在、映像表示手段１において表示されるシーンに関する関連情報アイコン以外の関連情報アイコンを提示する領域を具備する場合もある。
【００５７】
さらに、図６に示すように、映像表示手段１が提供する映像表示のための領域とは別に、新たに関連情報を提示するための領域を構築し、新たに構築された領域において、関連情報を提示する場合がある。
【００５８】
このような場合において、本発明の映像関連情報提示装置の制御手段３は、視聴者により、関連情報アイコン表示手段２に表示された関連情報アイコンが選択された時点で、映像表示手段１が提供する映像表示のための領域とは別に、新たに関連情報を提示するための領域を構築し、新たに構築された領域において、関連情報を提示するとともに、シーン構造情報および関連情報リンク情報を参照し、選択された関連情報アイコンに対応する関連情報が関連付けられたシーンを映像表示手段１に表示する。
【００５９】
なお、図１で示した装置における各部の一部もしくは全部の機能をコンピュータのプログラムで構成し、そのプログラムをコンピュータを用いて実行して本発明を実現することができること、あるいは、図１〜図６を用いて説明した方法の手順をコンピュータのプログラムで構成し、そのプログラムをコンピュータに実行させることができることは言うまでもなく、コンピュータでその機能を実現するためのプログラム、あるいは、コンピュータにその処理の手順を実行させるためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、ＦＤ（フロッピーディスク（登録商標））や、ＭＯ、ＲＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録して、保存したり、配布したりすることが可能である。また、上記のプログラムをインターネットや電子メールなど、ネットワークを通して提供することも可能である。
【００６０】
【発明の効果】
本発明によれば、映像中のシーン毎に、該シーンに関連付けられた各関連情報に対応する関連情報アイコンを表示することによって、視聴者は、関連情報の存在、および、その個数を把握することが可能であり、関連情報アイコンを選択するという簡単な操作で、関連情報を閲覧できる。また、関連情報そのものを提示するのではなく、関連情報の内容を抽象した図形等である前記関連情報アイコンのみを提示し、選択された関連情報のみ提示することで、視聴者にとって興味のない情報を不要に提示することを避けることができる。
【００６３】
また、本発明によれば、視聴者は、前記関連情報アイコン表示手段２に表示された関連情報アイコンが、映像中のどのシーンに関連付けられたものかということを、前記関連情報アイコンを選択することによって確認できる。
【００６４】
すなわち、本発明を用いれば、視聴者は、効果的に再生映像に関連付けられた関連情報の存在を認識でき、簡単かつ迅速に所望の関連情報を選択し閲覧することが可能な関連情報提示インタフェースが実現される。
【図面の簡単な説明】
【図１】本発明による映像関達情報提示装置の一実施形態例の基本構成を示す図
【図２】本発明による映像関連情報提供装置のユーザインタフェースの一例を示す図
【図３】ＸＭＬ形式でシーン構造を記述したシーン構造情報の記述例を示す図
【図４】ＸＭＬ形式で記述した関連情報リンク情報の記述例を示す図
【図５】本発明における映像表示手段が提供する映像表示のための領域を利用して簡単になる情報を提示した場合のユーザインタフェースの例を示す図
【図６】本発明における新たに構築されるウィンドウを利用して、関連情報を提示する場合のユーザインタフェースの例を示す図
【符号の説明】
１…映像表示手段
２…関連情報アイコン表示手段
３…制御手段
４…シーン選択手段
Claims (7)
- 映像に関連する情報である関連情報を提示する装置において、
映像を表示する映像表示手段と、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段と、制御手段より構成され、
前記制御手段が、
少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段と、
前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段と、
前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示する手段とを有する
ことを特徴とする映像関連情報提示装置。 - 前記制御手段が、前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させる手段を有する
ことを特徴とする請求項１に記載の映像関連情報提示装置。 - 映像を表示する映像表示手段と、前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段と、制御手段より構成され、映像に関連する情報である関連情報を提示する装置における、関連情報を提示する方法であって、
少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶するステップと、
前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させるステップと、
前記制御手段が、前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示するステップとを有する
ことを特徴とする映像関連情報提示方法。 - 前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させるステップを有する
ことを特徴とする請求項３に記載の映像関連情報提示方法。 - コンピュータを、
映像を表示する映像表示手段、
前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段、
少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段、
前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段と、
前記関連情報アイコンが選択された時点で、前記選択された関連情報アイコンに対応する関連情報を提示する手段、
として機能させるためのプログラム。 - コンピュータを、
映像を表示する映像表示手段、
前記映像が表示される領域とは別の領域に、再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報の内容を抽象した図形である関連情報アイコンを表示する関連情報アイコン表示手段、
少なくとも各シーンのシーン番号を含む前記映像のシーン構造を示すシーン構造情報と、少なくとも前記関連情報アイコンに利用する画像を特定するための情報を含む関連情報属性情報を、前記シーン番号のそれぞれに対応して有し、該映像中の各シーンにどのような関連情報が関連付けられているかを示す、関連情報リンク情報とを記憶する手段、
前記シーン構造情報および前記関連情報リンク情報を参照して、前記映像表示手段で再生中のシーン、または、該シーンとその前後複数シーンに関する関連情報アイコンを前記関連情報アイコン表示手段に表示させる手段、
前記関連情報アイコンが選択された時点で、前記シーン構造情報および前記関連情報リンク情報を参照して、前記選択された関連情報アイコンに対応する関連情報に関連付けられたシーンを前記映像表示手段に表示させる手段、
として機能させるためのプログラム。 - 請求項５又は６に記載のプログラムを記録したコンピュータ読み取り可能な記録媒体。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002079947A JP3968260B2 (ja) | 2002-03-22 | 2002-03-22 | 映像関連情報提示装置、方法、プログラムおよびこのプログラムを記録した記録媒体 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002079947A JP3968260B2 (ja) | 2002-03-22 | 2002-03-22 | 映像関連情報提示装置、方法、プログラムおよびこのプログラムを記録した記録媒体 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2003283946A JP2003283946A (ja) | 2003-10-03 |
| JP3968260B2 true JP3968260B2 (ja) | 2007-08-29 |
Family
ID=29229189
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002079947A Expired - Lifetime JP3968260B2 (ja) | 2002-03-22 | 2002-03-22 | 映像関連情報提示装置、方法、プログラムおよびこのプログラムを記録した記録媒体 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3968260B2 (ja) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20050041797A (ko) * | 2003-10-31 | 2005-05-04 | 삼성전자주식회사 | 확장 검색 기능을 제공하는 메타 정보 및 서브 타이틀정보가 기록된 저장 매체 및 그 재생 장치 |
| JP2007052560A (ja) * | 2005-08-16 | 2007-03-01 | Matsushita Electric Ind Co Ltd | アイコン２画面 |
| JP5216591B2 (ja) * | 2005-09-30 | 2013-06-19 | ティーピー ビジョン ホールディング ビー ヴィ | 画像を閲覧することを可能にする方法及び装置 |
| JP5125133B2 (ja) * | 2007-02-06 | 2013-01-23 | 株式会社ニコン | 画像処理装置、撮像装置およびプログラム |
| JP5229459B2 (ja) * | 2007-04-22 | 2013-07-03 | 俊彦 岡部 | リンク情報付きコンテンツの送受信システム、表示装置、中継装置、方法、プログラム及び記録媒体 |
| JP5181608B2 (ja) * | 2007-10-02 | 2013-04-10 | ブラザー工業株式会社 | 情報処理装置および情報処理装置のプログラム |
| TW201249198A (en) * | 2011-04-21 | 2012-12-01 | Sony Corp | Supplying apparatus, supplying method, receiving apparatus, receiving method, program, and broadcasting system |
| JP6003626B2 (ja) * | 2012-12-26 | 2016-10-05 | ソニー株式会社 | 表示制御装置、表示制御方法および記録媒体 |
| JP6249771B2 (ja) * | 2013-12-27 | 2017-12-20 | キヤノン株式会社 | 画像処理装置、画像処理方法、プログラム |
| JP2017011494A (ja) * | 2015-06-22 | 2017-01-12 | 株式会社アステム | 端末装置、サーバ、コンテンツと付加情報の出力方法、及びプログラム |
-
2002
- 2002-03-22 JP JP2002079947A patent/JP3968260B2/ja not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| JP2003283946A (ja) | 2003-10-03 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US7987483B1 (en) | Inserting branding elements | |
| CA2738911C (en) | Video branching | |
| US9794617B2 (en) | Inserting ad elements | |
| US8707342B2 (en) | Referencing data in triggers from applications | |
| US7272843B1 (en) | Broadcasting method and broadcast signal receiver apparatus | |
| JP4025185B2 (ja) | メディアデータ視聴装置及びメタデータ共有システム | |
| US8448068B2 (en) | Information processing apparatus, information processing method, program, and storage medium | |
| EP2227809B1 (en) | Trick play of streaming media | |
| US20100169906A1 (en) | User-Annotated Video Markup | |
| US8159959B2 (en) | Graphic user interface for playing video data | |
| US20090320064A1 (en) | Triggers for Media Content Firing Other Triggers | |
| JP4799068B2 (ja) | テレビ受信装置及びその表示制御方法 | |
| TW200824451A (en) | Method and related system capable of notifying and buffering predetermined events in a program | |
| US9313541B2 (en) | Broadcasting method and broadcast signal receiving apparatus | |
| JP3968260B2 (ja) | 映像関連情報提示装置、方法、プログラムおよびこのプログラムを記録した記録媒体 | |
| JP2005018925A (ja) | 録画再生装置及び録画再生方法 | |
| KR100477705B1 (ko) | 홈 미디어 센터의 메인 화면 표시 방법 | |
| TWI853240B (zh) | 提供視角切換之影音播放系統及方法 | |
| JP4498531B2 (ja) | ストリーミング映像再生方法、ストリーミング映像再生装置、及びストリーミング映像再生プログラムを記録した記録媒体 | |
| JP4469884B2 (ja) | メタデータ共有システム | |
| JP2007295607A (ja) | メタデータ共有システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040120 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060404 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060605 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070227 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070426 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070529 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070604 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 3968260 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100608 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110608 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120608 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130608 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140608 Year of fee payment: 7 |
|
| S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| EXPY | Cancellation because of completion of term |