[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2004194198A - Broadcasting system, reception terminal, method for collecting user information, and program - Google Patents

Broadcasting system, reception terminal, method for collecting user information, and program Download PDF

Info

Publication number
JP2004194198A
JP2004194198A JP2002362385A JP2002362385A JP2004194198A JP 2004194198 A JP2004194198 A JP 2004194198A JP 2002362385 A JP2002362385 A JP 2002362385A JP 2002362385 A JP2002362385 A JP 2002362385A JP 2004194198 A JP2004194198 A JP 2004194198A
Authority
JP
Japan
Prior art keywords
search
information
search template
image information
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002362385A
Other languages
Japanese (ja)
Other versions
JP4063065B2 (en
Inventor
Toshinori Nagahashi
敏則 長橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2002362385A priority Critical patent/JP4063065B2/en
Publication of JP2004194198A publication Critical patent/JP2004194198A/en
Application granted granted Critical
Publication of JP4063065B2 publication Critical patent/JP4063065B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a broadcasting system and a reception terminal by which the broadcasting system supplies a retrieval template for retrieving image information to a user's reception terminal, the convenience of image reproduction is improved in the reception terminal, and user information can be collected. <P>SOLUTION: This broadcasting system is provided with a retrieval template storing means for storing a retrieval template to be used to retrieve image information to be distributed, a retrieval template distributing means for distributing the retrieval template to the user's receiving terminal, a retrieval template use history information receiving means for receiving use history information of the retrieval template from the user's receiving terminal, a retrieval template use history information storing means for storing the use history information of the retrieval template received from the user's receiving terminal, and an analyzing means for analyzing the stored template use history information. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、TV放送やインターネット放送などの放送システム側から、配信する画像情報の検索用の画像(検索テンプレート)をユーザ(視聴者)の受信端末に供給することにより、ユーザが画像情報を再生する際の利便性を向上させるとともに、低コストでユーザ情報を収集(解析)することができる、放送システム、受信端末、ユーザ情報の収集方法、及びプログラムに関するものである。
【0002】
【従来の技術】
従来のTVやインターネット放送などにおいて、放送される内容について、どのようなユーザ層が、どの場面やタレントに注目しているか、特に、ユーザが能動性を持って何を視聴しているかを、的確に把握することが難しかった。また、記録型DVDやHDDなどの大量の蓄積型記録装置を使用している場合、放送日時と実際の視聴日時は関係がなくなり、従来の視聴率は意味を持たないことになる。また、蓄積型記録装置を用いて再生して、目当てのシーン(ハイライトシーンなど)や番組を探している場合には、再生しているシーンや番組は視聴する対象とは限らない場合もある。
【0003】
一方、ユーザは、大量の動画を録画した場合、的確に興味を持っているシーンを探し出す方法がなく、EPG(Electric Program Guide)のような番組情報を利用するか、早送りするなどの方法しかなかった。このように、DVDやHDDなどに大量に録画した内容から、必要な部分(自分が見たい場面やシーンなど)を探し出すことは、かなり手間のかかる作業となっていた。
【0004】
このような問題を解決するための従来例として、動画像から生成したインデックス画像を視聴者が選択して、この選択操作により番組をダウンロードし、記録した番組を再生するものがある。すなわち、視聴者のモニタは、インデックス画像の選択、番組のダウンロードによって行うものがある(例えば、特許文献1)。
【0005】
【特許文献1】
特開平10−13774号公報
【0006】
【発明が解決しようとする課題】
しかしながら、特許文献1の図1で示すCATVホームターミナル装置は、予め動画から作成された固定的なインデックス画像を用いて、該インデック画像の元動画像をダウンロードするものであり、インデックとする画像に自由度がない。また、ダウンロード時間と再生時間が同期している点、さらに、インデック画像の選択情報を統計的に分析する手段が開示されていない点で問題がある。
【0007】
本発明はこのような問題を解決するためになされたもので、その目的は、TV放送やインターネット放送などの放送システム側から、配信する画像情報の検索用の画像(検索テンプレート)をユーザ(視聴者)の受信端末に供給することにより、ユーザの画像情報の再生の利便性を向上させるとともに、低コストでユーザ情報を収集(解析)することができる、放送システム、受信端末、ユーザ情報の収集方法、及びプログラムを提供することにある。
【0008】
【課題を解決するための手段】
本発明は上記課題を解決するためになされたものであり、本発明の放送システムは、ユーザの受信端末に画像情報を配信する放送システムであって、配信する画像情報の検索に使用する検索テンプレートを記憶するための検索テンプレート記憶手段と、前記検索テンプレートをユーザの受信端末に配信する検索テンプレート配信手段と、前記検索テンプレートの使用履歴情報を、ユーザの受信端末から受信するための検索テンプレート使用履歴情報受信手段と、前記ユーザの受信端末から受信した検索テンプレートの使用履歴情報を蓄積するための検索テンプレート使用履歴情報蓄積手段と、前記蓄積されたテンプレートの使用履歴情報を解析するための解析手段とを具備することを特徴とする。
このような構成であれば、本発明の放送システムは、前記検索テンプレート記憶手段により、受信端末に配信する画像情報(動画または静止画)の検索に使用するための検索テンプレートを予め記憶しておく。そして、前記検索テンプレート配信手段により、検索テンプレートをユーザの受信端末に配信する。また、前記検索テンプレート使用履歴情報受信手段により、受信端末における検索テンプレートの使用履歴情報を、ユーザの受信端末から受信する。また、前記検索テンプレート使用履歴情報蓄積手段により、受信端末から受信した検索テンプレートの使用履歴情報を蓄積する。そして、前記解析手段により、蓄積されたテンプレートの使用履歴情報を解析する。
これにより、放送システム側では、ユーザの検索テンプレートの使用履歴情報を収集(解析)でき、動画などの特定のシーンやタレントを探し出すため、ユーザが能動的に興味を持って検索した情報を収集することができる。また、ユーザの検索テンプレートの使用履歴情報とユーザの個人情報との関係を調べることにより、年齢、性別、地域などのユーザ属性と画像情報(動画または静止画)の利用状況との関連を分析することができる。また、情報収集コストも低コストですむ。
【0009】
また、本発明の受信端末は、放送システムから画像情報の配信を受けて、再生する受信端末であって、前記画像情報及び画像情報の検索に使用する検索テンプレートの情報を放送システムから受信して記憶するための画像情報保存手段と、前記検索テンプレートを用いて、前記画像情報を検索するための画像情報検索手段と、前記画像情報の検索に使用した検索テンプレートの使用履歴情報を記録するための検索履歴情報記録手段と、前記画像情報の検索に使用した検索テンプレートの使用履歴の情報と、ユーザ識別情報とを、前記放送システムに送信するための検索履歴情報送信手段とを具備することを特徴とする。
このような構成であれば、本発明の受信端末は、前記画像情報保存手段により、放送システムから配信される画像情報と該画像情報を検索するための検索テンプレートを受信して保存する。そして、前記画像検索手段により、検索テンプレートを用いて、受信した画像情報を検索する。また、前記検索履歴情報記録手段により、画像情報の検索に使用した検索テンプレートの使用履歴情報を記録する。そして、前記検索履歴情報送信手段により、画像情報の検索に使用した検索テンプレートの使用履歴情報と、ユーザの識別情報とを、前記放送システムに送信する。
これにより、ユーザは、録画した動画などの内容から、検索テンプレートを使って、見たい場面、内容を容易に探し出すことができる。また、放送システム側では、ユーザの検索テンプレートの使用履歴情報を収集(解析)し、動画などの特定のシーンやタレントを探し出すため、ユーザが能動的に興味を持って検索した情報を収集することができる。
【0010】
また、本発明の受信端末は、前記検索テンプレートにより検索した画像情報中のシーンより、該画像情報を再生するための画像情報表示手段を具備することを特徴とする。
このような構成であれば、前記画像情報表示手段により、検索テンプレートを使用して、動画のシーンを検索し、検索したシーンから後の動画を再生することができる。これにより、ユーザが動画中に興味を持つシーンを選択し、そこから動画を再生することができる。
【0011】
また、本発明の受信端末は、前記検索テンプレートを、画像情報を配信する放送システム側からダウンロードする検索テンプレートダウンロード手段をさらに具備することを特徴とする。
このような構成であれば、放送システム側から検索テンプレートの配信を受ける他、受信端末から検索テンプレートをダウンロードすることができる。
これにより、ユーザは、興味のある動画についての検索テンプレートを、容易に入手することができる。
【0012】
また、本発明のユーザ情報の収集方法は、ユーザの受信端末に画像情報を配信する放送システムにおけるユーザ情報の収集方法であって、配信する画像情報の検索に使用する検索テンプレートを記憶するための検索テンプレート記憶手順と、前記検索テンプレートをユーザの受信端末に配信する検索テンプレート配信手順と、前記検索テンプレートの使用履歴情報を、ユーザの受信端末から受信するための検索テンプレート使用履歴情報受信手順と、前記ユーザの受信端末から受信した検索テンプレートの使用履歴情報を蓄積するための検索テンプレート使用履歴情報蓄積手順と、前記蓄積されたテンプレートの使用履歴情報を解析するための解析手順とを含むことを特徴とする
このような手順を使用すれば、本発明の放送システムは、前記検索テンプレート記憶手順により、受信端末に配信する画像情報(動画及び静止画)の検索に使用するための検索テンプレートを予め記憶しておく。そして、前記検索テンプレート配信手順により、該検索テンプレートをユーザの受信端末に配信する。また、前記検索テンプレート使用履歴情報受信手順により、受信端末における検索テンプレートの使用履歴情報を、ユーザの受信端末から受信する。また、前記検索テンプレート使用履歴情報蓄積手順により、受信端末から受信した検索テンプレートの使用履歴情報を蓄積する。そして、前記解析手順により、蓄積されたテンプレートの使用履歴情報を解析する。
これにより、ユーザの検索テンプレートの使用履歴情報を収集(解析)し、動画などの特定のシーンやタレントを探し出すため、ユーザが能動的に興味を持って検索した情報を収集することができる。また、ユーザの検索テンプレートの使用履歴情報とユーザの個人情報との関係を調べることにより、年齢、性別、地域などのユーザ属性と画像情報(動画、静止画)の利用状況との関連を分析することができる。また、情報収集コストも低コストですむ。
【0013】
また、本発明のユーザ情報の収集方法は、放送システムから画像情報の配信を受けて、再生する受信端末におけるユーザ情報の収集方法であって、前記画像情報及び画像情報の検索に使用する検索テンプレートの情報を放送システムから受信して記憶するための画像情報保存手順と、前記検索テンプレートを用いて、前記画像情報を検索するための画像情報検索手順と、前記画像情報の検索に使用した検索テンプレートの使用履歴情報を記録するための検索履歴情報記録手順と、前記画像情報の検索に使用した検索テンプレートの使用履歴の情報と、ユーザ識別情報とを、前記放送システムに送信するための検索履歴情報送信手順とを含むことを特徴とする。
このような手順を使用すれば、本発明の受信端末は、前記画像情報保存手順により、放送システムから配信される画像情報と該画像情報を検索するための検索テンプレートを受信して保存する。そして、前記画像検索手順により、検索テンプレートを用いて、受信した画像情報を検索する。また、前記検索履歴情報記録手順により、画像情報の検索に使用した検索テンプレートの使用履歴情報を記録する。そして、前記検索履歴情報送信手順により、画像情報の検索に使用した検索テンプレートの使用履歴情報と、ユーザの識別情報とを、前記放送システムに送信する。
これにより、ユーザは、録画した動画などの内容から、検索テンプレートを使って、見たい場面、内容を容易に探し出すことができる。また、放送システム側では、ユーザの検索テンプレートの使用履歴情報を収集(解析)し、動画などの特定のシーンやタレントを探し出すため、ユーザが能動的に興味を持って検索した情報を収集することができる。
【0014】
また、本発明のコンピュータプログラムは、ユーザの受信端末に画像情報を配信する放送システム内のコンピュータに、配信する画像情報の検索に使用する検索テンプレートを記憶するための検索テンプレート記憶手順と、前記検索テンプレートをユーザの受信端末に配信する検索テンプレート配信手順と、前記検索テンプレートの使用履歴情報を、ユーザの受信端末から受信するための検索テンプレート使用履歴情報受信手順と、前記ユーザの受信端末から受信した検索テンプレートの使用履歴情報を蓄積するための検索テンプレート使用履歴情報蓄積手順と、前記蓄積されたテンプレートの使用履歴情報を解析するための解析手順とを実行させるためのプログラムである。
【0015】
また、本発明のコンピュータプログラムは、放送システムから画像情報の配信を受けて、再生する受信端末内のコンピュータに、前記画像情報及び画像情報の検索に使用する検索テンプレートの情報を放送システムから受信して記憶するための画像情報保存手順と、前記検索テンプレートを用いて、前記画像情報を検索するための画像情報検索手順と、前記画像情報の検索に使用した検索テンプレートの使用履歴情報を記録するための検索履歴情報記録手順と、前記画像情報の検索に使用した検索テンプレートの使用履歴の情報と、ユーザ識別情報とを、前記放送システムに送信するための検索履歴情報送信手順とを実行させるためのプログラムである。
【0016】
【発明の実施の形態】
次に本発明の実施の形態例について図面を参照して説明する。
【0017】
図1は、本発明による放送システムの全体構成を説明するための図である。
図1において、放送システム100は、電波塔103によりTV放送を行う放送システム(その他、CATV(ケーブルTVシステム)や衛星TVも含まれる)か、または、インターネット等の通信ネットワークを介して、サーバ101によりインターネット放送などを行う放送システムである。また、受信端末200は、情報処理機能と通信機能を備えたTV受像機や、PC(パーソナルコンピュータ)や、携帯端末などである。また、放送システム100内にはデータベース102が備えられ、データベース102には、検索テンプレート106とユーザ情報107が記録されている。検索テンプレート106は、画像情報の検索に使用するためのものであり、ユーザ情報107は、個人に関する属性情報(住所、年齢、氏名、性別等)や、ユーザの識別情報などである。
【0018】
そして、放送システム100と受信端末200との間では、以下のようして情報の送受信が行われる。
(1)放送システム100から受信端末200に、動画や静止画の画像情報105が送信される(矢付線a)。
(2)また、放送システム100から受信端末200に、検索テンプレート106が送信される(矢付線b)。なお、検索テンプレート106は、画像情報105中に静止画として含まれて配信される場合もある。
(3)受信端末200では、放送システム100から受信した画像情報に対して、ユーザが選択した検索テンプレート106により検索を行う。そして、気に入った動画などがあれば再生する。
(4)受信端末200で使用された検索テンプレートの使用履歴の情報108と、ユーザ識別情報109とが、放送システム100に送信される(矢付線c)。
(5)放送システム100では、受信端末200から受信した検索テンプレートの使用履歴情報をデータベース102に蓄積するとともに、利用者のユーザ情報107を参照して、配信した画像情報(動画または静止画)の利用状況を解析する。
【0019】
また、図2は、本発明の放送システム及び受信端末の備える手段の例を示す図であり、本発明に直接関係するものについて示したものである。
放送システム100には、以下に示す手段、およびデータベースが設けられる。
・通信手段111は、受信端末200と、インターネットなどの通信網を介して通信を行うための手段である。
・放送手段112は、画像情報(動画または静止画)を不特定多数の受信端末200に、TV放送や、CATV放送、衛星TV放送などで放送(配信)するための手段である。なお、画像情報(動画または静止画)の配信にインターネットなどの通信ネットワークと通信を行う通信手段111を用いる場合は、放送手段112は必ずしも必要としない場合もある。
・検索テンプレート配信手段113は、検索テンプレートを受信端末200に配信するための手段である。
・検索ログ受信手段114は、受信端末200から検索テンプレートの使用履歴情報(検索ログ)を、通信手段111を介して、受信するための手段(検索テンプレート使用履歴情報受信手段)である。
・検索ログ蓄積手段115は、受信端末200から受信した検索ログ(検索テンプレートの使用履歴情報)を、検索テンプレートデータベース120に記録するための手段(検索テンプレート使用履歴情報蓄積手段)である。
・検索ログ解析手段116は、検索テンプレートデータベース120に蓄積された検索テンプレートの使用履歴情報(検索ログ)を、ユーザ情報データベース130を参照して、解析するための解析手段である。
・画像情報配信手段117は、画像情報(動画または静止画)を受信端末200に配信するため手段である。
【0020】
・検索テンプレートデータベース(検索テンプレート記憶手段)120は、検索テンプレートの情報、検索テンプレートの使用状況に関する履歴情報(検索ログ)、及び検索ログの解析情報を記録するためのデータベースである。
・ユーザ情報データベース130は、個人情報(住所、年齢、氏名、性別等)を格納するためのデータベースである。また、ユーザ識別情報も記録される。
・画像情報データベース140は、受信端末200に配信する画像情報を保存するためのデータベースである。
【0021】
なお、検索テンプレートについては、放送(配信)する画像情報中の動画などから静止画を切り出して使用することができる。この場合、動画中のシーンの変化の大きい静止画を選択して検索テンプレートとすることができる。また、検索テンプレートとしては、複数の画像情報に共通な事項(例えば、タレントの顔など)を使用することもできる。
【0022】
また、受信端末200には、以下の手段が設けられる。
・通信手段201は、放送システム100と、インターネットなどの通信ネットワークを介して通信を行うための手段である。
・放送受信手段202は、TV放送や、CATV放送、衛星TV放送などで、放送システム100から放送される画像情報(動画または静止画)を受信するための手段である。なお、画像情報(動画または静止画)の配信にインターネットなどの通信ネットワークとの通信手段201を用いる場合、放送受信手段202は必ずしも必要としない場合もある。
・ユーザ情報入力手段203は、受信端末200を使用するユーザの個人情報を入力するための手段である。個人情報には、住所、年齢、氏名、性別などの他に、ユーザ識別情報が含まれる。
・検索テンプレートダウンロード手段204は、放送システム100から画像検索に使用する検索テンプレートをダウンロードするための手段である。
【0023】
・画像情報保存手段205は、動画記録手段206と静止画記録手段207から構成され、動画記録手段206は、通信手段201または放送受信手段202により受信した画像情報中の動画を記録するための手段である。また、静止画記録手段207は、通信手段201または放送受信手段202により受信した検索テンプレートなどの静止画を記録するための手段である。
・画像情報表示手段208は、動画表示手段209と静止画表示手段210とで構成される。動画表示手段209は、検索したシーンから動画を再生表示するための手段であり、静止画表示手段210は、検索テンプレートなどの静止画を表示するための手段である。
・静止画生成手段211は、動画のフレームを切り出し、静止画を表示するための手段である。
・画像マッチング手段212は、検索テンプレートの画面が含まれている動画のフレーム(静止画)と検索テンプレートを比較して検索するための手段(画像検索手段)である。フレーム(静止画)と検索テンプレートが一致するかどうかを検索する方式は種々提案されているが、ここでは式(1)を用い、式(1)の値が閾値以下になれば、画像が一致したと見なす。
【数1】

Figure 2004194198
ここで、
n:検索テンプレートの画素数
Xi:切り取った静止画の、画素iの輝度
tm,i:検索テンプレートの、画素iにおける輝度
【0024】
・検索ログ記録手段213は、検索テンプレートにより検索処理した内容を記録するための手段であり、検索テンプレートの使用履歴情報(検索ログ)を記録するための手段(検索履歴情報記録手段)である。
・検索ログ送信手段214は、画像情報の検索に使用した検索テンプレートの使用履歴情報(検索ログ)と、ユーザ識別情報を、放送システム100に送信するための手段(検索履歴情報送信手段)である。
なお、記憶部230には、放送システム100から受信した画像情報、検索テンプレート、ユーザによる検索テンプレートの使用履歴情報(検索ログ)、ユーザ識別情報などが記録される。
【0025】
また、図3は、画像情報(動画または静止画)の検索に使用する画像である検索テンプレート11の例を示す図であり、人物12の例である。検索テンプレート11は、放送システム100内の検索テンプレートデータベース120に記憶されており、放送システム100側から受信端末200に配信するか、または受信端末200側からダウンロードする。
【0026】
また、図4は、画像情報(動画または静止画)検索に使用する画像である検索テンプレート13の例を示す図であり、ハンドバッグ14の例である。検索テンプレート13は、放送システム100内の検索テンプレートデータベース120に記憶されており、放送システム100側から受信端末200に配信するか、または受信端末200側からダウンロードする。
【0027】
また、図5は、受信端末200における検索ログ(検索テンプレートの使用履歴情報)の例を示す図であり、ユーザID(ユーザ識別記号)と、ユーザが使用した検索テンプレートの使用履歴情報が記録される。また、この検索ログは、検索ログ送信手段214及び通信手段201により、放送システム100に送信される。
この検索ログにより、ユーザ1(ユーザID「01」)は、タレントAに興味があり、かつバッグAに興味があったことが分かる。このような検索ログが多数あれば、放送システム100側では、タレントAとバッグAとの強い相関を発見することができる。即ち、タレントAの支持層はバッグAのデザインやブランドを支持している可能性が高いと推測される。
【0028】
また、図6は、受信端末200における検索ログの他の例を示す図である。この検索ログにより、ユーザ2(ユーザID「02」)は、バッグや洋服などの買い物に大きな興味があることが分かり、TVショッピングやインターネットショッピングの潜在的あるいは顕在化したユーザであることが推測できる。
従って、放送システム100は、ユーザ2に対しては、TVショッピングやインターネットショッピングに関連する検索テンプレートを選択的に送信すれば、売り上げの増大につながる可能性が高いことが容易に推測できる。
【0029】
また、図7は、放送システム100内のユーザ情報データベース130に記録されるレコード例を示す図であり、予め登録したユーザ1〜ユーザnの、氏名や年齢、性別、住所などの個人情報が記録される。
【0030】
また、図8は、放送システム100内の検索テンプレートデータベース120のレコードの例を示す図であり、タレントAについての検索テンプレートの使用状況を、性別、年齢層別に集計したものである。また、図9も、同様に、放送システム100内の検索テンプレートデータベース120のレコードの例を示す図であり、タレントBについての検索テンプレートの使用状況を、性別、年齢層別に集計したものである。
これらのレコードの内容から、ユーザ層に対するタレントAの人気度や、ユーザ層と他の検索テンプレートの関連を解析することができる。また、タレントBのレコードを解析すると、タレントAと同じユーザ層から支持されていることが分かる。
従って、前述したユーザ1(図5の検索ログを参照)に対しては、タレントAと共にタレントBの検索テンプレートを送信することにより、ユーザの利便性を高めることができ、かつ実際の視聴率の向上につながることが予想される。
【0031】
また、図10は、本発明による受信端末200の処理手順を示すフローチャートである。受信端末200における処理は以下の手順により行われる。
(1)ステップS1:ユーザ情報入力手段203によりユーザの個人情報を放送システム100側に登録する。
(2)ステップS2:検索テンプレートダウンロード手段204により、放送システム100から検索テンプレートをダウンロードする。また、検索テンプレートを、静止画記録手段207により、受信端末200内に記憶する。
(3)ステップS3:静止画表示手段210により検索テンプレートをユーザに表示する。
(4)ステップS4:動画記録手段206により放送システム100からの放送内容を記録する。
(5)ステップS5:ユーザが必要な動画のシーンを探すために、検索テンプレートを選択する。
(6)ステップS6:検索内容を検索ログ記録手段213により、検索ログとして記録する。
(7)ステップS7:静止画生成手段211により、動画から静止画を切り出す。
(8)ステップS8:画像マッチング手段212により、検索テンプレートが含まれるシーンを検索する。
(9)ステップS9:検索ログ送信手段214及び通信手段201により、検索ログを放送システム100に送信する。
(10)ステップS10:動画表示手段209により検索したシーンから動画を再生する。
なお、図10に示した処理手順では、放送システム100から受信端末200に、プル型での検索テンプレートの配信を想定しているが、もちろんプッシュ型でもよいことは言うまでもない。
【0032】
また、図11は、本発明による放送システム100の処理手順を示すフローチャートである。放送システム100における処理は以下のようにして行われる。
(1)ステップS21:通信手段111および検索ログ受信手段114により、受信端末200から検索ログを受信する。また、検索ログ蓄積手段115により、受信した検索ログを検索テンプレートデータベース120に記録する。
(2)ステップS22:検索ログ解析手段116により、受信した検索ログを解析し、ユーザ情報データベース130を参照し、当該検索ログに関連づけられたのユーザ情報を抽出する。
(3)ステップS23:検索ログの解析結果に応じて、検索テンプレートデータベース120の内容を更新する。
(4)ステップS24:ユーザ情報と検索テンプレートデータベース120に記録された検索ログから、ユーザの視聴性向を解析し、視聴性向に応じた検索テンプレートを送信する。
【0033】
また、図12は、ユーザ2(図6の検索ログを参照)が検索テンプレートをダウンロードするための操作画面の例を示している。既に例示したように、ユーザ2は買物性向が高いと考えられるので、ユーザ2が認識しやすいように、放送内容に連動したバッグや洋服をならべて配置し、ダウンロードさせることも可能である。
【0034】
また、図13は、放送システムのサーバ101及び受信端末200の構成例を示すブロック図であり、本発明に直接関係する部分についてのみ示したものである。図13において、放送システムのサーバ101には、放送システムのサーバ101と通信ネットワーク1とを接続する通信用インタフェース141、放送システムのサーバ101の全体を統括制御する制御部142、検索テンプレートデータベース120、ユーザ情報データベース130、画像情報データベース140、処理プログラム部150が設けられる。また、放送システムから画像情報(動画または静止画)をTV放送などで送信する放送設備143が設けられる。なお、放送設備143は、画像情報の配信にインターネットなどの通信ネットワーク1を使用する場合には、必ずしも必要としない場合もある。
【0035】
また、処理プログラム部150は、以下の処理部で構成される。
・通信処理部151は、受信端末200と、インターネットなどの通信ネットワーク1を介して通信を行うための処理部である。
・放送処理部152は、画像情報(動画または静止画)を不特定多数の受信端末200に、TV放送や、CATV放送や、衛星TV放送などで放送(配信)するための処理部である。なお、画像情報(動画または静止画)の配信にインターネットなどの通信ネットワーク1と通信を行う通信処理部151を用いる場合は、放送処理部152は必ずしも必要としない場合もある。
・画像情報配信処理部153は、動画や静止画などの画像情報を、受信端末200に送信するための処理部である。
・検索テンプレート配信処理部154は、検索テンプレートを受信端末200に配信するための処理部である。
・検索ログ受信処理部155は、受信端末200から検索テンプレートの使用履歴情報(検索ログ)を受信するための処理部である。
・検索ログ蓄積処理部156は、受信端末200から受信した検索ログを、検索テンプレートデータベース120に記録するための処理部である。
・検索ログ解析処理部157は、検索テンプレートデータベース120に蓄積されたテンプレートの使用履歴情報(検索ログ)を、ユーザ情報データベース130を参照して、解析するための解析処理部である。
・検索テンプレートデータベース120は、検索テンプレートの情報、検索テンプレートの使用状況に関する履歴情報(検索ログ)、及び検索ログの解析情報を記録するためのデータベースである。
・ユーザ情報データベース130は、個人情報(住所、年齢、氏名、性別等)を格納するためのデータベースである。また、ユーザ識別情報も記録される。
・画像情報データベース140は、受信端末200に放送(配信)する動画や静止画などの画像情報を保存するためのデータベースである。
【0036】
また、受信端末200には、受信端末200と通信ネットワーク1とを接続する通信用インタフェース220、放送システムのサーバ101から放送される画像情報を受信する放送受信部221、受信端末200の全体を統括制御する制御部222、画像情報などを記憶する記憶部230、処理プログラム部240が設けられる。
【0037】
また、処理プログラム部240は、以下の処理部で構成される。
・通信処理部241は、放送システムのサーバ101と、インターネットなどの通信ネットワーク1を介して通信を行うための処理部である。
・放送受信処理部242は、放送システムから放送された画像情報(動画または静止画)を受信するための処理部である。なお、画像情報(動画または静止画)の受信に、通信用インタフェース220と通信処理部241を用いる場合は、放送受信部221及び放送受信処理部242は必ずしも必要としない場合もある。
・ユーザ情報入力処理部243は、受信端末200を使用するユーザの個人情報を入力するための処理部である。個人情報には、住所、年齢、氏名、性別などの他に、ユーザ識別情報も含まれる。
・検索テンプレートダウンロード処理部244は、放送システムのサーバ101から検索テンプレートをダウンロードするための処理部である。なお、ダウンロードされた検索テンプレートは、記憶部230に保存される。
・画像情報保存処理部245は、放送システムから送信される画像情報(動画または静止画)を記憶部230に記録するための処理部である。
【0038】
・動画表示処理部246は、検索したシーンから動画を再生表示するための処理部である。
・静止画表示処理部247は、検索テンプレートなどの静止画を表示するための処理部である。
・静止画生成処理部248は、動画のフレームを切り出し、静止画を表示するための処理部である。
・画像マッチング処理部249は、検索テンプレートの画面が含まれている動画のフレーム(静止画)と、検索テンプレートを比較して検索するための処理部である。
・検索ログ記録処理部250は、検索テンプレートにより検索処理した内容を記録するための処理部であり、検索テンプレートの使用履歴情報(検索ログ)を記録するための処理部である。
・検索ログ送信処理部251は、画像情報の検索に使用した検索テンプレートの使用履歴情報(検索ログ)と、ユーザ識別情報とを、放送システムのサーバ101に送信するための処理部である。
なお、記憶部230には、画像情報、検索テンプレート、検索ログ、ユーザ識別情報などが記録される。
【0039】
なお、放送システムのサーバ101内の処理プログラム部150及び受信端末200内の処理プログラム部240は専用のハードウエアにより実現されるものであってもよく、またこの処理プログラム部はメモリおよびCPU(中央処理装置)等の汎用の情報処理装置により構成され、この処理部の機能を実現するためのプログラム(図示せず)をメモリにロードして実行することによりその機能を実現させるものであってもよい。なお、この放送システムのサーバ101及び受信端末200には、周辺機器として入力装置、表示装置等(いずれも図示せず)が接続され又は内蔵されているものとする。ここで、入力装置としては、キーボード、マウス等の入力デバイスのことをいう。表示装置とは、CRT(Cathode Ray Tube)や液晶表示装置等のことをいう。
【0040】
また、図13に示す放送システムのサーバ101及び受信端末200の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより本発明の放送システムのサーバ101及び受信端末200に必要な処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、WWWシステムを利用している場合であれば、ホームページ提供環境(あるいは表示環境)を含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可般媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの(伝送媒体ないしは伝送波)、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時間プログラムを保持しているものも含むものとする。
また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。
【0041】
以上、本発明の実施の形態について説明したが、本発明の放送システム100及び受信端末200は、上述の図示例にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。
【図面の簡単な説明】
【図1】放送システムの全体構成を説明するための図。
【図2】放送システム及び受信端末の備える手段の例を示す図。
【図3】検索テンプレートの例を示す図。
【図4】検索テンプレートの他の例を示す図。
【図5】受信端末における検索ログの例を示す図。
【図6】受信端末における検索ログの他の例を示す図。
【図7】ユーザ情報データベースに記録されるレコードの例を示す図。
【図8】検索テンプレートデータベースのレコードの例を示す図。
【図9】検索テンプレートデータベースのレコードの他の例を示す図。
【図10】受信端末の処理手順を示す図。
【図11】放送システムの処理手順を示す図。
【図12】検索テンプレートをダウンロードする操作画面の例を示す図。
【図13】放送システム及び受信端末の構成例を示すブロック図。
【符号の説明】
100 放送システム、105 画像情報、106 検索テンプレート
107 ユーザ情報、111 通信手段、112 放送手段
113 検索テンプレート配信手段
114 検索ログ受信手段(検索テンプレート使用履歴情報受信手段)
115 検索ログ蓄積手段(検索テンプレート使用履歴情報蓄積手段)
116 検索ログ解析手段(解析手段)、117 画像情報配信手段
120 検索テンプレートデータベース(検索テンプレート記憶手段)
130 ユーザ情報データベース、140 画像情報データベース
200 受信端末、201 通信手段、202 放送受信手段
203 ユーザ情報入力手段、204 検索テンプレートダウンロード手段
205 画像情報保存手段、206 動画記録手段、207 静止画記録手段
208 画像情報表示手段、209 動画表示手段、210 静止画表示手段
211 静止画生成手段、212 画像マッチング手段(画像情報検索手段)
213 検索ログ記録手段(検索履歴情報記録手段)
214 検索ログ送信手段(検索履歴情報送信手段)[0001]
TECHNICAL FIELD OF THE INVENTION
According to the present invention, a user can reproduce image information by supplying an image (search template) for searching image information to be distributed to a receiving terminal of the user (viewer) from a broadcast system such as a TV broadcast or an Internet broadcast. TECHNICAL FIELD The present invention relates to a broadcasting system, a receiving terminal, a method for collecting user information, and a program capable of improving user-friendliness and collecting (analyzing) user information at low cost.
[0002]
[Prior art]
In conventional TV and Internet broadcasting, etc., it is necessary to accurately determine what kind of user groups are watching what scenes and talents, especially what the user is actively watching. It was difficult to grasp. In addition, when a large amount of storage type recording device such as a recordable DVD or HDD is used, there is no relation between the broadcast date and time and the actual viewing date and time, and the conventional audience rating has no meaning. In addition, when a target scene (highlight scene, etc.) or a program is searched for by playing back using the storage type recording device, the scene or program being played back may not always be a target to be viewed. .
[0003]
On the other hand, when a large amount of moving images are recorded, the user has no way to accurately find a scene of interest, but only to use program information such as an EPG (Electric Program Guide) or to fast-forward. Was. As described above, searching for a necessary part (a scene or a scene that one wants to see) from a large amount of content recorded on a DVD or an HDD has been a time-consuming operation.
[0004]
As a conventional example for solving such a problem, there is a conventional example in which a viewer selects an index image generated from a moving image, downloads a program by this selection operation, and reproduces the recorded program. That is, there is a monitor for viewers by selecting an index image and downloading a program (for example, Patent Document 1).
[0005]
[Patent Document 1]
JP-A-10-13774
[0006]
[Problems to be solved by the invention]
However, the CATV home terminal device shown in FIG. 1 of Patent Document 1 downloads the original moving image of the index image using a fixed index image created in advance from a moving image. There is no freedom. In addition, there is a problem in that the download time and the reproduction time are synchronized, and further, a means for statistically analyzing index image selection information is not disclosed.
[0007]
The present invention has been made to solve such a problem, and an object of the present invention is to provide an image (search template) for searching image information to be distributed (viewing template) from a broadcasting system such as a TV broadcast or an Internet broadcast. Broadcasting system, receiving terminal, and collection of user information, which can improve the convenience of reproducing the image information of the user and supply (analyze) the user information at low cost by supplying the information to the receiving terminal of the user It is to provide a method and a program.
[0008]
[Means for Solving the Problems]
The present invention has been made in order to solve the above problems, and a broadcast system of the present invention is a broadcast system that distributes image information to a user's receiving terminal, wherein a search template used for searching for the image information to be distributed is provided. Search template storage means for storing the search template, a search template distribution means for distributing the search template to the user's receiving terminal, and a search template usage history for receiving the usage history information of the search template from the user's receiving terminal Information receiving means, search template usage history information storage means for storing usage history information of the search template received from the user's receiving terminal, and analysis means for analyzing the stored usage history information of the template; It is characterized by having.
With such a configuration, in the broadcast system of the present invention, the search template storage means stores in advance a search template for use in searching for image information (moving image or still image) to be distributed to the receiving terminal. . Then, the search template is delivered to the user's receiving terminal by the search template delivery means. The search template use history information receiving means receives search template use history information at the receiving terminal from the user's receiving terminal. The search template use history information storage means stores use history information of the search template received from the receiving terminal. Then, the analysis means analyzes the accumulated use history information of the template.
As a result, the broadcast system can collect (analyze) the use history information of the user's search template, and collect information that the user has actively searched for in order to search for a specific scene or talent such as a moving image. be able to. In addition, by examining the relationship between the usage history information of the user's search template and the user's personal information, the relationship between the user attributes such as age, gender, and region and the usage status of the image information (moving image or still image) is analyzed. be able to. Also, the cost of collecting information is low.
[0009]
Further, the receiving terminal of the present invention is a receiving terminal that receives and distributes image information from a broadcasting system and receives the image information and information of a search template used for searching for the image information from the broadcasting system. Image information storage means for storing, image information search means for searching for the image information using the search template, and use history information for the search template used for searching the image information for recording Search history information recording means, and search history information transmitting means for transmitting information on the use history of the search template used for the search of the image information and user identification information to the broadcasting system. And
With such a configuration, the receiving terminal of the present invention receives and stores the image information distributed from the broadcasting system and the search template for searching for the image information by the image information storage unit. Then, the received image information is searched by the image search means using the search template. Further, the use history information of the search template used for the search of the image information is recorded by the search history information recording means. Then, the search history information transmitting means transmits the use history information of the search template used for searching the image information and the identification information of the user to the broadcast system.
As a result, the user can easily find a desired scene and contents from the contents such as the recorded moving image using the search template. In addition, the broadcast system collects (analyzes) the usage history information of the user's search template and searches for specific scenes and talents such as videos, so that the user actively collects the information searched with interest. Can be.
[0010]
Further, the receiving terminal according to the present invention includes an image information display unit for reproducing the image information from a scene in the image information searched by the search template.
With such a configuration, the image information display unit can search for a moving image scene using a search template, and reproduce a moving image subsequent to the searched scene. As a result, the user can select a scene of interest in the moving image and reproduce the moving image therefrom.
[0011]
Further, the receiving terminal of the present invention is further characterized by further comprising a search template download unit for downloading the search template from a broadcast system that distributes image information.
With such a configuration, in addition to receiving the delivery of the search template from the broadcast system, the search template can be downloaded from the receiving terminal.
As a result, the user can easily obtain a search template for an interesting moving image.
[0012]
Further, a method for collecting user information according to the present invention is a method for collecting user information in a broadcasting system for distributing image information to a user's receiving terminal, the method for storing a search template used for searching for image information to be distributed. A search template storage procedure, a search template delivery procedure for delivering the search template to a user's receiving terminal, a search template use history information receiving procedure for receiving the search template usage history information from the user's receiving terminal, A search template use history information storing procedure for storing use history information of the search template received from the receiving terminal of the user; and an analysis procedure for analyzing the use history information of the stored template. To be
By using such a procedure, the broadcasting system of the present invention stores in advance the search template to be used for searching for image information (moving images and still images) to be distributed to the receiving terminal by the search template storing procedure. deep. Then, according to the search template delivery procedure, the search template is delivered to the user's receiving terminal. In addition, the search template use history information receiving procedure receives the search template use history information at the receiving terminal from the user's receiving terminal. Further, according to the search template use history information accumulating procedure, use history information of the search template received from the receiving terminal is accumulated. Then, the stored use history information of the template is analyzed by the analysis procedure.
As a result, the use history information of the user's search template is collected (analyzed), and a specific scene or talent such as a moving image is searched for, so that the user can actively collect information searched with interest. Also, by examining the relationship between the usage history information of the user's search template and the user's personal information, the relationship between the user attributes such as age, gender, region, and the like, and the usage status of the image information (moving image, still image) is analyzed. be able to. Also, the cost of collecting information is low.
[0013]
In addition, a method for collecting user information according to the present invention is a method for collecting user information in a receiving terminal that receives and reproduces image information from a broadcasting system, and includes a search template used for searching for the image information and the image information. Image information storing procedure for receiving and storing the information from a broadcasting system, using the search template, an image information search procedure for searching the image information, and a search template used for searching the image information Search history information recording procedure for recording the use history information, information on the use history of the search template used for the search of the image information, and user identification information, search history information for transmitting to the broadcasting system Transmission procedure.
By using such a procedure, the receiving terminal of the present invention receives and stores the image information distributed from the broadcasting system and the search template for searching for the image information according to the image information storing procedure. Then, the received image information is searched using the search template by the image search procedure. Further, the use history information of the search template used for the search of the image information is recorded by the search history information recording procedure. Then, according to the search history information transmission procedure, the use history information of the search template used for searching the image information and the identification information of the user are transmitted to the broadcast system.
As a result, the user can easily find a desired scene and contents from the contents such as the recorded moving image using the search template. In addition, the broadcast system collects (analyzes) the usage history information of the user's search template and searches for specific scenes and talents such as videos, so that the user actively collects the information searched with interest. Can be.
[0014]
The computer program of the present invention further comprises: a search template storing procedure for storing a search template used for searching for image information to be distributed in a computer in a broadcasting system that distributes image information to a user's receiving terminal; A search template delivery procedure for delivering the template to the user's receiving terminal, a search template use history information receiving procedure for receiving the search template usage history information from the user's receiving terminal, and a search template usage history information receiving procedure from the user's receiving terminal. It is a program for executing a search template use history information accumulation procedure for accumulating search template use history information, and an analysis procedure for analyzing the accumulated template use history information.
[0015]
Further, the computer program of the present invention receives distribution of image information from a broadcasting system, and instructs a computer in a receiving terminal to reproduce the image information and information of a search template used for searching for the image information from the broadcasting system. An image information storage procedure for storing the image information, an image information search procedure for searching for the image information using the search template, and a use history information of the search template used for searching the image information. A search history information recording procedure, and a search history information transmission procedure for transmitting the use history information of the search template used for the image information search and the user identification information to the broadcast system. It is a program.
[0016]
BEST MODE FOR CARRYING OUT THE INVENTION
Next, embodiments of the present invention will be described with reference to the drawings.
[0017]
FIG. 1 is a diagram for explaining the overall configuration of a broadcast system according to the present invention.
In FIG. 1, a broadcasting system 100 is a broadcasting system that performs TV broadcasting by a radio tower 103 (also includes a CATV (cable TV system) and a satellite TV), or a server 101 via a communication network such as the Internet. Is a broadcasting system that performs Internet broadcasting and the like. The receiving terminal 200 is a TV receiver having an information processing function and a communication function, a PC (personal computer), a mobile terminal, or the like. Further, a database 102 is provided in the broadcasting system 100, and a search template 106 and user information 107 are recorded in the database 102. The search template 106 is used for searching for image information, and the user information 107 is attribute information (address, age, name, gender, etc.) relating to an individual, user identification information, and the like.
[0018]
Then, information is transmitted and received between the broadcasting system 100 and the receiving terminal 200 as follows.
(1) Image information 105 of a moving image or a still image is transmitted from the broadcasting system 100 to the receiving terminal 200 (arrow a).
(2) The search template 106 is transmitted from the broadcasting system 100 to the receiving terminal 200 (arrow b). Note that the search template 106 may be distributed as a still image included in the image information 105.
(3) The receiving terminal 200 searches the image information received from the broadcasting system 100 using the search template 106 selected by the user. Then, if there is a favorite movie or the like, it is reproduced.
(4) The use history information 108 of the search template used in the receiving terminal 200 and the user identification information 109 are transmitted to the broadcasting system 100 (arrow c).
(5) In the broadcasting system 100, the use history information of the search template received from the receiving terminal 200 is stored in the database 102, and the distributed image information (moving image or still image) is referred to by referring to the user information 107 of the user. Analyze usage.
[0019]
FIG. 2 is a diagram showing an example of means included in the broadcasting system and the receiving terminal of the present invention, and shows those directly related to the present invention.
The broadcasting system 100 includes the following units and a database.
The communication unit 111 is a unit for communicating with the receiving terminal 200 via a communication network such as the Internet.
The broadcasting unit 112 is a unit for broadcasting (distributing) image information (moving image or still image) to an unspecified number of receiving terminals 200 by TV broadcasting, CATV broadcasting, satellite TV broadcasting, or the like. When the communication unit 111 that communicates with a communication network such as the Internet is used for distributing image information (moving image or still image), the broadcasting unit 112 may not always be necessary.
The search template distribution unit 113 is a unit for distributing the search template to the receiving terminal 200.
The search log receiving unit 114 is a unit (search template use history information receiving unit) for receiving use history information (search log) of the search template from the receiving terminal 200 via the communication unit 111.
The search log storage unit 115 is a unit (search template use history information storage unit) for recording the search log (search template usage history information) received from the receiving terminal 200 in the search template database 120.
The search log analysis means 116 is an analysis means for analyzing the use history information (search log) of the search template stored in the search template database 120 with reference to the user information database 130.
The image information distribution unit 117 is a unit for distributing image information (moving image or still image) to the receiving terminal 200.
[0020]
The search template database (search template storage means) 120 is a database for recording search template information, history information (search log) relating to the use status of the search template, and search log analysis information.
The user information database 130 is a database for storing personal information (address, age, name, gender, etc.). Also, user identification information is recorded.
The image information database 140 is a database for storing image information to be distributed to the receiving terminal 200.
[0021]
As for the search template, a still image can be cut out from a moving image or the like in image information to be broadcast (distributed) and used. In this case, it is possible to select a still image having a large change in the scene in the moving image and use it as a search template. As a search template, items common to a plurality of pieces of image information (for example, a face of a talent) can be used.
[0022]
The receiving terminal 200 is provided with the following units.
The communication unit 201 is a unit for communicating with the broadcasting system 100 via a communication network such as the Internet.
The broadcast receiving unit 202 is a unit for receiving image information (moving image or still image) broadcast from the broadcasting system 100 in TV broadcasting, CATV broadcasting, satellite TV broadcasting, or the like. When the communication unit 201 with a communication network such as the Internet is used for distributing image information (moving image or still image), the broadcast receiving unit 202 may not always be necessary.
The user information input unit 203 is a unit for inputting personal information of a user who uses the receiving terminal 200. The personal information includes user identification information in addition to the address, age, name, gender, and the like.
The search template download unit 204 is a unit for downloading a search template used for image search from the broadcasting system 100.
[0023]
The image information storage unit 205 includes a moving image recording unit 206 and a still image recording unit 207. The moving image recording unit 206 is a unit for recording a moving image in the image information received by the communication unit 201 or the broadcast receiving unit 202. It is. The still image recording unit 207 is a unit for recording a still image such as a search template received by the communication unit 201 or the broadcast receiving unit 202.
The image information display unit 208 includes a moving image display unit 209 and a still image display unit 210. The moving image display unit 209 is a unit for reproducing and displaying a moving image from the searched scene, and the still image display unit 210 is a unit for displaying a still image such as a search template.
The still image generation unit 211 is a unit for cutting out a frame of a moving image and displaying a still image.
The image matching unit 212 is a unit (image search unit) for comparing and searching a moving image frame (still image) including the search template screen and the search template. Various schemes have been proposed for searching whether or not the frame (still image) matches the search template. Here, equation (1) is used, and if the value of equation (1) becomes equal to or smaller than the threshold, the image matches. Assume that you have done.
(Equation 1)
Figure 2004194198
here,
n: Number of pixels in search template
Xi: luminance of pixel i of the cut still image
tm, i: luminance at pixel i of search template
[0024]
The search log recording unit 213 is a unit for recording the contents searched by the search template, and is a unit (search history information recording unit) for recording use history information (search log) of the search template.
The search log transmission unit 214 is a unit (search history information transmission unit) for transmitting the use history information (search log) of the search template used for the search of the image information and the user identification information to the broadcast system 100. .
The storage unit 230 records image information received from the broadcasting system 100, search templates, use history information (search logs) of search templates by users, user identification information, and the like.
[0025]
FIG. 3 is a diagram illustrating an example of a search template 11 which is an image used for searching for image information (moving image or still image), and is an example of a person 12. The search template 11 is stored in the search template database 120 in the broadcasting system 100, and is distributed from the broadcasting system 100 to the receiving terminal 200 or downloaded from the receiving terminal 200.
[0026]
FIG. 4 is a diagram illustrating an example of a search template 13 which is an image used for searching for image information (moving image or still image), and is an example of a handbag 14. The search template 13 is stored in the search template database 120 in the broadcasting system 100, and is distributed from the broadcasting system 100 to the receiving terminal 200 or downloaded from the receiving terminal 200.
[0027]
FIG. 5 is a diagram illustrating an example of a search log (use history information of a search template) in the receiving terminal 200, in which a user ID (user identification symbol) and use history information of a search template used by the user are recorded. You. The search log is transmitted to the broadcasting system 100 by the search log transmitting unit 214 and the communication unit 201.
From this search log, it can be seen that user 1 (user ID “01”) is interested in talent A and bag A. If there are many such search logs, the broadcasting system 100 can find a strong correlation between the talent A and the bag A. That is, it is presumed that the support layer of the talent A has a high possibility of supporting the design and brand of the bag A.
[0028]
FIG. 6 is a diagram showing another example of the search log in the receiving terminal 200. From this search log, it is found that the user 2 (user ID “02”) has a great interest in shopping for bags and clothes, and it can be inferred that the user 2 is a potential or apparent user of TV shopping or Internet shopping. .
Therefore, it can easily be presumed that the broadcast system 100 has a high possibility of increasing sales if the user 2 selectively transmits a search template related to TV shopping or Internet shopping to the user 2.
[0029]
FIG. 7 is a diagram showing an example of a record recorded in the user information database 130 in the broadcasting system 100, in which personal information such as names, ages, genders, and addresses of users 1 to n registered in advance are recorded. Is done.
[0030]
FIG. 8 is a diagram showing an example of a record in the search template database 120 in the broadcasting system 100, and shows the usage status of the search template for the talent A by gender and age group. FIG. 9 is also a diagram showing an example of a record in the search template database 120 in the broadcasting system 100, in which the usage status of the search template for the talent B is tabulated by gender and age group.
From the contents of these records, it is possible to analyze the popularity of the talent A with respect to the user layer and the association between the user layer and other search templates. When the record of the talent B is analyzed, it can be seen that the record is supported by the same user layer as the talent A.
Therefore, by transmitting the search template of the talent B together with the talent A to the user 1 (see the search log of FIG. 5), the convenience of the user can be improved and the actual audience rating can be improved. It is expected to lead to improvement.
[0031]
FIG. 10 is a flowchart showing a processing procedure of the receiving terminal 200 according to the present invention. The processing in the receiving terminal 200 is performed according to the following procedure.
(1) Step S1: The user's personal information is registered in the broadcasting system 100 by the user information input means 203.
(2) Step S2: The search template download unit 204 downloads the search template from the broadcasting system 100. Further, the search template is stored in the receiving terminal 200 by the still image recording unit 207.
(3) Step S3: The search template is displayed to the user by the still image display means 210.
(4) Step S4: The broadcast content from the broadcast system 100 is recorded by the moving image recording means 206.
(5) Step S5: The user selects a search template in order to search for a necessary moving image scene.
(6) Step S6: The search log is recorded by the search log recording unit 213 as a search log.
(7) Step S7: The still image generation unit 211 cuts out a still image from the moving image.
(8) Step S8: The image matching unit 212 searches for a scene including the search template.
(9) Step S9: The search log is transmitted to the broadcast system 100 by the search log transmitting unit 214 and the communication unit 201.
(10) Step S10: A moving image is reproduced from the scene searched by the moving image display means 209.
In the processing procedure shown in FIG. 10, the delivery of the search template in the pull type from the broadcasting system 100 to the receiving terminal 200 is assumed, but it goes without saying that the push type may be used.
[0032]
FIG. 11 is a flowchart showing a processing procedure of the broadcasting system 100 according to the present invention. The processing in the broadcasting system 100 is performed as follows.
(1) Step S21: The search log is received from the receiving terminal 200 by the communication unit 111 and the search log receiving unit 114. The search log storage unit 115 records the received search log in the search template database 120.
(2) Step S22: The search log analysis unit 116 analyzes the received search log, refers to the user information database 130, and extracts the user information associated with the search log.
(3) Step S23: Update the contents of the search template database 120 according to the analysis result of the search log.
(4) Step S24: The user's viewing tendency is analyzed based on the user information and the search log recorded in the search template database 120, and a search template corresponding to the viewing tendency is transmitted.
[0033]
FIG. 12 shows an example of an operation screen for the user 2 (see the search log in FIG. 6) to download the search template. As already illustrated, since the user 2 is considered to have a high shopping tendency, it is also possible to arrange and download bags and clothes linked to the broadcast contents so that the user 2 can easily recognize it.
[0034]
FIG. 13 is a block diagram showing a configuration example of the server 101 and the receiving terminal 200 of the broadcasting system, and shows only a portion directly related to the present invention. In FIG. 13, a broadcasting system server 101 includes a communication interface 141 for connecting the broadcasting system server 101 and the communication network 1, a control unit 142 that integrally controls the entire broadcasting system server 101, a search template database 120, A user information database 130, an image information database 140, and a processing program unit 150 are provided. Further, a broadcast facility 143 for transmitting image information (moving image or still image) from the broadcasting system by TV broadcasting or the like is provided. Note that the broadcast facility 143 may not always be necessary when the communication network 1 such as the Internet is used for delivering image information.
[0035]
Further, the processing program unit 150 includes the following processing units.
The communication processing unit 151 is a processing unit for performing communication with the receiving terminal 200 via the communication network 1 such as the Internet.
The broadcast processing unit 152 is a processing unit for broadcasting (distributing) image information (moving image or still image) to an unspecified number of receiving terminals 200 by TV broadcast, CATV broadcast, satellite TV broadcast, or the like. When the communication processing unit 151 that communicates with the communication network 1 such as the Internet is used for distributing image information (moving image or still image), the broadcasting processing unit 152 may not always be necessary.
The image information distribution processing unit 153 is a processing unit for transmitting image information such as a moving image and a still image to the receiving terminal 200.
The search template distribution processing unit 154 is a processing unit for distributing the search template to the receiving terminal 200.
The search log reception processing unit 155 is a processing unit for receiving the usage history information (search log) of the search template from the receiving terminal 200.
The search log accumulation processing unit 156 is a processing unit for recording the search log received from the receiving terminal 200 in the search template database 120.
The search log analysis processing unit 157 is an analysis processing unit for analyzing the usage history information (search log) of the template stored in the search template database 120 with reference to the user information database 130.
The search template database 120 is a database for recording search template information, history information (search log) relating to the use state of the search template, and search log analysis information.
The user information database 130 is a database for storing personal information (address, age, name, gender, etc.). Also, user identification information is recorded.
The image information database 140 is a database for storing image information such as moving images and still images broadcasted (distributed) to the receiving terminal 200.
[0036]
The receiving terminal 200 also has a communication interface 220 for connecting the receiving terminal 200 and the communication network 1, a broadcast receiving unit 221 for receiving image information broadcast from the server 101 of the broadcasting system, and an overall control of the receiving terminal 200. A control unit 222 for controlling, a storage unit 230 for storing image information and the like, and a processing program unit 240 are provided.
[0037]
Further, the processing program unit 240 includes the following processing units.
The communication processing unit 241 is a processing unit for performing communication with the server 101 of the broadcasting system via the communication network 1 such as the Internet.
The broadcast reception processing unit 242 is a processing unit for receiving image information (moving image or still image) broadcast from the broadcasting system. When the communication interface 220 and the communication processing unit 241 are used for receiving image information (moving image or still image), the broadcast receiving unit 221 and the broadcast reception processing unit 242 may not always be necessary.
The user information input processing unit 243 is a processing unit for inputting personal information of a user who uses the receiving terminal 200. The personal information includes user identification information in addition to the address, age, name, gender, and the like.
The search template download processing unit 244 is a processing unit for downloading a search template from the server 101 of the broadcasting system. The downloaded search template is stored in the storage unit 230.
The image information storage processing unit 245 is a processing unit for recording image information (moving image or still image) transmitted from the broadcasting system in the storage unit 230.
[0038]
The moving image display processing unit 246 is a processing unit for reproducing and displaying a moving image from the searched scene.
The still image display processing unit 247 is a processing unit for displaying a still image such as a search template.
The still image generation processing unit 248 is a processing unit for cutting out a frame of a moving image and displaying a still image.
The image matching processing unit 249 is a processing unit for comparing and searching a moving image frame (still image) including the search template screen and the search template.
The search log recording processing unit 250 is a processing unit for recording the contents searched by the search template, and is a processing unit for recording use history information (search log) of the search template.
The search log transmission processing unit 251 is a processing unit for transmitting the use history information (search log) of the search template used for the search of the image information and the user identification information to the server 101 of the broadcast system.
The storage unit 230 records image information, a search template, a search log, user identification information, and the like.
[0039]
Note that the processing program unit 150 in the server 101 of the broadcasting system and the processing program unit 240 in the receiving terminal 200 may be realized by dedicated hardware, and the processing program unit may be a memory and a CPU (central processing unit). And a general-purpose information processing device such as a processing device, and a program (not shown) for realizing the function of the processing unit is loaded into a memory and executed to realize the function. Good. It is assumed that an input device, a display device, and the like (neither is shown) are connected to or built into the server 101 and the receiving terminal 200 of the broadcasting system as peripheral devices. Here, the input device refers to an input device such as a keyboard and a mouse. The display device refers to a CRT (Cathode Ray Tube), a liquid crystal display device, or the like.
[0040]
Further, a program for realizing the functions of the server 101 and the receiving terminal 200 of the broadcast system shown in FIG. 13 is recorded on a computer-readable recording medium, and the program recorded on this recording medium is read by a computer system. By executing, the server 101 and the receiving terminal 200 of the broadcasting system of the present invention may perform necessary processing. Here, the “computer system” includes an OS and hardware such as peripheral devices.
The “computer system” includes a homepage providing environment (or a display environment) if a WWW system is used.
The “computer-readable recording medium” refers to a general medium such as a flexible disk, a magneto-optical disk, a ROM, a CD-ROM, and a storage device such as a hard disk built in a computer system.
Further, a “computer-readable recording medium” refers to a communication line for transmitting a program via a network such as the Internet or a communication line such as a telephone line, which dynamically holds the program for a short time. This includes transmission media (transmission media or transmission waves), and those in which programs are held for a certain period of time, such as volatile memories in computer systems serving as servers and clients in that case.
Further, the above-mentioned program may be for realizing a part of the above-mentioned functions, and may be a program for realizing the above-mentioned functions in combination with a program already recorded in a computer system, that is, a so-called difference file (difference file). Program).
[0041]
The embodiments of the present invention have been described above. However, the broadcasting system 100 and the receiving terminal 200 of the present invention are not limited to the illustrated examples described above, and various modifications may be made without departing from the scope of the present invention. Can of course be added.
[Brief description of the drawings]
FIG. 1 is a diagram for explaining the overall configuration of a broadcast system.
FIG. 2 is a diagram showing an example of means included in a broadcasting system and a receiving terminal.
FIG. 3 is a diagram showing an example of a search template.
FIG. 4 is a diagram showing another example of a search template.
FIG. 5 is a diagram showing an example of a search log in a receiving terminal.
FIG. 6 is a diagram showing another example of the search log in the receiving terminal.
FIG. 7 is a diagram showing an example of a record recorded in a user information database.
FIG. 8 is a diagram showing an example of a record in a search template database.
FIG. 9 is a diagram showing another example of a record in the search template database.
FIG. 10 is a diagram showing a processing procedure of the receiving terminal.
FIG. 11 is a diagram showing a processing procedure of the broadcasting system.
FIG. 12 is a diagram showing an example of an operation screen for downloading a search template.
FIG. 13 is a block diagram showing a configuration example of a broadcasting system and a receiving terminal.
[Explanation of symbols]
100 broadcasting system, 105 image information, 106 search template
107 user information, 111 communication means, 112 broadcasting means
113 Search template distribution means
114 search log receiving means (search template use history information receiving means)
115 search log storage means (search template use history information storage means)
116 search log analysis means (analysis means) 117 image information distribution means
120 search template database (search template storage means)
130 user information database, 140 image information database
200 receiving terminal, 201 communication means, 202 broadcast receiving means
203 User information input means, 204 Search template download means
205 image information storage means, 206 moving image recording means, 207 still image recording means
208 image information display means, 209 moving image display means, 210 still image display means
211 Still image generation means, 212 Image matching means (image information search means)
213 Search log recording means (search history information recording means)
214 search log transmission means (search history information transmission means)

Claims (8)

ユーザの受信端末に画像情報を配信する放送システムであって、
配信する画像情報の検索に使用する検索テンプレートを記憶するための検索テンプレート記憶手段と、
前記検索テンプレートをユーザの受信端末に配信する検索テンプレート配信手段と、
前記検索テンプレートの使用履歴情報を、ユーザの受信端末から受信するための検索テンプレート使用履歴情報受信手段と、
前記ユーザの受信端末から受信した検索テンプレートの使用履歴情報を蓄積するための検索テンプレート使用履歴情報蓄積手段と、
前記蓄積されたテンプレートの使用履歴情報を解析するための解析手段と
を具備することを特徴とする放送システム。
A broadcasting system for distributing image information to a user's receiving terminal,
Search template storage means for storing a search template used for searching image information to be distributed;
Search template delivery means for delivering the search template to a user's receiving terminal;
The use history information of the search template, a search template use history information receiving means for receiving from the receiving terminal of the user,
Search template use history information storage means for storing use history information of the search template received from the user's receiving terminal,
A broadcast system comprising: an analysis unit configured to analyze the usage history information of the stored template.
放送システムから画像情報の配信を受けて、再生する受信端末であって、
前記画像情報及び画像情報の検索に使用する検索テンプレートの情報を放送システムから受信して記憶するための画像情報保存手段と、
前記検索テンプレートを用いて、前記画像情報を検索するための画像情報検索手段と、
前記画像情報の検索に使用した検索テンプレートの使用履歴情報を記録するための検索履歴情報記録手段と、
前記画像情報の検索に使用した検索テンプレートの使用履歴の情報と、ユーザ識別情報とを、前記放送システムに送信するための検索履歴情報送信手段と
を具備することを特徴とする受信端末。
A receiving terminal that receives and reproduces image information from a broadcast system,
Image information storage means for receiving and storing the image information and information of a search template used for searching for the image information from a broadcast system,
Image information search means for searching for the image information using the search template,
Search history information recording means for recording the use history information of the search template used for the search of the image information,
A receiving terminal, comprising: search history information transmitting means for transmitting information of a use history of a search template used for searching for the image information and user identification information to the broadcast system.
前記検索テンプレートにより検索した画像情報中のシーンより、該画像情報を再生するための画像情報表示手段を
具備することを特徴とする請求項2に記載の受信端末。
3. The receiving terminal according to claim 2, further comprising image information display means for reproducing the image information from a scene in the image information searched by the search template.
前記検索テンプレートを、画像情報を配信する放送システム側からダウンロードする検索テンプレートダウンロード手段を
さらに具備することを特徴とする請求項2または請求項3に記載の受信端末。
The receiving terminal according to claim 2, further comprising a search template download unit that downloads the search template from a broadcasting system that distributes image information.
ユーザの受信端末に画像情報を配信する放送システムにおけるユーザ情報の収集方法であって、
配信する画像情報の検索に使用する検索テンプレートを記憶するための検索テンプレート記憶手順と、
前記検索テンプレートをユーザの受信端末に配信する検索テンプレート配信手順と、
前記検索テンプレートの使用履歴情報を、ユーザの受信端末から受信するための検索テンプレート使用履歴情報受信手順と、
前記ユーザの受信端末から受信した検索テンプレートの使用履歴情報を蓄積するための検索テンプレート使用履歴情報蓄積手順と、
前記蓄積されたテンプレートの使用履歴情報を解析するための解析手順と
を含むことを特徴とするユーザ情報の収集方法。
A method for collecting user information in a broadcasting system that distributes image information to a user's receiving terminal,
A search template storage procedure for storing a search template used for searching for image information to be distributed;
A search template delivery procedure for delivering the search template to a user's receiving terminal;
The use history information of the search template, a search template use history information receiving procedure for receiving from the receiving terminal of the user,
A search template use history information storing procedure for storing use history information of the search template received from the receiving terminal of the user,
An analysis procedure for analyzing the stored usage history information of the template.
放送システムから画像情報の配信を受けて、再生する受信端末におけるユーザ情報の収集方法であって、
前記画像情報及び画像情報の検索に使用する検索テンプレートの情報を放送システムから受信して記憶するための画像情報保存手順と、
前記検索テンプレートを用いて、前記画像情報を検索するための画像情報検索手順と、
前記画像情報の検索に使用した検索テンプレートの使用履歴情報を記録するための検索履歴情報記録手順と、
前記画像情報の検索に使用した検索テンプレートの使用履歴の情報と、ユーザ識別情報とを、前記放送システムに送信するための検索履歴情報送信手順と
を含むことを特徴とするユーザ情報の収集方法。
A method for collecting user information in a receiving terminal that receives distribution of image information from a broadcast system and reproduces the image information,
An image information storing procedure for receiving and storing the image information and information of a search template used for searching for the image information from a broadcast system,
Using the search template, an image information search procedure for searching for the image information,
A search history information recording procedure for recording use history information of the search template used for the image information search,
A method for collecting user information, comprising: a search history information transmitting procedure for transmitting information on a use history of a search template used for searching for the image information and user identification information to the broadcast system.
ユーザの受信端末に画像情報を配信する放送システム内のコンピュータに、
配信する画像情報の検索に使用する検索テンプレートを記憶するための検索テンプレート記憶手順と、
前記検索テンプレートをユーザの受信端末に配信する検索テンプレート配信手順と、
前記検索テンプレートの使用履歴情報を、ユーザの受信端末から受信するための検索テンプレート使用履歴情報受信手順と、
前記ユーザの受信端末から受信した検索テンプレートの使用履歴情報を蓄積するための検索テンプレート使用履歴情報蓄積手順と、
前記蓄積されたテンプレートの使用履歴情報を解析するための解析手順と
を実行させるためのプログラム。
A computer in a broadcasting system that delivers image information to a user's receiving terminal,
A search template storage procedure for storing a search template used for searching for image information to be distributed;
A search template delivery procedure for delivering the search template to a user's receiving terminal;
The use history information of the search template, a search template use history information receiving procedure for receiving from the receiving terminal of the user,
A search template use history information storing procedure for storing use history information of the search template received from the receiving terminal of the user,
And an analysis procedure for analyzing the accumulated use history information of the template.
放送システムから画像情報の配信を受けて、再生する受信端末内のコンピュータに、
前記画像情報及び画像情報の検索に使用する検索テンプレートの情報を放送システムから受信して記憶するための画像情報保存手順と、
前記検索テンプレートを用いて、前記画像情報を検索するための画像情報検索手順と、
前記画像情報の検索に使用した検索テンプレートの使用履歴情報を記録するための検索履歴情報記録手順と、
前記画像情報の検索に使用した検索テンプレートの使用履歴の情報と、ユーザ識別情報とを、前記放送システムに送信するための検索履歴情報送信手順と
を実行させるためのプログラム。
Upon receiving the distribution of image information from the broadcasting system, the
An image information storing procedure for receiving and storing the image information and information of a search template used for searching for the image information from a broadcast system,
Using the search template, an image information search procedure for searching for the image information,
A search history information recording procedure for recording use history information of the search template used for the image information search,
A program for executing a search history information transmission procedure for transmitting information on a use history of a search template used for searching for the image information and user identification information to the broadcast system.
JP2002362385A 2002-12-13 2002-12-13 Broadcast system and receiving terminal Expired - Fee Related JP4063065B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002362385A JP4063065B2 (en) 2002-12-13 2002-12-13 Broadcast system and receiving terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002362385A JP4063065B2 (en) 2002-12-13 2002-12-13 Broadcast system and receiving terminal

Publications (2)

Publication Number Publication Date
JP2004194198A true JP2004194198A (en) 2004-07-08
JP4063065B2 JP4063065B2 (en) 2008-03-19

Family

ID=32760847

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002362385A Expired - Fee Related JP4063065B2 (en) 2002-12-13 2002-12-13 Broadcast system and receiving terminal

Country Status (1)

Country Link
JP (1) JP4063065B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799604A (en) * 2012-04-26 2012-11-28 新奥特(北京)视频技术有限公司 Method and system for saving history data in information broadcast system database

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102799604A (en) * 2012-04-26 2012-11-28 新奥特(北京)视频技术有限公司 Method and system for saving history data in information broadcast system database
CN102799604B (en) * 2012-04-26 2018-05-04 新奥特(北京)视频技术有限公司 A kind of method and system to save historical data in information broadcasting system database

Also Published As

Publication number Publication date
JP4063065B2 (en) 2008-03-19

Similar Documents

Publication Publication Date Title
CN103430136B (en) Expanding element guide based on figure tile fragment
US8874575B2 (en) Media fingerprinting for social networking
KR100861625B1 (en) Communication apparatus, communication method, electronic device, control method of the electronic device, and recording medium
US20070300258A1 (en) Methods and systems for providing media assets over a network
US20080036917A1 (en) Methods and systems for generating and delivering navigatable composite videos
US20100153984A1 (en) User Feedback Based Highlights of Recorded Programs
US20080089551A1 (en) Interactive TV data track synchronization system and method
US20110173194A1 (en) Implicit user interest marks in media content
US20140089423A1 (en) Systems and methods for identifying objects displayed in a media asset
US20100162303A1 (en) System and method for selecting an object in a video data stream
JP2005515656A (en) Interactive television virtual shopping cart
JP2008294943A (en) Program related information acquistion system and video recorder
MXPA05013710A (en) Searching electronic program guide data .
WO2007130472A2 (en) Methods and systems for providing media assets over a network
JP4866076B2 (en) Multimedia viewing system and multimedia viewing method
JP5290178B2 (en) Video distribution apparatus and video distribution program
JP4742366B2 (en) Program presentation system
JP4629710B2 (en) Storage system and method, client terminal, content reproduction method, and computer program
Smeaton et al. The Físchlár digital video system: a digital library of broadcast TV programmes
JP4710000B2 (en) Program presentation system
JP4063065B2 (en) Broadcast system and receiving terminal
JP2006340136A (en) Video image reproducing method, index information providing method, video image reproducing terminal, and video index creation and retrieval system
JP4206457B2 (en) Playback device, electronic program guide providing server, information providing server, storage server, information system
JP2009049510A (en) Still image extracting device, and still image extracting program
JP2007156893A (en) Information processing device, meta data management server, information processing system, and meta data management method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050527

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20050530

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070927

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071009

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071119

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20071211

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20071224

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110111

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110111

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120111

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120111

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130111

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130111

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140111

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees