JP2756073B2 - Data search method - Google Patents
Data search methodInfo
- Publication number
- JP2756073B2 JP2756073B2 JP5079224A JP7922493A JP2756073B2 JP 2756073 B2 JP2756073 B2 JP 2756073B2 JP 5079224 A JP5079224 A JP 5079224A JP 7922493 A JP7922493 A JP 7922493A JP 2756073 B2 JP2756073 B2 JP 2756073B2
- Authority
- JP
- Japan
- Prior art keywords
- moving image
- product
- information table
- frame number
- coordinates
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
【0001】[0001]
【産業上の利用分野】本発明は、動画像上で商品を検出
して検索するデータ検索方法であって、パソコン画面な
どに表示された動画像上で商品を指定して検索するデー
タ検索方法に関するものである。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a data search method for detecting and searching for a product on a moving image, and a data search method for specifying and searching for a product on a moving image displayed on a personal computer screen or the like. It is about.
【0002】[0002]
【従来の技術】従来、パソコンにおいて、データベース
に登録された商品を検索する場合、以下の手法を採用し
ていた。2. Description of the Related Art Conventionally, the following method has been employed in a personal computer when searching for a product registered in a database.
【0003】(1) 検索キーを入力する。これは、商
品の特徴を、一度、利用者の頭の中で“文字”に置き換
え、検索キーを作成してキー入力し、該当する商品をデ
ータベースから検索して取り出し、表示する。(1) Input a search key. In this method, the feature of a product is once replaced with "characters" in the user's head, a search key is created and keyed in, the relevant product is searched for from a database, retrieved, and displayed.
【0004】(2) 静止画上でポインティグデバイス
を使用して座標を指定し、商品を選択する。これは、商
品を撮影した静止画を予め作成しておき、利用者がこの
静止画をパソコン画面上に表示し、静止画上でマウスで
商品を指定したことに対応して、そのときの座標から商
品を特定し、この特定された商品(商品コード)につい
てデータベースを検索して取り出し、画面上に表示す
る。(2) A coordinate is designated on a still image using a pointing device to select a product. This means that a still image of the product is created in advance, the user displays this still image on the PC screen, and specifies the product with the mouse on the still image, and the coordinates at that time are displayed. , A database is searched for the specified product (product code), extracted, and displayed on the screen.
【0005】[0005]
【発明が解決しようとする課題】上述した従来の(1)
の検索キーの入力による手法によれば、利用者がデータ
ベースを検索する毎に、商品の特徴を表す“文字”とい
う検索コードに置き換えてキー入力し、データベースを
検索する必要があると共に、絞り込むための検索コード
が必要になってしまい、検索し難いという問題があっ
た。The above-mentioned conventional (1)
According to the method of inputting a search key, every time a user searches the database, it is necessary to search for the database by replacing the search code “character” representing the feature of the product with a key and inputting the key. There is a problem that a search code is required, which makes it difficult to search.
【0006】また、上述した従来の(2)の静止画像上
から選択する手法によれば、(1)の検索キーの入力に
比して良くなっているが、商品を色々の角度から見るこ
とができないという問題があった。According to the above-described conventional method of selecting from a still image of (2), the method is better than the input of a search key of (1). There was a problem that can not be.
【0007】本発明は、これらの問題を解決するため、
動画像上で利用者から対象物が指定されたことに対応し
て、その座標および重畳順位から対象物を特定して検出
してその検索結果を表示し、動画像上における選択され
た対象物の詳細情報の表示を実現することを目的として
いる。[0007] The present invention solves these problems,
In response to the user specifying the target on the moving image, the target is specified and detected from the coordinates and the superimposition order, the search result is displayed, and the selected target on the moving image is displayed. The purpose of this is to realize the display of detailed information.
【0008】[0008]
【課題を解決するための手段】図1は、本発明の原理構
成図を示す。図1において、対象物情報テーブル7は、
対象物名に対応づけてその詳細情報および動画像のフレ
ーム番号情報を予め登録するものである。FIG. 1 is a block diagram showing the principle of the present invention. In FIG. 1, the object information table 7
The detailed information and the frame number information of the moving image are registered in advance in association with the object name.
【0009】表示座標情報テーブル8は、動画像のフレ
ーム番号に対応づけて対象物毎の表示位置座標を予め登
録するものである。項目重畳情報テーブル9は、動画像
のフレーム番号に対応づけて対象物毎の重畳順位を予め
登録するものである。The display coordinate information table 8 pre-registers the display position coordinates of each object in association with the frame number of the moving image. The item superimposition information table 9 is for pre-registering the superimposition order for each object in association with the frame number of the moving image.
【0010】[0010]
【作用】本発明は、図1に示すように、画面上に表示し
た動画像上で対象物が指示されたことに対応して、この
指示されたときのフレーム番号および座標をもとに表示
座標情報テーブル8を検索して該当する対象物名を取り
出し、この対象物名について対象物情報テーブル7を検
索してその詳細情報を取り出して表示するようにしてい
る。According to the present invention, as shown in FIG. 1, when an object is designated on a moving image displayed on a screen, the object is displayed based on the frame number and coordinates at the time of the designation. The coordinate information table 8 is searched to extract a corresponding object name, the object information table 7 is searched for this object name, and detailed information is extracted and displayed.
【0011】また、画面上に表示した動画像上である対
象物が指示されたことに対応して、この指示されたとき
のフレーム番号および座標をもとに表示座標情報テーブ
ル8を検索して該当する対象物名を取り出し、この取り
出した対象物名が複数のときに項目重畳情報テーブル9
を検索して重畳順位の高い対象物名を選択し、商品情報
テーブル7を検索してその詳細情報を取り出して表示す
るようにしている。In response to the indication of an object on the moving image displayed on the screen, the display coordinate information table 8 is searched based on the frame number and coordinates at the time of the indication. The corresponding object name is extracted, and when there are a plurality of extracted object names, the item superimposition information table 9
To select an object name having a higher superimposition order, search the product information table 7 to extract and display the detailed information.
【0012】この際、動画像のフレーム番号に対応づけ
て対象物毎に当該対象物を内包する矩形の左上座標およ
び右下座標(あるいは左下座標および右上座標)を予め
登録した表示座標情報テーブル8を使用するようにして
いる。At this time, a display coordinate information table 8 in which upper left coordinates and lower right coordinates (or lower left coordinates and upper right coordinates) of a rectangle including the object are registered in advance for each object in association with the frame number of the moving image. I'm trying to use
【0013】また、動画像上のフレーム番号に対応づけ
て、当該動画像上で表示されている複数の対象物が重畳
しているときに前方にある対象物から順に重畳順位を予
め登録した項目重畳情報テーブル9を使用するようにし
ている。In addition, when a plurality of objects displayed on the moving image are superimposed on each other, the superimposition order is registered in advance from the object ahead in association with the frame number on the moving image. The superimposition information table 9 is used.
【0014】従って、動画像上で利用者から対象物が指
定されたことに対応して、その座標および重畳順位から
対象物を特定して検出してその検索結果を表示すること
により、動画像上における選択された対象物(商品)の
詳細情報の表示を実現することが可能となる。Accordingly, in response to the user specifying the target on the moving image, the target is specified and detected from the coordinates and the superimposition order, and the search result is displayed. It is possible to realize the display of the detailed information of the selected object (product) above.
【0015】[0015]
【実施例】次に、図1から図5を用いて本発明の実施例
の構成および動作を順次詳細に説明する。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS The construction and operation of an embodiment of the present invention will be described in order with reference to FIGS.
【0016】図1は、本発明の原理構成図を示す。図1
において、コンピュータシステム2は、プログラムに従
って各種処理を行なうものであって、ここでは、入力部
3、動画像表示部4、およびシステム制御部5などから
構成されるものである。FIG. 1 is a diagram showing the principle of the present invention. FIG.
The computer system 2 performs various processes in accordance with a program, and here comprises an input unit 3, a moving image display unit 4, a system control unit 5, and the like.
【0017】入力部3は、ディスプレイ17上に表示さ
れた動画像上で、利用者から指示された商品(対象物)
の座標を取り込むポインティングデバイスなどである。
動画像表示部4は、ディスプレイ17上に動画像を表示
させたり、利用者から動画像上で指示された座標の位置
の商品の詳細情報(価格など)を表示させたりなどする
ものである。The input unit 3 displays a product (object) specified by a user on a moving image displayed on the display 17.
Pointing device that captures the coordinates of
The moving image display unit 4 displays a moving image on the display 17 or displays detailed information (such as a price) of a product at a coordinate position specified by the user on the moving image.
【0018】システム制御部5は、全体を統括制御する
ものである。データベース6は、検索し易いように各種
情報を登録したものであって、ここでは、対象物情報テ
ーブル7、表示座標情報テーブル8、項目重畳情報テー
ブル9などから構成されるものである。The system control unit 5 controls the entire system. The database 6 has registered therein various types of information for easy retrieval. In this example, the database 6 includes an object information table 7, a display coordinate information table 8, an item superimposition information table 9, and the like.
【0019】対象物情報テーブル7は、対象物である商
品名や商品コードに対応づけてその詳細情報を予め登録
するものであって、商品コード、商品名、価格、フレー
ム番号などを予め登録するものである。The object information table 7 is for pre-registering detailed information in association with a product name or a product code as an object, and pre-registers a product code, a product name, a price, a frame number and the like. Things.
【0020】表示座標情報テーブル8は、動画像のフレ
ーム番号に対応づけて商品毎の画面上の表示座標を予め
登録するものである。項目重畳情報テーブル9は、動画
像のフレーム番号に対応づけて商品毎の重畳順位を予め
登録するものである。The display coordinate information table 8 is for registering in advance the display coordinates on the screen for each product in association with the frame number of the moving image. The item superimposition information table 9 is for preliminarily registering the superimposition order for each product in association with the frame number of the moving image.
【0021】動画像再生部10は、動画像を再生してデ
ィスプレイ17上に表示するものであって、LDプレー
ヤ、ビデオなどである。動画像データベース12は、動
画像を予め登録したものであって、ここでは、LD画像
(レーザディスクに格納した動画像)13や、ビデオ画
像14などを登録したものである。The moving image reproducing unit 10 reproduces a moving image and displays it on the display 17, and is an LD player, a video, or the like. The moving image database 12 is a database in which moving images are registered in advance. Here, an LD image (a moving image stored in a laser disk) 13 and a video image 14 are registered.
【0022】ディスプレイ17は、動画像などを表示す
るものである。ポインティグデバイスがタッチパネル付
きディスプレイの場合、その機能も兼ね備えるようにし
ている。The display 17 displays a moving image and the like. When the pointing device is a display with a touch panel, the function is also provided.
【0023】図2は、本発明の1実施例構成図を示す。
これは、図1の構成について、商品検索に適用した実施
例構成図である。図2において、商品検索データベース
システム1は、動画像上で利用者がマウスなどで指示し
た画像を検出し、この画像に対応する商品名、商品の詳
細情報(価格など)をデータベース6から検索して表示
したりなどするものであって、ここでは、ポインティン
グデバイス31、コンピュータシステム2、データベー
ス6、動画像再生機器16、ディスプレイ17、および
動画像データベース12などから構成されるものであ
る。FIG. 2 is a block diagram showing one embodiment of the present invention.
This is an example configuration diagram in which the configuration of FIG. 1 is applied to product search. 2, the product search database system 1 detects an image specified by a user with a mouse or the like on a moving image, and searches the database 6 for a product name and detailed information (price, etc.) of the product corresponding to the image. Here, it is composed of a pointing device 31, a computer system 2, a database 6, a moving image reproducing device 16, a display 17, a moving image database 12, and the like.
【0024】ポインティングデバイス31は、利用者が
ディスプレイ17の画面に表示された動画像上で、検索
したい商品を指示するためのものであって、タッチパネ
ル、マウスなどである。The pointing device 31 is used by a user to specify a product to be searched on a moving image displayed on the screen of the display 17, and is a touch panel, a mouse, or the like.
【0025】コンピュータシステム2は、ポインティン
グデバイス31からの入力を取り込んでそのときの画面
上の座標を検出したり、検出した座標に対応するフレー
ム番号の商品名を表示座標情報テーブル8から取り出し
たり、動画像を動画像再生機器16に表示させたりなど
するものである(図3を用いて後述する)。ここでは、
コンピュータシステム2は、動画像を動画像再生機器1
6に再生させる動画像表示部4、および全体を統括制御
するシステム制御部5などから構成されるものである。The computer system 2 takes in the input from the pointing device 31 to detect the coordinates on the screen at that time, extracts the product name of the frame number corresponding to the detected coordinates from the display coordinate information table 8, The moving image is displayed on the moving image reproducing device 16 (described later with reference to FIG. 3). here,
The computer system 2 converts the moving image to the moving image reproducing device 1.
The system comprises a moving image display unit 4 to be played back by the system 6 and a system control unit 5 for controlling the whole system.
【0026】データベース6は、ここでは、商品情報テ
ーブル7、表示位置情報テーブル8、および項目重畳情
報テーブル9などから構成されるものであって、検索し
易い形で登録したものである。Here, the database 6 is composed of a product information table 7, a display position information table 8, an item superimposition information table 9 and the like, and is registered in a form that is easy to search.
【0027】動画像再生機器16は、動画像を再生する
機器(LDプレーヤ、ビデオなど)であって、再生した
動画像をディスプレイ17上に表示するものである。デ
ィスプレイ17は、動画像を表示するものである。The moving image reproducing device 16 is a device for reproducing a moving image (LD player, video, etc.), and displays the reproduced moving image on the display 17. The display 17 displays a moving image.
【0028】動画像データベース12は、動画像を登録
したものであって、例えばLD画像13を格納したレー
ザディスク、ビデオ画像14を格納したビデオテープな
どである。The moving image database 12 stores moving images, and is, for example, a laser disk storing an LD image 13 or a video tape storing a video image 14.
【0029】次に、図3のフローチャートに示す順序に
従い、図2の構成の動作を詳細に説明する。図3におい
て、S1は、動画を表示する。これは、図2の動画像表
示部4が動画像再生機器16に指示して、動画像データ
ベース12であるここでは、例えばLD画像13を格納
したレーザディスクから動画像を読み出して、ディスプ
レイ17上に表示する。Next, the operation of the configuration of FIG. 2 will be described in detail according to the order shown in the flowchart of FIG. In FIG. 3, S1 displays a moving image. This is because the moving image display unit 4 in FIG. 2 instructs the moving image reproducing device 16 to read out the moving image from the laser disk in which the LD image 13 is stored. To be displayed.
【0030】S2は、ポインティングデバイスにて画面
上の任意の座標を指定する。これは、S1で動画像が画
面上に表示された状態で、利用者がこの動画像を見て、
その動画像の商品の名称や価格などの詳細情報を検索す
るために、ポインティングデバイスで商品の画像を指定
する。例えば右側に記載したように、図4のタッチパネ
ルディスプレイ18上で図中の★のタッチ位置のX座標
およびY座標(以下(X、Y)で示す)(480、21
0)を指定(タッチ)する。In step S2, an arbitrary coordinate on the screen is designated by the pointing device. This is because the user looks at this moving image while the moving image is displayed on the screen in S1,
In order to search for detailed information such as the product name and price of the moving image, a product image is designated using a pointing device. For example, as described on the right side, the X coordinate and the Y coordinate (hereinafter referred to as (X, Y)) of the touch position indicated by ★ on the touch panel display 18 of FIG.
0) is designated (touched).
【0031】S3は、動画像再生機器より、座標入力時
の表示フレーム番号を取得する。これは、S2で動画像
上の任意の点を指定したことに対応して、この指定され
たときの動画像のフレーム番号、例えば右側に記載した
001500を動画像再生機器16から取得する。In step S3, a display frame number at the time of inputting coordinates is obtained from the moving image reproducing device. This means that, in response to the designation of an arbitrary point on the moving image in S2, the frame number of the moving image at the time of the designation, for example, 001500 described on the right side is acquired from the moving image reproducing device 16.
【0032】S4は、入力部より座標情報を取得する。
これは、S2でタッチした動画像上の座標(480、2
10)を取得する。S5は、表示座標情報テーブル8よ
り、その座標にある物体を検索開始する。In step S4, coordinate information is obtained from the input unit.
This corresponds to the coordinates (480, 2) on the moving image touched in S2.
10) is obtained. In step S5, a search is started from the display coordinate information table 8 for an object at that coordinate.
【0033】S6は、その領域にタッチした物体(商
品)が存在するか判別する。ここでは、 ・フレーム番号001500 ・座標位置(480、210) をもとに、図5の(b)の表示座標情報テーブル8を検
索し、フレーム番号(フレームNo)が001500の
レコードのうち、座標位置(480、210)を含む矩
形の商品2、商品3を見つける。この見つかったときは
S6でYESとなり、S7に進む。一方、見つからなか
ったときはS6のNOとなり、S2に戻る。In step S6, it is determined whether or not the touched object (product) exists in the area. Here, based on the frame number 00500 and the coordinate position (480, 210), the display coordinate information table 8 shown in FIG. 5B is searched. Find the rectangular products 2 and 3 including the position (480, 210). When this is found, YES is determined in S6, and the process proceeds to S7. On the other hand, if not found, the result of S6 is NO, and the process returns to S2.
【0034】S7は、S6で商品が見つかったので、そ
の座標に複数の物体(商品)が存在するか判別する。こ
こでは、商品2、商品3と複数の商品が存在したので、
YESとなり、S8に進む。一方、複数の商品が存在し
なかったときは、NOとなり、S10に進む。In S7, since a product is found in S6, it is determined whether or not a plurality of objects (products) exist at the coordinates. Here, since there are a plurality of products such as a product 2 and a product 3,
YES, and the process proceeds to S8. On the other hand, when a plurality of products do not exist, the determination becomes NO, and the process proceeds to S10.
【0035】S8は、S7のYESでその座標に複数の
商品(ここでは商品2、商品3)が存在すると判明した
ので、項目重畳情報テーブル5より、重畳優先順位を取
得する。例えば上述のフレーム番号001500の商品
2、商品3について、図5の(c)の項目重畳情報テー
ブル9を参照し、 ・商品2:重畳順位2 ・商品3:重畳順位3 を取得する。In S8, since it has been determined that a plurality of products (here, product 2 and product 3) exist at the coordinates at YES in S7, the superimposition priority is acquired from the item superimposition information table 5. For example, with respect to the product 2 and the product 3 of the above-described frame number 000015, the item superimposition information table 9 of FIG.
【0036】S9は、商品を、重畳順位の高い1つに特
定する。これは、S8で取得した重畳順位のうち、高い
1つの商品として、商品2を特定する。S10は、商品
情報テーブル7より、商品詳細情報を取得する。これ
は、S9までで特定した商品、ここでは、商品2につい
て、例えば図5の(a)の商品情報テーブル7を検索
し、 ・商品2:商品名“商品2”、価格“1,200,00
0”を取得する。In step S9, the commodity is specified as one having a higher superimposition order. This specifies the product 2 as one high product in the superimposition order acquired in S8. In S10, the detailed product information is acquired from the product information table 7. For example, the product information table 7 shown in FIG. 5A is searched for the product specified up to S9, here, the product 2, and the product 2: product name “product 2”, price “1,200, 00
0 ”is obtained.
【0037】S11は、検索結果を画面表示する。これ
は、今までの検索結果を例えば右側に記載したように画
面(LD表示画面上の一部、あるいは別の画面)上に表
示する。In step S11, the search result is displayed on a screen. In this case, the search results so far are displayed on a screen (a part on the LD display screen or another screen) as described on the right side, for example.
【0038】★商品詳細情報 ★商品情報テーブル7にリンクされているデータファイ
ル(イメージファイルやテキストファイル)などがあれ
ば同時に表示 以上によって、利用者が画面上に表示された動画像上で
商品名や価格などの詳細情報を知りたいときに、当該商
品をタッチすると、このときの動画像のフレーム番号お
よび座標位置をもとに、図5の(b)の表示座標情報テ
ーブル8から商品名を取り出し、この取り出した商品名
が複数あるときは図5の(c)の項目重畳情報テーブル
9を参照して最も重畳順位の高い商品を特定する。次
に、1つの商品名、あるいは1つに特定した商品名をも
とに、図5の(a)の商品情報テーブル7を検索して、
商品の詳細情報(価格など)を取り出し、画面上に表示
する。これらにより、動画像上のある商品をタッチして
その商品の価格などの詳細情報を簡易に表示させること
が可能となる。★ Detailed product information ★ If there is a data file (image file or text file) linked to the product information table 7, it is displayed at the same time. Thus, the user can display the product name on the moving image displayed on the screen. When the user touches the product when he wants to know detailed information such as the price and the price, the product name is displayed from the display coordinate information table 8 of FIG. If there are a plurality of extracted product names, the product having the highest superimposition order is specified with reference to the item superimposition information table 9 of FIG. Next, based on one product name or one product name specified, the product information table 7 of FIG.
Retrieve detailed information (such as price) of the product and display it on the screen. Thus, it is possible to easily display detailed information such as the price of the product by touching the product on the moving image.
【0039】図4は、本発明の動画像例を示す。これ
は、タッチパネルディスプレイ18上にLD(レーザデ
ィスク)から読み出した動画像を表示した例を示す。こ
こでは、商品1、商品2、商品3の重畳順位のもとで表
示されている。この動画像上で★の位置を利用者がタッ
チした場合、その座標(480、210)を読み取る。FIG. 4 shows an example of a moving image according to the present invention. This shows an example in which a moving image read from an LD (laser disk) is displayed on the touch panel display 18. Here, products 1, 2, and 3 are displayed in a superimposed order. When the user touches the position of ★ on this moving image, the coordinates (480, 210) are read.
【0040】図5は、本発明のテーブル例を示す。図5
の(a)は、商品情報テーブル7の例を示す。これは、
商品名(商品1、商品2・・・)あるいはコード(co
de)に対応づけて当該商品の価格などの詳細情報を予
め登録したものである。ここでは、図示のように、 code 商品名 価格 LD開始フレーム、LD終了フレーム 0001 商品1 1,000,000 001500 003500 と登録する。ここで、codeは、商品名に一意に対応づけ
て予め設定したコードである。商品名は、商品の名称で
ある。価格は、商品の価格である。LD開始フレームお
よびLD終了フレームは、当該商品の動画像が記録され
ているレーザディスクの開始のフレーム番号および終了
のフレーム番号である。複数ある場合には、連続してフ
レーム番号が連なり、1レコード終了をNULLで判別
する。FIG. 5 shows an example of a table according to the present invention. FIG.
(A) shows an example of the product information table 7. this is,
Product name (product 1, product 2 ...) or code (co
The detailed information such as the price of the product is registered in advance in association with de). Here, as shown in the figure, code product name price LD start frame, LD end frame 0001 product 1 1,000,000 001500 003500 are registered. Here, the code is a code that is uniquely set in advance in association with the product name. The product name is the name of the product. The price is the price of the product. The LD start frame and the LD end frame are the start frame number and the end frame number of the laser disk on which the moving image of the product is recorded. When there are a plurality of frames, the frame numbers are continuously linked, and the end of one record is determined by NULL.
【0041】以上のように商品情報テーブル7に予め登
録しておくことにより、商品名が判明すると、当該商品
名の詳細情報(価格など)を取り出して画面上に表示す
ることが可能となる。By pre-registering the product name in the product information table 7 as described above, when the product name is determined, it is possible to take out the detailed information (such as price) of the product name and display it on the screen.
【0042】図5の(b)は、表示座標情報テーブル8
の例を示す。これは、フレーム番号に対応づけて、動画
像上の存在する商品を内包する矩形の左上座標および右
下座標を予め登録したものである。ここでは、図示のよ
うに、 商品1 商品2 商品3 フレームNo 開始X,Y 終了X,Y 開始X,Y 終了X,Y 開始X,Y 終了X,Y 001500 80,300 320,450 200,200 530,350 320,80 650,250 と登録する。ここで、フレームNo(フレーム番号)は動画
像上でタッチされたときのフレーム番号である。開始X,
Y、終了X,Yは、動画像上の商品を内包する矩形の左上の
座標、および右下の座標である。ここでは、商品1、商
品2、商品3は、図4の画面上に表示したように、3つが
ある。FIG. 5B shows a display coordinate information table 8.
Here is an example. In this case, upper left coordinates and lower right coordinates of a rectangle including an existing product on a moving image are registered in advance in association with the frame number. Here, as shown in the figure, Product 1 Product 2 Product 3 Frame No Start X, Y End X, Y Start X, Y End X, Y Start X, Y End X, Y 001 500 80,300 320,450 200,200 530,350 320,80 650,250 register. Here, the frame number (frame number) is a frame number when touched on a moving image. Start X,
Y and end X and Y are the upper left coordinates and the lower right coordinates of the rectangle containing the product on the moving image. Here, there are three products 1, 2, 3 as shown on the screen of FIG.
【0043】以上のように表示座標情報テーブル8に予
め登録しておくことにより、利用者が動画像上でタッチ
して位置を指定すると、このときのフレーム番号および
タッチした位置座標をもとに、選択した商品(図4の★
の位置をタッチしたときは商品2、商品3)を容易に検
出することが可能となる。As described above, by registering in the display coordinate information table 8 in advance, when the user touches a moving image to specify a position, the user specifies the position based on the frame number and the touched position coordinate at this time. , The selected product (★ in Figure 4)
When the user touches the position, the product 2 and the product 3) can be easily detected.
【0044】図5の(c)は、項目重畳情報テーブル9
の例を示す。これは、フレーム番号に対応づけて、動画
像上の存在する商品の重畳順位を予め登録したものであ
る。重畳順位は、一番画面の表側から裏側に向かうに従
って1、2、3・・・というように重畳順位を予め登録
したものである。ここでは、図示のように、 フレームNo 商品1 商品2 商品3 001500 1 2 3 と登録する。ここで、フレームNo(フレーム番号)は動画
像上でタッチされたときのフレーム番号である。1、
2、3は、重畳順位である。FIG. 5C shows an item superposition information table 9.
Here is an example. In this case, the superimposition order of existing products on the moving image is registered in advance in association with the frame number. The superimposition order is such that the superimposition order is registered in advance as 1, 2, 3,... From the front side to the back side of the screen. Here, as shown in the figure, frame No. product 1 product 2 product 3 001500 1 2 3 is registered. Here, the frame number (frame number) is a frame number when touched on a moving image. 1,
2 and 3 are superposition orders.
【0045】以上のように項目重畳情報テーブル9に予
め登録しておくことにより、利用者が動画像上でタッチ
して指定した位置の商品が複数あったときに(例えば図
4の★の座標位置のときは商品2、商品3)、当該項目
重畳情報テーブル9を検索し、最も前に表示されている
商品を1つ特定し、この特定した商品の詳細情報を、商
品情報テーブル7から検索して取り出し、表示すること
が可能となる。As described above, by registering in advance in the item superimposition information table 9, when there are a plurality of products at positions designated by the user touching on the moving image (for example, the coordinates of ★ in FIG. 4). When the position is the position, the item 2 and the item 3) are searched in the item superimposition information table 9 to identify one item displayed first, and the detailed information of the specified item is searched from the item information table 7. Then, it can be taken out and displayed.
【0046】[0046]
【発明の効果】以上説明したように、本発明によれば、
動画像上で利用者から対象物(商品)が指定されたこと
に対応して、その座標および重畳順位から対象物(商
品)を特定して検出してその検索結果を表示する構成を
採用しているため、動画像上で選択された任意の対象物
(商品)の詳細情報を表示することができる。これらに
より、LD(レーザディスク)やビデオから再生した動
画像上で複数の対象物(商品)が同時に表示されている
場合であっても、複数の対象物(商品)のうちのいずれ
の対象物(商品)がタッチされて指定されかを確実に検
出し、データベースを検索して該当するその対象物(商
品)の詳細情報を表示することが可能となると共に、動
画像上で任意の対象物(商品)を指定するという自然な
利用者の操作によって、その対象物(商品)の詳細情報
を画面上に表示させることが可能となる。As described above, according to the present invention,
When a target (product) is specified by a user on a moving image, the target (product) is specified and detected from its coordinates and the superimposition order, and the search result is displayed. Therefore, it is possible to display detailed information of an arbitrary object (product) selected on the moving image. Thus, even when a plurality of objects (products) are simultaneously displayed on a moving image reproduced from an LD (laser disk) or a video, any one of the plurality of objects (products) is displayed. It is possible to reliably detect whether (product) has been touched and specified, search the database and display the detailed information of the target (product), and also display an arbitrary target on the moving image. By a natural user operation of designating (product), detailed information of the target (product) can be displayed on the screen.
【図1】本発明の原理構成図である。FIG. 1 is a principle configuration diagram of the present invention.
【図2】本発明の1実施例構成図である。FIG. 2 is a configuration diagram of one embodiment of the present invention.
【図3】本発明の動作説明フローチャートである。FIG. 3 is a flowchart illustrating the operation of the present invention.
【図4】本発明の動画像例である。FIG. 4 is an example of a moving image according to the present invention.
【図5】本発明のテーブル例である。FIG. 5 is an example of a table according to the present invention.
1:商品検索データベースシステム 2:コンピュータシステム 3:入力部 31:ポインティングデバイス 4:動画像表示部 5:システム制御部 6:データベース 7:対象物情報テーブル 71:商品情報テーブル 8:表示座標情報テーブル 9:項目重畳情報テーブル 10:動画像再生部 12:動画像データベース 13:LD画像 14:ビデオ画像 17:ディスプレイ 1: Product search database system 2: Computer system 3: Input unit 31: Pointing device 4: Moving image display unit 5: System control unit 6: Database 7: Object information table 71: Product information table 8: Display coordinate information table 9 : Item superimposition information table 10: Moving picture reproducing unit 12: Moving picture database 13: LD picture 14: Video picture 17: Display
フロントページの続き (72)発明者 青井 美奈 東京都品川区大崎1丁目6番4号 株式 会社富士通ソーシアルサイエンスラボラ トリ内 (56)参考文献 特開 平3−52070(JP,A) 特開 平4−284574(JP,A) (58)調査した分野(Int.Cl.6,DB名) G06F 17/30Continuation of front page (72) Inventor Mina Aoi 1-6-4 Osaki, Shinagawa-ku, Tokyo Fujitsu Social Science Laboratory Co., Ltd. (56) References JP-A-3-52070 (JP, A) JP-A Heisei 4-284574 (JP, A) (58) Fields investigated (Int. Cl. 6 , DB name) G06F 17/30
Claims (4)
タ検索方法において、 動画像のフレーム番号に対応づけて対象物毎の表示位置
座標を予め登録する表示座標情報テーブル(8)と、 対象物名に対応づけてその詳細情報を予め登録する対象
物情報テーブル(7)とを備え、 画面上に表示した動画像上である対象物が指示されたこ
とに対応して、この指示されたときのフレーム番号およ
び座標をもとに上記表示座標情報テーブル(8)を検索
して該当する対象物名を取り出し、この対象物名につい
て上記対象物情報テーブル(7)を検索してその詳細情
報を取り出して表示するように構成したことを特徴とす
るデータ検索方法。1. A data search method for detecting and searching for an object on a moving image, comprising: a display coordinate information table (8) for registering display position coordinates of each object in advance in association with a frame number of the moving image; An object information table (7) in which detailed information is registered in advance in association with the object name, and in response to the instruction of the object on the moving image displayed on the screen, The display coordinate information table (8) is searched based on the frame number and the coordinates at the time of the selection, and a corresponding object name is extracted. The object information table (7) is searched for the object name and the corresponding object name is searched. A data search method characterized by extracting and displaying detailed information.
毎の重畳順位を予め登録する項目重畳情報テーブル
(9)を備え、 画面上に表示した動画像上である対象物が指示されたこ
とに対応して、この指示されたときのフレーム番号およ
び座標をもとに上記表示座標情報テーブル(8)を検索
して該当する対象物名を取り出し、この取り出した対象
物名が複数のときに上記項目重畳情報テーブル(9)を
検索して重畳順位の高い対象物名を選択し、上記商品情
報テーブル(7)を検索してその詳細情報を取り出して
表示するように構成したことを特徴とする請求項1記載
のデータ検索方法。2. An item superimposition information table (9) for preliminarily registering a superimposition order for each object in association with a frame number of the moving image, wherein an object on the moving image displayed on the screen is designated. Correspondingly, the display coordinate information table (8) is searched based on the frame number and the coordinates at the time of the designation, and the corresponding object name is extracted. The object superimposition information table (9) is searched to select an object name having a higher superimposition order, the commodity information table (7) is searched, and detailed information thereof is extracted and displayed. 2. The data search method according to claim 1, wherein:
毎に当該対象物を内包する矩形の左上座標および右下座
標(あるいは左下座標および右上座標)を予め登録する
表示位置情報テーブル(8)を備えたことを特徴とする
請求項1および請求項2記載のデータ検索方法。3. A display position information table (8) in which upper left coordinates and lower right coordinates (or lower left coordinates and upper right coordinates) of a rectangle including the object are registered in advance for each object in association with the frame number of the moving image. 3. The data search method according to claim 1, further comprising:
該動画像上で表示されている複数の対象物が重畳してい
るときに前方にある対象物から順に重畳順位を予め登録
する項目重畳情報テーブル(9)を備えたことを特徴と
する請求項2記載のデータ検索方法。4. An item in which, when a plurality of objects displayed on a moving image are superimposed, a superimposition order is registered in order from an object located in front thereof in association with a frame number on the moving image. 3. The data search method according to claim 2, further comprising a superimposition information table.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP5079224A JP2756073B2 (en) | 1993-04-06 | 1993-04-06 | Data search method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP5079224A JP2756073B2 (en) | 1993-04-06 | 1993-04-06 | Data search method |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH06295312A JPH06295312A (en) | 1994-10-21 |
JP2756073B2 true JP2756073B2 (en) | 1998-05-25 |
Family
ID=13683948
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP5079224A Expired - Lifetime JP2756073B2 (en) | 1993-04-06 | 1993-04-06 | Data search method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2756073B2 (en) |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5696905A (en) * | 1995-03-20 | 1997-12-09 | International Business Machines Corporation | System and method for providing merchant information and establishing links to merchants while presenting a movie |
US6769128B1 (en) | 1995-06-07 | 2004-07-27 | United Video Properties, Inc. | Electronic television program guide schedule system and method with data feed access |
US6469753B1 (en) | 1996-05-03 | 2002-10-22 | Starsight Telecast, Inc. | Information system |
JPH10233081A (en) * | 1997-02-18 | 1998-09-02 | Pioneer Electron Corp | Computer |
EP1036466B1 (en) | 1997-07-21 | 2003-03-26 | E Guide, Inc. | Method for navigating within a television program guide having advertisements |
US20020095676A1 (en) | 1998-05-15 | 2002-07-18 | Robert A. Knee | Interactive television program guide system for determining user values for demographic categories |
US6898762B2 (en) | 1998-08-21 | 2005-05-24 | United Video Properties, Inc. | Client-server electronic program guide |
US7325245B1 (en) | 1999-09-30 | 2008-01-29 | Intel Corporation | Linking to video information |
JP2000331468A (en) * | 2000-01-01 | 2000-11-30 | Pioneer Electronic Corp | Information storing medium and its information reproducing device, information reproducing method |
AU2001289289B9 (en) | 2000-03-31 | 2006-02-02 | Rovi Guides, Inc. | System and method for meta-data-linked advertisements |
JP2003016086A (en) * | 2001-07-02 | 2003-01-17 | Sony Corp | System for information processing, server, terminal device and method for providing of advertising service |
JP3996493B2 (en) * | 2002-11-13 | 2007-10-24 | 日本電信電話株式会社 | Video anchor search method, video anchor search device, video anchor search program, and computer-readable recording medium storing the program |
JP2005141507A (en) * | 2003-11-06 | 2005-06-02 | Nippon Telegr & Teleph Corp <Ntt> | Relevant information presenting device, relevant information retrieving device, relevant information presenting method, relevant information retrieving method, relevant information presenting program and relevant information retrieving program |
US7657526B2 (en) | 2006-03-06 | 2010-02-02 | Veveo, Inc. | Methods and systems for selecting and presenting content based on activity level spikes associated with the content |
US8316394B2 (en) | 2006-03-24 | 2012-11-20 | United Video Properties, Inc. | Interactive media guidance application with intelligent navigation and display features |
US8832742B2 (en) | 2006-10-06 | 2014-09-09 | United Video Properties, Inc. | Systems and methods for acquiring, categorizing and delivering media in interactive media guidance applications |
US7801888B2 (en) | 2007-03-09 | 2010-09-21 | Microsoft Corporation | Media content search results ranked by popularity |
US9166714B2 (en) | 2009-09-11 | 2015-10-20 | Veveo, Inc. | Method of and system for presenting enriched video viewing analytics |
WO2012094564A1 (en) | 2011-01-06 | 2012-07-12 | Veveo, Inc. | Methods of and systems for content search based on environment sampling |
KR20180024200A (en) * | 2016-08-29 | 2018-03-08 | 오드컨셉 주식회사 | Method, apparatus and computer program for providing search information from video |
CN110704684B (en) * | 2019-10-17 | 2022-08-09 | 北京字节跳动网络技术有限公司 | Video searching method and device, terminal and storage medium |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0352070A (en) * | 1989-07-20 | 1991-03-06 | Nippon Telegr & Teleph Corp <Ntt> | Related information reference system for moving image |
JPH04284574A (en) * | 1991-03-14 | 1992-10-09 | Fujitsu Ltd | Graphic processor equipped with graphic pick function |
-
1993
- 1993-04-06 JP JP5079224A patent/JP2756073B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JPH06295312A (en) | 1994-10-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2756073B2 (en) | Data search method | |
JP3640986B2 (en) | Processor control system | |
US5142662A (en) | Electronic publishing system | |
US6339431B1 (en) | Information presentation apparatus and method | |
JP2994177B2 (en) | System and method for locating boundaries between video segments | |
JP3630730B2 (en) | System operation method | |
JP3630721B2 (en) | Multimedia data processing method, multimedia data processing device, attribute information registration device, and attribute information registration method | |
JPH11175230A (en) | Expanded scrolling device, method therefor, recording medium recorded with expanded scrolling program, information retrieving device, method therefor and record medium recorded with information retrieval program | |
EP0636994B1 (en) | Method of and apparatus for retrieving dynamic images and method of and apparatus for managing images | |
JP2001337994A (en) | Thumbnail display system and method and recording medium with processing program therefor recorded therein | |
JP5345963B2 (en) | Method for generating tag data to search for images | |
JP4240684B2 (en) | Slideshow table editing device | |
JP2959069B2 (en) | Slip input processor | |
JPH01159759A (en) | Document retrieving and displaying method | |
JPH01267725A (en) | System for operating window in multiwindow system | |
JP3877876B2 (en) | Image data search system, image data search method, and program recording medium | |
JPH10214152A (en) | Information equipment and method for processing orbit information in the information equipment | |
JPH05257788A (en) | Card-shaped data base processor | |
JP2845897B2 (en) | Document search / display method and apparatus | |
JPH0325235Y2 (en) | ||
JPH06301734A (en) | Data retrieving device | |
JP3545121B2 (en) | Multimedia information processing device | |
JP3123087B2 (en) | Data display device | |
JPH04302366A (en) | Retrieving display device of interactive data system | |
JPH01284973A (en) | Picture recording and reproducing device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100306 Year of fee payment: 12 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130306 Year of fee payment: 15 |