JPH08106543A - 動画像の再生方法および動画像の再生システム - Google Patents

Abstract

(57)【要約】 （修正有） 【目的】 ある動画像と同時に再生して比較したい別の
動画像の頭出しを簡単に行うことが出来る動画像の再生
方法および動画像の再生システムを提供する。 【構成】 動画像再生部３０の表示部Ａおよび表示部Ｂ
は、メモリ８に動画像Ａのフレーム４０および動画像Ｂ
のフレーム４１をロードし、ディスプレイ装置に表示す
る。ユーザは、動画像Ａのフレームの一つを参照フレー
ムとして指定する。自動頭出し部２０の類似度算出部２
１は、参照フレーム４０と動画像Ｂの各フレーム４１の
類似度を算出し、被参照フレーム決定部２２に通知す
る。被参照フレーム決定部２２は、動画像Ｂの各フレー
ムの類似度に基づいて被参照フレームを決定し、動画再
生部３０へ通知する。動画像再生部３０の操作制御部３
１は、参照フレーム４０および動画像Ｂの被参照フレー
ム４１を再生開始位置とし、表示部Ａ３２と表示部Ｂ３
３に通知する。

Description

【発明の詳細な説明】

【０００１】

【産業上の利用分野】本発明は、動画像の再生方法およ
び動画像の再生システムに関し、さらに詳しくは、ある
動画像と同時に再生して比較したい別の動画像の頭出し
を簡単に行うことが出来る動画像の再生方法および動画
像の再生システムに関する。

【０００２】

【従来の技術】動作の研究（分析，学習，練習）では、
基本となる動作と，研究対象の動作とを比較することが
有効である。例えば、ゴルフスイングの学習では、手本
となるゴルフスイングを記録したビデオテープを頭出し
て一時停止にしておき、次に自分のゴルフスイングを記
録したビデオテープを頭出して一時停止にしておき、次
に両方を同時に再生開始し、両方のゴルフスイングを比
較することを行う。

【０００３】

【発明が解決しようとする課題】上記のように、従来
は、基本となる動作の画像を一時停止した後、研究対象
の動作を記録した動画像の再生，停止，逆再生等の操作
を繰り返して、前記一時停止した画像に対応する画像を
探し、頭出ししていた。しかし、かかる頭出し作業は、
ユーザにとって大きな負担となる問題点があった。そこ
で、本発明の目的は、ある動画像と同時に再生して比較
したい別の動画像の頭出しを簡単に行うことが出来る動
画像の再生方法および動画像の再生システムを提供する
ことにある。

【０００４】

【課題を解決するための手段】第１の観点では、この発
明は、動画像Ａ中の参照フレームに対する動画像Ｂ中の
各フレームの類似度を算出し、該類似度に基づいて動画
像Ｂの被参照フレームを決定し、前記参照フレームと前
記被参照フレームとをそれぞれ再生開始位置とし、それ
らの再生開始位置から動画像Ａと動画像Ｂとを同時に再
生することを特徴とする動画像の再生方法を提供する。

【０００５】第２の観点では、この発明は、上記構成の
動画像の再生方法において、動画像Ａ中の参照フレーム
に対する動画像Ｂ中の各フレームの類似度として、動画
像Ａ中の参照フレームの画像データまたは音響データに
対する動画像Ｂ中の各フレームの画像データまたは音響
データの類似度を算出することを特徴とする動画像の再
生方法を提供する。

【０００６】第３の観点では、この発明は、上記構成の
動画像の再生方法において、動画像Ａ中の参照フレーム
の画像データまたは音響データの特徴量と動画像Ｂ中の
各フレームの画像データまたは音響データの特徴量との
差分から類似度を算出することを特徴とする動画像の再
生方法を提供する。

【０００７】第４の観点では、この発明は、上記構成の
動画像の再生方法において、算出した類似度のグラフを
画面表示し、その画面上でユーザがポインティングした
位置に最も近いグラフの極値点に対応するフレームを被
参照フレームとして決定することを特徴とする動画像の
再生方法を提供する。

【０００８】第５の観点では、この発明は、上記構成の
動画像の再生方法において、類似度の高い複数のフレー
ムをそれぞれ動画像Ｂの被参照フレームとして決定し、
前記参照フレームと前記被参照フレームとをそれぞれ再
生開始位置としそれらの再生開始位置から動画像Ａと動
画像Ｂとを同時に再生することを、類似度の高い被参照
フレームから順に繰り返すことを特徴とする動画像の再
生方法を提供する。

【０００９】第６の観点では、この発明は、動画像Ａ中
の参照フレームに対する動画像Ｂ中の各フレームの類似
度を算出する類似度算出手段と、前記類似度に基づいて
動画像Ｂの被参照フレームを決定する被参照フレーム決
定手段と、前記参照フレームと前記被参照フレームとを
それぞれ再生開始位置として動画像Ａと動画像Ｂとを同
時に再生する同時再生手段とを具備したことを特徴とす
る動画像の再生システムを提供する。

【００１０】第７の観点では、この発明は、上記構成の
動画像の再生システムにおいて、前記類似度算出手段
が、動画像Ａ中の参照フレームの画像データまたは音響
データに対する動画像Ｂ中の各フレームの画像データま
たは音響データの類似度を算出することを特徴とする動
画像の再生システムを提供する。

【００１１】第８の観点では、この発明は、上記動画像
の再生システムにおいて、前記類似度算出手段が、動画
像Ａ中の参照フレームの画像データまたは音響データの
特徴量と動画像Ｂ中の各フレームの画像データまたは音
響データの特徴量との差分から類似度を算出することを
特徴とする動画像の再生システムを提供する。

【００１２】第９の観点では、この発明は、上記構成の
動画像の再生システムにおいて、前記被参照フレーム決
定手段が、類似度のグラフを画面表示し、その画面上で
ユーザがポインティングした位置に最も近いグラフの極
値点に対応するフレームを被参照フレームとして決定す
ることを特徴とする動画像の再生システムを提供する。

【００１３】第１０の観点では、この発明は、上記構成
の動画像の再生システムにおいて、前記被参照フレーム
決定手段は、類似度の高い複数のフレームをそれぞれ動
画像Ｂの被参照フレームとして決定し、前記同時再生手
段は、前記参照フレームと前記被参照フレームとをそれ
ぞれ再生開始位置としそれらの再生開始位置から動画像
Ａと動画像Ｂとを同時に再生することを類似度の高い被
参照フレームから順に繰り返すことを特徴とする動画像
の再生システムを提供する。

【００１４】

【作用】上記第１の観点による動画像の再生方法では、
動画像Ａ中の参照フレームに対する動画像Ｂ中の各フレ
ームの類似度を算出し、該類似度に基づいて動画像Ｂの
被参照フレームを決定し、前記参照フレームと前記被参
照フレームとをそれぞれ再生開始位置とし、それらの再
生開始位置から動画像Ａと動画像Ｂとを同時に再生す
る。これにより、動画像Ａ中の参照フレームに対応する
動画像Ｂ中のフレーム（被参照フレーム）をユーザが探
す必要がなくなり、ユーザの負担を軽減することが出来
る。なお、動画像Ａをある動画像の一部分とし、動画像
Ｂを同じ動画像の他部分とすれば、１つの動画像に対し
ても本発明を適用できる。また、動画像Ｂを複数の異な
る動画像とすれば、３つ以上の動画像に対しても本発明
を適用できる。

【００１５】上記第２の観点による動画像の再生方法で
は、動画像中の画像データまたは音響データに基づいて
類似度を算出する。これにより、参照フレームの画像に
類似した画像のフレームを頭出しできるようになる。ま
た、参照フレームの音響に類似した音響のフレームを頭
出しできるようになる。

【００１６】上記第３の観点による動画像の再生方法で
は、画像データまたは音響データの特徴量の差分から類
似度を算出する。画像データまたは音響データの特徴量
の差分は簡単な演算で計算できるので、パソコン等の小
型の計算機でも高速に類似度を算出できるようになる。

【００１７】上記第４の観点による動画像の再生方法で
は、算出した類似度のグラフを画面表示し、その画面上
でユーザにポインティングさせ、ユーザがポインティン
グした位置に最も近いグラフの極値点（類似しているほ
ど類似度が大きい値になるときは極大点、類似している
ほど類似度が小さい値になるときは極小点）に対応する
フレームを被参照フレームとして決定する。これによ
り、被参照フレームの候補が複数あっても、正しい被参
照フレームを決定することが出来る。なお、ユーザは、
動画像Ｂの再生，停止，逆再生等の煩雑な操作をする必
要がなく、グラフの概略の位置をポインティングするだ
けなので、ほとんど負担はない。

【００１８】上記第５の観点による動画像の再生方法で
は、類似度の高い複数のフレームをそれぞれ動画像Ｂの
被参照フレームとして決定し、類似度の高い被参照フレ
ームから順に、前記参照フレームと前記被参照フレーム
とをそれぞれ再生開始位置としそれらの再生開始位置か
ら動画像Ａと動画像Ｂとを同時に再生することを繰り返
す。これにより、被参照フレームの候補が複数あって
も、順に動画像Ａと動画像Ｂとを同時に再生することが
出来る。

【００１９】上記第６の観点から第１０の観点による動
画像の再生システムでは、上記第１の観点から第５の観
点による動画像の再生方法を好適に実施できる。

【００２０】

【実施例】以下、図を用いて本発明の一実施例を説明す
る。なお、これにより本発明が限定されるものではな
い。

【００２１】−第１実施例− 図１は、本発明の動画像の再生システムの第１実施例の
構成を示す概略ブロック図である。この動画像の再生シ
ステム１００において、ＣＲＴ等のディスプレイ装置１
はコンピュータ２の出力画面を表示し、スピーカ１−１
は音声を出力する。コンピュータ２に対する命令は、ポ
インティングデバイス３やキーボード４を使って入力す
ることが出来る。光ディスクやビデオデッキ等のビデオ
再生装置５は、制御線１０を介してコンピュータ２によ
り制御される。ビデオ再生装置５から出力される動画像
Ａの映像信号は、逐次、ビデオ入力装置６によってデジ
タル画像データに変換され、コンピュータ２に入力され
る。コンピュータ２に入力された動画像Ａのデジタル画
像データは、外部情報記憶装置１１に１つのファイルと
して蓄積される。また、ビデオ再生装置５から出力され
る動画像Ｂの映像信号は、逐次、ビデオ入力装置６によ
ってデジタル画像データに変換され、コンピュータ２に
入力される。コンピュータ２に入力された動画像Ｂのデ
ジタル画像データは、外部情報記憶装置１１に１つのフ
ァイルとして蓄積される。動画像の再生処理時に、外部
情報記憶装置１１から動画像Ａおよび動画像Ｂのフレー
ムがメモリ８にロードされる。

【００２２】図２は、コンピュータ２で実行される動画
像の再生処理の説明図である。動画像再生部３０は、Ｃ
ＰＵ９で実行されるプログラムの機能として構成され、
操作制御部３１と表示部Ａ３２と表示部Ｂ３３とからな
る。表示部Ａおよび表示部Ｂは、メモリ８に動画像Ａの
フレーム４０および動画像Ｂのフレーム４１をロード
し、ディスプレイ装置１に表示する。操作制御部３１に
ついては後述する。ユーザは、動画像Ａのフレームの一
つを参照フレームとして指定する。自動頭出し部２０
は、ＣＰＵ９で実行されるプログラムの機能として構成
され、類似度算出部２１と被参照フレーム決定部２２と
からなる。類似度算出部２１は、ユーザが指定した動画
像Ａの参照フレーム（４０）と動画像Ｂの各フレーム４
１の類似度を算出し、被参照フレーム決定部２２に通知
する。被参照フレーム決定部２２は、動画像Ｂの各フレ
ームの類似度に基づいて被参照フレームを決定し、動画
再生部３０へ通知する。

【００２３】動画像再生部３０の操作制御部３１は、動
画像Ａの参照フレーム（４０）および動画像Ｂの被参照
フレーム（４１）をそれぞれ再生開始位置とし、表示部
Ａ３２と表示部Ｂ３３に通知する。表示部Ａ３２は、通
知された再生開始位置（参照フレーム）から動画像Ａの
フレーム４０を順にメモリ８にロードし、ディスプレイ
装置１に表示する。表示部Ｂ３３は、通知された再生開
始位置（被参照フレーム）から動画像Ｂのフレーム４１
を順にメモリ８にロードし、動画像Ａと同期してディス
プレイ装置１に表示する。

【００２４】図３は、動画像の再生処理における表示画
面の例示図である。ディスプレイ装置１の画面には、２
つのウィンドウＡ３２−１，ウィンドウＢ３２−２が並
べて表示される。ウィンドウＡ３２−１には、表示部Ａ
３２により外部記憶装置１１からメモリ８にロードした
動画像Ａのフレーム４０が表示される。ウィンドウＢ３
２−２には、表示部Ｂ３３により外部記憶装置１１から
メモリ８にロードした動画像Ｂのフレーム４１が表示さ
れる。

【００２５】操作パネルウィンドウ３１−１中の選択Ａ
ボタン３１−１ｃをオンにすると、ファイル選択ボタン
３１−ｈ，スクロールバー３１−１ａおよびスキャンボ
タン群３１−１ｂの操作がウィンドウＡ３２−１に対し
てのみ有効になる。選択Ｂボタン３１−１ｄをオンにす
ると、ファイル選択ボタン３１−ｈ，スクロールバー３
１−１ａおよびスキャンボタン群３１−１ｂの操作がウ
ィンドウＢ３２−２に対してのみ有効になる。選択ＡＢ
ボタン３１−１ｅをオンにすると、スクロールバー３１
−１ａおよびスキャンボタン群３１−１ｂの操作がウィ
ンドウＡ３２−１およびウィンドウＢ３２−２の両方に
対して有効になる。これらボタン３１−１ｃ，３１−１
ｄ，３１−１ｅは、いずれかのボタンがオンになると、
他はオフになる。

【００２６】ファイル選択ボタン３１−１ｈは、有効に
なっているウィンドウＡ３２−１またはウィンドウＢ３
２−２中に表示する動画像のファイル名を指定するため
のものである。このファイル選択ボタン３１−１ｈをオ
ンにした後、キーボード４からファイル名を入力する。
スクロールバー３１−１ａは、有効になっているウィン
ドウＡ３２−１または／およびウィンドウＢ３２−２中
に表示している動画像のフレームを移動するためのもの
である。例えば、ツマミ３１−１ｉを左端にドラッグす
れば先頭フレームが表示され、右端にドラッグすれば最
終フレームが表示される。スキャンボタン群３１−１ｂ
は、通常のビデオデッキの操作ボタン群と同様の意味を
持つボタン群である。左のボタンから順に、「先頭フレ
ームを呼び出して停止」，「最終フレームを呼び出して
停止」，「再生開始」，「一時停止」，「逆再生開
始」，「コマ逆送り」，「コマ送り」，「停止」の操作
に対応している。

【００２７】矩形領域ボタン３１−１ｇは、ウィンドウ
Ａ３２−１中に矩形領域３２−１ｂを設定するためのも
のである。この矩形領域ボタン３１−１ｇをオンにした
後、カーソル３４を対角線にドラッグして矩形領域３２
−１ｂを設定する。類似度算出命令ボタン３１−１ｆ
は、前記矩形領域３２−１ｂ内の画像（動画像Ａの参照
フレームの画像）に対する動画像Ｂの各フレームの類似
度を算出するようにユーザが命令するためのものであ
る。

【００２８】ユーザの操作手順を次に示す。 （１）選択Ａボタン３１−１ｃをオンにし、次にファイ
ル選択ボタン３１−１ｈをオンにした後、キーボード４
から動画像Ａのファイル名を入力する。 （２）ウィンドウＡ３２−１中に動画像Ａの画像が表示
されるから、スクロールバー３１−１ａおよびスキャン
ボタン群３１−１ｂを操作して参照フレームを決める。
次に、矩形領域ボタン３１−１ｇをオンにした後、カー
ソル３４を対角線にドラッグして矩形領域３２−１ｂを
設定する。 （３）選択Ｂボタン３１−１ｄをオンにし、次にファイ
ル選択ボタン３１−１ｈをオンにした後、キーボード４
から動画像Ｂのファイル名を入力する。 （４）ウィンドウＢ３２−２中に動画像Ｂの画像が表示
されるから、それを確認する。次に、類似度算出命令ボ
タン３１−１ｆをオンにする。 （５）後述するように、類似度グラフウィンドウ（図９
の２２−２ａ）および類似度グラフ（図９の２２−２
ｂ）が表示される。そこで、その類似度グラフ中の極大
点の近傍をポインティングする。 （６）選択ＡＢボタン３１−１ｅをオンにし、次にスキ
ャンボタン群３１−１ｂの「再生開始」ボタンをオンに
する。

【００２９】図４は、動画像のファイル格納形式の説明
図である。このファイル４２は、１つのヘッダ部４２ｈ
と，複数のフレームデータ部４２ｆ，４２ｆ，…とから
構成されている。図５は、１フレームの画像データ構造
の説明図である。フレーム４３は、画像幅×画像高の画
素データからなり、各画素データは赤成分画素値，緑成
分画素値および青成分画素値からなる。なお、動画像の
ファイルは、データ圧縮形式で保持してもよい。

【００３０】図６は、類似度算出部２１の詳細ブロック
図である。この類似度算出部２１は、差分絶対値計算部
２１-１と，しきい値記憶部２１−４と，しきい値判定
部２１−２と，面積更新部２１−３とからなる。前記差
分絶対値計算部２１−１は、色の特徴に着目して、動画
像Ａの参照フレーム（４０）と動画像Ｂの各フレームの
間で次式の演算を施す。ここで、参照フレームの画素
（i，j）の赤成分画素値をＲij，緑成分画素値をＧij，
青成分画素値をＢijとする。また、動画像Ｂの処理対象
フレームの画素（i，j）の赤成分画素値をｒij，緑成分
画素値をｇij，青成分画素値をｂijとする。また、評価
値をＥijとする。また、（i，j）は、矩形領域３２−１
ｂの範囲とする。 Ｅij＝｜Ｒij−ｒij｜＋｜Ｇij−ｇij｜＋｜Ｂij−ｂij
｜ 前記しきい値記憶部２１−４は、しきい値Ｔを前記しき
い値判定部２１−２に渡す。前記しきい値判定部２１−
２は、評価値Ｅijとしきい値Ｔの間で次式の演算を施
す。 Ａij＝１ … Ｅij＜Ｔ， ＝０ … Ｅij≧Ｔ 前記面積更新部２１- ３は、次式により類似度Ｓを求め
る。 Ｓ＝ΣＡij この類似度Ｓは、動画像Ｂのフレーム中の参照フレーム
に類似した領域の面積を意味している。従って、類似し
ているほど、類似度Ｓは大きい値になる。

【００３１】なお、上記と同様に、１フレームの音の強
弱データについての差分絶対値から類似度を求めても良
い。この場合の類似度は、動画像Ｂのフレーム中の参照
フレームに類似した音の時間を意味する。

【００３２】図７は、被参照フレーム決定部２２の詳細
ブロック図である。この被参照フレーム決定部２２は、
類似度グラフ作成部２２−１と，フレーム番号決定部２
２−２とからなる。前記類似度グラフ作成部２２−１
は、フレーム番号と類似度Ｓとを対応させて、図８に示
すごとき類似度テーブル５０を作成し、フレーム番号決
定部２２−２に渡す。前記フレーム番号決定部２２−２
は、図９に示すごとき類似度グラフウィンドウ２２−２
ａをディスプレイ装置１に表示し、その類似度グラフウ
ィンドウ２２−２ａ中に前記類似度テーブル５０に基づ
いて類似度グラフ２２−２ｂを表示する。そして、ユー
ザにより類似度グラフ２２−２ｂの近傍の位置がポイン
ティングされると、その位置に最も近い類似度グラフ２
２−２ｂの極大点に対応するフレーム番号を求め、その
フレーム番号を動画像再生部３０へ出力する。

【００３３】以上の動画像の再生システム１００によれ
ば、動画像Ｂの再生，停止，逆再生などを繰り返す必要
がなく、動画像Ａと同時に再生して比較したい動画像Ｂ
の頭出しを簡単に行うことが出来る。また、ユーザが動
画像Ｂの再生，停止，逆再生などを繰り返して頭出しす
る場合より高い精度で頭出しすることが出来る。

【００３４】さらに、上記動画像の再生システム１００
によれば、参照フレーム中に矩形領域（処理領域）を設
定できるため、特に比較したい部分に絞って頭出しする
ことが可能である。また、差分絶対値から類似度を算出
するため、簡単な演算で済み、動画像Ｂのフレーム数が
多くても類似度の算出を速く行なえると共にパソコン等
の小型の計算機でも実現でき、低コスト化を図ることが
出来る。また、ユーザが類似度グラフ２２−２ｂの極大
点の近傍をポインティングするため、類似度グラフ２２
−２ｂ中に同程度の極大点が複数ある可能性がある場合
でも、的確に頭出しすることが出来る。

【００３５】−第２実施例− 被参照フレーム決定部２２において、類似度テーブル５
０から類似度Ｓの最大のフレーム番号を選出し、それを
動画像再生部３０に通知するようにしてもよい。この場
合は、類似度グラフの表示やユーザによるポインティン
グも不要になる。

【００３６】−第３実施例− 被参照フレーム決定部２２において、類似度テーブル５
０から類似度Ｓの高い複数のフレーム番号を選出し、そ
れらを類似度Ｓの高い順に動画像再生部３０に通知する
ものとする。また、動画像再生部３０の操作制御部３１
において、通知された順にフレーム番号を被参照フレー
ムとして表示部Ｂに通知し、各被参照フレームから動画
像Ａと動画像Ｂとを同時に再生することを繰り返すよう
にする。このようにすると、動画像Ｂ中に同じ動作が繰
り返し含まれているような場合に有用となる。

【００３７】

【発明の効果】本発明の動画像の再生方法および動画像
の再生システムによれば、動画像Ａと同時に再生して比
較したい動画像Ｂの頭出しを簡単に行うことが出来る。
また、ユーザが動画像Ｂの再生，停止，逆再生などを繰
り返して頭出しする場合より高い精度で頭出しすること
が出来る。また、類似度を画像データや音響データから
算出すれば、画像の類似や音響の類似を基にした頭出し
ができるようになる。また、画像データまたは音響デー
タの特徴量の差分から類似度を算出すれば、簡単な演算
で済むので、動画像Ｂのフレーム数が多くても類似度の
計算を速く行なうことが出来ると共に、パソコン等の小
型の計算機でも実現できる。さらに、類似度のグラフを
表示してユーザにポインティングさせれば、類似したフ
レームが複数箇所にあっても、的確に頭出しできるよう
になる。

【図面の簡単な説明】

【図１】本発明の一実施例における動画像の再生システ
ムの構成ブロック図である。

【図２】本発明の動画像の再生処理の説明図である。

【図３】動画像の再生処理における表示画面の例示図で
ある。

【図４】動画像のファイル格納形式の説明図である。

【図５】１フレームの画像データ構造の説明図である。

【図６】類似度算出部の詳細ブロック図である。

【図７】被参照フレーム決定部の詳細ブロック図であ
る。

【図８】類似度テーブルの例示図である。

【図９】類似度グラフの表示画面の例示図である。

【符号の説明】

１ ディスプレイ装置 ２ コンピュータ ３ ポインティングデバイス ４ キーボード ５ ビデオ再生装置 ６ ビデオ入力装置 ８ メモリ ９ ＣＰＵ １１ 外部情報記憶装置 ２０ 自動頭出し部 ２１ 類似度算出部 ２２ 被参照フレーム決定部 ３０ 動画像再生部 ５０ 類似度テーブル

フロントページの続き (72)発明者 上田 博唯 東京都国分寺市東恋ケ窪１丁目280番地 株式会社日立製作所中央研究所内

Claims (10)

【特許請求の範囲】
1. 【請求項１】 動画像Ａ中の参照フレームに対する動画
   像Ｂ中の各フレームの類似度を算出し、該類似度に基づ
   いて動画像Ｂの被参照フレームを決定し、前記参照フレ
   ームと前記被参照フレームとをそれぞれ再生開始位置と
   し、それらの再生開始位置から動画像Ａと動画像Ｂとを
   同時に再生することを特徴とする動画像の再生方法。
2. 【請求項２】 請求項１に記載の動画像の再生方法にお
   いて、動画像Ａ中の参照フレームに対する動画像Ｂ中の
   各フレームの類似度として、動画像Ａ中の参照フレーム
   の画像データまたは音響データに対する動画像Ｂ中の各
   フレームの画像データまたは音響データの類似度を算出
   することを特徴とする動画像の再生方法。
3. 【請求項３】 請求項２に記載の動画像の再生方法にお
   いて、動画像Ａ中の参照フレームの画像データまたは音
   響データの特徴量と動画像Ｂ中の各フレームの画像デー
   タまたは音響データの特徴量との差分から類似度を算出
   することを特徴とする動画像の再生方法。
4. 【請求項４】 請求項１から請求項３のいずれかに記載
   の動画像の再生方法において、算出した類似度のグラフ
   を画面表示し、その画面上でユーザがポインティングし
   た位置に最も近いグラフの極値点に対応するフレームを
   被参照フレームとして決定することを特徴とする動画像
   の再生方法。
5. 【請求項５】 請求項１から請求項３のいずれかに記載
   の動画像の再生方法において、類似度の高い複数のフレ
   ームをそれぞれ動画像Ｂの被参照フレームとして決定
   し、前記参照フレームと前記被参照フレームとをそれぞ
   れ再生開始位置としそれらの再生開始位置から動画像Ａ
   と動画像Ｂとを同時に再生することを、類似度の高い被
   参照フレームから順に繰り返すことを特徴とする動画像
   の再生方法。
6. 【請求項６】 動画像Ａ中の参照フレームに対する動画
   像Ｂ中の各フレームの類似度を算出する類似度算出手段
   と、前記類似度に基づいて動画像Ｂの被参照フレームを
   決定する被参照フレーム決定手段と、前記参照フレーム
   と前記被参照フレームとをそれぞれ再生開始位置として
   動画像Ａと動画像Ｂとを同時に再生する同時再生手段と
   を具備したことを特徴とする動画像の再生システム。
7. 【請求項７】 請求項６に記載の動画像の再生システム
   において、前記類似度算出手段は、動画像Ａ中の参照フ
   レームの画像データまたは音響データに対する動画像Ｂ
   中の各フレームの画像データまたは音響データの類似度
   を算出することを特徴とする動画像の再生システム。
8. 【請求項８】 請求項７に記載の動画像の再生システム
   において、前記類似度算出手段は、動画像Ａ中の参照フ
   レームの画像データまたは音響データの特徴量と動画像
   Ｂ中の各フレームの画像データまたは音響データの特徴
   量との差分から類似度を算出することを特徴とする動画
   像の再生システム。
9. 【請求項９】 請求項６から請求項８のいずれかに記載
   の動画像の再生システムにおいて、前記被参照フレーム
   決定手段は、類似度のグラフを画面表示し、その画面上
   でユーザがポインティングした位置に最も近いグラフの
   極値点に対応するフレームを被参照フレームとして決定
   することを特徴とする動画像の再生システム。
10. 【請求項１０】 請求項６から請求項８のいずれかに記
    載の動画像の再生システムにおいて、前記被参照フレー
    ム決定手段は、類似度の高い複数のフレームをそれぞれ
    動画像Ｂの被参照フレームとして決定し、前記同時再生
    手段は、前記参照フレームと前記被参照フレームとをそ
    れぞれ再生開始位置としそれらの再生開始位置から動画
    像Ａと動画像Ｂとを同時に再生することを類似度の高い
    被参照フレームから順に繰り返すことを特徴とする動画
    像の再生システム。