JP2010004173A - 音声画像記録装置、プログラム、及び音声画像記録再生システム - Google Patents

Abstract

【課題】プレゼンテーションの場で提示された情報及びそれに関する情報をなるべく欠落させずに記録する。
【解決手段】音声画像記録装置１０は、表示された画像、及び音声を取得し、取得した画像及び音声を時間に関連づけて記憶し、記録された時間が関連づけられたデータを取得し、取得されたデータを、当該データに関連づけられた時間に基づいて特定した画像及び音声に関連づけて登録する。音声画像再生装置２０は、音声画像記録装置１０に記憶された画像及び音声を関連づけられた時間に基づいて同期して再生する際に、記憶された画像及び音声に関連づけて記憶されたデータのうち少なくとも一部を、画像及び音声とともに再生する。
【選択図】図１

Description

本発明は、音声画像記録装置、プログラム、及び音声画像記録再生システムに関する。

近年ではコンピュータから出力されるスライド画像をスクリーンに順次映写しながらプレゼンテーション（会議、講義、インタビュー等におけるものを含む）をすることが一般的になっている。例えば下記の特許文献１には、スライド画像と音声を同期して記録するとともに、記録したスライド画像と音声とを同期して再生する装置が提案されている。
特開２００６−１２７５１８号公報

従来の技術は、表示されるスライド画像、及びスライド画像を参照しながらの口頭解説といったプレゼンテーションの中心となる要素を記録するものであるが、実際にプレゼンテーションが行われている場では、説明者及び会場の様子、ホワイトボードによる説明、実演による説明等のようにプレゼンテーションの主要な要素とはいえないまでもプレゼンテーションに関連する補助的な情報も存在している。それに対して従来の技術では、プレゼンテーションの中心となる要素を記録するに留まっていたため、記録されたデータには実際のプレゼンテーションで提示された情報が欠落してしまうことがあった。

本発明は上記課題に鑑みてなされたものであって、本発明の目的の一つはプレゼンテーションの場で提示された情報をできるだけ欠落させずに記録し、また、このように記録した情報を再生することができる音声画像記録装置、プログラム、及び音声画像記録再生システムを提供することにある。

上記目的を達成するために、請求項１に記載の音声画像記録装置の発明は、表示された画像、及び音声を取得する手段と、前記取得された画像及び音声を時間に関連づけて記憶する記憶手段と、記録された時間が関連づけられたデータを取得する手段と、前記取得されたデータを、当該データに関連づけられた時間に基づいて前記記憶手段から特定した画像及び音声に関連づけて登録する登録手段と、を含むことを特徴とする。

また、請求項２に記載の発明は、請求項１に記載の音声画像記録装置において、前記登録手段は、前記取得された画像又は音声の属性情報の少なくとも一部と、前記取得されたデータの属性情報の少なくとも一部とが関連する場合に、前記データを登録することを特徴とする。

また、請求項３に記載のプログラムの発明は、表示された画像、及び音声を取得する手段と、前記取得された画像及び音声を時間に関連づけて記憶する記憶手段と、記録された時間が関連づけられたデータを取得する手段と、前記取得されたデータを、当該データに関連づけられた時間に基づいて前記記憶手段から特定した画像及び音声に関連づけて登録する登録手段としてコンピュータを機能させることを特徴とする。

また、請求項４に記載の音声画像記録再生システムの発明は、音声画像記録装置と、音声画像再生装置とを含み、前記音声画像記録装置は、表示された画像、及び音声を取得する手段と、前記取得された画像及び音声を時間に関連づけて記憶する記憶手段と、記録された時間が関連づけられたデータを取得する手段と、前記取得されたデータを、当該データに関連づけられた時間に基づいて前記記憶手段から特定した画像及び音声に関連づけて登録する登録手段と、を含み、前記音声画像再生装置は、前記記憶手段に記憶された画像及び音声を関連づけられた時間に基づいて同期して再生する再生手段を含み、前記再生手段は、前記記憶手段に記憶された画像及び音声に関連づけて登録されたデータのうち少なくとも一部を、前記画像及び音声とともに再生する、ことを特徴とする。

また、請求項５に記載の発明は、請求項４に記載の音声画像記録再生システムにおいて、前記データは画像データを含み、前記再生手段は、前記記憶手段に記憶された画像及び音声に関連づけて登録された画像データが複数ある場合には、当該複数の画像データを順次再生する、ことを特徴とする。

また、請求項６に記載の発明は、請求項５に記載の音声画像記録再生システムにおいて、前記再生手段は、前記再生される画像及び音声に関連づけて記憶された時間と、前記画像及び音声に続けて再生される画像及び音声に関連づけて記憶された時間との時間間隔に基づいて前記複数の画像データの各々を表示する表示時間を設定して再生する、ことを特徴とする。

請求項１に記載の発明によれば、プレゼンテーションに関連したデータをその記録日時に基づいて、プレゼンテーションを記録した画像および音声と関連付けて登録することにより、プレゼンテーションの場で提示された情報をできるだけ欠落させずに記録することができる。

請求項２に記載の発明によれば、プレゼンテーションに関連したデータのうち、プレゼンテーションを記録した画像及び音声の属性情報と関連する属性情報を有するものを登録することで、プレゼンテーションに関連するデータを選別して登録することができる。

請求項３に記載の発明によれば、プレゼンテーションに関連したデータをその記録日時に基づいて、プレゼンテーションを記録した画像および音声と関連付けて登録することにより、プレゼンテーションの場で提示された情報をできるだけ欠落させずに記録するようにコンピュータを機能させることができる。

請求項４に記載の発明によれば、プレゼンテーションの場で提示された情報をできるだけ欠落させずに記録し、また、このように記録した情報を再生することができる。

請求項５に記載の発明によれば、画像及び音声に関連付けて登録された複数の画像データを順次表示することで、プレゼンテーションの再生を視聴する者がプレゼンテーションの場で提示された情報を十分に把握することができる。

請求項６に記載の発明によれば、画像が次の画像へと切り替わる間に複数の画像データを効率良く表示することができる。

以下、本発明を実施するための好適な実施の形態（以下、実施形態という）を、図面に従って説明する。

図１には本実施形態に係る音声画像記録再生システム１のシステム構成図を示す。図１に示されるように音声画像記録再生システム１は、音声画像記録装置１０と音声画像再生装置２０とを含み、音声画像記録装置１０と音声画像再生装置２０とはデータ通信可能に接続されている。なお、本実施形態では音声画像記録装置１０に対して接続する音声画像再生装置２０を１台としているが、接続される音声画像再生装置２０は複数台あることとしても構わない。

音声画像記録装置１０は、スライド画像を映写しながら行われるプレゼンテーションを記録する装置であって、記憶部１００、制御部１０２、表示部１０４、入出力制御部１０６、時間管理部１０８、画像データ取得部１１０、音声データ取得部１１２、データ登録判断部１１４、データ登録部１１６、及び通信部１１８を含む。また、音声画像再生装置２０は、音声画像記録装置１０により記録されたプレゼンテーションを再生する装置であって、通信部２００、記録データ取得部２０２、記録データ再生部２０４、音声出力部２０６、表示部２０８、及び入出力制御部２１０を含む。

上記の各装置の機能は、コンピュータ読み取り可能な情報記憶媒体に格納されたプログラムが、図示しない媒体読取装置を用いて各装置に読み込まれ、それらの装置により実行されることで実現されるものとしてよい。なお、プログラムは情報記憶媒体によって各装置に供給されてもよいし、インターネット等のデータ通信ネットワークを介して各装置に供給されてもよい。以下、各装置の詳細について説明する。

まず、音声画像記録装置１０に備えられた各機能について説明する。

記憶部１００は、メモリやハードディスク等の記憶装置を含み構成され、データやプログラムが記憶される。記憶部１００にはプレゼンテーションに係るスライドデータを音声画像記録装置１０の利用者の操作に応じて表示部１０４（液晶ディスプレイ等）に順次映し出すスライド表示プログラムが格納され、ＣＰＵを含み構成される制御部１０２が当該格納されたスライド表示プログラム及びスライドデータに基づいてＶＲＡＭにグラフィックデータを書き込むとともに、当該ＶＲＡＭに書き込まれたグラフィックデータに基づいて表示部１０４にスライド画像を表示する。なお、利用者の操作は入出力制御部１０６に接続されたマウス、キーボード等の入力装置３０により行われる。そして利用者は、表示部１０４にスライド画像を表示しながら口頭で説明を行うことでプレゼンテーションを実行する。以下、音声画像記録装置１０に備えられた上記実行されたプレゼンテーションを記録する機能について説明する。

時間管理部１０８は、クロックを含み、プレゼンテーションの記録開始からの記録時間、情報取得の際の時間間隔、日時情報等を管理する。

画像データ取得部１１０は、表示部１０４に表示されるスライド画像の画像データを取得し、取得した画像データを時間管理部１０８において管理される時間と関連づけて記憶部１００に記録する。上記時間は日時を含み、一意に特定される時間であることとする。画像データ取得部１１０は、表示部１０４に出力されるグラフィックイメージをキャプチャすることにより画像データを取得することとしてよい。取得される画像データの形式はビットマップデータとしてもよいし、ビットマップデータを圧縮した各種形式（ＪＰＥＧ等）に係る圧縮画像データとしてもよい。ここで、本実施形態に係る画像データ取得部１１０は、所定の時間間隔で画像を順次取得し、当該順次取得される画像データの差分量が閾値を超えた場合に、その新たに取得された画像を取得された時間に関連づけて記憶することとする。こうすることで、表示された各スライド画像及びその切り替わったタイミングをそれぞれ関連付けて記憶することができる。

音声データ取得部１１２は、マイクを内蔵し又は外付けのマイクと接続され、プレゼンテーションを行う利用者の音声をマイクにより集音して音声データを取得する。音声データ取得部１１２は取得した音声データを時間管理部１０８において管理される時間と関連づけて記憶部１００に記録する。本実施形態では、画像データ取得部１１０により取得された画像が切り替わるまでの間に取得された音声データを、当該取得された画像及びその画像に対応した時間に関連づけて記憶することとする。

入出力制御部１０６は、入力装置３０やデータ記録装置４０等の外部装置と接続し、当該接続された外部装置との間でデータの入出力を行う。ここでデータ記録装置４０とは、デジタルカメラ、デジタルビデオカメラ、ＩＣレコーダ等の多様な装置を含むこととしてよく、データ記録装置４０は記録するデータに記録日時の情報を付与するものとする。

例えば、データ記録装置４０がプレゼンテーションの様子を撮影したデジタルカメラであるとすると、入出力制御部１０６は、接続されたデジタルカメラに対してデータの転送を要求してデジタルカメラから画像データを受信し、受信した画像データをデータ登録判断部１１４に転送する。

データ登録判断部１１４は、入出力制御部１０６から転送された、記録日時が含まれるデータ（例えば画像データ）に基づいて、当該データをプレゼンテーションの記録データに含めて登録するか否かを判断する。まず、データ登録判断部１１４は転送されたデータの記録日時がプレゼンテーションの実行された時間範囲外にある場合には登録の対象外と判断し、時間範囲内にあるデータのみを登録の対象と判断することとしてよい。また、データ登録判断部１１４は転送されたデータに、ＧＰＳデータ等の位置情報が属性情報として含まれている場合には、当該位置情報とプレゼンテーションの行われた場所を表す位置情報とを照合して位置が一致しない場合には登録の対象外と判断することとしてもよい。

データ登録部１１６は、データ登録判断部１１４によりデータ登録の対象と判断された各データについて、当該各データの記録日時に基づいて特定される、記録されたプレゼンテーションデータの対応箇所にそれぞれ関連づけて登録する処理を行う。データ登録部１１６は、データ登録の対象となるデータに含まれる記録日時が、取得された各スライド画像に関連づけられた時間のどの間に該当するのかに基づいてそのデータを関連づける画像及び音声を特定する。例えば、データの記録日時が第１の画像と第１の画像の次に取得された第２の画像とのそれぞれに関連づけられた時間の間に該当する場合には、当該データを第１の画像に関連づけて記憶部１００に記憶することとする。

ここで図２を参照しながら、データ登録部１１６によるデータの登録処理を具体的に説明する。図２に示されるように、実行されたプレゼンテーションでは、スライド画像Ａ，Ｂ，Ｃ，Ｄがそれぞれこの順で表示されたものとし、各スライド画像Ａ，Ｂ，Ｃ，Ｄは所定の画像取得タイミングにより取得される。ここで各スライド画像Ａ，Ｂ，Ｃ，Ｄが取得された時間を時間Ｔ０１，Ｔ０２，Ｔ０３，Ｔ０４とし、各スライド画像の画像データをＶ０１，Ｖ０２，Ｖ０３，Ｖ０４とする。時間Ｔ０１，Ｔ０２，Ｔ０３，Ｔ０４とＶ０１，Ｖ０２，Ｖ０３，Ｖ０４とはそれぞれ関連づけて記憶される。

また、スライド画像データＶ０１，Ｖ０２，Ｖ０３，Ｖ０４により区切られた時間範囲［Ｔ０１，Ｔ０２］、［Ｔ０２，Ｔ０３］、［Ｔ０３，Ｔ０４］の間に音声データ取得部１１２により取得された音声データＡ０１，Ａ０２，Ａ０３もそれぞれの時間Ｔ０１，Ｔ０２，Ｔ０３及びスライド画像データＶ０１，Ｖ０２，Ｖ０３に関連づけて記憶される。

ここで、例えばデジタルカメラ等のデータ記録装置４０により記録されたプレゼンテーションの補助的なデータ（以下、補助データ）Ｄ０１，Ｄ０２，Ｄ０３，Ｄ０４，Ｄ０５がその記録日時がプレゼンテーションの実行された時間範囲内にあるとして登録対象と判断されたとすると、各補助データはその記録日時が属する時間の範囲に応じて決定されたスライド画像データに関連づけて記憶される。ここで補助データを関連付けるデータはスライド画像データに限られず、時間であっても音声データであっても構わない。なお、図示した例においては、例えば補助データＤ０１及びＤ０２は時間範囲［Ｔ０１，Ｔ０２］に含まれるので、スライド画像データＶ０１に関連づけられる。

図３には、上記処理をデータ記録装置４０から取得される全ての補助データについて行うことにより生成されるプレゼンテーション記録データの一例を示した。図３に示されるように、プレゼンテーション記録データは、時間に関連づけて、スライド画像データ、音声データ、そして補助データを格納したレコードを１又は複数含むテーブルとして構成される。図３に示される例では、補助データＤ０１，Ｄ０２がスライド画像データＶ０１と、補助データＤ０３がスライド画像データＶ０２と、そして補助データＤ０４，Ｄ０５がスライド画像データＶ０３とそれぞれ関連付けて記憶されている。各補助データについてはその記録日時に応じた順番で登録することとしてもよいし、その記録日時をさらに関連付けて登録することとしても構わない。

通信部１１８は、ネットワークインターフェースを含み、他の装置とデータ通信を行う機能を有する。本実施形態では、音声画像記録装置１０は通信部１１８を介して音声画像再生装置２０と接続し、相互にデータ通信を行う。

次に、音声画像再生装置２０に備えられた各機能について説明する。

通信部２００は、ネットワークインターフェースを含み、他の装置とデータ通信を行う機能を有する。本実施形態では、音声画像再生装置２０は通信部２００を介して音声画像記録装置１０と接続し、相互にデータ通信を行う。

記録データ取得部２０２は、音声画像記録装置１０に対してプレゼンテーション記録データの転送要求を通信部２００により送信するとともに、当該要求に応じて音声画像記録装置１０から送信されたプレゼンテーション記録データを通信部２００により受信して取得する。

記録データ再生部２０４は、記録データ取得部２０２により取得されたプレゼンテーション記録データを再生する。記録データ再生部２０４は、プレゼンテーション記録データに含まれる各スライド画像データ及び音声データを関連づけられた時間に従って同期して再生するとともに、スライド画像データ及び音声データに関連づけられた補助データについても併せて再生する。スライド画像データはディスプレイ等を含み構成される表示部２０８により、音声データはスピーカ等を含み構成される音声出力部２０６によりそれぞれ再生される。また、補助データが画像データである場合にはスライド画像データと同様に表示部２０８に表示して再生する。

図４には、本実施形態において記録データ再生部２０４によるプレゼンテーション記録データの再生画面の一例を示した。再生画面には、スライド画像データの一覧を表示するサムネイル表示画面３００、そして上記の一覧から選択されたスライド画像等を表示する主画面３０２とサブ画面３０４が含まれる。図４（Ａ）は、スライド画像データＶ０３の箇所が再生されている状態に対応し、この再生画面の主画面３０２にはスライド画像データＶ０３が表示されるとともに、サブ画面３０４にはスライド画像データＶ０３に関連づけて登録された補助データ（画像データ）Ｄ０４，Ｄ０５がそれぞれ重ね合わされて表示されている。

ここで、入出力制御部２１０に接続されたマウス、キーボード等の入力装置５０から所定の操作入力、例えば表示されたサブ画面３０４上でクリック等が行われると、図４（Ｂ）に示される、補助画像Ｄ０４を主画面３０２に表示した再生画面へと切り替わる。そして、再度、サブ画面上でクリックが行われると、次は補助画像データＤ０５を主画面３０２に表示した再生画面へと切り替わる。なお、上記の再生画面の主画面３０２及びサブ画面３０４に表示する画像の切り替わりのトリガーは、上述した所定の操作入力に限らず、所定の時間が経過する毎に再生画面を上述した態様で切り替えていくこととしてもよい。例えば、上記の再生画面の切り替え時間を、スライド画像データが次のスライド画像データに切り替わるまでの間に表示すべき画像の枚数で割った値に設定し、設定した切り替え時間で順次再生画面の切り替えを行うこととしてもよい。また、再生画面の態様は例示したものに限られるものではなく、スライド画像データを主画面３０２に表示したまま、サブ画面３０４に表示される補助画像のみを順次変更することとしても構わないし、サブ画面３０４の位置も右下隅に限られず他の位置であっても構わない。

また、本発明は上述した実施形態に限定されるものではない。例えば、上述した実施形態では、登録する補助データの選択をコンピュータシステム側が判断しているが、利用者が登録する補助データの選択を行うこととしても構わない。

図５には、利用者が補助データの登録を行う場合における、補助データの登録画面の一例を示した。図５（Ａ）に示される登録画面には、スライド画像データの一覧が表示されたサムネイル表示画面４００、及び上記の一覧から選択されたスライド画像を表示する主画面４０２に加えてその下部に「他のデータをリンク」ボタン４０４が設けられている。ここで、「他のデータをリンク」ボタン４０４を選択することにより、図５（Ｂ）に示される登録する補助データの選択画面に移行する。図５（Ｂ）では、データ記録装置４０から入力された補助データの一覧が表示されており、この一覧の中から選択した補助データを、図５（Ａ）で選択されているスライド画像データに関連づけて登録する。なお、選択可能な補助データとしては、データ記録装置４０から入力されたデータに限られず、システム内に格納されたファイルから検索したものを用いることとしても構わない。

また上述した実施形態では、記録するプレゼンテーションの要素として、スライド画像、音声データ及び補助画像を記録することとしたがこれに限られず、スライド画像を指示したポインタ位置データをさらに関連づけて記録することとしてもよい。この際、ポインタの位置データは、表示されたスライド画像の各一部を指し示すそれぞれのポインタの指示位置情報を、時間管理部１０８により指定される所定の時間間隔で順次取得し記憶部１００に記録することとしてよい。ここでポインタの表示画像中の位置データは、プレゼンテーション記録装置に接続されるマウスの操作量に基づいて取得してもよいし、キャプチャされる画像を画像処理することにより取得してもよい。

また、上述した実施形態では音声画像記録再生システム１をクライアントサーバ型に構成したが、記録及び再生の両方の機能を備えたスタンドアロン型の音声画像記録再生装置として構成することとしても構わない。その他にも、本発明は上記の実施形態に限られず、この分野の通常の知識を有する当業者によって多様な変更、変形又は置換が可能であることはもちろんである。

本実施形態に係る音声画像記録再生システムのシステム構成図である。 データの登録処理を具体的に説明するための図である。 プレゼンテーション記録データの一例を示した図である。 プレゼンテーション記録データの再生画面の一例を示した図である。 補助データの登録画面の一例を示した図である。

符号の説明

１ 音声画像記録再生システム、１０ 音声画像記録装置、２０ 音声画像再生装置、３０ 入力装置、４０ データ記録装置、５０ 入力装置、１００ 記憶部、１０２ 制御部、１０４ 表示部、１０６ 入出力制御部、１０８ 時間管理部、１１０ 画像データ取得部、１１２ 音声データ取得部、１１４ データ登録判断部、１１６ データ登録部、１１８ 通信部、２００ 通信部、２０２ 記録データ取得部、２０４ 記録データ再生部、２０６ 音声出力部、２０８ 表示部、２１０ 入出力制御部、３００ サムネイル表示画面、３０２ 主画面、３０４ サブ画面、４００ サムネイル表示画面、４０２ 主画面、４０４ ボタン。

Claims (6)

1. 表示された画像、及び音声を取得する手段と、
   前記取得された画像及び音声を時間に関連づけて記憶する記憶手段と、
   記録された時間が関連づけられたデータを取得する手段と、
   前記取得されたデータを、当該データに関連づけられた時間に基づいて前記記憶手段から特定した画像及び音声に関連づけて登録する登録手段と、
   を含むことを特徴とする音声画像記録装置。
2. 前記登録手段は、前記取得された画像又は音声の属性情報の少なくとも一部と、前記取得されたデータの属性情報の少なくとも一部とが関連する場合に、前記データを登録する
   ことを特徴とする請求項１に記載の音声画像記録装置。
3. 表示された画像、及び音声を取得する手段と、
   前記取得された画像及び音声を時間に関連づけて記憶する記憶手段と、
   記録された時間が関連づけられたデータを取得する手段と、
   前記取得されたデータを、当該データに関連づけられた時間に基づいて前記記憶手段から特定した画像及び音声に関連づけて登録する登録手段としてコンピュータを機能させることを特徴とするプログラム。
4. 音声画像記録装置と、音声画像再生装置とを含み、
   前記音声画像記録装置は、
   表示された画像、及び音声を取得する手段と、
   前記取得された画像及び音声を時間に関連づけて記憶する記憶手段と、
   記録された時間が関連づけられたデータを取得する手段と、
   前記取得されたデータを、当該データに関連づけられた時間に基づいて前記記憶手段から特定した画像及び音声に関連づけて登録する登録手段と、を含み、
   前記音声画像再生装置は、
   前記記憶手段に記憶された画像及び音声を関連づけられた時間に基づいて同期して再生する再生手段を含み、
   前記再生手段は、前記記憶手段に記憶された画像及び音声に関連づけて登録されたデータのうち少なくとも一部を、前記画像及び音声とともに再生する、
   ことを特徴とする音声画像記録再生システム。
5. 前記データは画像データを含み、
   前記再生手段は、前記記憶手段に記憶された画像及び音声に関連づけて登録された画像データが複数ある場合には、当該複数の画像データを順次再生する、
   ことを特徴とする請求項４に記載の音声画像記録再生システム。
6. 前記再生手段は、前記再生される画像及び音声に関連づけて記憶された時間と、前記画像及び音声に続けて再生される画像及び音声に関連づけて記憶された時間との時間間隔に基づいて前記複数の画像データの各々を表示する表示時間を設定して再生する、
   ことを特徴とする請求項５に記載の音声画像記録再生システム。

Images