JP4743084B2 - 記録装置及び記録プログラム - Google Patents

Description

本発明は、動画撮影を行う記録装置及び記録プログラムに関し、特に、動画とともに音声を記録する記録装置及び記録プログラムに関する。

従来より、ディジタルビデオカメラ等に代表されるように、動画と音声とを同時に記録する記録装置が普及している。また、最近では、半導体を記録媒体として用いて、同時に記録された音声を、対応する符号化方式で圧縮符号化し、さらに、パケット化して多重化させ、ヘッダ情報に同期情報を埋め込んだ形でファイル化する技術も登場している。

このような記録装置について、更には、撮影時に取得する動画のフレームレートを任意に変更でき、この変更されたフレームレートにあわせて記録した音声のサンプルレートを変更させて、再生の際に違和感が生じないように編集する技術も知られている（例えば、特許文献１参照。）。
特開２００４−１８０２９０号公報、図１９〜図２１、第２２頁〜２４頁）。

しかしながら、上記の従来技術では、フレームレートに合わせて音声のサンプルレートを変更するため、再生の際に違和感は生じないものの、サンプルレートの変更による音声品質の低下を免れることはできず、フレームレートを変更した期間の動画の再生時においては、記録時の音声を忠実に再生させることは不可能であった。

そこで、本発明は上記の課題に鑑みてなされたものであり、動画を任意の速度で再生させてもこの動画の記録時に記録された音声は忠実に再生することができる記録装置及び記録プログラムを提供することを目的とする。

上述の課題を解決するために、本発明の請求項１は、動画と音声の記録開始を指示する記録開始指示手段と、該記録開始指示手段によって記録が開始された後に、記録されている動画の再生時における等倍再生以外の再生速度を入力する再生速度入力手段と、前記動画と音声の記録中で且つ該再生速度入力手段による再生速度の入力後、前記動画と音声の記録を継続しつつ該再生速度入力手段による入力の終了を検出する入力終了検出手段と、該再生速度入力手段によって再生速度が入力されてから前記入力終了検出手段によって該入力の終了を検出するまでの期間の時間情報を取得する時間情報取得手段と、前記動画と音声の記録終了を指示する記録終了指示手段と、該記録終了指示手段によって記録終了が指示されると、前記記録開始指示手段による記録開始から前記記録終了指示手段による記録終了までに記録された動画と音声とをファイル化するとともに該ファイルに前記再生速度入力手段によって入力された再生速度情報と前記時間情報取得手段によって取得された時間情報とを付加し、当該ファイルの再生時における前記等倍再生以外の再生速度の期間では、記録時における音声の速度で記録された音声を再生するようにして記憶する記憶手段とを備えたことを特徴とする。

また本発明の請求項２は、上記請求項１において、再生速度を任意に変更する変更手段を更に備え、前記再生速度入力手段は、前記変更手段による再生速度の変更にしたがって、前記等倍再生以外の再生速度として等倍の整数分の１の値を入力することを特徴とする。

また、本発明の請求項３は、上記請求項１または２において、撮像手段と、前記記録開始指示手段により記録開始が指示されると、前記撮像手段を駆動させて動画を取得する動画取得手段とを更に備えたことを特徴とする。

また、本発明の請求項４は、上記請求項１から３のいずれかにおいて、集音手段と、 前記記録開始指示手段により記録開始が指示されると、前記集音手段を駆動させて音声を取得する音声取得手段を更に備えたことを特徴とする。

上述の課題を解決するために、本発明の請求項５は、コンピュータを、動画と音声の記録開始を指示する記録開始指示手段、該記録開始指示手段によって記録が開始された後に、記録されている動画の再生時における等倍再生以外の再生速度を入力する再生速度入力手段、前記動画と音声の記録中で且つ該再生速度入力手段による再生速度の入力後、前記動画と音声の記録を継続しつつ該再生速度入力手段による入力の終了を検出する入力終了検出手段、該再生速度入力手段によって再生速度が入力されてから前記入力終了検出手段によって該入力の終了を検出するまでの期間の時間情報を取得する時間情報取得手段、前記動画と音声の記録終了を指示する記録終了指示手段、該記録終了指示手段によって記録終了が指示されると、前記記録開始指示手段による記録開始から前記記録終了指示手段による記録終了までに記録された動画と音声とをファイル化するとともに該ファイルに前記再生速度入力手段によって入力された再生速度情報と前記時間情報取得手段によって取得された時間情報とを付加し、当該ファイルの再生時における前記等倍再生以外の再生速度の期間では、記録時における音声の速度で記録された音声を再生するようにして所定の記録媒体に記憶させる記憶手段として機能させることを特徴とする。

本発明によれば、動画と音声の記録開始が指示され、この記録開始の指示の後に、記録されている動画の再生時における再生速度が入力されると、この入力された期間の時間情報を取得する。そして、記録終了が指示されると、記録された動画のこの時間情報での再生の際に、この動画とともに記録された音声を等倍再生させるために、入力された再生速度と取得された時間情報とを動画と音声とに対応付けて記憶する。したがって、動画を任意の速度で再生させてもこの動画の記録時に記録された音声は忠実に再生することができる。

以下、本発明の実施形態について、図面を用いて、詳細に説明する。
なお、本実施形態における構成要素は適宜、既存の構成要素等との置き換えが可能であり、また、他の既存の構成要素との組合せを含む様々なバリエーションが可能である。したがって、本実施形態の記載をもって、特許請求の範囲に記載された発明の内容を限定するものではない。

＜動画撮影／再生装置の構成＞
図１は、本実施形態に係る動画撮影／再生装置のブロック図である。
図１において、撮像部１は、動画撮影を行うもので、被写体像光を光電変換するＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）撮像素子と、ＣＣＤ撮像素子の前面に配置されたレンズ系と、ＣＣＤ撮像素子の出力信号をディジタル化するＡ／Ｄコンバータと、ガンマ補正、ホワイトバランス補正、輪郭強調等の画像処理を行う処理回路等が含まれている。

記録・再生データ作成部２は、撮像部１から取り込まれた画像データや、マイクロホン３から取り込まれた音声データをエンコードするものである。

データ記録部４は、記録・再生データ作成部２において、静止画像であれば、例えば、ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔ Ｇｒｏｕｐ）方式、動画、音声であれば、ＭＰＥＧ（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）−２、もしくはＭＰＥＧ−４で採用される予測符号化方式を採用した圧縮符号化形式でエンコードされた画像データや音声データを後述するようにスロー再生開始／終了時間情報とともに記録するものである。ここで、データ記録部４としては、ＤＶＤ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ）、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）、テープ、フラッシュメモリ等、大容量の記録媒体が用いられる。

映像・音声出力部５は、データ記録部４から再生されたＪＰＥＧ方式、ＭＰＥＧ−２、もしくはＭＰＥＧ−４で採用される予測符号化方式を採用した圧縮符号化方式で符号化された画像データや音声データをデコードして、出力するものである。また、データ記録部４でエンコードされた画像信号や音声信号は、モニター６に送られ、再生画像が映し出されるとともに、再生音声が出力される。

制御部７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）からなり、本実施形態の動画記録／再生装置の全体制御を行っている。ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）８には、動画記録／再生装置全体の制御を行うためのプログラム等が記録されている。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９は、一時記憶領域として用いられる。

操作部１０は、ユーザが本実施形態の動画記録／再生装置の操作を行う部分である。本実施形態の動画記録／再生装置では、図２に示すように、録画開始／終了スイッチ２１、写真撮影スイッチ２２、スロー／等倍指示スイッチ２３等が含まれている。

録画開始／終了スイッチ２１は、動画撮影の開始と終了を設定するスイッチで、録画開始／終了スイッチ２１が１回操作されると、動画撮影が開始され、録画開始／終了スイッチ２１が更に操作されると、動画撮影が終了される。

写真撮影スイッチ２２は、写真撮影を行うスイッチで、写真撮影スイッチ２２が操作されると、そのときの撮像データが静止画として保存される。

スロー／等倍指示スイッチ２３は、記録時にスロー再生を指示するためのロータリースイッチで、スロー／等倍指示スイッチ２３が１回操作されると、スロー再生（例えば１／２倍速）となるように設定され、スロー／等倍指示スイッチ２３が更に操作されると、等倍再生に戻される。勿論、操作部１０には、これ以外に、再生、停止、一時停止等の通常の機能を有するスイッチが含まれている。

更に、図３に示すように、ロータリースイッチ構造の倍速設定スイッチ２４を設け、この倍速設定スイッチ２４により、撮影中に、１／２、１／４、１／８等、任意の再生速度となるように、スロー再生速度を設定できるようにしても良い。

また、図１において、外部インターフェース１１は、メモリカードやＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）機器等、外部の機器を接続するためのインターフェースである。

上述のように、本実施形態においては、図２に示すように、録画開始／終了スイッチ２１の他に、写真撮影スイッチ２２、スロー／等倍指示スイッチ２３が設けられている。これにより、録画による動画記録を行いながら、写真撮影を行ったり、スロー再生部分を指定することができる。

つまり、図４（Ｃ）に示すように、録画開始／終了スイッチ２１が操作されると、図４（Ａ）に示すように、動画及び音声の記録処理が行われる。記録を行っている最中に、図４（Ｄ）に示すように、写真撮影スイッチ２２が操作されると、そのときの静止画が取り込まれて記録される。また、図４（Ｅ）に示すように、スロー／等倍指示スイッチ２３が操作されると、このときの時間（図４（Ｂ））が取り込まれ、スロー再生開始／終了時間情報として記録されると共に、これに基づいて、音声再生が動画再生と同期するように同期情報が生成され、この同期情報が音声再生ポイント情報として記録される。

図５は、本実施形態の動画撮影／再生装置における記録データのデータ構造を示すものである。
図５（Ａ）に示すように、記録データは、ヘッダ情報と、動画データと、音声データとからなるファイル化された情報として記録される。更に、写真撮影が行われた場合には、このデータ構造に写真枚数と、写真データとが付加される。

ヘッダ情報には、図５（Ｂ）に示すように、動画形式や、音声形式、録画時間等の管理情報と、音声再生ポイント情報（例えば、「Ｐａ０ ００：００：００」、「Ｐａ１ ００：００：１５」、「Ｐａ２ ００：００：４５」、「Ｐａ３ ００：０１：００」）と、スロー再生開始／終了時間情報（例えば、１／２倍速開始 ００：００：１５、１／２倍速終了 ００：００：３０ １／２倍速開始 ００：０１：１５、１／２倍速終了 ０：０１：４５）とが記録される。スロー再生開始／終了時間情報は、前述したように、スロー／等倍指示スイッチ２３が操作されると、このときの時間が取り込まれて生成される。また、音声再生ポイント情報は、動画再生と音声再生とが同期するように、スロー／等倍指示スイッチ２３により設定されたスロー再生期間に応じて、生成される。

本実施形態では、このように、動画撮影時に、スロー／等倍指示スイッチ２３が操作されると、このときの時間が取り込まれ、スロー記録／再生時間情報が記録されると共に、これに基づいて、音声再生ポイント情報が生成されて、記録される。再生時には、この音声再生ポイント情報を用いることで、動画をスロー再生させながら、これと同期して、音声を順次１倍速で再生させることができる。

＜動画撮影／再生装置の記録時の処理＞
図６は、本実施形態の動画撮影／再生装置の記録時の処理を示すフローチャートである。

図６に示すように、動画撮影モードに設定されていると、撮像部１で撮像された画面は、モニター６にスルー表示（直接表示）される（ステップＳ１）。そして、動画記録指示が検出されたかどうかを判断する（ステップＳ２）。

ステップＳ２で記録開始指示が検出されたら（ステップＳ２の「Ｙｅｓ」）、撮像部１で撮像された画像に基づいて、動画データを記録するとともに、マイクロホン３で取得された音声に基づいて、音声データを記録する（ステップＳ３）。そして、スロー再生指示が検出されたかどうかを判断する（ステップＳ４）。

ステップＳ４で、スロー再生指示が検出されていないときには（ステップＳ４の「Ｎｏ」）、記録終了指示が検出されたかどうかを判断し（ステップＳ５）、記録終了指示が検出されなければ（ステップＳ５の「Ｎｏ」）、ステップＳ３にリターンする。

ステップＳ５で、録画開始／終了スイッチ２１が更に操作されると、記録終了指示が検出される。ステップＳ５で動画終了指示が検出されると（ステップＳ５の「Ｙｅｓ」）、動画データ及び音声データの記録を終了し（ステップＳ６）、ヘッダ情報を生成して、ファイル化して保存する（ステップＳ７）。

ステップＳ４で、スロー／等倍指示スイッチ２３が操作されると、スロー再生指示が検出され（ステップＳ４の「Ｙｅｓ」）、スロー再生開始時間を取得する（ステップＳ８）。そして、動画データ、音声データの記録を継続するとともに（ステップＳ９）、再度スロー／等倍指示スイッチ２３が操作されることによる等倍速再生指示が検出されたかどうかを判断する（ステップＳ１０）。

ステップＳ１０で、再度スロー／等倍指示スイッチ２３が操作されることによる等倍速再生指示が検出されなければ（ステップＳ１０の「Ｎｏ」）、記録終了指示が検出されたかどうかを判断し（ステップＳ１１）、記録終了指示が検出されなければ（ステップＳ１１の「Ｎｏ」）、ステップＳ９にリターンする。

ステップＳ１０で、スロー／等倍指示スイッチ２３が再度操作されることにより等倍速再生指示が検出されると（ステップＳ１０の「Ｙｅｓ」）、スロー再生終了時間情報を取得する（ステップＳ１２）。そして、記録終了指示が検出されたかどうかを判断し（ステップＳ１３）、記録終了指示が検出されなければ（ステップＳ１３の「Ｎｏ」）、ステップＳ３にリターンする。

ステップＳ１１で、録画開始／終了スイッチ２１が更に操作されると、記録終了指示が検出される。そして、ステップＳ１１で、記録終了指示が検出されたら（ステップＳ１１の「Ｙｅｓ」）、記録終了指示時間をスロー再生終了時間情報として取得するとともに（ステップＳ１６）、動画データ及び音声データの記録を終了し（ステップＳ１４）、ステップＳ８で取得したスロー再生開始時間と記録指示終了とともに取得したスロー再生終了時間情報の期間と、これらの期間に基づいて生成した音声再生ポイント情報を含めたヘッダ情報を付加して、記録された動画データ、音声データをファイル化して保存する（ステップＳ１５）。

一方、ステップＳ１３で記録終了指示が検出された場合（ステップＳ１３の「Ｙｅｓ」）には、動画データ及び音声データの記録を終了し（ステップＳ１４）、ステップＳ８で取得したスロー再生開始時間とステップＳ１２で取得したスロー再生終了時間情報の期間と、これらの期間に基づいて生成した音声再生ポイント情報を含めたヘッダ情報を付加して、記録された動画データ、音声データをファイル化して保存する（ステップＳ１５）。

上述のように、本実施形態における動画撮影／再生装置では、記録時に、スロー／等倍指示スイッチ２３によりスロー再生期間が設定されると、スロー再生開始時間と、スロー再生終了時間とが取得され、このスロー再生開始時間とスロー再生終了時間の期間に記録された動画データの再生タイミングに同期させて、音声再生ポイント情報が生成され、これらの情報が記録された動画データ、及び、音声データがファイル化される際にヘッダ情報に付加されてファイル化される。

例えば、図７に示すように、記録時において、時刻Ｔ１で、スロー／等倍指示スイッチ２３が操作されることにより１／２倍速のスロー再生の開始が指示され、時刻Ｔ２で、スロー／等倍指示スイッチ２３が再度操作されることにより１／２倍速のスロー再生の終了が指示されたとする。更に、時刻Ｔ３で、同様に１／２倍速のスロー再生の開始が指示され、時刻Ｔ４で、１／２倍速のスロー再生の終了が指示されたとする。すると、図８に示すように、１／２倍速の開始時間として、時刻Ｔ１（例えばＴ１＝００：００：１５）が取得され、１／２倍速の終了時間として、時刻Ｔ２（例えばＴ２＝００：００：３０）が取得されることにより、１／２倍速再生期間としてＴ１〜Ｔ２が取得される。また同様に、１／２倍速の開始時間として、時刻Ｔ３（例えばＴ３＝００：０１：１５）が取得され、１／２倍速の終了時間として、時刻Ｔ４（例えばＴ４＝００：０１：４５）が取得されることにより、１／２倍速再生期間としてＴ３〜Ｔ４が取得される。

また、一方で図８に示すように、スロー／等倍指示スイッチ２３が操作検出タイミングに応じて音声記録ポイント情報Ｐ０、Ｐ１、Ｐ２、…が取得される。この音声記録ポイント情報から、動画再生と同期するように、音声再生ポイント情報Ｐａ０、Ｐａ１、Ｐａ２、・・・が生成される。

すなわち、１倍速の通常再生の場合には、音声再生ポイント情報は、音声記録ポイント情報と同様に、所定時間Ｔａ（本実施の形態では１５秒）間隔となる。これに対して、１／２倍速に設定されると、その期間の音声再生ポイント情報は、所定時間Ｔａの２倍（例えば３０秒）間隔となる。

つまり、図７に示すようにスロー再生が指示された場合には、図８に示すように、時刻Ｔ０（Ｔ０＝００：００：００）から時刻Ｔ１では、１倍速なので、音声再生ポイントＰａ０〜Ｐａ１の間隔は所定時間Ｔａ（Ｔａ＝１５秒）となり、音声再生ポイントＰａ０は、Ｐａ０＝００：００：００、音声再生ポイントＰａ１は、Ｐａ１＝００：００：１５となる。

また、時刻Ｔ１（Ｔ１＝００：００：１５）から時刻Ｔ２（Ｔ２＝００：００：３０）では、１／２倍速に設定されているので、音声再生ポイントＰａ１〜Ｐａ２は所定間隔Ｔａの２倍（例えば３０秒）となり、音声再生ポイントＰａ１は、Ｐａ１＝００：００：１５、音声再生ポイントＰａ２は、Ｐａ２＝００：００：４５となる。

以下、時刻Ｔ３までは、１倍速なので、各音声再生ポイントの間隔は、所定時間Ｔａ（Ｔａ＝１５秒）の間隔となる。

また、時刻Ｔ３（Ｔ３＝００：０１：１５）から時刻Ｔ４（Ｔ４＝００：０１：４５）では、１／２倍速に設定されているので、音声再生ポイントＰａ５〜Ｐａ６、及びＰａ６〜Ｐａ７は所定間隔Ｔａの２倍（例えば３０秒）となり、音声再生ポイントＰａ５は、Ｐａ５＝００：０１：３０となり、音声再生ポイントＰａ６は、Ｐａ６＝００：０２：００となり、音声再生ポイントＰａ７は、Ｐａ７＝００：０２：３０となる。

以下、時刻Ｔ４から後では、１倍速なので、各音声再生ポイントの間隔は、所定時間Ｔａ（Ｔａ＝１５秒）の間隔となる。

また、例えば、図９に示すように、時刻Ｔ１１で、１／４倍速のスロー再生の開始が指示され、時刻Ｔ１２で、１／４倍速のスロー再生の終了が指示されたとする。更に、時刻Ｔ１３で、１／２倍速のスロー再生の開始が指示され、時刻Ｔ１４で、１／２倍速から１／４倍速への変更が指示され、時刻Ｔ１５で１／４倍速のスロー再生の終了が指示されたとする。

この場合、図１０に示すように、１／４倍速の開始時間として、時刻Ｔ１１（例えばＴ１１＝００：００：１５）が取得され、１／４倍速の終了時間として、時刻Ｔ１２（例えばＴ１２＝００：００：３０）が取得される。更に、１／２倍速の開始時間として、時刻Ｔ１３（例えばＴ１３＝００：０１：１５）が取得され、１／２倍速の終了及び１／４倍速の開始時間として、時刻Ｔ１４（例えばＴ１４＝００：０１：３０）が取得され、１／４倍速のスロー再生の終了時間として、時刻Ｔ１５（例えばＴ１５＝００：０１：４５）が取得されることにより、１／４倍速再生期間としてＴ１１〜Ｔ１２が取得される。また１／２倍速の開始時間として、時刻Ｔ１３が取得され、１／２倍速の終了時間として、時刻Ｔ１４が取得されることにより、１／２倍速再生期間としてＴ１３〜Ｔ１４が取得される。

すると、図１０に示すように、所定時間Ｔａ（例えば１５秒）毎に、音声記録ポイント情報Ｐ０、Ｐ１、Ｐ２、・・・が取得される。この音声記録ポイント情報から、動画再生と同期するように、音声再生ポイント情報Ｐａ０、Ｐａ１、Ｐａ２、・・・が生成される。

すなわち、１倍速の通常再生の場合には、音声再生ポイント情報は、音声記録ポイント情報と同様に、所定時間Ｔａ（例えば１５秒）間隔となる。これに対して、１／２倍速に設定されると、音声再生ポイント情報は、所定時間Ｔａの２倍（例えば３０秒）間隔となり、１／４倍速に設定されると、音声再生ポイント情報は、所定時間Ｔａの４倍（例えば１分）間隔となる。

図９に示すようにスロー再生が指示された場合には、図１０に示すように、時刻Ｔ００（Ｔ００＝００：００：００）から時刻Ｔ１１（Ｔ１１＝００：００：１５）では、１倍速なので、音声再生ポイントＰａ０〜Ｐａ１の間隔は所定時間Ｔａ（Ｔａ＝１５秒）となり、音声再生ポイントＰａ０は、Ｐａ０＝００：００：００、音声再生ポイントＰａ１は、Ｐａ１＝００：００：１５となる。

また、時刻Ｔ１１（Ｔ１１＝００：００：１５）から時刻Ｔ１２（Ｔ１２＝００：００：３０）では１／４倍速に設定されているので、音声再生ポイントＰａ１〜Ｐａ２は所定間隔Ｔａの４倍（例えば１分）となり、音声再生ポイントＰａ１は、Ｐａ１＝００：００：１５、音声再生ポイントＰａ２は、Ｐａ２＝００：０１：１５となる。

以下、時刻Ｔ１３までは、１倍速なので、各音声再生ポイントの間隔は、所定時間Ｔａ（Ｔａ＝１５秒）の間隔となる。

時刻Ｔ１３（Ｔ１３＝００：０１：１５）から時刻Ｔ１４（Ｔ１４＝００：０１：３０）で１／２倍速に設定されているので、音声再生ポイントＰａ５〜Ｐａ６が所定間隔Ｔａの２倍（例えば３０秒）となり、音声再生ポイントＰａ５は、Ｐａ５＝００：０２：００となり、音声再生ポイントＰａ６は、Ｐａ６＝００：０２：３０となる。

また、時刻Ｔ１４（Ｔ１４＝００：０１：１５）から時刻Ｔ１５（Ｔ１５＝００：０１：４５）では、１／４倍速に設定されているので、音声再生ポイントＰａ６〜Ｐａ７が所定間隔Ｔａの４倍（例えば１分）となり、音声再生ポイントＰａ６は、Ｐａ６＝００：０２：３０となり、音声再生ポイントＰａ７は、Ｐａ７＝００：０３：３０となる。

以下、時刻Ｔ１５から後では、１倍速なので、各音声再生ポイントの間隔は、所定時間Ｔａ（Ｔａ＝１５秒）の間隔となる。

以上のようにして取得されたスロー再生の開始時間及び終了時間、及び生成された音声再生ポイントがヘッダ情報として記録される。

＜動画撮影／再生装置の再生時の処理＞
図１１は、本実施形態の動画撮影／再生装置の再生時の処理を示すフローチャートである。

図１１において、再生開始指示が与えられたかどうかを判断し（ステップＳ１０１）、再生開始指示が与えられたら、ヘッダ情報を再生し、スロー再生の開始終了時間情報、及び音声再生ポイント情報を取得する（ステップＳ１０２）そして、動画再生を行い（ステップＳ１０３）、音声再生（ステップＳ１０４）を行う。

動画再生では、後に説明するように、ヘッダの情報から取得されたスロー再生開始時間及び終了時間に基づいて、再生速度が設定される。また、音声再生では、後に説明するように、記録時にヘッダ情報から取得された音声再生ポイント情報に基づいて、音声再生が行われる。

ステップＳ１０３で動画再生を行い、ステップＳ１０４で音声再生を行っている間に、再生終了指示が与えられたかどうかが判断される（ステップＳ１０５）。ステップＳ１０５で、再生終了指示が与えられたと判断されたら（ステップＳ１０５の「Ｙｅｓ」）、動画再生及び音声再生が終了される（ステップＳ１０６）。

図１２は、ステップＳ１０３の動画再生処理を示すものである。図１２において、通常の再生速度で動画再生を行いながら（ステップＳ１１１）、ヘッダ情報から取得されたスロー再生開始／終了時間情報を参照し、スロー再生の開始時間に達したかどうかを判断する（ステップＳ１１２）。ステップＳ１１２で、スロー再生開始時間に達したと判断されたら（ステップＳ１１２の「Ｙｅｓ」）、スロー再生を開始する（ステップＳ１１３）。そして、ヘッダ情報から取得されたスロー再生開始／終了時間情報を参照し、スロー再生終了時間に達したかどうかを判断する（ステップＳ１１４）。ステップＳ１１４で、スロー再生終了時間に達したと判断されたら（ステップＳ１１３の「Ｙｅｓ」）、ステップＳ１１１にリターンし、通常の動画再生に戻る（ステップＳ１１３）。

以上のような処理により、記録時にスロー／等倍指示スイッチ２３により設定したスロー再生期間に応じて、動画の再生速度が自動的に設定される。

図１３は、ステップＳ１０４の音声再生処理を示すものである。図１３において、１倍速の音声再生を行いながら（ステップＳ１２１）、次の音声再生ポイントに達したかどうかを判断し（ステップＳ１２２）、次の音声再生ポイントに達していなければ（ステップＳ１２２の「Ｎｏ」）、所定時間以上（例えばＴａ＋α）（αは微少な時間）経過したかどうかを判断し（ステップＳ１２３）、所定時間以上経過していなければ（ステップＳ１２３の「Ｎｏ」）、音声再生を継続する。

所定時間以上経過する前に、次の音声再生ポイントに達したと判断されたら（ステップＳ１２２の「Ｙｅｓ」）、再生開始位置が次の音声再生ポイントの位置に移される（ステップＳ１２４）。そして、ステップＳ１２１に行き、次の音声再生ポイントから音声再生が行われる（ステップＳ１２１）。

ステップＳ１２３で、所定時間以上経過しても、音声再生ポイントに達していないと判断されたら（ステップＳ１２３の「Ｙｅｓ」）、無音に設定して（ステップＳ１２５）、次の音声再生ポイントに達したかどうかを判断する（ステップＳ１２６）。ステップＳ１２６で、次の音声再生ポイントに達した判断されたら（ステップＳ１２６の「Ｙｅｓ」）、ステップＳ１２４に行き、再生開始位置が次の音声再生ポイントの位置に移される。そして、ステップＳ１２１に行き、次の音声再生ポイントから、音声再生が行われる。

前述したように、音声再生ポイント情報は、通常再生速度の場合には、所定時間Ｔａ毎となっている。このため、通常再生が行われているときには、所定時間Ｔａと同時に、ステップＳ１２２で、次の音声再生ポイントに達したと判断されることになる。この場合、ステップＳ１２４で再生開始位置を次の音声再生ポイントの位置に移し、ステップＳ１２１で、次の音声再生ポイントから音声再生を行うと、音声再生が連続して行われる。

これに対して、１／２倍速のスロー再生の場合には、音声再生ポイント情報は、所定間隔Ｔａの２倍となり、１／４倍速のスロー再生の場合には、音声再生ポイント情報は、所定間隔Ｔａの４倍となっている。このため、スロー再生が行われているときには、ステップＳ１２３で、所定時間以上経過しても、音声再生ポイントに達していないと判断されることになる。この場合、ステップＳ１２５〜Ｓ１２６で、次の再生ポイントに達するまで、無音区間とされる。そして、次の再生ポイントに達したら、ステップＳ１２４で再生開始位置を次の音声再生ポイントの位置に移し、ステップＳ１２１で、次の音声再生ポイントから音声再生が行われる。これにより、スロー再生部分でも、動画に同期させながら、１倍速の速度で音声を再生させることができる。

図７に示すように記録時にスロー再生が指示された場合には、図７（Ａ）に示すように、動画データＶ１、Ｖ２、Ｖ３、・・・が記録され、図７（Ｂ）に示すように、音声データＡ１、Ａ２、Ａ３、…が記録され、図８に示すように、音声再生ポイント情報が記録される。このような動画データ及び音声データを再生させると、図７（Ｃ）及び図７（Ｄ）に示すようになる。

つまり、この場合、図７における区間Ａの記録データは、１倍速で再生が行われる。このため、図７（Ｃ）に示すように、１倍速のレート（３０フレーム／秒）で動画データＶ１が再生される。また、図７（Ｄ）に示すように、音声再生ポイントＰａ０〜Ｐａ１で、１倍速のレートで音声データＡ１が再生される。

区間Ｂの記録データは、２倍速で再生が行われる。このため、図７（Ｃ）に示すように、１／２倍速のレート（１５フレーム／秒）で動画データＶ２が再生される。また、図７（Ｄ）に示すように、音声再生ポイントＰａ１から１倍速のレートで音声データＡ２が再生された後、次の音声再生ポイントＰａ２まで無音区間（ハッチングで示す）となる。

区間Ｃ〜Ｅの記録データは、１倍速で再生が行われる。このため、図７（Ｃ）に示すように、１倍速のレート（３０フレーム／秒）で動画データＶ３、Ｖ４，Ｖ５が再生される。また、図７（Ｄ）に示すように、音声再生ポイントＰａ２〜Ｐａ３、Ｐａ３〜Ｐａ４、Ｐａ４〜Ｐａ５で、１倍速のレートで音声データＡ３、Ａ４、Ａ５が再生される。

区間Ｆ〜Ｇの記録データは、２倍速で再生が行われる。このため、図７（Ｃ）に示すように、１／２倍速のレート（１５フレーム／秒）で動画データＶ６、Ｖ７が再生される。また、図７（Ｄ）に示すように、音声再生ポイントＰａ５及びＰａ６で、１倍速のレートで音声データＡ６、Ａ７がそれぞれ再生された後、次の音声再生ポイントＰａ６及びＰａ７まで、無音区間となる。

区間Ｈの記録データは、１倍速で再生が行われる。このため、図７（Ｃ）に示すように、１倍速のレート（３０フレーム／秒）で動画データＶ８が再生される。また、図７（Ｄ）に示すように、音声再生ポイントＰａ７〜Ｐａ８で、１倍速のレートで音声データＡ１が再生される。

また、図９に示すように記録時にスロー再生が指示された場合には、図９（Ａ）に示すように、動画データＶ１、Ｖ２、Ｖ３、・・・が記録され、図９（Ｂ）に示すように、音声データＡ１、Ａ２、Ａ３、・・・が記録され、図１０に示すように、音声再生ポイント情報が記録される。このような動画データ及び音声データを再生させると、図９（Ｃ）及び図９（Ｄ）に示すようになる。

つまり、この場合、図９における区間Ａの記録データは、１倍速で再生が行われる。このため、図９（Ｃ）に示すように、１倍速のレートで動画データＶ１が再生される。また、図９（Ｄ）に示すように、音声再生ポイントＰａ０〜Ｐａ１で、１倍速のレートで音声データＡ１が再生される。

区間Ｂの記録データは、１／４倍速で再生が行われる。このため、図９（Ｃ）に示すように、１／４倍速のレートで動画データＶ２が再生される。また、図９（Ｄ）に示すように、音声再生ポイントＰａ１で、１倍速のレートで音声データＡ２が再生された後、次の音声再生ポイントＰａ２まで、無音区間となる。

区間Ｃ〜Ｅの記録データは、１倍速で再生が行われる。このため、図９（Ｃ）に示すように、１倍速のレートで動画データＶ３、Ｖ４、Ｖ５が再生される。また、図９（Ｄ）に示すように、音声再生ポイントＰａ２〜Ｐａ３、Ｐａ３〜Ｐａ４、Ｐａ４〜Ｐａ５で、１倍速のレートで音声データＡ３，Ａ４、Ａ５が再生される。

区間Ｆの記録データは、１／２倍速で再生が行われる。このため、図９（Ｃ）に示すように、１／２倍速のレートで動画データＶ６が再生される。また、図９（Ｄ）に示すように、音声再生ポイントＰａ５で、１倍速のレートで音声データＡ６が再生された後、次の音声再生ポイントＰａ６まで、無音区間となる。

区間Ｇの記録データは、１／４倍速で再生が行われる。このため、図９（Ｄ）に示すように、１／４倍速のレートで動画データＶ７が再生される。また、図９（Ｄ）に示すように、音声再生ポイントＰａ６で、１倍速のレートで音声データＡ７が再生された後、次の音声再生ポイントＰａ７まで、無音区間となる。

区間Ｈの記録データは、１倍速で再生が行われる。このため、図９（Ｃ）に示すように、１倍速のレートで動画データＶ８が再生される。また、図９（Ｄ）に示すように、音声再生ポイントＰａ７〜Ｐａ８で、１倍速のレートで音声データＡ１が再生される。

このように、本実施形態では、音声再生ポイント情報Ｐａ０、Ｐａ１、Ｐａ２、・・・の間隔は、１倍速の場合には所定時間Ｔａ（例えば１５秒）となり、１／２倍速の場合には所定時間Ｔａの２倍（例えば３０秒）となり、１／４倍速の場合には所定時間Ｔａの４倍（例えば６０秒）となる。そして、音声データＡ１、Ａ２、Ａ３、・・・は、音声再生情報Ｐａ０、Ｐａ１、Ｐａ２、・・・に同期して１倍速で再生され、次の音声再生ポイントまで、無音区間としている。これにより、スロー再生させた場合に、動画データと音声データとの同期が保たれる。

なお、上述の例では、スロー再生期間では、音声を１倍速で所定時間再生させた後に、次の音声再生ポイントまで、無音区間としているが、無音とせずに、効果音を再生させるようにしても良い。

また、図１１の例では、記録時に生成した音声再生ポイント情報をヘッダ情報から取得して音声情報や動画情報の分割する場合を述べているが、少なくとも記録時において、スロー再生の開始時間及び終了時間を取得していれば、再生時に音声再生ポイント情報を生成するようにしても良い。

さらに、上述の例では、記録時にスロー／等倍指示スイッチ２３により設定したスロー再生期間に応じて、スロー再生開始／終了時間情報をヘッダに記録し、再生時に、このヘッダから取得されたスロー再生開始／終了時間情報により、動画の再生速度を設定するようにしているが、記録時に、再生速度に応じて、フレームレートを設定するようにしても良い。すなわち、例えば、１／２倍速に設定された期間では、記録時に、同一フレームの画像を２回連続して記録し、１／４倍速に設定された期間では、記録時に、同一フレームの画像を４回連続して記録しておくようにしても良い。このようにした場合には、ヘッダ情報にスロー再生開始／終了時間情報を記録しておく必要はなく、また、再生時の再生速度の設定は不要である。

このように、本実施形態によれば、動画データ、音声データの記録時に、スロー／等倍指示スイッチ２３が操作されると、その操作された期間に基づいて再生時に再生すべき動画データの期間を指定できる。また、この指示された再生速度と上記期間とから記録された音声データを等倍再生させる際の音声再生ポイント情報を生成して、記録された動画データと音声データとに対応付けてヘッダに埋め込みファイル化するので、再生装置側でこのファイル化された動画データ及び音声データを再生する場合には、この音声再生ポイント情報に基づいて音声を再生するだけでよい。

また、倍速設定スイッチ２４により記録中であっても任意に再生速度を変更することができ、上記等倍速度の１／２、１／４、１／８・・・というように整数分の１なるように設定できるので、音声データの再生の際に等倍再生に戻す場合のタイミング生成が容易になるという利点がある。

また、撮像部１を備えているので、撮影中に例えば、スロー再生したい期間として任意に指定することができるので、再生時に重要なシーンを探してスロー再生するといった手間を省くことができる。

また、マイク３を備えているので、撮影中に集音した音声を、スロー再生中であっても記録時の音声を忠実に再生することができる。

なお、記録装置の処理をコンピュータ読み取り可能な記録媒体に記録し、この記録媒体に記録されたプログラムを記録装置に読み込ませ、実行することによって本発明の記録装置を実現することができる。ここでいうコンピュータシステムとは、ＯＳや周辺装置等のハードウェアを含む。

また、「コンピュータシステム」は、ＷＷＷ（Ｗｏｒｌｄ Ｗｉｄｅ Ｗｅｂ）システムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。

また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組合せで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

以上、この発明の実施形態につき、図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。

なお、本発明は、ＤＶＤ、ＨＤＤ、テープ、フラッシュメモリ等、大容量の記録媒体に動画を記録する記録装置における変速再生時の音声処理に広く適用することができる。

本発明の実施形態の動画記録／再生装置の構成を示すブロック図である。 本発明の実施形態の動画記録／再生装置における操作部の一例の説明図である。 本発明の実施形態の動画記録／再生装置における操作部の他の例の説明図である。 本発明の実施形態の動画記録／再生装置の動作説明に用いるタイミング図である。 本発明の実施形態の動画記録／再生装置における記録データの構造を示す説明図である。 本発明の実施形態の動画記録／再生装置の動画撮影時の説明に用いるフローチャートである。 本発明の実施形態の動画記録／再生装置における動画再生と音声再生とのタイミング関係の一例の説明に用いるタイミング図である。 本発明の実施形態の動画記録／再生装置における音声再生ポイントの生成の一例の説明図である。 本発明の実施形態の動画記録／再生装置における動画再生と音声再生とのタイミング関係の他の例の説明に用いるタイミング図である。 本発明の実施形態の動画記録／再生装置における音声再生ポイントの生成の他の例の説明図である。 本発明の実施形態の動画記録／再生装置の再生時の説明に用いるフローチャートである。 本発明の実施形態の動画記録／再生装置の動画再生処理の説明に用いるフローチャートである。 本発明の実施形態の動画記録／再生装置の音声再生処理の説明に用いるフローチャートである。

符号の説明

１：撮像部、
２：再生データ作成部、
３：マイクロホン、
４：データ記録部、
５：音声出力部、
６：モニター、
７：制御部、
８：ＲＯＭ、
９：ＲＡＭ、
１０：操作部、
１１：外部インターフェース、
２１：録画開始／終了スイッチ、
２２：写真撮影スイッチ、
２３：スロー／等倍指示スイッチ、
２４：倍速設定スイッチ

Claims (5)

1. 動画と音声の記録開始を指示する記録開始指示手段と、
   該記録開始指示手段によって記録が開始された後に、記録されている動画の再生時における等倍再生以外の再生速度を入力する再生速度入力手段と、
   前記動画と音声の記録中で且つ該再生速度入力手段による再生速度の入力後、前記動画と音声の記録を継続しつつ該再生速度入力手段による入力の終了を検出する入力終了検出手段と、
   該再生速度入力手段によって再生速度が入力されてから前記入力終了検出手段によって該入力の終了を検出するまでの期間の時間情報を取得する時間情報取得手段と、
   前記動画と音声の記録終了を指示する記録終了指示手段と、
   該記録終了指示手段によって記録終了が指示されると、前記記録開始指示手段による記録開始から前記記録終了指示手段による記録終了までに記録された動画と音声とをファイル化するとともに該ファイルに前記再生速度入力手段によって入力された再生速度情報と前記時間情報取得手段によって取得された時間情報とを付加し、当該ファイルの再生時における前記等倍再生以外の再生速度の期間では、記録時における音声の速度で記録された音声を再生するようにして記憶する記憶手段と、
   を備えたことを特徴とする記録装置。
2. 再生速度を任意に変更する変更手段を更に備え、
   前記再生速度入力手段は、前記変更手段による再生速度の変更にしたがって、前記等倍再生以外の再生速度として等倍の整数分の１の値を入力することを特徴とする請求項１に記載の記録装置。
3. 撮像手段と、
   前記記録開始指示手段により記録開始が指示されると、前記撮像手段を駆動させて動画を取得する動画取得手段とを更に備えたことを特徴とする請求項１または２に記載の記録装置。
4. 集音手段と、
   前記記録開始指示手段により記録開始が指示されると、前記集音手段を駆動させて音声を取得する音声取得手段を更に備えたことを特徴とする請求項１から３のいずれかに記載の記録装置。
5. コンピュータを、
   動画と音声の記録開始を指示する記録開始指示手段、
   該記録開始指示手段によって記録が開始された後に、記録されている動画の再生時における等倍再生以外の再生速度を入力する再生速度入力手段、
   前記動画と音声の記録中で且つ該再生速度入力手段による再生速度の入力後、前記動画と音声の記録を継続しつつ該再生速度入力手段による入力の終了を検出する入力終了検出手段、
   該再生速度入力手段によって再生速度が入力されてから前記入力終了検出手段によって該入力の終了を検出するまでの期間の時間情報を取得する時間情報取得手段、
   前記動画と音声の記録終了を指示する記録終了指示手段、
   該記録終了指示手段によって記録終了が指示されると、前記記録開始指示手段による記録開始から前記記録終了指示手段による記録終了までに記録された動画と音声とをファイル化するとともに該ファイルに前記再生速度入力手段によって入力された再生速度情報と前記時間情報取得手段によって取得された時間情報とを付加し、当該ファイルの再生時における前記等倍再生以外の再生速度の期間では、記録時における音声の速度で記録された音声を再生するようにして所定の記録媒体に記憶させる記憶手段、
   として機能させることを特徴とする記録プログラム。

Images