JP2004297658A - 画像処理プログラム及び画像処理装置 - Google Patents

Abstract

【課題】動画ファイルから目的とするフレームの画像を簡単に抽出して静止画ファイルを作成することができる画像処理プログラム及び画像処理装置を提供することを目的とする。
【解決手段】動画ファイルを再生すると、モニタ上の動画表示領域に動画が表示される。そして、その再生中に任意のフレームの画像が選択されると、選択されたフレームの画像が、モニタ上の静止画表示領域に表示される。これにより、動画ファイルの再生中にユーザが気に入ったフレームを任意に選択でき、選択したフレームの画像を動画の再生画面と同じ画面上で確認できる。
【選択図】 図９

Description

【０００１】
【発明の属する技術分野】
本発明は画像処理プログラム及び画像処理装置に係り、特に動画を再生しながら任意のフレームの画像を抽出し、静止画ファイルとして記録媒体に記録する画像処理プログラム及び画像処理装置に関する。
【０００２】
【従来の技術】
近年、デジタルスチルカメラは、静止画と動画の両方の記録再生機能を備えたものが増えており、１台のカメラで静止画と動画の両方の記録と再生ができるようにされている。このように動画の記録と再生が可能なデジタルスチルカメラでは、記録媒体に記録された複数の動画ファイルの中から所望の動画ファイルを再生するにあたり、各動画ファイルに対応したサムネイル画像をモニタに表示するようにされており、ユーザは、このモニタに表示されたサムネイル画像の中から再生する動画ファイルを選択するようにされている。そして、サムネイル画像には、通常、動画データの先頭の１フレームが代表画面として設定される。
【０００３】
しかしながら、撮影内容によっては先頭フレームが常にその動画ファイルを代表しているとは限らず、このように先頭フレームをサムネイル画像として設定すると、ユーザが目的とする動画ファイルを探しづらいという問題がある。
【０００４】
そこで、特許文献１では、撮影した動画から所定の画面抽出規則に従って複数の画面を自動的に抽出し、その抽出した画面のサムネイル画像を一画面内に配列させたインデックス画を作成するとともに、静止画ファイルとして記録媒体に記録することが提案されている。
【０００５】
【特許文献１】
特開２００１−２１１４２１号公報
【０００６】
【発明が解決しようとする課題】
しかしながら、特許文献１では、所定の画面抽出規則に従って動画ファイルから画面が自動的に抽出されていくため、ユーザが希望する画面を抽出できないという欠点がある。
【０００７】
本発明はこのような事情に鑑みてなされたもので、動画ファイルから目的とするフレームの画像を簡単に抽出して静止画ファイルを作成することができる画像処理プログラム及び画像処理装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】
請求項１に係る発明は、前記目的を達成するために、記録媒体に記録された動画ファイルを再生し、モニタ上に設定された動画表示領域に動画を表示する機能と、前記動画ファイルの再生中に選択されたフレームの画像を前記モニタ上の前記動画表示領域とは異なる領域に設定された静止画表示領域に表示する機能と、をコンピュータに実行させることを特徴とする画像処理プログラムを提供する。
【０００９】
本発明によれば、動画ファイルを再生すると、モニタ上の動画表示領域に動画が表示される。そして、その再生中に任意のフレームの画像が選択されると、選択されたフレームの画像が、モニタ上の静止画表示領域に表示される。これにより、動画ファイルの再生中にユーザが気に入ったフレームを任意に選択でき、選択したフレームの画像を動画の再生画面と同じ画面上で確認できる。
【００１０】
また、請求項２に係る発明は、前記目的を達成するために、前記動画ファイルの再生時に再生済の時間と全記録時間との割合を前記モニタの再生バー表示領域にバーグラフ表示する機能と、前記動画ファイルの再生中に選択されたフレームの選択ポイントを前記バーグラフ上に表示する機能と、を前記コンピュータに実行させることを特徴とする請求項１に記載の画像処理プログラムを提供する。
【００１１】
本発明によれば、動画ファイルの再生時に再生済の時間と全記録時間との割合がモニタ上にバーグラフ表示される。そして、この動画ファイルの再生中にフレームの選択が行なわれると、選択されたフレームの選択ポイントがバーグラフ上に表示される。これにより、動画ファイル中の選択ポイントを時間軸上で一目で確認できる。
【００１２】
また、請求項３に係る発明は、前記目的を達成するために、選択したフレームの画像データを含む静止画ファイルを作成し、記録媒体に記録する機能をコンピュータに実行させることを特徴とする請求項１又は２に記載の画像処理プログラムを提供する。
【００１３】
本発明によれば、選択した画像を静止画ファイルとして記録媒体に記録することができる。
【００１４】
また、請求項４に係る発明は、前記目的を達成するために、前記静止画ファイルには、選択したフレームの画像データと、その選択したフレームの前記動画ファイル上での位置のデータとが、含まれることを特徴とする請求項３に記載の画像処理プログラムを提供する。
【００１５】
本発明によれば、選択した画像と抽出元の動画ファイルとを関連付けて記録媒体に記録することができる。
【００１６】
また、請求項５に係る発明は、前記目的を達成するために、前記動画ファイルの再生中に順次選択されたフレームの画像を前記モニタ上に設定された複数の静止画表示領域に順次表示する機能をコンピュータに実行させることを特徴とする請求項１、２、３又は４に記載の画像処理プログラムを提供する。
【００１７】
本発明によれば、モニタ上に静止画表示領域が複数設定されており、動画再生中に選択されたフレームの画像が順次表示される。これにより、複数のフレームを選択した場合であっても選択した画像を容易に把握することができる。
【００１８】
また、請求項６に係る発明は、前記目的を達成するために、前記動画ファイルの再生中に順次選択されたフレームの画像を前記モニタ上に設定された静止画表示領域に順次入れ替えて表示する機能をコンピュータに実行させることを特徴とする請求項１、２、３、４又は５に記載の画像処理プログラムを提供する。
【００１９】
本発明によれば、動画ファイルの再生中に順次選択されたフレームの画像が静止画表示領域に順次入れ替えられて表示される。これにより、複数の順次画像を選択した場合であっても、選択した瞬間の画像を動画の再生画面と同じ画面上で容易に確認することができる。
【００２０】
また、請求項７に係る発明は、前記目的を達成するために、前記動画ファイルの再生後、前記静止画表示領域に表示された画像が選択されると、その選択された画像に対応するフレームの位置で前記動画を前記動画表示領域に一時停止させて表示させる機能をコンピュータに実行させることを特徴とする請求項１、２、３、４、５又は６に記載の画像処理プログラムを提供する。
【００２１】
本発明によれば、動画ファイルの再生後、静止画表示領域に表示された画像を選択すると、その選択された画像に対応するフレームの位置で動画が動画表示領域に一時停止表示される。これにより、たとえば静止画表示領域が動画表示領域よりも小さく設定されている場合に静止画表示領域に表示された画像を動画表示領域に拡大した状態で表示することができる。
【００２２】
また、請求項８に係る発明は、前記目的を達成するために、記録媒体に記録された動画ファイルを再生し、モニタ上に設定された動画表示領域に動画を表示する動画表示手段と、前記動画ファイルの再生中に静止画として抽出するフレームを選択する選択手段と、前記選択手段で選択されたフレームの画像を前記モニタ上の前記動画表示領域とは異なる領域に設定された静止画表示領域に表示する静止画表示手段と、を備えたことを特徴とする画像処理装置を提供する。
【００２３】
本発明によれば、記録媒体に記録された動画ファイルを再生すると、モニタ上の動画表示領域に動画が表示される。そして、その再生中に任意のフレームの画像が選択手段によって選択されると、その選択されたフレームの画像が、モニタ上の静止画表示領域に表示される。これにより、動画ファイルの再生中にユーザが気に入ったフレームを任意に選択でき、選択したフレームの画像を動画の再生画面と同じ画面上で確認できる。
【００２４】
また、請求項９に係る発明は、前記目的を達成するために、前記動画ファイルの再生時に再生済の時間と全記録時間との割合を前記モニタの再生バー表示領域にバーグラフ表示する再生バー表示手段と、前記選択手段で選択されたフレームの選択ポイントを前記バーグラフ上に表示する選択ポイント表示手段と、を備えたことを特徴とする請求項８に記載の画像処理装置を提供する。
【００２５】
本発明によれば、動画ファイルの再生時に再生済の時間と全記録時間との割合が再生バー表示手段によってモニタ上にバーグラフ表示される。そして、この動画ファイルの再生中にフレームの選択が行なわれると、選択されたフレームの選択ポイントが選択ポイント表示手段によってバーグラフ上に表示される。これにより、動画ファイル中の選択ポイントを時間軸上で一目で確認できる。
【００２６】
また、請求項１０に係る発明は、前記目的を達成するために、前記選択手段で選択されたフレームの画像データを含む静止画ファイルを作成する静止画ファイル作成手段と、前記静止画ファイル作成手段によって作成された静止画ファイルを記録媒体に記録する静止画ファイル記録手段と、を備えたことを特徴とする請求項８又は９に記載の画像処理装置を提供する。
【００２７】
本発明によれば、選択手段によって選択されたフレームの画像データを含む静止画ファイルが、静止画ファイル作成手段によって作成され、静止画ファイル記録手段によって記録媒体に記録される。
【００２８】
また、請求項１１に係る発明は、前記目的を達成するために、前記静止画ファイル作成手段で作成される静止画ファイルは、前記選択手段で選択されたフレームの画像データと、その選択されたフレームの前記動画ファイル上での位置のデータとが含まれることを特徴とする請求項１０に記載の画像処理装置を提供する。
【００２９】
本発明によれば、選択した画像と抽出元の動画ファイルとを関連付けて記録媒体に記録することができる。
【００３０】
また、請求項１２に係る発明は、前記目的を達成するために、前記静止画表示手段は、前記動画ファイルの再生中に前記選択手段によって順次選択されたフレームの画像を前記モニタ上に設定された複数の静止画表示領域に順次表示することを特徴とする請求項８、９、１０又は１１に記載の画像処理装置を提供する。
【００３１】
本発明によれば、モニタ上に静止画表示領域が複数設定されており、動画再生中に選択されたフレームの画像が順次表示される。これにより、複数のフレームを選択した場合であっても選択した画像を容易に把握することができる。
【００３２】
また、請求項１３に係る発明は、前記目的を達成するために、前記静止画表示手段は、前記動画ファイルの再生中に順次選択されたフレームの画像を前記モニタ上に設定された静止画表示領域に順次入れ替えて表示することを特徴とする請求項８、９、１０、１１又は１２に記載の画像処理装置を提供する。
【００３３】
本発明によれば、動画ファイルの再生中に順次選択されたフレームの画像が静止画表示領域に順次入れ替えられて表示される。これにより、複数の順次画像を選択した場合であっても、選択した瞬間の画像を動画の再生画面と同じ画面上で容易に確認することができる。
【００３４】
また、請求項１４に係る発明は、前記目的を達成するために、前記モニタ上に設定された静止画表示領域に表示された画像を選択する静止画像選択手段を備え、前記動画表示手段は、前記静止画像選択手段によって選択された画像に対応するフレームの位置で前記動画を前記動画表示領域に一時停止させて表示させることを特徴とする請求項８、９、１０、１１、１２又は１３に記載の画像処理装置を提供する。
【００３５】
本発明によれば、動画ファイルの再生後、静止画表示領域に表示された画像を静止画像選択手段によって選択すると、その選択された画像に対応するフレームの位置で動画が動画表示領域に一時停止表示される。これにより、たとえば静止画表示領域が動画表示領域よりも小さく設定されている場合に静止画表示領域に表示された画像を動画表示領域に拡大した状態で表示することができる。
【００３６】
また、請求項１５に係る発明は、前記目的を達成するために、撮影光学系と、撮像素子と、前記撮影光学系を介して前記撮像素子で撮像される画像を所定の周期で連続的に取り込み、動画ファイルを作成する動画ファイル作成手段と、前記動画ファイル作成手段によって作成された動画ファイルを記録媒体に記録する動画ファイル記録手段と、を備えたことを特徴とする請求項８、９、１０、１１、１２、１３又は１４に記載の画像処理装置を提供する。
【００３７】
本発明によれば、動画の撮影を行なうことができ、記録された動画ファイルに対して静止画の抽出操作を行なうことができる。
【００３８】
【発明の実施の形態】
以下、添付図面に従って本発明に係る画像処理プログラム及び画像処理装置の好ましい実施の形態について詳説する。
【００３９】
図１〜図３は、それぞれ本発明が適用されたカメラの一実施形態を示す正面図、側面図、背面図である。
【００４０】
このカメラ１０は、静止画と動画の両方の記録再生機能を備えたデジタルカメラであり、そのカメラボディ１２の正面には、撮影レンズ１４、ストロボ１６、ストロボ調光センサ１８、セルフタイマーランプ２０が設けられている。また、カメラボディ１２の側面には、シャッターボタン２２、ズームレバー２４、ストロボボタン２６、マクロボタン２８等が設けられており、背面には、液晶モニタ３０、表示ボタン３２、メニュー／ＯＫボタン３４、十字ボタン３６、ＢＡＣＫボタン３８、電源ボタン４０、モードスイッチ４２、スピーカ４４等が設けられている。なお、図には示されていないが、カメラボディ１２の上面には、マイクが設けられている。
【００４１】
モードスイッチ４２は、カメラ１０のモードを設定するスイッチとして機能し、このモードスイッチ４２をスライド操作することにより、カメラ１０のモードが「スチルモード」、「ムービーモード」、「再生モード」のいずれか１つに設定される。ここで、「スチルモード」は、静止画の記録を行なうモードであり、「ムービーモード」は、動画の記録を行なうモードである。そして、「再生モード」は、記録された静止画又は動画の再生を行なうモードである。
【００４２】
シャッターボタン２２は、スチルモードの下、静止画の撮影実行を指示するボタンとして機能するとともに、ムービーモードの下、動画の撮影開始と停止を指示するボタン（いわゆる録画ボタン）として機能する。このシャッターボタンは、「半押し」と「全押し」の二段式のスイッチで構成されており、「半押し」でスイッチＳ１がＯＮになり、「全押し」でスイッチＳ２がＯＮになる。
【００４３】
ズームレバー２４は、撮影時に撮影画像のズーム（テレ／ワイド）を指示するボタンとして機能するとともに、再生時に表示画像のズーム（拡大／縮小）を指示するスイッチとして機能する。このズームレバー２４は、上下方向にスライド自在に設けられており、上方向に操作することにより、ズームがテレ側（撮影時）又は拡大側（再生時）に操作され、下方向に操作することにより、ズームがワイド側（撮影時）又は縮小側（再生時）に操作される。
【００４４】
ストロボボタン２６は、スチルモードの下、ストロボモードを選択するボタンとして機能し、マクロボタン２８は、スチルモードの下、マクロ機能のＯＮ／ＯＦＦを指示するボタンとして機能する。
【００４５】
液晶モニタ３０は、記録メディアに記録された画像ファイルの再生用画面として使用されるほか、撮影中のリアルタイム映像（スルー画）が表示されて電子ビューファインダとして使用される。また、ユーザが各種設定操作を行う際にメニューの表示画面として使用されるとともに、撮影した画像の編集用画面として使用される。表示ボタン３２は、この液晶モニタ３０の表示切替を指示するボタンとして機能する。
【００４６】
メニュー／ＯＫボタン３４は、各モードの通常画面からメニュー画面への遷移を指示するボタンとして機能するとともに、選択内容の確定（登録）や処理の実行（確認）を指示するボタンとして機能する。
【００４７】
十字ボタン３６は、上下左右四方向の指示を入力するボタンとして機能し、メニュー画面などから所望の項目を選択したり、各メニューにおける各種設定項目の選択内容を指示する際に使用される。
【００４８】
ＢＡＣＫボタン３８は、入力操作のキャンセル等を指示するボタンとして機能し、各種設定操作等を途中でやめるときなどに使用される。
【００４９】
図４は、図１〜図３に示した本実施の形態のカメラ１０の内部構成を示すブロック図である。
【００５０】
同図において、ＣＰＵ５０は、本カメラシステムを統括制御する制御部であり、上述したシャッターボタン２２、ズームレバー２４、ストロボボタン２６、マクロボタン２８、表示ボタン３２、メニュー／ＯＫボタン３４、十字ボタン３６、ＢＡＣＫボタン３８、電源ボタン４０、モードスイッチ４２等のカメラ操作部５４からの入力に基づき所定のプログラムに従って各回路を統括制御する。ＲＯＭ５２には、このＣＰＵ５０が処理するプログラム及び制御に必要な各種データ等が格納されている。
【００５１】
撮影レンズ１４を通過した光は、絞り５６によって光量が調節された後、ＣＣＤ５８に入射する。ＣＣＤ５８の受光面には、フォトセンサが平面的に配列されており、撮影レンズ１４を介してＣＣＤ５８の受光面に結像された被写体像は、各フォトセンサによって入射光量に応じた量の信号電荷に変換される。
【００５２】
各フォトセンサに蓄積された信号電荷は、ＣＣＤドライバ６０から与えられるパルスに基づいて信号電荷に応じた電圧信号（画像信号）として順次読み出され、アナログ信号処理部６２に出力される。
【００５３】
アナログ信号処理部６２は、サンプリングホールド回路、色分離回路、ゲイン調整回路等の信号処理部を含み、このアナログ信号処理部６２において、相関二重サンプリング（ＣＤＳ）処理並びにＲ，Ｇ，Ｂの各色信号に色分離処理が施され、各色信号の信号レベルの調整（プリホワイトバランス処理）が行われる。アナログ信号処理部６２から出力された信号は、Ａ／Ｄ変換器６４によりデジタル信号に変換された後、内蔵バッファ６６を介してＲＡＭ６８に格納され、ＲＡＭ６８からデジタル信号処理部７０へ出力される。
【００５４】
なお、ＣＣＤドライバ６０、アナログ信号処理部６２及びＡ／Ｄ変換器６４には、タイミングジェネレータ６７からタイミング信号が与えられ、このタイミング信号によって各回路の同期がとられている。
【００５５】
デジタル信号処理部７０は、輝度・色差信号生成回路、ガンマ補正回路、シャープネス補正回路、コントラスト補正回路、ホワイトバランス補正回路等の画像信号処理部及び音声信号処理部を含むデジタルシグナルプロセッサ（ＤＳＰ）で構成され、ＣＰＵ５０からのコマンドに従って画像信号及び音声信号を処理する。デジタル信号処理部７０に入力された画像データは、輝度信号（Ｙ信号）及び色差信号（Ｃｒ，Ｃｂ 信号）に変換されるとともに、ガンマ補正等の所定の処理が施され、ＲＡＭ６８に格納される。
【００５６】
ＲＡＭ６８に格納された輝度・色差信号（ＹＣ信号）は、ＶＲＡＭ７６に出力され、ＶＲＡＭ７６からエンコーダ７８に出力される。エンコーダ７８に出力されたＹＣ信号は、ここでキャラクタジェネレータ８０から供給される文字や記号、図形データと共に表示用の所定方式の信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換され、Ｄ／Ａ変換器８２を介して液晶モニタ３０に出力される。これにより、画像データの画像内容が液晶モニタ３０の画面上に表示される。
【００５７】
そして、ＣＣＤ５８から出力される画像信号によってＲＡＭ６８内の画像データが定期的に書き換えられ、その画像データから生成される映像信号が液晶モニタ３０に供給されることにより、ＣＣＤ５８を介して入力される画像がリアルタイムに液晶モニタ３０に表示される。撮影者は、この液晶モニタ３０に映し出される画像（スルー画）を確認することにより、撮影画角、ピント状態等を確認することができる。
【００５８】
モードスイッチ４２によりスチルモードが選択されると、静止画の記録が可能になり、この状態でシャッターボタン２２が半押しされると（Ｓ１ＯＮ）、ＡＦ制御が行なわれ、主要被写体にピントが合わせられる。このＡＦ制御は、たとえばコントラストＡＦにより行なわれ、Ｇ信号の高周波成分が最大になるように撮影レンズ１４を移動させて、主要被写体にピントを合わせる。
【００５９】
また、これと同時に測光が行なわれ、被写体輝度（撮影ＥＶ値）が求められる。そして、求めた撮影ＥＶ値に基づいて撮影時の絞り値とシャッタースピード（電荷蓄積時間）が決定される。測光は、たとえばＲ、Ｇ、Ｂ信号を取り込み、これらのＲ、Ｇ、Ｂ信号を積算した積算値に基づいて撮影ＥＶ値が求められる。
【００６０】
この後、シャッターボタン２２が全押しされると（Ｓ２ＯＮ）、決定した絞り値、シャッタースピードで撮影が行なわれ、１コマ分の画像データがＲＡＭ６８に取り込まれる。ＲＡＭ６８に取り込まれた画像データは、デジタル信号処理部７０で所定の信号処理が施された後、ＲＡＭ６８を介して圧縮伸張処理部８４に送られる。
【００６１】
圧縮伸張処理部８４は、ＣＰＵ５０からの指示に従い画像データを所定の圧縮フォーマット（たとえばＪＰＥＧ）で圧縮し、圧縮された画像データは、所定形式の静止画ファイルとして、カードインターフェース８６を介してメモリカード８８に記録される。
【００６２】
図５は静止画ファイルの構造を示す概念図である。同図に示すように、静止画ファイルは、ヘッダ及び静止画データで構成される。ヘッダには、総ファイルサイズ、データフォーマット等のヘッダ情報やサムネイル画像データ等が記録され、静止画データの部分には、所定の圧縮フォーマット（たとえばＪＰＥＧ）で圧縮された画像データが記録される。
【００６３】
モードスイッチ４２によってムービーモードが選択されたときには、音声付き動画の記録が可能となる。この状態でシャッターボタン２２が全押しされると（Ｓ２ＯＮ）、録画動作がスタートし、あらかじめ設定されたフレームレートで画像データがＲＡＭ６８に取り込まれる。ＲＡＭ６８に取り込まれた画像データは、デジタル信号処理部７０で所定の信号処理が施されたのち、ＲＡＭ６８を介して圧縮伸張処理部８４に送られる。
【００６４】
圧縮伸張処理部８４は、ＣＰＵ５０からの指示に従い画像データを所定の圧縮フォーマット（たとえばモーションＪＰＥＧ）で圧縮し、圧縮された画像データは、所定形式の動画ファイル（たとえばＡＶＩファイル）として、カードインターフェース８６を介してメモリカード８８に記録される。
【００６５】
なお、録画動作は、シャッターボタン２２を更にもう一度全押しすることにより終了する。また、動画内の音声データは、図示しないマイクからの信号をアンプで増幅し、Ａ／Ｄ変換することによって取得される。
【００６６】
図６は動画ファイルの構造を示す概念図である。同図に示すように、動画ファイルは、ヘッダ、動画データ及びデータインデックスで構成される。
【００６７】
ヘッダには、総ファイルサイズ、総フレーム数、総音声サイズなどのヘッダ情報や先頭フレームのサムネイル画像データ等が記録される。
【００６８】
動画データの部分には動画データ本体が記録される。動画データ本体は、各フレームの画像を形成する静止画の画像データが、所定の圧縮フォーマット（たとえばＪＰＥＧ）で圧縮された画像データ（Ｖｉｄｅｏ Ｄａｔａ）と、それぞれに対応する音声データ（Ａｕｄｉｏ Ｄａｔａ）がインターリーブされて記録される。
【００６９】
データインデックスには、動画データ内の個々の画像データ（Ｖｉｄｅｏ Ｄａｔａ ）及び音声データ（Ａｕｄｉｏ Ｄａｔａ）へのアクセスに必要な情報（アドレス等）が記録され、このインデックス情報によって音声データが１秒ごとに管理され、圧縮画像データが１フレームごとに管理される。
【００７０】
モードスイッチ４２によって再生モードが選択されると、メモリカード８８に記録された画像ファイルの再生が可能になり、メモリカード８８に最後に記録された画像ファイルの画像が液晶モニタ３０に表示される。このとき、最後に記録された画像ファイルが動画ファイルの場合は、先頭フレームの画像が表示され、この状態で十字ボタン３６の左右キーを押すことにより、順次コマ送りされて再生される。
【００７１】
静止画ファイルの再生は、まず、ＣＰＵ５０からの指令に基づき静止画ファイルに収納された圧縮画像データがＲＡＭ６８に読み出される。そして、ＲＡＭ６８から圧縮伸張処理部８４に送られて伸長処理が施される。伸張された静止画像データは、ＶＲＡＭ７６に送られ、ＶＲＡＭ７６からエンコーダ７８に出力される。エンコーダ７８に出力された静止画像データは、ここでキャラクタジェネレータ８０から供給される文字や記号、図形データと共に表示用の所定方式の信号に変換され、Ｄ／Ａ変換器８２を介して液晶モニタ３０に出力される。これにより、静止画ファイルの画像が液晶モニタ３０に再生表示される。
【００７２】
一方、動画ファイルの再生は、ＣＰＵ５０からの指令に基づき動画ファイルに収納された圧縮画像データが１フレームずつＲＡＭ６８に読み出される。そして、ＲＡＭ６８から圧縮伸張処理部８４に順次送られ、伸長処理が施される。伸張された各フレームごとの静止画像データは、順次ＶＲＡＭ７６に送られ、ＶＲＡＭ７６からエンコーダ７８に出力される。エンコーダ７８に出力された各フレームごとの静止画像データは、ここでキャラクタジェネレータ８０から供給される文字や記号、図形データと共に表示用の所定方式の信号に変換され、Ｄ／Ａ変換器８２を介して液晶モニタ３０に出力される。これにより、液晶モニタ３０上に静止画像が順次更新されて表示され、動画像が形成される。
【００７３】
なお、動画ファイルの再生は、液晶モニタ３０に先頭フレームの画像が示されている状態で所定の操作ボタン（たとえば、十字ボタン３６の下キーを押すと開始される。）を操作すると開始される。
【００７４】
さて、本実施の形態のカメラ１０では、メモリカード８８に記録された動画ファイルの編集操作を行なうことができる。すなわち、撮影済みの動画ファイルを再生しながら気に入ったシーンを抽出し、抽出したシーンを静止画として別ファイルに記録することができる。
【００７５】
以下、本実施の形態のカメラ１０において、動画ファイルの編集操作をする場合の処理手順について説明する。
【００７６】
動画ファイルの編集操作を行なう場合、まず、モードスイッチ４２を再生モードに設定する。
【００７７】
上記のように、カメラ１０のモードを再生モードに設定すると、液晶モニタ３０には、メモリカード８８に最後に記録された画像ファイルの画像（動画ファイルの場合には先頭フレームの画像）が表示される。この状態から十字ボタン３６の左右キーにてコマ送りを行い、図７（ａ）に示すように、編集操作を行なう動画ファイルを選択する。
【００７８】
選択後、メニュー／ＯＫボタン３４を押し、液晶モニタ３０にメニュー画面を呼び出す。なお、ここでは、図７（ｂ）に示すように、各メニュー項目がアイコンで表示されるものとする。このアイコンの中から十字ボタン３６の左右キーを利用して、「動画編集」に対応するアイコンを選択する。
【００７９】
「動画編集」のアイコンを選択すると、液晶モニタ３０には「動画編集」のメニューが表示され、この「動画編集」のメニューの中から十字ボタン３６の上下キーを利用して、「静止画切り出し」の項目を選択する。なお、ここでは「動画編集」のメニューとして、「静止画切り出し」と「動画切り出し」と用意されているものとする。
【００８０】
上記のように、「動画編集」の「静止画切り出し」を選択し、選択後、メニュー／ＯＫボタン３４を押して、選択内容の確定を行なう。この結果、液晶モニタ３０には、図８に示すように、静止画切り出し編集画面が表示される。
【００８１】
この静止画切り出し編集画面には、図８に示すように、編集対象の動画が再生表示される「動画表示領域」と、再生された動画から切り出したシーンが表示される「静止画表示領域▲１▼」及び「静止画表示領域▲２▼」と、再生の進行状況を示す再生バーが表示される「再生バー表示領域」と、再生中の動画の再生時間が表示される「再生時間表示領域」と、編集時に使用する操作ボタン（メニュー／ＯＫボタン３４、十字ボタン３６及びＢＡＣＫボタン３８等）の機能説明が表示される「ボタン機能表示領域」とが設けられている。
【００８２】
初期状態において、「動画表示領域」には、編集対象の動画ファイルの先頭フレームの画像が表示される。この状態から十字ボタン３６の下キーが押されると、ＣＰＵ５０が、これを検知し、所定の編集プログラムに従って編集処理を開始する。
【００８３】
まず、液晶モニタ３０の「動画表示領域」に編集対象の動画ファイルが再生表示される。この際、ＣＰＵ５０は、編集対象の動画ファイルから１フレームずつ圧縮画像データを読み出し、ＲＡＭ６８の所定領域Ａに格納する。ＲＡＭ６８の領域Ａに格納された圧縮画像データは、ＣＰＵ５０からの指令に基づきＲＡＭ６８の所定領域Ｂに格納されるとともに、圧縮伸張処理部８４に送られ、ここで伸長処理が施される。伸張された静止画像データは、ＶＲＡＭ７６を介してエンコーダ７８に出力され、ここで表示用の所定方式の信号に変換されたのち、Ｄ／Ａ変換器８２を介して液晶モニタ３０に出力される。
【００８４】
このように、編集対象の動画ファイルから１フレームずつ圧縮画像データを読み出し、ＲＡＭ６８の領域Ａ及び領域Ｂに格納される圧縮画像データを１フレームずつ書き換えながら処理することにより、液晶モニタ３０の「動画表示領域」に動画ファイル中の静止画像データが１フレームずつ更新されて表示され、動画像が形成される。
【００８５】
また、ＣＰＵ５０は、動画の再生開始と同時に、「再生バー表示領域」に再生の進行状況を示す再生バーを表示させるとともに、再生時間を「再生時間表示領域」に表示させる。すなわち、再生が開始されると、ＣＰＵ５０は、再生済みのフレーム数をカウントし、総フレーム数に対する割合を算出して、その変化の様子を「再生バー表示領域」にバーグラフで表示させる。これにより、再生済の時間と全記録時間との割合がバーグラフで表示され、再生の進行状況を一目で把握できるようになる。なお、図８に示す例では、再生バーの中の墨塗りの領域が、再生の進行に応じて拡大するように表示される（たとえば、３０秒の動画ファイルが１５秒再生された場合、再生バーの中の墨塗りの領域が半分まで拡大して表示される。）。
【００８６】
図９は、動画編集中の液晶モニタ３０の表示画面の一例を示している。ユーザは、液晶モニタ３０の「動画表示領域」に再生表示される動画を確認し、気に入ったシーンが表示されたら、メニュー／ＯＫボタン３４を押す。このメニュー／ＯＫボタン３４が押されると、その時「動画表示領域」に表示されていたフレームの画像が「静止画表示領域▲１▼」に表示される。
【００８７】
すなわち、メニュー／ＯＫボタン３４が押されると、ＣＰＵ５０の指令に基づき、その時「動画表示領域」に表示されていたフレームの画像に対応する圧縮画像データが、ＲＡＭ６８の領域Ｂから圧縮伸張処理部８４に送られ、伸長処理が施される。そして、伸張処理された静止画像データが、ＶＲＡＭ７６を介してエンコーダ７８に出力され、ここで表示用の所定方式の信号に変換されたのち、Ｄ／Ａ変換器８２を介して液晶モニタ３０に出力される。これにより、選択されたシーンの画像が「静止画表示領域▲１▼」に表示される。
【００８８】
また、ＲＡＭ６８の領域Ｂに格納された圧縮画像データは、メニュー／ＯＫボタン３４が押されると、ＣＰＵ５０の指令に基づきＲＡＭ６８の所定領域Ｃに格納される。このＲＡＭ６８の領域Ｃに格納された圧縮画像データは、静止画記録のために保存される。
【００８９】
このように、動画再生中にメニュー／ＯＫボタン３４が押されると、その時「動画表示領域」に表示されていたフレームの画像が抽出され、「静止画表示領域▲１▼」に表示される。また、この静止画抽出処理と同時に「再生バー表示領域」に表示された再生バー上に選択ポイントが表示される。
【００９０】
この静止画抽出操作は、動画再生中に複数回行なうことができ、２回目の静止画抽出操作が行なわれると、その２回目に選択されたフレームの画像が「静止画表示領域▲２▼」に表示される。そして、３回目の静止画抽出操作が行なわれると、「静止画表示領域▲１▼」に２回目の選択画像が置き換えられて表示されるとともに、「静止画表示領域▲２▼」に３回目の選択画像が置き換えられて表示される（すなわち、ｎ回目の静止画抽出操作が行なわれると、「静止画表示領域▲１▼」に（ｎ−１）回目の選択画像が表示されるとともに、「静止画表示領域▲２▼」にｎ回目の選択画像が表示される。）。このように、新たなフレームの画像が選択されるたびに、「静止画表示領域▲１▼」と「静止画表示領域▲２▼」に新たな選択画像が表示される。
【００９１】
また、この新たな選択が行なわれるたびに、その選択画像に対応するフレームの圧縮画像データがＲＡＭ６８の領域Ｃに格納されてゆく。そして、その選択ポイントが「再生バー表示領域」に表示された再生バー上に追加して表示されてゆく。
【００９２】
再生が終了すると、図１０に示すように、ＲＡＭ６８の領域Ｃに記録された圧縮画像データに基づき選択した画像の一覧が液晶モニタ３０にインデックス表示され、静止画として記録するか否かのメッセージが併せて表示される。ここで、静止画として記録する場合は、メニュー／ＯＫボタン３４を押し、記録しない場合は、ＢＡＣＫボタン３８を押す。
【００９３】
メニュー／ＯＫボタン３４が押されると、ＣＰＵ５０の指令に基づきＲＡＭ６８の領域Ｃに格納されていた各フレームの画像データが順次読み出され、所定形式の静止画ファイルとして、カードインターフェース８６を介してメモリカード８８に記録される。この際、静止画ファイルのヘッダには、付加情報として動画ファイルの中の位置データ、すなわち、どのフレームの画像データが抽出されたのかを示すデータが記録される。
【００９４】
一方、ＢＡＣＫボタン３８が押されると、液晶モニタ３０に初期画面が表示され（図８参照）、同じ動画ファイルに対して再度編集処理ができるようにされる。また、これと同時にＲＡＭ６８の領域Ｃに格納された各フレームの画像データがクリアされる。
【００９５】
以上説明したように、本実施の形態のカメラ１０は、撮影済みの動画ファイルの編集操作を行なうことができ、動画から気に入ったシーンを抜き出して静止画ファイルとして記録することができる。この際、静止画の抜き出しは、動画を再生しながら行なわれ、気に入ったシーンを選択すると、その静止画像が動画の再生画面と同じ画面上に表示される。これにより、選択した画像を一目で把握することができるようになり、簡単に編集作業を行なうことができる。
【００９６】
なお、本実施の形態では、編集用の動画再生が終了すると、選択した画像一覧がインデックス表示され、静止画ファイルとしての記録の要否を問うようにしているが、動画再生が終了すると、インデックス表示は行なわずに、自動的に選択したフレームの画像を静止画ファイルとして記録するようにしてもよい。
【００９７】
また、図１１に示すように、選択した画像一覧をインデックス表示し、静止画ファイルとしての記録する画像を個別に選択できるようにしてもよい。すなわち、インデックス表示された画像を個別に削除できるようにし、残されたフレームの画像のみ静止画ファイルとして記録するようにしてもよい。
【００９８】
また、動画ファイルから抽出された静止画ファイルについては、そのヘッダ部分に抽出元の動画ファイルの情報を記録して置くようにしてもよい。たとえば、抽出元の動画ファイルのファイル名や抽出位置（何フレーム目の画像データに相当するのか）等の情報を記録しておくようにしてもよい。
【００９９】
また、抽出元の動画ファイルとのリンク情報をヘッダに記録しておき、当該静止画ファイルを再生すると、その抽出位置から抽出元の動画ファイルを再生できるようにしてもよい。たとえば、モニタ上に動画から抽出した静止画ファイルの画像が表示されると、その画像が動画ファイルから抽出された静止画である旨の表示がなされるようにする。そして、この状態から所定の操作ボタンが操作されると、その静止画を抽出した位置から抽出元の動画が再生されるようにする。
【０１００】
一方、静止画が抽出された動画ファイルには、そのヘッダ部分に抽出された静止画の情報を記録しておくようにしてもよい。たとえば、抽出された静止画のサムネイル画像データと、その位置情報（何フレーム目の画像かを示す情報）等をヘッダに記録しておく。
【０１０１】
このように、静止画切り出し編集がなされた動画ファイルに対して、そのヘッダに抽出した静止画の情報を記録しておくことにより、次のような再生が可能になる。
【０１０２】
たとえば、静止画切り出し編集がなされた動画ファイルに対しては、図１２に示すように、静止画切り出し編集時とほぼ同じ構成の画面で再生が行なわれ、「動画表示領域」に編集がなされた動画が再生表示されるとともに、「静止画表示領域▲１▼」及び「静止画表示領域▲２▼」に抽出した静止画のサムネイル画像が順次表示されていく。この際、「再生バー表示領域」には、静止画の選択ポイントがあらかじめ表示され、この選択ポイントを通過すると、「静止画表示領域▲１▼」及び「静止画表示領域▲２▼」に抽出した静止画のサムネイル画像が表示される。
【０１０３】
また、他の再生形態として、図１２に示す表示画面の「静止画表示領域▲１▼」及び「静止画表示領域▲２▼」に動画から抽出した静止画のサムネイル画像を表示するとともに、その「静止画表示領域▲１▼」及び「静止画表示領域▲２▼」に表示される画像を十字ボタン３６の上下キーの操作でスクロール表示できるようにする。そして、「動画表示領域」には、「静止画表示領域▲１▼」に表示された画像が抽出された位置で動画を一時停止させて表示する。これにより、動画ファイルを全て再生しなくても、記録内容を簡単に把握することができる。
【０１０４】
また、「動画表示領域」に動画を一時停止させた状態で所定の操作ボタンを操作すると（たとえば、十字ボタン３６の右キーを押すと）、その一時停止した位置から動画の再生が開始されるようにしてもよい。この場合、「動画表示領域」で動画の再生を行なってもよいし、また、全画面で動画の再生を行なうようにしてもよい。
【０１０５】
また、静止画ファイルとしての記録は行なわず、上記のように選択した静止画の情報のみを動画ファイルのヘッダに記録しておくようにしてもよい。この場合、選択した静止画を静止画ファイルとして記録するか否かを選択できるのと同様に、選択した静止画の情報を動画ファイルのヘッダに記録するか否かを選択できるようにすることが好ましい。
【０１０６】
なお、本実施の形態のカメラでは、動画編集時の画面構成として、図８に示すように、１つの「動画表示領域」に対して２つの「静止画表示領域」を設けているが、「静止画表示領域」のレイアウト及び設置数は、これに限定されるものではない。編集された動画の再生画面についても同様である。
【０１０７】
また、本実施の形態のカメラでは、動画編集時の画面に再生の進行状況を示す再生バーを表示し、その再生バー上に静止画を切り出した選択ポイントを表示するようにしているが、この表示を行なうか否かは任意である。表示した場合は、動画の再生状況を容易に把握できると同時に静止画の抽出ポイントを一目で把握することができるようになる。一方、表示しない場合は、限られた液晶モニタ３０の表示画面を広く使用することができ、静止画表示領域の数を増やしたり、大きさを拡大したりすることができる。
【０１０８】
図１３〜図１５は、静止画切り出し編集時における液晶モニタ３０の表示画面の他の実施の形態を示している。
【０１０９】
図１３は、「動画表示領域」の下側に４つの「静止画表示領域」を設けたものであり、図１４は、「動画表示領域」の上縁及び右縁に沿って５つの「静止画表示領域」を設けたものである。また、図１５は、画面中央に配置した「動画表示領域」の周囲に１２の「静止画表示領域」を設けたものである。
【０１１０】
このように、「静止画表示領域」と「動画表示領域」のレイアウトは適宜変更することができ、「静止画表示領域」が「動画表示領域」と同じ画面の異なる領域に表示さえされていれば、そのレイアウトの仕方は自由である。
【０１１１】
また、「静止画表示領域」の数についても、液晶モニタ３０の大きさ等を考慮して適宜増減することができる。
【０１１２】
なお、図１３及び図１４の例では、再生バー及び選択ポイントを表示させていないが、表示させてもよい。同様に図１５の例では、再生バー及び選択ポイントを表示しているが、表示させなくてもよい。また、再生バーのみ表示するようにしてもよい。
【０１１３】
図１６は、静止画切り出し編集された動画の再生画面の他の実施の形態を示している。
【０１１４】
この例の再生画面では、「静止画表示領域」が、選択された静止画の数だけ設けられる。すなわち、再生対象の動画ファイルから、静止画が３つ選択されている場合は、３つの「静止画表示領域」が設けられ、ここに選択した静止画のサムネイル画像が一覧表示される。
【０１１５】
動画の再生は、「動画表示領域」で行なわれ、その再生中の動画が静止画の選択ポイントまで再生されると、該当する静止画が表示された「静止画表示領域」の周囲に再生枠が点滅して表示される。これにより、「静止画表示領域」に表示された静止画が、どの位置で選択されものかが一目で把握できるようになる。
【０１１６】
なお、再生枠を点滅させるほか、再生枠の色を変えたり、太さを変えたりしてもよく、また、「静止画表示領域」に表示される画像自体を点滅表示させるようにしてもよい。
【０１１７】
また、再生バーに表示される選択ポイントについても、その選択ポイントが明確に認識できるようにするため、選択ポイントが表示された位置まで動画が再生されると、点滅したり、色や太さが変化したりするように設定することが好ましい。これにより、時間軸上での選択位置が一目で把握できるようになる。
【０１１８】
また、本実施の形態では、編集画面に設けられた「静止画表示領域」の数以上の静止画が選択されると、古いものから順に新しいものへと書き換えられてゆくが、編集画面に設けられた「静止画表示領域」の数だけの静止画の選択ができるようにしてもよい。たとえば、図８に示す例では、「静止画表示領域▲１▼」と「静止画表示領域▲２▼」の二つの静止画表示領域が設けられているので、再生中の動画から２つのシーンのみを抽出できるようにする。
【０１１９】
なお、上述した一連の実施の形態では、本発明をデジタルスチルカメラに適用した場合を例に説明したが、本発明の適用は、これに限定されるものではなく、たとえば、液晶モニタを備えたデジタルビデオカメラやＰＤＡ等にも適用することができる。また、本発明に係る動画編集処理及び再生処理をパーソナルコンピュータ用のアプリケーションソフトとして提供し、パーソナルコンピュータで上述した動画編集処理及び再生処理を実行するようにしてもよい。
【０１２０】
【発明の効果】
以上説明したように、本発明によれば、動画ファイルの再生中にユーザが気に入ったフレームを任意に選択でき、選択したフレームの画像を動画の再生画面と同じ画面上で確認することができる。これにより、動画から静止画を抜き出し保存するという編集処理を簡単に行なうことができる。
【図面の簡単な説明】
【図１】本発明が適用されたカメラの一実施形態を示す正面図
【図２】本発明が適用されたカメラの一実施形態を示す側面図
【図３】本発明が適用されたカメラの一実施形態を示す背面図
【図４】本発明が適用されたカメラの内部構成を示すブロック図
【図５】静止画ファイルの構造を示す概念図
【図６】動画ファイルの構造を示す概念図
【図７】動画編集時のメニュー画面の表示例を示す図
【図８】静止画切り出し編集画面の表示例を示す図
【図９】動画編集中の液晶モニタの表示例を示す図
【図１０】動画編集後の液晶モニタの表示例を示す図
【図１１】記録編集作業時の液晶モニタの表示例を示す図
【図１２】静止画切り出し編集された動画の再生画面の表示例を示す図
【図１３】静止画切り出し編集画面の他の表示例を示す図
【図１４】静止画切り出し編集画面の他の表示例を示す図
【図１５】静止画切り出し編集画面の他の表示例を示す図
【図１６】静止画切り出し編集された動画の再生画面の他の表示例を示す図
【符号の説明】
１０…カメラ、１２…カメラボディ、１４…撮影レンズ、３０…液晶モニタ、３４…メニュー／ＯＫボタン、３６…十字ボタン、３８…ＢＡＣＫボタン、４２…モードスイッチ、５０…ＣＰＵ、５２…ＲＯＭ、５８…ＣＣＤ、６２…アナログ信号処理部、６４…Ａ／Ｄ変換器、６６…内蔵バッファ、６７…タイミングジェネレータ、６８…ＲＡＭ、７０…デジタル信号処理部、７６…ＶＲＡＭ、７８…エンコーダ、８０…キャラクタジェネレータ、８２…Ｄ／Ａ変換器、８４…圧縮伸張処理部、８６…カードインターフェース、８８…メモリカード

Claims (15)

1. 記録媒体に記録された動画ファイルを再生し、モニタ上に設定された動画表示領域に動画を表示する機能と、
   前記動画ファイルの再生中に選択されたフレームの画像を前記モニタ上の前記動画表示領域とは異なる領域に設定された静止画表示領域に表示する機能と、
   をコンピュータに実行させることを特徴とする画像処理プログラム。
2. 前記動画ファイルの再生時に再生済の時間と全記録時間との割合を前記モニタの再生バー表示領域にバーグラフ表示する機能と、
   前記動画ファイルの再生中に選択されたフレームの選択ポイントを前記バーグラフ上に表示する機能と、
   を前記コンピュータに実行させることを特徴とする請求項１に記載の画像処理プログラム。
3. 選択したフレームの画像データを含む静止画ファイルを作成し、記録媒体に記録する機能をコンピュータに実行させることを特徴とする請求項１又は２に記載の画像処理プログラム。
4. 前記静止画ファイルには、選択したフレームの画像データと、その選択したフレームの前記動画ファイル上での位置のデータとが、含まれることを特徴とする請求項３に記載の画像処理プログラム。
5. 前記動画ファイルの再生中に順次選択されたフレームの画像を前記モニタ上に設定された複数の静止画表示領域に順次表示する機能をコンピュータに実行させることを特徴とする請求項１、２、３又は４に記載の画像処理プログラム。
6. 前記動画ファイルの再生中に順次選択されたフレームの画像を前記モニタ上に設定された静止画表示領域に順次入れ替えて表示する機能をコンピュータに実行させることを特徴とする請求項１、２、３、４又は５に記載の画像処理プログラム。
7. 前記動画ファイルの再生後、前記静止画表示領域に表示された画像が選択されると、その選択された画像に対応するフレームの位置で前記動画を前記動画表示領域に一時停止させて表示させる機能をコンピュータに実行させることを特徴とする請求項１、２、３、４、５又は６に記載の画像処理プログラム。
8. 記録媒体に記録された動画ファイルを再生し、モニタ上に設定された動画表示領域に動画を表示する動画表示手段と、
   前記動画ファイルの再生中に静止画として抽出するフレームを選択する選択手段と、
   前記選択手段で選択されたフレームの画像を前記モニタ上の前記動画表示領域とは異なる領域に設定された静止画表示領域に表示する静止画表示手段と、
   を備えたことを特徴とする画像処理装置。
9. 前記動画ファイルの再生時に再生済の時間と全記録時間との割合を前記モニタの再生バー表示領域にバーグラフ表示する再生バー表示手段と、
   前記選択手段で選択されたフレームの選択ポイントを前記バーグラフ上に表示する選択ポイント表示手段と、
   を備えたことを特徴とする請求項８に記載の画像処理装置。
10. 前記選択手段で選択されたフレームの画像データを含む静止画ファイルを作成する静止画ファイル作成手段と、
    前記静止画ファイル作成手段によって作成された静止画ファイルを記録媒体に記録する静止画ファイル記録手段と、
    を備えたことを特徴とする請求項８又は９に記載の画像処理装置。
11. 前記静止画ファイル作成手段で作成される静止画ファイルは、前記選択手段で選択されたフレームの画像データと、その選択されたフレームの前記動画ファイル上での位置のデータとが含まれることを特徴とする請求項１０に記載の画像処理装置。
12. 前記静止画表示手段は、前記動画ファイルの再生中に前記選択手段によって順次選択されたフレームの画像を前記モニタ上に設定された複数の静止画表示領域に順次表示することを特徴とする請求項８、９、１０又は１１に記載の画像処理装置。
13. 前記静止画表示手段は、前記動画ファイルの再生中に順次選択されたフレームの画像を前記モニタ上に設定された静止画表示領域に順次入れ替えて表示することを特徴とする請求項８、９、１０、１１又は１２に記載の画像処理装置。
14. 前記モニタ上に設定された静止画表示領域に表示された画像を選択する静止画像選択手段を備え、
    前記動画表示手段は、前記静止画像選択手段によって選択された画像に対応するフレームの位置で前記動画を前記動画表示領域に一時停止させて表示させることを特徴とする請求項８、９、１０、１１、１２又は１３に記載の画像処理装置。
15. 撮影光学系と、
    撮像素子と、
    前記撮影光学系を介して前記撮像素子で撮像される画像を所定の周期で連続的に取り込み、動画ファイルを作成する動画ファイル作成手段と、
    前記動画ファイル作成手段によって作成された動画ファイルを記録媒体に記録する動画ファイル記録手段と、
    を備えたことを特徴とする請求項８、９、１０、１１、１２、１３又は１４に記載の画像処理装置。

Images