JP2011223097A - 画像処理装置、画像処理方法及び画像処理プログラム - Google Patents

Abstract

【課題】本発明は、表現性を向上する。
【解決手段】本発明は、マンガ領域３２にベース動画像のフレーム画像ＦＭをマンガフレームＭＦＭとして配置させ、該マンガ領域３２に配置されたマンガフレームＭＦＭに応じてプレビュー動画像の再生形式を決定することにより、ベース動画像を素材とした２次元であるマンガでプレビュー動画像の再生形式を決定するといった従来にない表現形態でプレビュー動画像の再生形式を決定することができ、表現性を向上することができる。
【選択図】図１６

Description

本発明は画像処理装置、画像処理方法及び画像処理プログラムに関し、例えばパーソナルコンピュータを用いて動画像からマンガを作成し、またマンガに基づいて動画像を再生する場合に適用して好適なものである。

従来、動画像の再生形式を変更する装置として、例えば再生速度を変更させるためのバーを画面上に表示し、ユーザに該バーを操作させることにより動画像の再生速度を変更するものが提案されている（例えば特許文献１参照）。

特開２００４−３１９０７７公報

ところで上述した装置では、動画像の再生速度などを任意に変更することができるが、その操作が煩雑でまた編集中の画面はその表現性が乏しいものであり、動画像の編集に慣れていないユーザでも容易に扱えるような、より表現性を向上するものが望まれる。

本発明は以上の点を考慮してなされたもので、表現性を向上し得る画像処理装置、画像処理方法及び画像処理プログラムを提案しようとするものである。

かかる課題を解決するため本発明においては、画像処理装置であって、動画像を構成するフレーム画像を配置させる領域を表示部に表示させる表示制御部と、領域に配置された動画像のフレーム画像に応じて動画像の再生形式を決定する決定部とを有する。

また本発明においては、画像処理方法であって、動画像を構成するフレーム画像を配置させる領域を表示部に表示させる表示制御ステップと、領域に配置された動画像のフレーム画像に応じて動画像の再生形式を決定する決定ステップとを有する。

さらに本発明においては、画像処理プログラムであって、コンピュータに対して、動画像を構成するフレーム画像を配置させる領域を表示部に表示させる表示制御ステップと、領域に配置された動画像のフレーム画像に応じて動画像の再生形式を決定する決定ステップとを実行させる。

これにより、動画像を素材として領域に該動画像のフレーム画像を任意に配置させることにより、該領域が動画像の再生形式を決定するものとなり、該領域に基づいて動画像の再生形式を変更して再生させることができる。

以上のように本発明によれば、動画像を素材として領域に該動画像のフレーム画像を任意に配置させることにより、該領域が動画像の再生形式を決定するものとなり、該領域に基づいて動画像の再生形式を変更して再生させることができ、動画像の表現性を向上することができる。

画像処理装置を示す略線図である。 ＣＰＵの機能的構成を示す略線図である。 画像処理画面の構成（１）を示す略線図である。 画像処理画面の構成（２）を示す略線図である。 画像処理画面の構成（３）を示す略線図である。 マンガフレーム情報を示す略線図である。 画像処理画面の構成（４）を示す略線図である。 画像処理画面の構成（５）を示す略線図である。 画像処理画面の構成（６）を示す略線図である。 画像処理画面の構成（７）を示す略線図である。 再生速度及び再生方向の算出（１）の説明に供する略線図である。 再生速度及び再生方向の算出（２）の説明に供する略線図である。 再生速度及び再生方向の算出（３）の説明に供する略線図である。 マンガ生成処理手順の説明に供するフローチャートである。 動画像再生処理手順の説明に供するフローチャートである。 再生形式算出処理手順の説明に供するフローチャートである。 ベース動画像、マンガ、プレビュー動画像の関係を示す略線図である。 マンガフレームの移動の一例を示す略線図である。

以下、発明を実施するための形態について説明する。なお、説明は以下の順序とする。
１．実施の形態
２．他の実施の形態

＜１．実施の形態＞
〔１．画像処理装置の構成〕
図１において、本一実施の形態による画像処理装置１を示す。画像処理装置１は、ＣＰＵ（Central Processing Unit）１１、ＲＯＭ（Read Only Memory）１２、ＲＡＭ（Random Access Memory）１３、操作入力部１４、表示部１５、記憶部１６、及びインターフェイス部１７がバス１８を介して接続される。

ＣＰＵ１１は、ＲＯＭ１２に格納された基本プログラムをワークメモリとして機能するＲＡＭ１３に展開して実行することにより全体を統括制御する。またＣＰＵ１１は、ＲＯＭ１２又は記憶部１６に格納されたアプリケーションプログラムをＲＡＭ１３に展開して実行することにより各種プログラムを実行する。

操作入力部１４は、マウス、キーボード、タッチパネル等が適応される。なお、本実施の形態では、主にマウス及びキーボードが適応される場合について説明する。

表示部１５は、液晶ディスプレイ、有機ＥＬ（Electro-Luminescence）ディスプレイ、ブラウン管ディスプレイ等が適応される。記憶部１６は、磁気ディスク、フラッシュメモリ等が適応される。

インターフェイス部１７は、例えばＵＳＢ（Universal Serial Bus）などのインターフェイスを適応され、ＵＳＢメモリやプリンタなどと接続される。またインターフェイス部１７は、有線ＬＡＮ（Local Area Network）やＩＥＥＥ（Institute of Electrical
and Electronics Engineers）８０２．１１ａ／ｂ／ｇ／ｎなどの無線ＬＡＮ等のネットワークインターフェイスが適応される。インターフェイス部１７は、有線又は無線通信により、インターネットなどの回線網を介して外部装置と種々の情報を送受信する。

〔２．画像処理〕
ＣＰＵ１１は、ＲＯＭ１２又は記憶部１６に格納された画像処理プログラムをＲＡＭ１３に展開して実行することにより、主にマンガ生成処理とプレビュー動画像再生処理とからなる画像処理を実行する。ＣＰＵ１１は、画像処理を実行する際、図２に示すように、表示制御部２１、マンガ生成部２２及び再生形式決定部２３として機能する。

表示制御部２１は、画像処理を実行すると、図３に示すように、画像処理画面３０を表示部１５に表示する。この画像処理画面３０は、ベース動画像再生指示領域３１、マンガ領域３２、アイテム表示領域３３及びプレビュー動画像再生指示領域３４を含む。

また表示制御部２１は、操作入力部１４の例えばマウス操作に応じて画像処理画面３０上を移動可能な操作子としてのカーソルＣＳを該画像処理画面３０と共に表示してユーザの操作を受け付けるようになされている。

ベース動画像再生指示領域３１には、編集対象とされる動画像（以下、これをベース動画像とも呼ぶ）を表示する動画像表示ウインドウ３１ａ、該動画像表示ウインドウ３１ａ内に表示されたベース動画像を再生、停止、逆再生させるための再生ボタン３１ｂ、停止ボタン３１ｃ及び逆再生ボタン３１ｄが設けられる。

またベース動画像再生指示領域３１には、ベース動画像の候補を複数表示する候補表示領域３１ｇ、動画像表示ウインドウ３１ａに表示するベース動画像を候補表示領域３１ｇに表示された動画像のなかから選択させるための上ボタン３１ｅ、下ボタン３１ｆが設けられる。

マンガ領域３２は、動画像表示ウインドウ３１ａに表示されるベース動画像を構成するフレーム画像ＦＭが任意の大きさ及び位置でマンガフレームＭＦＭ（例えば図１０）として配置されると共に、マンガとして印刷される領域である。

またマンガ領域３２は、詳しくは後述するように、ベース動画像の再生形式が変更された動画像（以下、これをプレビュー動画像とも呼ぶ）の再生形式を示すものとしても機能する。例えば、配置されたマンガフレームＭＦＭの読み手にマンガとして読まれる順番がプレビュー動画像の再生時間軸を示し、マンガフレームＭＦＭの大きさがプレビュー動画像の再生速度を示すものでもある。

因みに、マンガとしてマンガフレームＭＦＭの読まれる順番は、例えば、マンガ領域３２の最も右上に配置されたマンガフレームＭＦＭが１番目であり、そのマンガフレームＭＦＭから左方向に配置されたマンガフレームＭＦＭが順に続く。そして、１番目のマンガフレームＭＦＭと同一段の全てのマンガフレームＭＦＭの次に、その段の下段における右端に配置されたマンガフレームＭＦＭが続き、そのマンガフレームＭＦＭから左方向に順に続く。このように読まれる順番は、最上段の右端から左端へ順に続き、次にその段の１つ下の段が右端から左端へ順に続く。

また１つのマンガフレームＭＦＭの右側に複数のマンガフレームＭＦＭが縦方向に並んで配置されている場合、読まれる順番は、縦方向に配置される複数のマンガフレームＭＦＭが上から順で、その後に左側に配置されるマンガフレームＭＦＭが続く。

また１つのマンガフレームＭＦＭの左側に複数のマンガフレームＭＦＭが縦方向に並んで配置されている場合、読まれる順番は、右側に配置されるマンガフレームＭＦＭが１番目で、縦方向に配置される複数のマンガフレームＭＦＭが上から順に続く。

このように、マンガ領域３２に配置されるマンガフレームＭＦＭの位置及び大きさに基づいて、マンガフレームＭＦＭの読まれる順番が決定される。

アイテム表示領域３３は、マンガ領域３２に配置されたマンガフレームＭＦＭに対して、台詞や書き手のコメントを文字で表示するための枠である吹出し枠ＳＰ（ＳＰ１〜ＳＰ３）が配置される。またアイテム表示領域３３は、読み手の視線を一点に集中させたり、スピード感を与えるための効果線であるエフェクトＥＦ（ＥＦ１〜ＥＦ３）が配置される。なお、吹出し枠ＳＰ及びエフェクトＥＦが３種類ずつである場合について説明するがその数は適宜設定される。

プレビュー動画像再生指示領域３４は、プレビュー動画像を表示するプレビュー動画像表示ウインドウ３４ａ、プレビュー動画像表示ウインドウ３４ａに表示されるプレビュー動画像を再生、停止させるための再生ボタン３４ｂ及び停止ボタン３４ｃが設けられる。

またプレビュー動画像再生指示領域３４は、プレビュー動画像表示ウインドウ３４ａに表示されるプレビュー動画像を所定形式のフォーマットでなるデータとして保存させるための保存ボタン３４ｄが設けられる。

〔２−１．マンガ生成処理〕
表示制御部２１は、例えば記憶部１６に記憶された動画像のデータのうち、操作入力部１４の操作を介してユーザに選択された動画像のデータを読み出すと、その動画像をベース動画像として決定する。そして表示制御部２１は、動画像表示ウインドウ３１ａにベース動画像の１フレーム目のフレーム画像を表示する。

また表示制御部２１は、ベース像画像の１フレーム目のフレーム画像を候補表示領域３１ｇにも表示する。さらに表示制御部２１は、操作入力部１４の操作を介してユーザに候補として選択された動画像のデータを読み出すと、その動画像の１フレーム目のフレーム画像を候補表示領域３１ｇに表示する。

なお表示制御部２１は、記憶部１６に記憶された動画像のデータ以外にも、例えばインターフェイス部１７を介して接続された他の外部機器に記憶された動画像のデータも選択させることができる。さらに、インターフェイス部１７を介して接続されるＵＳＢメモリや外付けＨＤＤのような記憶媒体に記憶された動画像のデータでも選択させることができる。

表示制御部２１は、上ボタン３１ｅ又は下ボタン３１ｆがカーソルＣＳを介して例えばクリック操作された場合、候補表示領域３１ｇに表示されたフレーム画像のうちの他のフレーム画像に対応する動画像をベース動画像として決定する。

表示制御部２１は、例えば上ボタン３１ｅがクリック操作された場合、クリック操作される前にベース動画像として決定されていた動画像のフレーム画像の左隣に表示されたフレーム画像に対応する動画像をベース動画像として決定する。そして表示制御部２１は、決定されたベース動画像のフレーム画像を動画像表示ウインドウ３１ａに表示する。

表示制御部２１は、再生ボタン３１ｂがカーソルＣＳを介してクリック操作された場合、動画像表示ウインドウ３１ａに現在表示しているフレーム画像に対応したベース動画像を、該動画像表示ウインドウ３１ａに通常再生する。

また表示制御部２１は、逆再生ボタン３１ｄがカーソルＣＳを介してクリック操作された場合、動画像表示ウインドウ３１ａに現在表示しているフレーム画像に対応したベース動画像を、動画像表示ウインドウ３１ａに逆再生する。

表示制御部２１は、動画像表示ウインドウ３１ａでベース動画像が通常再生又は逆再生されている状態で停止ボタン３１ｃがクリック操作された場合、ベース動画像の通常再生又は逆再生を停止する。そして表示制御部２１は、停止ボタン３１ｃがクリック操作された時点で動画像表示ウインドウ３１ａに表示されていたフレーム画像をそのまま表示する。

表示制御部２１は、動画像表示ウインドウ３１ａ内にカーソルＣＳが位置している状態でマウスのボタンを押し続ける操作（プレス操作）が行われると、図４に示すように、複製画像ＤＭを生成して動画像表示ウインドウ３１ａに重ねて表示する。

この複製画像ＤＭは、マウスのボタンがプレス操作された時点で動画像表示ウインドウ３１ａに表示されているフレーム画像がマンガ領域３２に配置する際に標準とされる大きさに縮小されたものである。

一方、マンガ生成部２２は、動画像表示ウインドウ３１ａ上でプレス操作されると、図５に示すように、ベース動画像を構成するフレーム画像がマンガフレームＭＦＭとしてマンガ領域３２に配置された際の情報が示されるマンガフレーム情報ＦＭＩを生成する。

このマンガフレーム情報ＦＭＩは、ベース動画像を構成するフレーム画像がマンガフレームＭＦＭとしてマンガ領域３２に配置された際の、マンガのページ番号、フレーム再生時間、フレームサイズ、フレームのＸ座標及びＹ座標、フレームの画像データ、エフェクトの画像データ、吹出し枠の設定が示される。吹出し枠の設定は、吹出し枠の画像データ、及び吹出し枠内に入力された文字列が対応付けられて示される。

なおフレーム再生時間は、動画像表示ウインドウ３１ａ内に表示されたベース動画像におけるマンガフレームＭＦＭとして配置されたフレーム画像がベース動画像において再生される際の時間を示す。またフレームのＸ座標及びＹ座標は、マンガ領域３２の例えば右上を基準としたマンガフレームの右上隅のＸ座標及びＹ座標を示す。

マンガフレーム情報ＦＭＩはマンガ領域３２に配置されるマンガフレームＭＦＭについてそれぞれ生成され、マンガ領域３２に配置される全てのマンガフレームＭＦＭのマンガフレーム情報ＦＭＩがマンガフレーム情報リストとして記憶部１６に記憶される。

マンガ生成部２２は、マンガフレーム情報ＦＭＩを生成すると、マウスのボタンがプレス操作された時点で動画像表示ウインドウ３１ａに表示されているフレーム画像に対する、フレーム再生時間、フレームの画像データ、フレームサイズを入力する。ここでフレームサイズとしては、複製画像ＤＭの大きさである標準とされるフレームサイズが入力される。

表示制御部２１は、マウスのボタンがプレス操作された状態のまま移動操作（ドラッグ操作）されると、そのドラッグ操作の移動に応じてカーソルＣＳ及び複製画像ＤＭを移動表示させる。

表示制御部２１は、ドラッグ操作に応じて複製画像ＤＭがマンガ領域３２における任意の位置に移動された後、マウスのボタンが離される操作（ドロップ操作）が行われると、図６に示すように、その位置に複製画像ＤＭをマンガフレームＭＦＭ１として表示する。

マンガ生成部２２は、マンガフレームＭＦＭ１がマンガ領域３２に配置された場合、該マンガフレームＭＦＭ１の右上隅のＸ座標及びＹ座標を検出し、該マンガフレームＭＦＭ１に対応するマンガフレーム情報ＦＭＩにＸ座標及びＹ座標を入力する。

表示制御部２１は、アイテム表示領域３３の例えばエフェクトＥＦ１上にカーソルＣＳが位置した状態で、マンガ領域３２に配置されたマンガフレームＭＦＭ１に操作入力部１４を介してドラッグアンドドロップ操作によりエフェクトＥＦ１が移動される。この場合表示制御部２１は、図７に示すように、該エフェクトＥＦ１をマンガフレームＭＥＦ１のフレームサイズと同じ大きさになるように拡大又は縮小して該マンガフレームＭＥＦ１に重ねて表示する。

マンガ生成部２２は、マンガフレームＭＦＭ１に対してエフェクトＥＦ１が配置された場合、該マンガフレームＭＦＭ１に対応するマンガフレーム情報ＦＭＩにエフェクトＥＦ１の画像データを入力する。

表示制御部２１は、マンガ領域３２に配置されたマンガフレームＭＦＭ１に操作入力部１４を介してドラッグアンドドロップ操作により例えば吹出し枠ＳＰ１が移動された場合、該吹出し枠ＳＰ１をマンガフレームＭＦＭ１に重ねて表示する。

また表示制御部２１は、マンガフレームＭＦＭ１に重ねて表示された吹出し枠ＳＰ１にカーソルＣＳを介してクリック操作が行われた場合、該吹出し枠ＳＰ１内に文字入力を受け付ける。そして表示制御部２１は、図８に示すように、操作入力部１４の例えばキーボードを介して入力された文字列（この場合、「my ball!」）を吹出し枠ＳＰ１内に表示する。

マンガ生成部２２は、マンガフレームＭＦＭ１に対して吹出し枠ＳＰ１が配置された場合、該マンガフレームＭＦＭ１に対応するマンガフレーム情報ＦＭＩに吹出し枠ＳＰ１の画像データ及び入力された文字列「my ball!」を入力する。

表示制御部２１は、動画像表示ウインドウ３１ａ内に表示されたベース動画像における任意のフレーム画像がドラッグアンドドロップ操作されてマンガ領域３２に配置されるたびに、該フレーム画像を指定された位置にマンガフレームＭＦＭとして表示する。

表示制御部２１は、マンガ領域３２に配置されたマンガフレームＭＦＭ上にアイテム表示領域３３のエフェクトＥＦ（ＥＦ１〜ＥＦ３）のいずれかがドラックアンドドロップ操作により配置された場合、該エフェクトＥＦを該マンガフレームＭＦＭに重ねて表示する。

また表示制御部２１は、マンガ領域３２に配置されたマンガフレームＭＦＭ上にアイテム表示領域３３の吹出し枠ＳＰ（ＳＰ１〜ＳＰ３）のいずれかがドラックアンドドロップ操作により配置された場合、該吹出し枠ＳＰを該マンガフレームＭＦＭに重ねて表示する。

さらに表示制御部２１は、マンガフレームＭＦＭ上に重ねて表示された吹出し枠ＳＰが選択されて入力された文字列をその吹出し枠ＳＰ内に表示する。

一方、マンガ生成部２２は、マンガ領域３２にマンガフレームＭＦＭが配置されるたびにマンガフレーム情報ＦＭＩを生成し、マンガのページ番号、フレーム再生時間、フレームサイズ、フレームのＸ座標及びＹ座標、フレームの画像データを入力する。

またマンガ生成部２２は、エフェクトＥＦ及び／又は吹出し枠ＳＰがマンガフレームＭＦＭに配置された場合、配置されたエフェクトＥＦの画像データ及び／又は吹出し枠ＳＰの画像データ及び入力された文字列を対応するマンガフレーム情報ＦＭＩに入力する。

このようにして表示制御部２１は、例えば図９に示すように、ユーザ操作に応じてマンガフレームＭＦＭ１〜ＭＦＭ６が配置されたマンガ領域３２を表示部１５に表示する。またマンガ生成部２２は、マンガフレームＭＦＭ１〜ＭＦＭ６にそれぞれ対応したマンガフレーム情報ＦＭＩを生成してマンガフレーム情報リストに追加する。

ところでマンガ領域３２に配置されたマンガフレームＭＦＭの位置及び大きさは変更し得るようになされている。

表示制御部２１は、マンガ領域３２に配置されたマンガフレームＭＦＭがカーソルＣＳを介してドラッグアンドドロップ操作された場合、そのドラッグ操作に応じて選択されたマンガフレームＭＦＭをカーソルＣＳともに移動表示する。そしてドロップ操作された位置にマンガフレームＭＦＭを配置する。

このときマンガ生成部２２は、移動されたマンガフレームＭＦＭのＸ座標及びＹ座標を検出し、該マンガフレームＭＦＭに対応するマンガフレーム情報ＦＭＩにおけるフレームのＸ座標及びＹ座標を更新する。

また表示制御部２１は、例えばマンガフレームＭＦＭ６（図９）の左下隅がカーソルＣＳを介してドラッグアンドドロップ操作により左下へ移動された場合、該マンガフレームＭＦＭ６をドラッグ操作に応じて拡大表示する。

そして表示制御部２１は、図１０に示すように、ドロップ操作された時点の位置まで拡大された大きさのマンガフレームＭＦＭ６を表示する。なお、縮小する場合についても同様に、カーソルＣＳを介してドラッグアンドドロップ操作により移動される位置に応じてマンガフレームＭＦＭを縮小して表示する。

マンガ生成部２２は、マンガフレームＭＦＭが拡大又は縮小された場合、そのマンガフレームＭＦＭのフレームサイズを検出し、該マンガフレームＭＦＭに対応するマンガフレーム情報ＦＭＩにおけるフレームサイズを更新する。

このようにして表示制御部２１及びマンガ生成部２２は、ベース動画像を構成するフレーム画像をマンガ領域３２に配置させることにより、該マンガ領域３２をマンガとして生成するようになされている。

〔２−２．プレビュー動画像再生処理〕
再生形式決定部２３は、例えばプレビュー動画像再生指示領域３４内の再生ボタン３４ｂがクリック操作された場合、プレビュー動画像再生処理を実行する。そして再生形式決定部２３は、マンガ領域３２に配置されたマンガフレームＭＦＭに基づいて、プレビュー動画像表示ウインドウ３４ａにプレビュー動画像を再生表示する。なお、以下の具体的な説明においては、図１０に示したマンガ領域３２を用いて説明する。

具体的に再生形式決定部２３は、再生ボタン３４ｂがクリック操作されると、記憶部１６に記憶されたマンガフレーム情報リストを読み出す。そして再生形式決定部２３は、マンガ領域３２に配置されたマンガフレームＭＦＭの読み手に読まれる順番に、対応するマンガフレーム情報ＦＭＩを並び替える。この並び替えは、マンガフレーム情報ＦＭＩに示されたフレームのＸ座標、Ｙ座標及びフレームサイズに基づき、上述したような読み手に読まれる順番の規則に従って行われる。

なお、読み手に読まれる順番として、マンガ領域３２（図１０）では、マンガフレームＭＦＭ１が一番目で、マンガフレームＭＦＭ２、ＭＦＭ３、ＭＦＭ４、ＭＦＭ５、ＭＦＭ６が順に続く。

再生形式決定部２３は、並び替えられたマンガフレーム情報ＦＭＩのうちの前後に隣接するマンガフレーム情報ＦＭＩを用いて、その間のプレビュー動画像の再生形式（再生速度及び再生方向）を算出する。

具体的に、図１１（Ａ）に示すように、ベース像画像のフレーム画像ＦＭ１がフレーム画像ＦＭ２より時間軸上で前にあり、マンガ領域３２に配置されたマンガフレームＭＦＭ１がマンガフレームＭＦＭ２より読まれる順番で前である場合について説明する。

ここでマンガフレームＭＦＭ１はベース動画像のフレーム画像ＦＭ１がマンガ領域３２に配置されたものであり、マンガフレームＭＦＭ２はベース動画像のフレーム画像ＦＭ２がマンガ領域３２に配置されたものである。またマンガフレームＭＦＭ１及びＭＦＭ２は標準とされる大きさ（フレームサイズ）である。

すなわち、ベース動画像の時間軸上におけるフレーム画像ＦＭの順番と、それぞれのフレーム画像ＦＭに対応するマンガフレームＭＦＭの読まれる順番とが同じであり、マンガフレームＭＦＭが標準とされる大きさの場合について説明する。

再生形式決定部２３は、並び替えられたマンガフレーム情報ＦＭＩのうち、前後に隣接するマンガフレームＭＦＭ１及びＦＭ２に対応するマンガフレーム情報ＦＭＩからフレーム再生時間ｔ１及びｔ２を読み出す。このフレーム再生時間ｔ１及びｔ２は、ベース動画像におけるフレーム画像ＦＭ１及びＦＭ２のフレーム再生時間を示すものである。

再生形式決定部２３は、図１１（Ｂ）に示すように、ベース動画像におけるフレーム画像ＦＭ１のフレーム再生時間ｔ１を基準として前後５秒間を注目範囲ＦＡ１として抽出する。再生形式決定部２３は、ベース動画像におけるフレーム画像ＦＭ２のフレーム再生時間ｔ２を基準として前後５秒間を注目範囲ＦＡ２として抽出する。

また再生形式決定部２３は、ベース動画像におけるフレーム画像ＦＭ１のフレーム再生時間ｔ１の５秒後からフレーム画像ＦＭ２のフレーム再生時間ｔ２の５秒前までの間を非注目範囲ＮＦＡ１として抽出する。

再生形式決定部２３は、図１１（Ｃ）に示すように、マンガフレームＭＦＭ１及びＭＦＭ２のフレームサイズを対応するマンガフレーム情報ＦＭＩから読み出し、標準とされるフレームサイズとの比「１」を注目範囲ＦＡ１及びＦＡ２の重み付けとして算出する。

また再生形式決定部２３は、抽出した非注目範囲ＮＦＡ１を１０等分に分割し、フレーム再生時間ｔ１及びｔ２から距離が離れるほど圧縮されるよう、１次元フィッシュアイアルゴリズムを用いて非注目範囲ＮＦＡ１の分割された範囲ごとの重み付けを算出する。

再生形式決定部２３は、図１１（Ｄ）に示すように、それぞれの範囲での重み付けの逆数をその範囲の再生速度として算出する。

従って注目範囲ＦＡ１及びＦＡ２は、通常再生（１倍速）の線形速度で再生され、非注目範囲ＮＦＡ１は注目範囲ＦＡ１及びＦＡ２から離れるにつれて速度が速くなる非線形速度で再生されるように再生速度が決定される。

これにより、図１１（Ｅ）に示すように、ベース動画像が再生形式決定部２３により決定された再生速度で再生されるプレビュー動画像では、非注目範囲ＮＦＡ１の再生時間が圧縮（短く）される。

次に、図１２（Ａ）に示すように、ベース像画像のフレーム画像ＦＭ５がフレーム画像ＦＭ６より時間軸上で前にあり、マンガフレームＭＦＭ５がマンガフレームＭＦＭ６より読まれる順番で前であり、マンガフレームＭＦＭ６が標準とされる大きさの２倍である場合について説明する。

ここでマンガフレームＭＦＭ５はベース動画像のフレーム画像ＦＭ５がマンガ領域３２に配置されたものであり、マンガフレームＭＦＭ６はベース動画像のフレーム画像ＦＭ６がマンガ領域３２に配置されたものである。

すなわち、ベース動画像の時間軸上におけるフレーム画像ＦＭの順番と、それぞれのフレーム画像ＦＭに対応するマンガフレームＭＦＭの読まれる順番とが同じであり、マンガフレームＭＦＭが標準とされる大きさでないものを含む場合について説明する。

再生形式決定部２３は、並び替えられたマンガフレームＭＦＭＩ情報のうち、前後に隣接するマンガフレームＭＦＭ５及びＦＭ６に対応するマンガフレーム情報ＦＭＩからフレーム再生時間ｔ５及びｔ６を読み出す。このフレーム再生時間ｔ５及びｔ６は、ベース動画像におけるフレーム画像ＦＭ５及びＦＭ６のフレーム再生時間を示すものである。

再生形式決定部２３は、図１２（Ｂ）に示すように、ベース動画像におけるフレーム画像ＦＭ５のフレーム再生時間ｔ５を基準として前後５秒間を注目範囲ＦＡ５として抽出する。再生形式決定部２３は、ベース動画像におけるフレーム画像ＦＭ６のフレーム再生時間ｔ６を基準として前後５秒間を注目範囲ＦＡ６として抽出する。

また再生形式決定部２３は、ベース動画像におけるフレーム画像ＦＭ５のフレーム再生時間ｔ５の５秒後からフレーム画像ＦＭ６のフレーム再生時間ｔ６の５秒前までを非注目範囲ＮＦＡ５として抽出する。

再生形式決定部２３は、図１２（Ｃ）に示すように、マンガフレームＭＦＭ５及びＭＦＭ６のフレームサイズを対応するマンガフレーム情報ＦＭＩから読み出し、標準とされるフレームサイズとの比「１」及び「２」を注目範囲ＦＡ５及びＦＡ６の重み付けとして算出する。

また再生形式決定部２３は、抽出した非注目範囲ＮＦＡ５を１０等分に分割し、フレーム再生時間ｔ５及びｔ６から距離が離れるほど圧縮されるよう、１次元フィッシュアイアルゴリズムを用いて非注目範囲ＮＦＡ５の分割された範囲ごとの重み付けを算出する。

再生形式決定部２３は、図１２（Ｄ）に示すように、それぞれの範囲での重み付けの逆数をその範囲の再生速度として算出する。

従って注目範囲ＦＡ５は通常再生（１倍速）の線形速度で再生され、注目範囲ＦＡ６は１／２倍速の線形速度で再生され、非注目範囲ＮＦＡ５は注目範囲ＦＡ５及びＦＡ６から離れるにつれて速度が速くなる非線形速度で再生されるように再生速度が決定される。

これにより、図１２（Ｅ）に示すように、ベース動画像が再生形式決定部２３により決定された再生速度で再生されるプレビュー動画像では、非注目範囲ＮＦＡ５の再生時間が圧縮（短く）される。また標準とされる大きさよりも大きいフレームサイズであるマンガフレームＭＦＭ６に対応する注目範囲ＦＡ６は、通常再生よりも遅い（ゆっくりした）速度で再生される。

次に、図１３（Ａ）に示すように、例えばフレーム画像ＦＭ３がフレーム画像ＦＭ４よりベース動画像の時間軸上で後ろにあり、マンガ領域３２に配置されたマンガフレームＭＦＭ３がマンガフレームＭＦＭ４より読まれる順番で先にある場合について説明する。

ここでマンガフレームＭＦＭ３はベース動画像のフレーム画像ＦＭ３がマンガ領域３２に配置されたものであり、マンガフレームＭＦＭ４はベース動画像のフレーム画像ＦＭ４がマンガ領域３２に配置されたものである。また、マンガフレームＭＦＭ３及びＭＦＭ４は標準とされる大きさ（フレームサイズ）である。

すなわち、ベース動画像の時間軸上におけるフレーム画像ＦＭの順番と、それぞれのフレーム画像ＦＭに対応するマンガフレームＭＦＭの読まれる順番とが逆であり、マンガフレームＭＦＭが標準とされる大きさである場合について説明する。

再生形式決定部２３は、並び替えられたマンガフレームＦＭＩ情報のうち、前後に隣接するマンガフレームＭＦＭ３及びＦＭ４に対応するマンガフレーム情報ＦＭＩからフレーム再生時間ｔ３及びｔ４を読み出す。このフレーム再生時間ｔ３及びｔ４は、ベース動画像におけるフレーム画像ＦＭ３及びＦＭ４のフレーム再生時間を示すものである。

再生形式決定部２３は、図１３（Ｂ）に示すように、ベース動画像におけるフレーム画像ＦＭ３のフレーム再生時間ｔ３を基準として前後５秒間を注目範囲ＦＡ３として抽出する。再生形式決定部２３は、ベース動画像におけるフレーム画像ＦＭ４のフレーム再生時間ｔ４を基準として前後５秒間を注目範囲ＦＡ４として抽出する。

また再生形式決定部２３は、ベース動画像におけるフレーム画像ＦＭ３のフレーム再生時間ｔ３の５秒後からフレーム画像ＦＭ４のフレーム再生時間ｔ４の５秒前までを非注目範囲ＮＦＡ３として抽出する。

この非注目範囲ＮＦＡ３は、ベース動画像における時間軸上の後にあるフレーム画像から前にあるフレーム画像へ逆方向に再生（逆再生）されるよう、フレーム再生時間ｔ３の５秒後からフレーム再生時間ｔ４の５秒前までのフレーム画像が時間軸方向とは逆方向に連続して並べられたものである。

再生形式決定部２３は、図１３（Ｃ）に示すように、マンガフレームＭＦＭ３及びＭＦＭ４のフレームサイズを対応するマンガフレーム情報ＦＭＩから読み出し、標準とされるフレームサイズとの比「１」を注目範囲ＦＡ３及びＦＡ４の重み付けとして算出する。

また再生形式決定部２３は、抽出した非注目範囲ＮＦＡ３を１０等分に分割し、フレーム再生時間ｔ３及びｔ４から距離が離れるほど圧縮されるよう、１次元フィッシュアイアルゴリズムを用いて非注目範囲ＮＦＡ３の分割された範囲ごとの重み付けを算出する。

再生形式決定部２３は、図１３（Ｄ）に示すように、それぞれの範囲での重み付けの逆数をその範囲の再生速度として算出する。

従って注目範囲ＦＡ３及びＦＡ４は通常再生（１倍速）の線形速度で順再生され、非注目範囲ＮＦＡ３は注目範囲ＦＡ３及びＦＡ４から離れるにつれて速度が速くなる非線形速度で逆再生されるように再生速度が決定される。

これにより、図１３（Ｅ）に示すように、ベース動画像が再生形式決定部２３により決定された再生速度で再生されるプレビュー動画像では、非注目範囲ＮＦＡ３の再生時間が圧縮（短く）されて逆再生される。

因みに再生形式決定部２３は、ベース動画像における、マンガ領域３２の読み手に最初に読まれるマンガフレームＭＦＭ１に対応するフレーム画像ＦＭ１よりも前の部分については、該フレーム画像ＦＭ１を含む注目範囲ＦＡ１より前を所定間隔ごとに分割する。そして再生形式決定部２３は、注目範囲ＦＡ１から離れるにつれて速度が速くなるように１次元フィッシュアイアルゴリズムを用いて再生速度を算出する。

また再生形式決定部２３は、ベース動画像における、マンガ領域３２の読み手に最後に読まれるマンガフレームＭＦＭ６に対応するフレーム画像ＦＭ６よりも後の部分については、該フレーム画像ＭＦＭ６を含む注目範囲ＦＡ６より後を所定間隔ごとに分割する。そして再生形式決定部２３は、注目範囲ＦＡ６から離れるにつれて速度が速くなるように１次元フィッシュアイアルゴリズムを用いて再生速度を算出する。

表示制御部２１は、再生ボタン３４ｂが操作された場合には、再生形式決定部２３により算出された再生速度でベース動画像をプレビュー動画像としてプレビュー再生ウインドウ３４ａに再生表示する。

また表示制御部２１は、注目範囲ＦＡ１〜ＦＡ６を再生するとき、該注目範囲ＦＡ１〜ＦＡ６に対応するマンガフレームＭＦＭ１〜ＭＦＭ６のマンガフレーム情報ＦＭＩを読み出す。そして表示制御部２１は、マンガフレームＭＦＭにエフェクトＥＦ及び／又は吹出しＳＰが設定されている場合、注目範囲ＦＡ１〜ＦＡ６にエフェクトＥＦ及び／又は文字列が示された吹出し枠ＳＰを重ねて表示する。例えば注目範囲ＦＡ１を再生する場合、１倍速の再生速度で、エフェクトＥＦ１及び「my ball!」が示された吹出し枠ＳＰ１を動画像に重ねて表示する。

表示制御部２１は、保存ボタン３４ｄが操作された場合には、再生形式決定部２３により算出された再生速度で再生され、また注目範囲ＦＡ１〜ＦＡ６にエフェクトＥＦ及び／又は文字列が示された吹出し枠ＳＰが重ねられたプレビュー動画像を所定のフォーマットで保存する。

〔３．手順〕
〔３−１．マンガ生成処理手順〕
次に上述したマンガ生成処理の手順について図１４のフローチャートを用いて説明する。

ＣＰＵ１１は、ルーチンＲＴ１の開始ステップから次のステップＳＰ１に移り、候補表示領域３１ｇに表示された動画像のうち、ユーザ操作に応じて編集対象となるベース動画像を動画像表示ウインドウ３１ａに表示し、次のステップＳＰ２に移る。

ステップＳＰ２においてＣＰＵ１１は、動画像表示ウインドウ３１ａがカーソルＣＳを介してプレス操作された場合、マンガフレーム情報ＦＭＩを生成する。またＣＰＵ１１は、プレス操作された際に動画像表示ウインドウ３１ａに表示されたフレーム画像ＦＭのフレーム再生時間、画像データ及び標準とされるフレームサイズをそのマンガフレーム情報ＦＭＩに入力し、次のステップＳＰ３に移る。

ステップＳＰ３においてＣＰＵ１１は、ステップＳＰ２で生成したマンガフレーム情報ＦＭＩをマンガフレーム情報リストに追加し、次のステップＳＰ４に移る。

ステップＳＰ４においてＣＰＵ１１は、ステップＳＰ２でプレス操作された際に動画像表示ウインドウ３１ａに表示されたフレーム画像ＦＭの複製を生成し、生成された複製画像ＤＭを動画像表示ウインドウ３１ａ上に移動可能に重ねて表示し、次のステップＳＰ５に移る。

ステップＳＰ５においてＣＰＵ１１は、複製画像ＤＭを操作入力部１４の操作に応じて指定されたマンガ領域３２の任意の位置にマンガフレームＭＦＭとして配置する。またＣＰＵ１１は、配置されたマンガフレームＭＦＭに対応するマンガフレーム情報ＦＭＩに、配置されたマンガフレームＭＦＭのＸ座標、Ｙ座標を入力し、次のステップＳＰ６に移る。

ステップＳＰ６においてＣＰＵ１１は、マンガ領域３２に配置されたマンガフレームＭＦＭにエフェクトＥＦ、吹出し枠ＳＰがドラッグアンドドロップ操作により挿入された場合、該マンガフレームＭＦＭ上に挿入されたエフェクトＥＦ、吹出し枠ＳＰを重ねて表示する。またＣＰＵ１１は、挿入されたマンガフレームＭＦＭに対応するマンガフレーム情報ＦＭＩに、挿入されたエフェクトＥＦ、吹出し枠ＳＰの設定を入力し、次のステップＳＰ７に移る。

ステップＳＰ７においてＣＰＵ１１は、マンガ領域３２に配置されたマンガフレームＭＦＭが移動、拡大又は縮小された場合、該マンガフレームＭＦＭに対応するマンガフレーム情報ＦＭＩに変更されたＸ座標、Ｙ座標、フレームサイズを入力（更新）する。

ＣＰＵ１１は次のステップＳＰ８において、動画像表示ウインドウ３１ａが再びプレス操作されたか否かを判断し、肯定結果が得られるとステップＳＰ２に移り、ステップＳＰ２からステップＳＰ７までを繰り返し行う。

ステップＳＰ９においてＣＰＵ１１は、マンガ領域３２に配置されたマンガフレームＭＦＭに対して、エフェクトＥＦ及び／又は吹出し枠ＳＰの挿入、移動、拡大又は縮小などの何らかの操作が行われたか否かを判断する。ここで肯定結果が得られると、ＣＰＵ１１は、ステップＳＰ６に戻り、ステップＳＰ６及びＳＰ７において、操作された内容に応じた処理を実行する。

このようにＣＰＵ１１は、ステップＳＰ２からＳＰ９までを繰り返し行いながら、動画像表示ウインドウ３１ａに表示されたベース動画像を素材としてそのフレーム画像ＦＭをマンガ領域３２に配置させることにより、マンガ領域３２をマンガとして生成する。

ステップＳＰ１０においてＣＰＵ１１は、マンガ領域３２を印刷すべき操作が行われた場合、マンガ領域３２を印刷し、次のステップに移って処理を終了する。

〔３−２．プレビュー動画像再生処理手順〕
次に上述したプレビュー動画像再生処理の手順について図１５及び図１６のフローチャートを用いて説明する。

ＣＰＵ１１は、ルーチンＲＴ２（図１５）の開始ステップから次のサブルーチンＳＲＴ１（図１６）に移って再生形式算出処理を実行する。具体的にＣＰＵ１１は、サブルーチンＳＲＴ１の開始ステップから入って次のステップＳＰ３１に移り、マンガ領域３２に配置されたマンガフレームＭＦＭの読まれる順番に、対応するマンガフレーム情報ＦＭＩを並び替え、次のステップＳＰ３２に移る。

ステップＳＰ３２においてＣＰＵ１１は、マンガフレーム情報ＦＭＩにおけるフレーム再生時間の前後５秒間を注目範囲ＦＡとして抽出し、次のステップＳＰ３３に移る。

ステップＳＰ３３においてＣＰＵ１１は、注目範囲ＦＡの重み付けを、対応するマンガフレームＭＦＭのマンガフレーム情報ＦＭＩにおけるフレームサイズに基づいて算出し、次のステップＳＰ３４に移る。

ステップＳＰ３４においてＣＰＵ１１は、前後に隣接するマンガフレーム情報ＦＭＩのフレーム再生時間を取得し、次のステップＳＰ３５に移る。

ステップＳＰ３５においてＣＰＵ１１は、前のマンガフレーム情報ＦＭＩにおけるフレーム再生時間の５秒後から後のマンガフレーム情報ＦＭＩにおけるフレーム再生時間の５秒前までを非注目範囲ＮＦＡとして抽出し、次のステップＳＰ３６に移る。

ステップＳＰ３６においてＣＰＵ１１は、非注目範囲ＮＦＡを１０等分し、１次元フィッシュアイアルゴリズムを用いて１０等分された範囲ごとの重み付けを算出し、次のステップＳＰ３７に移る。

ステップＳＰ３７においてＣＰＵ１１は、全て範囲の重み付けが算出されたか否かを判断し、否定結果が得られるとステップＳＰ３４に戻り、他の非注目範囲ＮＦＡの重み付けをステップＳＰ３４〜ＳＰ３６で算出する。

これに対して全て範囲の重み付けが算出された場合、ＣＰＵ１１はステップＳＰ３８に移って、算出されたそれぞれの範囲における重み付けの逆数を、その範囲における再生速度として算出し、サブルーチンＳＲＴ１を終了して、次のステップＳＰ２１に移る。

ステップＳＰ２１（図１５）においてＣＰＵ１１は、サブルーチンＳＲＴ１で算出された再生速度に応じてベース動画像をプレビュー動画像として再生し、再生中における再生位置（時間）を保持し、次のステップＳＰ２２に移る。

ステップＳＰ２２においてＣＰＵ１１は、マンガフレーム情報ＦＭＩにおけるフレーム再生時間の５秒前とステップＳＰ２１で保持した再生位置とが一致するか否かを判断し、肯定結果が得られると次のステップＳＰ２３に移る。

ステップＳＰ２３においてＣＰＵ１１は、一致したマンガフレーム情報ＦＭＩにおけるエフェクトＥＦ、吹出し枠ＳＰが入力されている場合、対応する注目範囲ＦＡが再生されている間、プレビュー動画像にエフェクトＥＦ及び吹出し枠ＳＰを重ねて表示し、次のステップＳＰ２４に移る。

これに対してステップＳＰ２２において否定結果が得られると、ＣＰＵ１１はステップＳＰ２３を行うことなくステップＳＰ２４に移る。

ステップＳＰ２４においてＣＰＵ１１は、プレビュー動画像の再生が終了したか否かを判断し、プレビュー動画像の再生が終了するまでステップＳＰ２１〜ＳＰ２４を繰り返し行う。

ステップＳＰ２４においてプレビュー動画像の再生が終了したと判断した場合、ＣＰＵ１１は、ステップＳＰ２５に移り、保存ボタン３４ｄが操作された場合、編集されたプレビュー動画像を記憶部１６に記憶し、次のステップに移って処理を終了する。

〔４．動作及び効果〕
以上の構成において画像処理装置１は、動画像表示ウインドウ３１ａに表示されたベース動画像を構成するフレーム画像ＦＭをマンガ領域３２の任意の位置及び大きさでマンガフレームＭＦＭとして配置させることにより、マンガ領域３２をマンガとして生成する。

画像処理装置１は、生成されたマンガに配置されたマンガフレームＭＦＭに応じてベース動画像の再生形式を決定し、ベース動画像を該再生形式に基づいてプレビィー動画像として再生するようにした。

これにより画像処理装置１は、ベース動画像を素材としてマンガ領域３２にフレーム画像ＦＭをマンガフレームＭＦＭとして配置させるといった簡易な操作でマンガを作成させることができる。

ところで生成されたマンガ領域３２に配置されるマンガフレームＭＦＭは、ユーザがベース動画像のなかから抽出した、ユーザが注目するフレーム画像であり、またその大きさは注目度を示すものである。

従って画像処理装置１は、マンガ領域３２に配置されたマンガフレームＭＦＭの周辺（前後５秒間）を線形でその大きさに比例して再生し、それ以外をマンガ領域３２に配置されたマンガフレームＭＦＭから離れるにつれて再生速度が速くなるように非線形で再生するようにした。これにより画像処理装置１は、マンガ製作者の意図を反映したプレビュー動画像を生成することができる。

また、プレビュー動画像を生成する立場からマンガ領域３２を見た場合、マンガの読まれる順番にベース動画像のフレーム画像ＦＭを配置していくだけで、その順番に応じてプレビュー動画像が再生されるので、直感的にプレビュー動画像の時間軸を把握することができる。すなわち画像処理装置１は、直感的にプレビュー動画像の時間軸をマンガで表現することができる。

このように画像処理装置１は、マンガという２次元の面でプレビュー動画像の再生形式（再生速度及び再生軸）を設定することができるといった、動画像再生の新しい表現方法をユーザに提供することができる。

また画像処理装置１は、ベース動画像と、マンガ領域３２に配置されたマンガフレームＭＦＭのマンガフレーム情報リストとを記憶しておくことにより、プレビュー動画像を生成することができる。従って例えばベース動画像とマンガフレーム情報リストとを他のコンピュータと共有することにより、異なるユーザ間でプレビュー動画像の編集作業を共同で行わせることができ、新しいコミュニケーションツールとして使用することができる。

さらに画像処理装置１は、図１７に示すように、ベース動画像を基にマンガをマンガ生成処理で生成し、マンガに基づいてプレビュー動画像再生処理でプレビュー動画像を生成するだけでなく、プレビュー動画像を再びベース動画像として利用することも考えられる。

この場合、画像処理装置１では、１度生成されたプレビュー動画像を基に、新しいマンガ及びプレビュー動画像を生成することができるので、何度も編集作業を繰り返し行わせることもできる。

以上の構成によれば、マンガ領域３２にベース動画像のフレーム画像を配置させてマンガとして生成し、マンガに配置されたマンガフレームＭＦＭに応じてプレビュー動画像の再生形式を決定する。これにより、ベース動画像を素材とした２次元であるマンガでプレビュー動画像の再生形式を決定するといった従来にない表現形態でプレビュー動画像の再生形式を決定することができ、表現性を向上することができる。

＜２．他の実施の形態＞
なお上述した実施の形態においては、マンガ生成処理手順においてステップＳＰ１０でマンガ領域３２内を印刷するようにした場合について述べた。本発明はこれに限らず、マンガ領域３２を印刷すべき操作が行われた場合、どのタイミングでも印刷できるようになされている。

また上述した実施の形態においては、マンガ領域３２に配置されたマンガフレームＭＦＭに対応するフレーム再生時間の前後５秒間を注目範囲ＦＡとして設定するようにした場合について述べた。本発明はこれに限らず、たとえば、フレーム再生時間の前後３秒間や、フレーム再生時間の前３秒から後５秒までなどの任意の範囲を注目範囲ＦＡとして設定するようにしてもよい。また注目範囲ＦＡをユーザに設定させるようにしてもよい。

別例としてマンガフレームＭＦＭのフレームサイズに基づいて注目範囲ＦＡを設定するようにしてもよい。具体的には再生形式決定部２３は、マンガフレームＭＦＭに対応するマンガフレーム情報ＦＭＩからフレームサイズを読み出し、該フレームサイズが標準とすべき大きさであった場合にフレーム再生時間の例えば前後５秒間を注目範囲ＦＡに設定する。また再生形式決定部２３は、フレームサイズが標準とすべき大きさでない場合、標準とすべきフレームサイズとの比に応じた注目範囲ＦＡに変更する。これにより、フレームサイズが大きいマンガフレームＭＦＭに対応するフレーム画像ＦＭの周辺をより長い時間線形再生して視聴させることができる。

また上述した実施の形態においては、プレビュー動画像を再生する間、マンガ領域３２はそのまま表示するようにした場合について述べた。本発明はこれに限らず、プレビュー動画像を再生する際、プレビュー動画像の注目範囲ＦＡが再生している間、その注目範囲ＦＡに対応するマンガフレームＭＦＭを例えば点滅表示するようにしてもよい。これにより、マンガ領域３２とプレビュー動画像との対応関係が容易に判断できるようになり、表現性をさらに向上することができる。

また上述する実施の形態においては、操作入力部１４の操作を介してユーザに候補として選択された動画像のフレーム画像を候補表示領域３１ｇに表示するようにした場合について述べた。本発明はこれに限らない。例えば、ベース動画像が選択された際、そのベース動画像のデータが保存されたフォルダの動画像データを読み出して候補表示領域３１ｇにそれらの動画像のうちの３つの動画像のフレーム画像を表示するようにしてもよい。また、予め記憶部１６の決められた記憶場所（フォルダ等）に保存された動画像のデータを読み出して候補表示領域３１ｇにそれらの動画像のうちの３つの動画像のフレーム画像を表示するようにしてもよい。

また上述した実施の形態においては、マンガ領域３２に配置されたマンガフレームＭＦＭ上にカーソルＣＳが移動された場合、該マンガフレームＭＦＭに対応する注目範囲ＦＡを、そのマンガフレームＭＦＭの位置で再生するようにしてもよい。

また上述した実施の形態においては、マンガ領域３２に配置されたマンガフレームＭＦＭを操作入力部１４の操作に応じて移動させるようにした場合について述べた。本発明はこれに限らない。例えば図１８に示すように、左右に隣接するマンガフレームＭＦＭ１及びＭＦＭ２の間にカーソルＣＳが位置している状態で、例えばマウスがプレス操作された後に下方向にドラッグ操作される。このときドラッグ操作の距離に応じて、マンガフレームＭＦＭ１及びＭＦＭ２の間が開くようにしてもよい。

また上述した実施の形態においては、読まれる順番が最上段の右端から左端へ順に続き、次にその段の１つ下の段が右端から左端へ順に続く場合について述べた。本発明はこれに限らず、例えば最上段の左端から右端へ順に続き、次にその段の１つ下の段が左端から右端へ順に続くようにしてもよい。

また上述した実施の形態においては、ＣＰＵ１１がＦＯＭ１２又は記憶部１６に格納されているプログラムに従い、上述した各種処理を行うようにした場合について述べた。本発明はこれに限らず、記憶媒体からインストールしたり、インターネットからダウンロードしたプログラムに従って上述した各種処理を行うようにしても良い。またその他種々のルートによってインストールしたプログラムに従って上述した各種処理を行うようにしても良い。

また上述した実施の形態においては、表示制御部として表示制御部２１、決定部として再生形式決定部２３が設けられるようにした場合について述べた。本発明はこれに限らず、その他種々の構成でなる表示制御部、決定部を設けるようにしても良い。

本発明は、パーソナルコンピュータ、携帯電話機、ＰＤＡ（Personal Digital Assistant）、携帯音楽プレーヤ、ゲーム機等の電子機器において利用可能である。

１……画像処理装置、１１……ＣＰＵ、１２……ＲＯＭ、１３……ＲＡＭ、１４……操作入力部、１５……表示部、１６……記憶部、１７……インターフェイス部、１８……バス、２１……表示制御部、２２……マンガ生成部、２３……再生形式決定部、３０……画像処理画面、３１……ベース動画像再生指示領域、３２……マンガ領域、３３……アイテム表示領域、３４……プレビュー動画像再生指示領域。

Claims (10)

1. 動画像を構成するフレーム画像を配置させる領域を表示部に表示させる表示制御部と、
   上記領域に配置された上記動画像のフレーム画像に応じて上記動画像の再生形式を決定する決定部と
   を有する画像処理装置。
2. 上記決定部は、
   上記領域に配置されたフレーム画像間の位置に応じて、上記動画像における該フレーム画像間の再生方向を決定する
   請求項１に記載の画像処理装置。
3. 上記決定部は、
   上記領域に配置されたフレーム画像の大きさに応じて、上記動画像における該フレーム画像を含む所定範囲の再生速度を決定する
   請求項１及び２に記載の画像処理装置。
4. 上記決定部は、
   上記領域に配置されたフレーム画像のマンガとして読まれる順番に応じて、読まれる順番に隣接するフレーム画像間の上記動画像の再生方向を決定する
   請求項２に記載の画像処理装置。
5. 上記決定部は、
   上記動画像における上記領域に配置されたフレーム画像を含む所定範囲以外の範囲を、高速再生するように再生速度を決定する
   請求項４に記載の画像処理装置。
6. 上記決定部は、
   上記動画像における上記領域に配置されたフレーム画像を含む所定範囲を、該フレーム画像の大きさに反比例した速度で再生するように再生速度を決定する
   請求項３に記載の画像処理装置。
7. 上記決定部は、
   上記読まれる順番に隣接するフレーム画像同士が上記動画像の時間軸とは逆方向である場合、上記動画像における当該読まれる順番に隣接するフレーム画像間を逆方向に再生するように再生方向を決定する
   請求項４に記載の画像処理装置。
8. 上記領域は、マンガとして印刷されるものである
   請求項１に記載の画像処理装置。
9. 動画像を構成するフレーム画像を配置させる領域を表示部に表示させる表示制御ステップと、
   上記領域に配置された上記動画像のフレーム画像に応じて上記動画像の再生形式を決定する決定ステップと
   を有する画像処理方法。
10. コンピュータに対して、
    動画像を構成するフレーム画像を配置させる領域を表示部に表示させる表示制御ステップと、
    上記領域に配置された上記動画像のフレーム画像に応じて上記動画像の再生形式を決定する決定ステップと
    を実行させる画像処理プログラム。
    

Images