JP5125133B2 - 画像処理装置、撮像装置およびプログラム - Google Patents

Description

本発明は、画像処理装置、撮像装置およびプログラムに関する。

一般的な電子カメラには、撮像した画像をモニタに再生表示する機能が従来から実装されている。また、電子カメラでの画像の再生に関し、画像間の関連付けを示すリンク情報のテーブルを画像のデータとは別に記録しておき、このリンク情報に基づいて関連性のある画像を連続的に表示する構成も提案されている。例えば、特許文献１に上述の電子カメラの一例が開示されている。
特開２０００−４４２０号公報

しかし、従来の電子カメラでは、画像ファイルとは別にリンク情報のテーブルを用意して画像ファイル間の関連性を管理する。そのため、記録媒体に記録されたリンク情報のテーブルの容量で、画像ファイルの記録数がその分制約されうる点で改善の余地があった。

請求項１に記載の画像処理装置は、第１画像データ及び前記第１画像データに画像処理を施して生成された第２画像データの存在を示す第１メタデータを含む第１画像ファイルと、前記第２画像データ及び前記第２画像データが前記第１画像データに画像処理を施して生成されたことを示す第２メタデータを含む第２画像ファイルとを読み込む読込部と、前記第２画像データに基づく第２画像を表示装置に表示している場合、ユーザー操作により第１表示切替指示がなされたときは、前記第２メタデータに基づいて、前記第２画像を前記第１画像データに基づく第１画像に切り替えて前記表示装置に表示するよう制御する制御部とを備え、前記読込部は、前記第１画像データに画像処理を施して生成された第４画像データ及び前記第４画像データが前記第１画像データに画像処理を施して生成されたことを示す第４メタデータを含む第４画像ファイルを読み込み、前記制御部は、前記第２画像を前記表示装置に表示している際にユーザー操作により第３表示切替指示がなされた場合、前記第１画像を前記第２メタデータに基づいて切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づいて、前記第２画像を前記第４画像に切り替えて前記表示装置に表示し、前記第１画像を前記第２メタデータに基づかないで切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づくことなく、前記第２画像を所定の規則に基づいて指定された画像に切り替えて前記表示装置に表示することを特徴とする。

請求項５に記載の撮像装置は、被写体を撮像して画像データを生成する撮像部と、請求項１から請求項４のいずれか一項に記載の画像処理装置とを備えることを特徴とする。

請求項６に記載のプログラムは、第１画像データ及び前記第１画像データに画像処理を施して生成された第２画像データの存在を示す第１メタデータを含む第１画像ファイルと、前記第２画像データ及び前記第２画像データが前記第１画像データに画像処理を施して生成されたことを示す第２メタデータを含む第２画像ファイルとを読み込む読込ステップと、前記第２画像データに基づく第２画像を表示装置に表示している場合、ユーザー操作により第１表示切替指示がなされたときは、前記第２メタデータに基づいて、前記第２画像を前記第１画像データに基づく第１画像に切り替えて前記表示装置に表示するよう制御する制御ステップとをコンピュータに実行させ、前記読込ステップは、前記第１画像データに画像処理を施して生成された第４画像データ及び前記第４画像データが前記第１画像データに画像処理を施して生成されたことを示す第４メタデータを含む第４画像ファイルを読み込み、前記制御ステップは、前記第２画像を前記表示装置に表示している際にユーザー操作により第３表示切替指示がなされた場合、前記第１画像を前記第２メタデータに基づいて切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づいて、前記第２画像を前記第４画像に切り替えて前記表示装置に表示し、前記第１画像を前記第２メタデータに基づかないで切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づくことなく、前記第２画像を所定の規則に基づいて指定された画像に切り替えて前記表示装置に表示することを特徴とする。

図１は、本実施形態の電子カメラの構成を示すブロック図である。また、図２は、本実施形態の電子カメラの背面部の構成を示す図である。
電子カメラは、撮像光学系１１と、撮像素子１２と、アナログ信号処理部１３と、バッファメモリ１４と、画像処理部１５と、記録Ｉ／Ｆ１６と、ＣＰＵ１７と、モニタ１８と、レリーズ釦１９および操作部材２０と、バス２１とを有している。ここで、バッファメモリ１４、画像処理部１５、記録Ｉ／Ｆ１６、ＣＰＵ１７およびモニタ１８は、それぞれバス２１を介して接続されている。なお、レリーズ釦１９および操作部材２０は、それぞれＣＰＵ１７に接続されている。

撮像素子１２は、撮像光学系１１の像空間側に配置されている。撮像素子１２は、撮像光学系１１を通過した光束による被写体像を光電変換してアナログの画像信号を生成する。この撮像素子１２の出力はアナログ信号処理部１３に接続されている。
アナログ信号処理部１３は、撮像素子１２の出力に対してアナログ信号処理を施すアナログフロントエンド回路である。このアナログ処理部は、相関二重サンプリングや、画像信号のゲインの調整や、画像信号のＡ／Ｄ変換を行う。また、アナログ信号処理部１３の出力はバッファメモリ１４に接続されている。バッファメモリ１４は、画像処理部１５による画像処理の前後で撮影画像のデータなどを一時的に記録する。

画像処理部１５は、デジタルの画像信号に対して各種の画像処理（ホワイトバランス補正、色補間処理、色補正、色変換処理、階調変換、輪郭強調処理、色空間変換など）を施すＡＳＩＣである。
また、画像処理部１５は、後述の再生モードにおいて本画像のデータの編集処理を実行する。上記の編集処理では、画像処理部１５は、編集元の本画像のデータに画像処理を施して、編集元の本画像とは別に新たな編集画像（編集元の画像に画像処理を施した画像）のデータを生成する。

なお、編集処理で画像処理部１５が実行する画像処理の種類としては、例えば、輪郭強調処理、コントラスト補正処理、赤目補正処理、彩度調整処理、ノイズ低減処理、画像解析を伴う光量補正処理（画像解析の結果に基づき画像の暗部またはハイライト部を特定し、その特定部分の階調を主に調整する処理）、複数の画像から１つの画像を合成する画像合成処理、などが挙げられる。

記録Ｉ／Ｆ１６には、記録媒体２２を接続するためのコネクタが形成されている。そして、記録Ｉ／Ｆ１６は、コネクタに接続された記録媒体２２に対してデータの書き込み／読み込みを実行する。上記の記録媒体２２は、ハードディスクや、半導体メモリを内蔵したメモリカードなどで構成される。なお、図１では記録媒体２２の一例としてメモリカードを図示する。

ＣＰＵ１７は、電子カメラの統括的な制御を行うプロセッサである。ＣＰＵ１７は、動作モード（一例として撮像モード、再生モードなど）に対応するシーケンスプログラムに従って、電子カメラの各部動作を制御する。例えば、撮像モードでのＣＰＵ１７は、本画像の撮像処理や、撮像前に必要となる各種演算（ＡＦ演算、ＡＥ演算、オートホワイトバランス演算など）を実行する。なお、上記の再生モードに関する説明は後述する。

また、ＣＰＵ１７は、Ｅｘｉｆ（Exchangeable image file format for digital still cameras）規格に準拠して画像ファイルの生成を行う。なお、ＣＰＵ１７によって生成された画像ファイルは上記の記録媒体２２に記録される。
ここで、図３に、画像ファイルのデータ構造を模式的に示す。画像ファイルは、撮像条件（露光時間、絞り値、撮像感度など）をはじめとするメタデータを記録するヘッダ領域と、画像のデータを記録する画像領域とを有している。また、画像ファイルのヘッダ領域は、ＴＩＦＦヘッダとデータ領域（ＩＦＤ）とで構成される。

なお、画像ファイルに含まれるデータのうち、Ｅｘｉｆ規格で対応していないデータは、Ｅｘｉｆ規格のＭａｋｅｒＮｏｔｅタグを利用して画像ファイルのヘッダ領域に記録される。
モニタ１８は、ＣＰＵ１７の指示に応じて各種画像を表示する。図２に示すように、本実施形態でのモニタ１８は、カメラ筐体の背面に設けられた液晶ディスプレイで構成される。なお、モニタ１８の構成は、接眼部を備えた電子ファインダなどであってもよい。ここで、再生モードでのモニタ１８には、画像ファイルの画像を再生した画面が表示される。

レリーズ釦１９は、半押し操作によるＡＦの指示入力と、全押し操作によるレリーズタイミング（本画像の露光開始）の指示入力とをユーザーから受け付ける。
操作部材２０は、図２に示すように、モードダイヤル２３と、マルチセレクタ２４と、複数の入力釦２５とを有している。モードダイヤル２３は、電子カメラの動作モードの切替操作をユーザーから受け付ける。

また、マルチセレクタ２４は、本体部２４ａと、決定釦２４ｂと、ダイヤル部２４ｃとを有している。マルチセレクタ２４の本体部２４ａの全体形状は円形に形成されており、上下左右の４方向に傾斜可能に構成されている。この本体部２４ａは、例えば、再生モードにおいてモニタ１８に表示する再生画像の切り替え操作をユーザーから受け付ける。マルチセレクタ２４の決定釦２４ｂは、マルチセレクタ２４の中央に配置されている。マルチセレクタ２４のダイヤル部２４ｃは全体形状が環状に形成されており、決定釦２４ｂの外周において回動可能に構成されている。このダイヤル部２４ｃおよび決定釦２４ｂは、例えば再生モードにおいて、ＧＵＩ(Graphical User Interface)形式でモニタ１８に表示されたアイコンの操作（項目の選択および項目の決定）をユーザーから受け付ける。

さらに、各々の入力釦２５は、各々の動作モード毎に設定された入力操作をユーザーから受け付ける。なお、入力釦２５には、再生モードを立ち上げる再生釦２５ａが含まれる。
以下、本実施形態の電子カメラの再生モードでの動作例を説明する。
まず、再生モードにおいて、ユーザーが画像の編集処理を行う場合を説明する。

ユーザーが再生モードを立ち上げる操作（例えば、モードダイヤル２３の操作、再生釦２５ａの押圧）を行うと、ＣＰＵ１７は画像ファイルに記録された画像をモニタ１８の画面に再生表示する。この再生画面の表示中において、ユーザーが操作部材２０で編集処理の項目を指定すると、ＣＰＵ１７は以下の要領で編集画像の画像ファイルを生成する。
第１に、画像処理部１５は、編集元の画像（再生画面で表示中の画像）のデータに対して、ユーザーから指定された画像処理を施す。そして、画像処理部１５は、編集元の画像とは別に新たな編集画像のデータを生成する。

第２に、ＣＰＵ１７は、編集画像のヘッダ領域の各データをＥｘｉｆ規格に準拠して生成する。なお、編集画像に関する撮像条件のメタデータについては、編集元の画像ファイルのデータが複製されて記録されることとなる。
第３に、ＣＰＵ１７は、編集画像の画像ファイルのヘッダ領域に、編集処理での画像処理の種類を示すデータと、編集元の画像ファイルの所在を示すファイルパスとを記録する。なお、画像合成処理の場合には、編集元の画像ファイルのファイルパスがヘッダ領域に複数記録される。

また、ＣＰＵ１７は、編集元の画像ファイルのヘッダ領域に、編集画像の画像ファイルの所在を示すファイルパスを記録する。これにより、画像ファイルのヘッダ領域からファイルパスが検出された場合には、ＣＰＵ１７はその画像ファイルと関連性のある他の画像ファイルの所在を把握することができる。
ここで、上記のファイルパスは、一例として、ルートディレクトリやドライブ名を起点として目的の画像ファイルの記録位置までの道筋を記述した文字列データなどで構成される。勿論、ファイルパスは相対パスであってもよい。なお、上記のファイルパスのデータは、いずれもＭａｋｅｒＮｏｔｅタグを利用して各々のヘッダ領域に記録されることとなる。

次に、再生モードにおいて、ユーザーがモニタ１８の表示画像を切り替えて複数の画像を閲覧する場合の動作を、図４、図５の流れ図を参照しつつ説明する。
ここで、図４、図５の例では、説明の便宜上、記録媒体２２に記録された画像Ｎ１から画像Ｎ９までの９フレーム分の画像ファイルを再生するものとする。上記の画像の番号（Ｎ１〜Ｎ９）は各々の画像のファイル番号の並び順を示すものである。また、画像Ｎ３，Ｎ４，Ｎ５までは画像Ｎ１を元画像とする編集画像である。さらに、画像Ｎ７，Ｎ８は、画像Ｎ３を元画像とする編集画像である。なお、図６に上記の各画像の関連性を模式的に示す。

ステップ１０１：ＣＰＵ１７は、記録媒体２２に記録されている全ての画像ファイルのヘッダ領域をスキャンする。そして、ＣＰＵ１７は、画像ファイルのヘッダ領域から検出したファイルパスに基づいて、画像ファイル間における元画像と編集画像との関係を示すリンクデータを生成する。このリンクデータの生成により、ＣＰＵ１７は画像ファイル同士の関連性を階層的に把握することが可能となる。したがって、ＣＰＵ１７は、同じ元画像に直接の関連性を有する複数の編集画像（一例として、画像Ｎ１に対する画像Ｎ３，Ｎ４，Ｎ５や、画像Ｎ３に対する画像Ｎ７，Ｎ８など）をリンクデータによって関連付けして抽出することが可能となる。

ステップ１０２：ＣＰＵ１７は、関連画像表示のフラグをオフの状態にして初期化する。
ステップ１０３：ＣＰＵ１７は、再生対象となる画像ファイルから画像のデータを読み込む。なお、再生モードにおいて再生対象の画像がはじめて読み込まれる場合、ＣＰＵ１７は、ファイル番号の先頭（Ｎ１）または末尾（Ｎ９）の画像ファイルから画像を読み出す。

ステップ１０４：ＣＰＵ１７は、関連画像表示のフラグがオフの状態か否かを判定する。フラグがオフの状態の場合（ＹＥＳ側）にはＣＰＵ１７はＳ１０５に移行する。一方、フラグがオンの状態の場合（ＮＯ側）にはＣＰＵ１７はＳ１１５に移行する。なお、この場合（Ｓ１０４のＮＯ側）は、ＣＰＵ１７は後述の関連画像表示モードで動作することとなる。

ステップ１０５：ＣＰＵ１７は、再生対象の画像ファイル（Ｓ１０３）に関連性のある画像ファイルがないか否かを判定する。具体的には、ＣＰＵ１７は、リンクデータ（Ｓ１０２）を参照して、再生対象の画像に対する元画像または編集画像がないか否かを判定する。関連する画像ファイルがない場合（ＹＥＳ側）には、ＣＰＵ１７はＳ１０６に移行する。一方、関連する画像ファイルがある場合（ＮＯ側）には、ＣＰＵ１７はＳ１０９に移行する。

ステップ１０６：この場合には、ＣＰＵ１７は、再生対象の画像ファイルから読み出した再生画像のみをモニタ１８に表示する。なお、図７にＳ１０６でのモニタ１８の表示画面の一例を示す。
ステップ１０７：ＣＰＵ１７は、次画像への表示切替操作（例えば、マルチセレクタ２４の本体部２４ａでの操作）をユーザーから受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１０８に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はユーザーからの入力を待機する。

ステップ１０８：ＣＰＵ１７は、再生対象の画像ファイルよりも、ファイル番号の並び順が１つ後（または１つ前）となる画像ファイルを再生対象に指定する。その後、ＣＰＵ１７はＳ１０３に戻って上記動作を繰り返す。
一例として、Ｓ１０６において画像Ｎ２が表示されているときに、ユーザーが次画像への表示切替操作を行った場合を考える。この場合には、ファイル番号の順に従って、切替後のモニタ１８には画像Ｎ３（または画像Ｎ１）が表示されることとなる。

ステップ１０９：この場合、ＣＰＵ１７は、再生対象の画像ファイルから読み出した再生画像と、関連画像の閲覧キーとをモニタ１８に表示する。図８にＳ１０９でのモニタ１８の表示画面の一例を示す。図８での表示画面には、再生画像の下側に、関連画像の閲覧キーがＧＵＩ形式で表示される。
ここで、上記の閲覧キーには、再生画像の元画像を閲覧するための元画像キーと、再生画像の編集画像を閲覧するための編集画像キーとの２種類がある。元画像キーは、リンクデータに基づいて再生画像に元画像があるとＣＰＵ１７が判定した場合のみモニタ１８に表示される。同様に、編集画像キーは、リンクデータに基づいて再生画像から生成された編集画像があるとＣＰＵ１７が判定した場合のみモニタ１８に表示される。なお、図８では、元画像キーおよび編集画像キーがモニタ１８に両方表示された状態を示している。

そして、ユーザーが操作部材２０でモニタ１８上のカーソル等を操作して閲覧キーへの入力を行うと、ＣＰＵ１７は、閲覧キーに対応する関連画像（元画像または編集画像）をモニタ１８に表示する。ここで、表示中の再生画像から生成された編集画像が複数ある場合、ＣＰＵ１７は編集画像の閲覧キーへの入力があると、上記の編集画像のうちでファイル番号が最も古い編集画像を表示する。なお、表示中の再生画像から生成された編集画像が複数ある場合、ＣＰＵ１７は、ユーザーの指定した任意の編集画像をモニタ１８に表示できるようにしてもよい。

ステップ１１０：ＣＰＵ１７は、関連画像の閲覧キーへの入力操作を受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１１１に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はＳ１１３に移行する。
ステップ１１１：ＣＰＵ１７は、関連画像表示のフラグをオンの状態にする。また、ＣＰＵ１７は、現在の再生対象である画像ファイル（初期画像の画像ファイル）のファイルパスを記録する。

ステップ１１２：ＣＰＵ１７は、閲覧キーに対応する画像ファイル（元画像または編集画像）を再生対象に指定する。その後、ＣＰＵ１７はＳ１０３に戻って上記動作を繰り返す。なお、この場合には関連画像表示のフラグがオンの状態であるので、上記のＳ１０４にて、ＣＰＵ１７は後述の関連画像表示モード（Ｓ１１５）に移行することとなる。
一例として、Ｓ１０９において画像Ｎ１が表示されているときに、ユーザーが閲覧キー（編集画像キー）を入力した場合を考える。この場合には、ＣＰＵ１７は関連画像表示モードに移行し、切替後のモニタ１８には画像Ｎ３が表示される。なお、関連画像表示モードでの表示画面の説明はＳ１１５で後述する。

ステップ１１３：ＣＰＵ１７は、次画像への表示切替操作（例えば、マルチセレクタ２４の本体部２４ａでの操作）をユーザーから受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１１４に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はＳ１１０に戻って上記動作を繰り返す。
ステップ１１４：ＣＰＵ１７は、再生対象の画像ファイルに対してファイル番号の並び順が１つ後（または１つ前）となる画像ファイルを再生対象に指定する。その後、ＣＰＵ１７はＳ１０３に戻って上記動作を繰り返す。

一例として、Ｓ１０９において画像Ｎ１が表示されているときに、ユーザーが次画像への表示切替操作を行った場合を考える。この場合には、ファイル番号の順に従って、切替後のモニタ１８に画像Ｎ２（または画像Ｎ９）が表示されることとなる。
ステップ１１５：関連画像表示モードでのＣＰＵ１７は、直前の表示画像の元画像または編集画像をモニタ１８に表示する。図９にＳ１１５でのモニタ１８の表示画面の一例を示す。図９での表示画面には、関連画像とともに、関連画像表示モードであることを示すモード表示が表示される。また、関連画像の下側には、関連画像の閲覧キー（元画像キーおよび編集画像キー）と、戻るキーとがＧＵＩ形式で表示される。

ここで、ユーザーが操作部材２０でモニタ１８上のカーソル等を操作して戻るキーへの入力を行うと、ＣＰＵ１７は、関連画像表示モードに入る前に表示されていた初期画像を再びモニタ１８に表示する。また、Ｓ１１５の表示画面の表示状態で、ユーザーが再生釦２５ａを押圧すると、ＣＰＵ１７は関連画像表示モードを解除して通常の表示状態に移行する。なお、関連画像の閲覧キーについての説明は、Ｓ１０９と共通するので重複説明を省略する。

ステップ１１６：ＣＰＵ１７は、関連画像の閲覧キーへの入力操作を受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１１７に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はＳ１２０に移行する。
ステップ１１７：ＣＰＵ１７は、閲覧キーに対応する画像ファイル（元画像または編集画像）を再生対象に指定する。

ステップ１１８：ＣＰＵ１７は、Ｓ１１７で再生対象に指定した画像ファイルが初期画像であるか否かを判定する。具体的には、ＣＰＵ１７は、Ｓ１１７で再生対象となった画像ファイルのファイルパスが、Ｓ１１１で記録したファイルパスと一致するか否かを判定する。上記要件を満たす場合（ＹＥＳ側）には、ＣＰＵ１７はＳ１２１に移行する。一方、上記要件を満たさない場合（ＮＯ側）には、ＣＰＵ１７は、関連画像表示モードのままでＳ１０３に戻って上記動作を繰り返す。

なお、Ｓ１１８のＮＯ側の場合は、例えば、閲覧キーの操作で画像Ｎ１から画像Ｎ３に表示を切り替えて、さらに閲覧キーの操作で画像Ｎ３から画像Ｎ７に表示を切り替える場合に相当する。
ステップ１１９：ＣＰＵ１７は、戻るキーへの入力操作を受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１２０に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はＳ１２２に移行する。

ステップ１２０：ＣＰＵ１７は、Ｓ１１１で記録されたファイルパスに基づいて、初期画像の画像ファイルを再生対象に指定する。
ステップ１２１：この場合は、関連画像表示モードに入る前の初期画像に表示を切り替える場合に相当する。そのため、ＣＰＵ１７は、関連画像表示のフラグをオフの状態にして、関連画像表示モードを解除する。その後、ＣＰＵ１７はＳ１０３に戻って上記動作を繰り返す。

なお、Ｓ１２１のケースには、例えば、以下のような場合が該当する。（１）ユーザーが閲覧キーの操作で画像Ｎ１から画像Ｎ３に表示を切り替えた後に、さらに閲覧キーの操作で画像Ｎ３から画像Ｎ１に表示を戻す場合（Ｓ１１８のＹＥＳ側）、（２）ユーザーが閲覧キーの操作で画像Ｎ１，Ｎ３，Ｎ７の順に表示を切り替えて、その後に戻るキーで画像Ｎ１に表示を戻す場合（Ｓ１１９のＹＥＳ側）、などである。

ステップ１２２：ＣＰＵ１７は、再生釦２５ａへの入力操作を受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１２３に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はＳ１２４に移行する。
ステップ１２３：ＣＰＵ１７は、関連画像表示のフラグをオフの状態にして、関連画像表示モードを解除する。その後、ＣＰＵ１７は再生対象の画像ファイルを変更することなく、Ｓ１０３に戻って上記動作を繰り返す。この場合には、現在の再生対象となっている画像が、Ｓ１０９の状態（すなわち、モード表示および戻るキーの表示がない状態）でモニタ１８に表示されることとなる。

ステップ１２４：ＣＰＵ１７は、次画像への表示切替操作（例えば、マルチセレクタ２４の本体部２４ａでの操作）をユーザーから受け付けたか否かを判定する。上記要件を満たす場合（ＹＥＳ側）にはＣＰＵ１７はＳ１２５に移行する。一方、上記要件を満たさない場合（ＮＯ側）にはＣＰＵ１７はＳ１１６に戻って上記動作を繰り返す。
ステップ１２５：ＣＰＵ１７は、リンクデータに基づいて、リンク元の画像を基準としてＳ１１５での表示画像と同じ階層に属する他の関連画像を抽出する。そして、ＣＰＵ１７は、上記の関連画像のグループのうちで、再生対象の画像ファイルに対してファイル番号の並び順が１つ後（または１つ前）となる画像ファイルを再生対象に指定する。その後、ＣＰＵ１７はＳ１０３に戻って上記動作を繰り返す。

一例として、閲覧キーの操作で画像Ｎ１から画像Ｎ３に表示を切り替えて関連画像表示モードに移行した後に、ユーザーが次画像への表示切替操作を行った場合を考える。この場合には、リンク元の画像（Ｎ１）に対して表示画像（Ｎ３）と同一の階層にある画像Ｎ４，Ｎ５をＣＰＵ１７が抽出する。そして、関連画像表示モードのままで次画像への切替操作を行うごとに、モニタ１８にはＮ４，Ｎ５，Ｎ３，Ｎ４，・・・の順で画像が繰り返し表示されることとなる。なお、Ｓ１２５において他の関連画像が存在しない場合には、ＣＰＵ１７は次画像への表示切替操作を無効としてＳ１１６に移行する。以上で、図４、図５の説明を終了する。

以下、本実施形態の作用効果を説明する。本実施形態の電子カメラでは、画像ファイルのヘッダ領域に記録されたファイルパスに基づいて、ＣＰＵ１７が画像ファイルの関連性を管理する。そして、ＣＰＵ１７は、再生中の画像に編集画像などがある場合にはモニタ１８上に閲覧キーを表示してユーザーの注意を喚起する。また、ＣＰＵ１７は、ユーザーの閲覧キーの操作に応じて関連画像表示モードに移行し、リンク元の画像と関連性のある画像群の閲覧を容易に行えるようにしている。なお、関連画像表示モードでのモニタ１８には、関連画像表示モードを示すモード表示が行われるので、ユーザーが混乱をきたすこともない。

例えば、元画像と編集画像とが連番で記録されていない場合を考えると、通常の再生モードでは、ユーザーが２つの画像を対比するためには関連性のない画像を順次送る操作が必要となる。しかし、上記実施形態では、ユーザーは閲覧キーの操作で元画像と編集画像の表示を簡単に切り替えることができるので、ユーザーは元画像と編集画像とを対比して画像編集の効果を容易に確認することができる。さらに、関連画像表示モードに入る前の初期画像への表示切替や、関連画像表示モードの解除もユーザーは容易に行うことができるので、電子カメラの再生モードの利便性がより向上する。

なお、本実施形態では、画像ファイルのヘッダ領域に記録されたファイルパスに基づいてＣＰＵ１７が必要なときにリンクデータを生成する。そのため、再生時における画像間の関連性の管理をより少ないデータで効率的に行なうことができる。
（実施形態の補足事項）
（１）上記実施形態では電子カメラで画像の再生を行う例を説明した。しかし、本発明では、画像ファイルを再生する機能を備えるビューアーや、画像再生プログラムを実行する汎用コンピュータで、上記実施形態の電子カメラと同様な画像処理装置を構成してもよい。なお、上記実施形態では、画像処理装置のプログラムはＣＰＵ１７によって実行される。

（２）上記実施形態では、元画像の画像ファイルと、編集画像の画像ファイルとに相互にファイルパスを記録する例を説明した。しかし、本発明は上記実施形態に限定されず、編集画像または元画像の画像ファイルの一方のみに相手方のファイルパスを記録するようにしてもよい。この場合は、特に編集画像の画像ファイルに元画像のファイルパスを記録するようにすることが好ましい。

（３）上記実施形態において、画像ファイルを記録するフォルダなどが予め決められている場合には、ＣＰＵ１７はファイルパスの代わりに相手方の画像ファイルを特定できる情報（例えばファイル名など）を記録して、画像ファイルの関連性を管理してもよい。
（４）ＣＰＵ１７は、ヘッダ領域にファイルパスの記録された画像ファイルを消去する場合には、消去対象と関連性のある編集画像や元画像の画像ファイルのファイルパスを更新または削除してもよい。例えば、元画像が削除される場合に、ＣＰＵ１７は、残された編集画像の画像ファイルを、削除される画像よりも上位の元画像に関連付けし直してもよい。

（５）上記実施形態では、再生モードにおける画像処理で編集画像の画像ファイルが生成される例を示したが、これに限定されるものではない。例えば、電子カメラが撮像時に自動的に生成した編集画像の画像ファイルについて本発明が適用されてもよい。
（６）上記実施形態では、簡単のため、１つの記録媒体２２に画像ファイルが記録される例を示したが、例えば、記録Ｉ／Ｆ１６に複数の記録媒体２２を接続可能な場合において、画像ファイルが異なる記録媒体２２に分散して記録されている場合にも、本発明を適用することは勿論可能である。

（７）画像ファイルの関連付けは、元画像と編集画像との場合には限定されず、例えば、ＧＰＳなどで取得した撮影位置の共通性や、撮影日時の共通性などで関連付けしてもよい。
（８）上記実施形態のユーザーインターフェースはあくまで一例にすぎず、本発明では操作部およびモニタ１８の表示は適宜変更することができる。例えば、元画像キー、編集画像キー、戻るキーの操作をＧＵＩによらずに、入力釦２５に割り振ってもよい。また、関連画像表示モードのモード表示は文字表示に限定されることなく、例えば、キャラクタ表示などで代替してもよい。

なお、本発明は、その精神またはその主要な特徴から逸脱することなく他の様々な形で実施することができる。そのため、上述した実施形態はあらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明は、特許請求の範囲によって示されるものであって、本発明は明細書本文にはなんら拘束されない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内である。

本実施形態の電子カメラの構成を示すブロック図 本実施形態の電子カメラの背面部の構成を示す図 画像ファイルのデータ構造を模式的に示す図 再生モードにおいて複数の画像を閲覧する場合の動作を示す流れ図 図４の続きの流れ図 本実施形態での各画像の関連性を模式的に示す図 Ｓ１０６でのモニタの表示画面の一例を示す図 Ｓ１０９でのモニタの表示画面の一例を示す図 Ｓ１１５でのモニタの表示画面の一例を示す図

符号の説明

１２…撮像素子、１５…画像処理部、１６…記録Ｉ／Ｆ、１７…ＣＰＵ、１８…モニタ、２０…操作部材、２２…記録媒体

Claims (6)

1. 第１画像データ及び前記第１画像データに画像処理を施して生成された第２画像データの存在を示す第１メタデータを含む第１画像ファイルと、前記第２画像データ及び前記第２画像データが前記第１画像データに画像処理を施して生成されたことを示す第２メタデータを含む第２画像ファイルとを読み込む読込部と、
   前記第２画像データに基づく第２画像を表示装置に表示している場合、ユーザー操作により第１表示切替指示がなされたときは、前記第２メタデータに基づいて、前記第２画像を前記第１画像データに基づく第１画像に切り替えて前記表示装置に表示するよう制御する制御部とを備え、
   前記読込部は、前記第１画像データに画像処理を施して生成された第４画像データ及び前記第４画像データが前記第１画像データに画像処理を施して生成されたことを示す第４メタデータを含む第４画像ファイルを読み込み、
   前記制御部は、前記第２画像を前記表示装置に表示している際にユーザー操作により第３表示切替指示がなされた場合、前記第１画像を前記第２メタデータに基づいて切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づいて、前記第２画像を前記第４画像に切り替えて前記表示装置に表示し、前記第１画像を前記第２メタデータに基づかないで切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づくことなく、前記第２画像を所定の規則に基づいて指定された画像に切り替えて前記表示装置に表示すること
   を特徴とする画像処理装置。
2. 請求項１に記載の画像処理装置において、
   前記所定の規則は、ファイル番号の順であること
   を特徴とする画像処理装置。
3. 請求項１又は請求項２に記載の画像処理装置において、
   前記読込部は、前記第２画像データに画像処理を施して生成された第３画像データ及び前記第３画像データが前記第２画像データに画像処理を施して生成されたことを示す第３メタデータを含む第３画像ファイルを読み込み、
   前記制御部は、前記第３画像データに基づく第３画像を前記表示装置に表示している場合、ユーザー操作により前記第１表示切替指示がなされたときは、前記第３メタデータに基づいて、前記第３画像を前記第２画像に切り替えて前記表示装置に表示し、ユーザー操作により第２表示切替指示がなされたときは、前記第２メタデータ及び前記第３メタデータに基づいて、前記第３画像を前記第１画像に切り替えて前記表示装置に表示するよう制御すること
   を特徴とする画像処理装置。
4. 請求項１から請求項３のいずれか一項に記載の画像処理装置において、
   記録媒体に記録されている画像データに前記画像処理を施す画像処理部を更に備えること
   を特徴とする画像処理装置。
5. 被写体を撮像して画像データを生成する撮像部と、
   請求項１から請求項４のいずれか一項に記載の画像処理装置とを備えること
   を特徴とする撮像装置。
6. 第１画像データ及び前記第１画像データに画像処理を施して生成された第２画像データの存在を示す第１メタデータを含む第１画像ファイルと、前記第２画像データ及び前記第２画像データが前記第１画像データに画像処理を施して生成されたことを示す第２メタデータを含む第２画像ファイルとを読み込む読込ステップと、
   前記第２画像データに基づく第２画像を表示装置に表示している場合、ユーザー操作により第１表示切替指示がなされたときは、前記第２メタデータに基づいて、前記第２画像を前記第１画像データに基づく第１画像に切り替えて前記表示装置に表示するよう制御する制御ステップとをコンピュータに実行させ、
   前記読込ステップは、前記第１画像データに画像処理を施して生成された第４画像データ及び前記第４画像データが前記第１画像データに画像処理を施して生成されたことを示す第４メタデータを含む第４画像ファイルを読み込み、
   前記制御ステップは、前記第２画像を前記表示装置に表示している際にユーザー操作により第３表示切替指示がなされた場合、前記第１画像を前記第２メタデータに基づいて切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づいて、前記第２画像を前記第４画像に切り替えて前記表示装置に表示し、前記第１画像を前記第２メタデータに基づかないで切り替えることで前記第２画像を前記表示装置に表示していたときは、前記第２メタデータ及び前記第４メタデータに基づくことなく、前記第２画像を所定の規則に基づいて指定された画像に切り替えて前記表示装置に表示すること
   を特徴とするプログラム。

Images