JP4833947B2 - Image recording apparatus, image editing apparatus, and image recording method - Google Patents
Image recording apparatus, image editing apparatus, and image recording method Download PDFInfo
- Publication number
- JP4833947B2 JP4833947B2 JP2007247120A JP2007247120A JP4833947B2 JP 4833947 B2 JP4833947 B2 JP 4833947B2 JP 2007247120 A JP2007247120 A JP 2007247120A JP 2007247120 A JP2007247120 A JP 2007247120A JP 4833947 B2 JP4833947 B2 JP 4833947B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- file
- information
- viewpoint
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Processing Or Creating Images (AREA)
- Television Signal Processing For Recording (AREA)
- Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
- Studio Devices (AREA)
Description
本発明は画像記録装置、画像編集装置及び画像記録方法に係り、特に複数の画像データを用いてはじめて画像表示が可能な画像データの記録、編集を行う画像記録装置、画像編集装置及び画像記録方法に関する。 The present invention relates to an image recording apparatus, an image editing apparatus, and an image recording method, and more particularly to an image recording apparatus, an image editing apparatus, and an image recording method for recording and editing image data that can be displayed for the first time using a plurality of image data. About.
多視点画像などの複数の画像を撮影し、記録する方法として以下の技術が開示されている。 The following technique is disclosed as a method for capturing and recording a plurality of images such as multi-viewpoint images.
特許文献１には、複眼カメラで撮影された各視点の画像を、ファイルの検索やファイル管理が容易となるファイル名を付けて、それぞれ個別のファイルとして記録する技術が開示されている。
特許文献２には、第１の画像データ領域の後に第１の画像データとフォーマット形式の異なる第２の画像データ領域を付加することで、第１の画像データと第２の画像データとを１個のファイルに記録する技術が開示されている。 In Patent Document 2, a first image data and a second image data are added to a first image data area by adding a second image data area having a format format different from that of the first image data area. A technique for recording in a single file is disclosed.
特許文献３には、複眼カメラで撮影された画像のうち１枚の画像を基準とし、その基準となる画像のデータと、基準となる画像とその他の画像との差分データとを記録する技術が開示されている。
しかしながら、特許文献２に記載された技術では、全ての画像が１つのファイルに記録されているため、一部の画像のみを編集等する場合においても、全ての画像をメモリに展開しなくてはならず、より大きなメモリが必要となるという問題点があった。 However, in the technique described in Patent Document 2, all the images are recorded in one file. Therefore, even when only a part of the images are edited, all the images must be developed in the memory. However, there is a problem that a larger memory is required.
特許文献１に記載された技術においては、各視点の画像が別個の画像ファイルとなっているが、ファイル操作により一部の視点の画像が削除、紛失などされたり、各視点の画像が離散したりして、多視点画像の使用目的、例えば立体視鑑賞やパノラマ画像作成が果たせなくなるという問題点があった。
In the technique described in
また、特許文献３に記載された技術においては、全ての画像が１つのファイルに記録することも、各視点毎に別個の画像ファイルとして記録することも可能であるが、各画像ファイルの関連付けを行うことができないため、特許文献１に記載された技術と同様に、ファイル操作により一部の視点の画像が削除、紛失などされたり、各視点の画像が離散したりして、多視点画像の使用目的、例えば立体視鑑賞やパノラマ画像作成が果たせなくなるという問題点があった。
Moreover, in the technique described in
本発明はこのような事情に鑑みてなされたもので、複数枚の画像の一部が削除、紛失、離散などにより使用できなくなった場合においても、使用できなくなった画像を復元等することにより画像表示ができなくなるという不具合を防止することができる画像記録装置、画像編集装置及び画像記録方法を提供することを目的とする。 The present invention has been made in view of such circumstances, and even when a part of a plurality of images cannot be used due to deletion, loss, discreteness, etc., the image can be restored by restoring the images that can no longer be used. An object of the present invention is to provide an image recording apparatus, an image editing apparatus, and an image recording method capable of preventing a problem that display cannot be performed.
請求項１に記載の画像記録装置は、所定の画像再生時に同時に使用される複数枚の画像を取得する画像取得手段と、前記複数枚の画像に基づいて前記複数枚の画像と同数の画像ファイルを作成する画像ファイル作成手段と、前記画像ファイル作成手段によって作成された複数の画像ファイルを記録媒体に記録する記録手段と、を備え、前記画像ファイル作成手段は、前記複数の画像ファイルのうちのいずれか１つの画像ファイルが欠落しても該画像ファイルを復活させるための複数の関連画像情報を、前記複数枚の画像に基づいて生成する関連画像情報生成手段を有し、前記複数の画像ファイルのうちの任意の１つの画像ファイルを作成するときに、前記複数の画像のうちの任意の１つの画像と、前記関連情報生成手段によって生成された関連画像情報であって、前記任意の１つの画像以外の画像を復活させるための関連画像情報とが記録された画像ファイルを作成する、ことを特徴とする。
The image recording apparatus according to
請求項１に記載の画像記録装置によれば、所定の画像再生時に同時に使用される複数枚の画像を取得し、前記複数枚の画像に基づいて前記複数枚の画像と同数の画像ファイルを作成し、前記画像ファイル作成手段によって作成された複数の画像ファイルを記録媒体に記録する。複数の画像のうちの任意の１つの画像と、任意の１つの画像以外の画像（複数の画像のうちのその他の画像）を復活させるための関連画像情報とが記録された画像ファイルを任意の１つの画像の画像ファイルとして作成する。関連画像情報は、複数の画像ファイルのうちのいずれか１つの画像ファイルが欠落しても該画像ファイルを復活させるために、複数枚の画像に基づいて生成される。
According to the image recording apparatus of
この画像ファイルを複数枚の画像全てに対して作成することにより、多視点画像やパノラマ画像など複数枚の画像を用いることではじめて画像表示ができるような場合において、複数枚の画像の一部が削除、紛失、離散などにより使用できなくなった画像を復元、修復することで、画像表示ができなくなるという不具合を防止することができる。 By creating this image file for all of a plurality of images, in a case where image display can be performed for the first time by using a plurality of images such as a multi-viewpoint image and a panorama image, a part of the plurality of images is displayed. By restoring and repairing an image that can no longer be used due to deletion, loss, discreteness, etc., it is possible to prevent a problem that the image cannot be displayed.
請求項２に記載の画像記録装置は、請求項１に記載の画像記録装置において、前記画像ファイル作成手段は、前記関連情報生成手段によって生成された複数の関連画像情報が、前記複数の画像ファイルに重複しないように各画像ファイルに分散して記録された画像ファイルを作成することを特徴とする。
The image recording apparatus according to claim 2 is the image recording apparatus according to
請求項２に記載の画像記録装置によれば、複数の関連画像情報が複数の画像ファイルに重複しないように、各画像ファイルに分散して関連画像情報を記録する。これにより、最低限の関連画像情報で、所望の画像ファイルの復元や画像データの修復を行うことができる。 According to the image recording apparatus of the second aspect, the related image information is distributed and recorded in each image file so that the plurality of related image information does not overlap with the plurality of image files. As a result, it is possible to restore a desired image file and restore image data with a minimum amount of related image information.
請求項３に記載の画像記録装置は、請求項１又は２に記載の画像記録装置において、前記画像ファイル作成手段は、前記複数の画像の関係を特定するための付属情報を生成する付属情報生成手段を更に有し、前記複数の画像ファイルのうちの任意の１つの画像ファイルを作成するときに、前記複数の画像のうちの任意の１つの画像と、前記関連情報生成手段によって生成された関連画像情報であって、前記任意の１つの画像以外の画像を復活させるための関連画像情報と、前記付属情報生成手段によって生成された前記任意の１つの画像と前記関連画像情報に対応する前記任意の１つの画像以外の画像との関係と特定するための付属情報とが記録された画像ファイルを作成することを特徴とする。
The image recording device according to
請求項３に記載の画像記録装置によれば、複数の画像のうちの任意の１つの画像と、任意の１つの画像以外の画像を復活させるための関連画像情報と、任意の１つの画像と関連画像情報に対応するその他の画像との関係と特定するための付属情報とが記録された画像ファイルを作成する。これにより、所望の画像ファイルの復元や画像データの修復を行うことができる関連画像情報がどの画像ファイルに含まれているかを、画像ファイルの付属情報から知ることができる。
According to the image recording apparatus of
請求項４に記載の画像記録装置は、請求項１から３のいずれかに記載の画像記録装置において、前記複数枚の画像は、立体画像の再生時に使用される２以上の視点から撮影された画像であることを特徴とする。
The image recording device according to claim 4 is the image recording device according to any one of
請求項５に記載の画像記録装置は、請求項１から３のいずれかに記載の画像記録装置において、前記複数枚の画像は、パノラマ画像の再生時に繋ぎ合わされる２以上の画像であることを特徴とする。
The image recording apparatus according to
請求項６に記載の画像記録装置は、請求項４に記載の画像記録装置において、前記関連画像情報生成手段によって生成される関連画像情報は、前記複数枚の画像間の差分を示す差分画像であることを特徴とする。
The image recording apparatus according to
請求項６に記載の画像記録装置によれば、複数枚の画像間の差分を示す差分画像を関連画像情報として記録する。これにより、関連画像情報を保存するのに必要な記憶容量を少なくすることができる。 According to the image recording apparatus of the sixth aspect, a difference image indicating a difference between a plurality of images is recorded as related image information. As a result, the storage capacity required to store the related image information can be reduced.
請求項７に記載の画像記録装置は、請求項１から６のいずれかに記載の画像記録装置において、前記関連画像情報生成手段によって生成される関連画像情報は、前記画像取得手段によって取得された複数枚の画像と同じ画像であることを特徴とする。
The image recording apparatus according to claim 7 is the image recording apparatus according to any one of
請求項７に記載の画像記録装置によれば、数枚の画像のうちの、任意の画像と異なる画像を関連画像情報として記録する。全ての画像ファイルの関連画像情報は、複数枚の画像と同じ画像となる。これにより、他の画像データや画像ファイルから所望の画像データの修復や画像ファイルの復元を容易に行うことができる。 According to the image recording apparatus of the seventh aspect, an image different from an arbitrary image among several images is recorded as related image information. The related image information of all the image files is the same image as a plurality of images. Thereby, it is possible to easily restore desired image data and restore image files from other image data and image files.
請求項８に記載の画像記録装置は、請求項１から７のいずれかに記載の画像記録装置において、前記関連画像情報の修復が必要かどうかを判断する判断手段と、前記複数枚の画像に基づいて、前記判断手段により修復が必要と判断された関連画像情報を修復する修復手段と、を備えたことを特徴とする。
The image recording apparatus according to claim 8, Oite the image recording apparatus according to any one of
請求項８に記載の画像記録装置によれば、関連画像情報の修復が必要かどうかを判断し、修復が必要と判断された場合には、前記複数枚の画像に基づいて、修復が必要と判断された関連画像情報を修復する。これにより、関連画像情報から所望の画像ファイルの復元や画像データの修復が可能な状態を常に保つことができる。 According to the image recording apparatus of claim 8, it is determined whether or not the related image information needs to be repaired, and when it is determined that the repair is necessary, the repair is necessary based on the plurality of images. The determined related image information is restored. Thereby, it is possible to always maintain a state in which a desired image file can be restored and image data can be restored from related image information .
請求項９に記載の画像編集装置は、請求項１から８のいずれかに記載の画像記録装置により記録媒体に記録された画像ファイルを編集する画像編集装置であって、編集対象である画像を任意の１つの画像とする画像ファイルの任意の１つの画像を編集する第１の編集手段と、前記編集対象である画像に基づいて作成された関連画像情報に対して、前記第１の編集手段により行われた編集と同じ編集を行う第２の編集手段と、を備えたことを特徴とする。
Image editing apparatus according to claim 9, an image editing apparatus for editing recorded image file more recording medium in the image recording apparatus according to any one of
請求項９に記載の画像編集装置によれば、編集対象である画像を任意の１つの画像（主画像）とする画像ファイルの主画像を編集し、主画像に基づいて作成された関連画像情報であって、他の画像ファイルに含まれる関連画像情報に対して、主画像と同じ編集を行う。これにより、複数枚の画像の画像ファイルが一部使用できなくなった場合においても、使用できなくなった画像ファイルの復元が可能な状態を維持して、画像データの編集を行うことができる。 According to the image editing apparatus according to claim 9, the related image information created based on the main image by editing the main image of the image file in which the image to be edited is an arbitrary image (main image). Then, the same editing as that of the main image is performed on related image information included in other image files. As a result, even when some of the image files of a plurality of images cannot be used, it is possible to edit the image data while maintaining a state in which the unusable image file can be restored .
請求項１０に記載の画像記録方法は、（ａ）所定の画像再生時に同時に使用される複数枚の画像を取得するステップと、（ｂ）前記複数の画像のうちの任意の１つの画像を選択するステップと、（ｃ）前記選択された任意の１つの画像以外の画像を復活させるための関連画像情報を作成するステップと、（ｄ）前記選択された任意の１枚の画像と、前記作成された関連画像情報とが記録された画像ファイルを作成するステップと、を含み、前記複数枚の画像に基づいて前記複数枚の画像と同数の画像ファイルを作成するように、かつ前記複数の画像ファイルのうちのいずれか１つの画像ファイルが欠落しても該画像ファイルが復活可能なように、前記ステップ（ｂ）〜（ｄ）を繰り返して複数の画像ファイルを作成し、該複数の画像ファイルを記録媒体に記録することを特徴とする。 The image recording method according to claim 10, wherein (a) acquiring a plurality of images used simultaneously when reproducing a predetermined image, and (b) selecting any one of the plurality of images. (C) creating related image information for reviving an image other than the selected one arbitrary image; and (d) the arbitrary one selected image and the creating Creating an image file in which the related image information is recorded, and creating the same number of image files as the plurality of images based on the plurality of images, and Steps (b) to (d) are repeated to create a plurality of image files so that the image file can be restored even if any one of the image files is lost. Characterized by recording on a recording medium.
本発明によれば、複数枚の画像の一部が削除、紛失、離散などにより使用できなくなった場合においても、使用できなくなった画像を復元等することにより画像表示ができなくなるという不具合を防止することができる。 According to the present invention, even when a part of a plurality of images becomes unusable due to deletion, loss, discreteness, etc., it is possible to prevent a problem that the image cannot be displayed by restoring the unusable image. be able to.
以下、添付図面に従って本発明に係るデジタルカメラを実施するための最良の形態について詳細に説明する。 The best mode for carrying out a digital camera according to the present invention will be described below in detail with reference to the accompanying drawings.
図１は、複眼デジタルカメラ１の電気的構成を示すブロック図である。複眼デジタルカメラ１は、単視点画像（２次元画像）と、多視点画像（３次元画像）とが撮影可能であり、また、動画、静止画、音声の記録再生が可能である。また、動画、静止画どちらにおいても、単視点画像のみでなく、多視点画像の撮影も可能である。
FIG. 1 is a block diagram showing an electrical configuration of the compound-eye
複眼デジタルカメラ１には、主として、第１撮像系２ａおよび第２撮像系２ｂの２個の撮像系と、ユーザーがこの複眼デジタルカメラ１を使用するときに種々の操作を行うための操作部３と、操作の手助けを行うための操作表示ＬＣＤ４と、レリーズスイッチ５と、画像表示ＬＣＤ６とが設けられている。
The compound-eye
第１撮像系２ａおよび第２撮像系２ｂは、そのレンズ光軸Ｌ１、Ｌ２が平行となるように、あるいは所定角度をなすように並設されている。
The
第１撮像系２ａは、レンズ光軸Ｌ１に沿って配列された第１ズームレンズ１１ａ、第１絞り１２ａ、第１フォーカスレンズ１３ａ、および第１イメージセンサ１４ａによって構成されている。第１絞り１２ａには絞り制御部１６ａが接続されており、また、第１イメージセンサ１４ａにはタイミングジェネレータ（ＴＧ）１８ａが接続されている。第１絞り１２ａ、第１フォーカスレンズ１３ａの動作は測光・測距ＣＰＵ１９ａによって制御される。ＴＧ１８ａの動作はメインＣＰＵ１０によって制御される。
The
第１ズームレンズ１１ａは、操作部３からのズーム操作に応じて、レンズ光軸Ｌ１に沿ってＮＥＡＲ側（繰り出し側）、あるいはＩＮＦ側（繰り込み側）に移動し、ズーム倍率を変化させる。この移動は図示しないモータで駆動される。
The
第１絞り１２ａは、ＡＥ（Auto Exposure）動作時に開口値（絞り値）を変化させて光束を制限し、露出調整を行う。
The
第１フォーカスレンズ１３ａは、ＡＦ（Auto Focus）動作時にレンズ光軸Ｌ１に沿ってＮＥＡＲ側、あるいはＩＮＦ側に移動されて合焦位置を変え、ピント調整を行う。この移動は図示しないモータで駆動される。静止画用レリーズスイッチ５ａの半押し状態が検出されたとき、メインＣＰＵ１０は第１イメージセンサ１４ａから測距データを得る。メインＣＰＵ１０は得られた測距データに基づいて、ピント、絞りなどの調整を行う。
The
第１イメージセンサ１４ａは、ＣＣＤ型やＣＭＯＳ型のイメージセンサであり、第１ズームレンズ１１ａ、第１絞り１２ａ、および第１フォーカスレンズ１３ａによって結像された被写体光を受光し、受光素子に受光量に応じた光電荷を蓄積する。第１イメージセンサ１４ａの光電荷蓄積・転送動作は、ＴＧ１８ａによって制御され、ＴＧ１８ａから入力されるタイミング信号（クロックパルス）により、電子シャッター速度（光電荷蓄積時間）が決定される。第１イメージセンサ１４ａは、撮影モード時には、１画面分の画像信号を所定周期ごとに取得する。
The
第２撮像系２ｂは、第１撮像系２ａと同一の構成であり、第２ズームレンズ１１ｂ、第２絞り１２ｂ、第２フォーカスレンズ１３ｂ、およびタイミングジェネレータ（ＴＧ）１８ｂが接続された第２イメージセンサ１４ｂによって構成されている。
The
第１撮像系２ａと第２撮像系２ｂの動作はメインＣＰＵ１０によって制御される。第１撮像系２ａと第２撮像系２ｂとは、基本的に連動して動作を行うが、各々個別に動作させることも可能となっている。
The operations of the
第１撮像系２ａと第２撮像系２ｂの第１イメージセンサ１４ａおよび第２イメージセンサ１４ｂから出力された撮像信号は、それぞれＡ／Ｄ変換器３０ａ、３０ｂに入力される。
Imaging signals output from the
Ａ／Ｄ変換器３０ａ、３０ｂは、入力された画像データをアナログからデジタルに変換する。Ａ／Ｄ変換器３０ａ、３０ｂを通して、第１イメージセンサ１４ａの撮像信号は右眼用画像データとして、第２イメージセンサ１４ｂの撮像信号は左眼用画像データとして出力される。
The A /
画像信号処理手段３１ａ、３１ｂは、それぞれ、階調変換、ホワイトバランス調整、γ調整処理などの各種画像処理を、Ａ／Ｄ変換器３０ａ、３０ｂから入力された右眼用画像データおよび左眼用画像データに施す。
The image signal processing means 31a and 31b respectively perform various image processing such as gradation conversion, white balance adjustment, and γ adjustment processing on the right-eye image data and the left-eye image input from the A /
バッファメモリ３２ａ、３２ｂは、画像信号処理手段３１ａ、３１ｂで各種画像処理が施された右眼用画像データおよび左眼用画像データを一時的に格納する。バッファメモリ３２ａ、３２ｂに格納された右眼用画像データおよび左眼用画像データは、システムバスを介して出力される。
The
システムバスには、メインＣＰＵ１０、ＥＥＰＲＯＭ２１、ワークメモリ２４ａ、２４ｂ、バッファメモリ３２ａ、３２ｂ、コントローラ３４、ＹＣ処理部３５ａ、３５ｂ、圧縮伸張処理手段３６ａ、３６ｂ、メディアコントローラ３７、２Ｄ／３Ｄモード切替フラグ設定手段５０、基線長／輻輳角記憶手段５１、縦／横撮り検出手段５２などが接続される。
The system bus includes main CPU 10,
メインＣＰＵ１０は、複眼デジタルカメラ１の全体の動作を統括的に制御する。メインＣＰＵ１０には、操作部３、レリーズスイッチ５、２Ｄ／３Ｄ設定スイッチ７、基線長／輻輳角制御手段５５、距離用駆動／制御手段６０が接続されている。
The main CPU 10 comprehensively controls the overall operation of the compound-eye
操作部３は、複眼デジタルカメラ１を作動させるための電源投入用の電源スイッチ、オート撮影やマニュアル撮影等を選択するためのモードダイヤル、各種のメニューの設定や選択あるいはズームを行うための十字キー、閃光発光用スイッチ、および十字キーで選択されたメニューの実行やキャンセル等を行うための情報位置指定キーなどで構成される。操作部３への適宜操作により、電源のオン／オフ、各種モード（撮影モード、ブラケット撮影モード、再生モード、消去モード、編集モード等）の切り替え、ズーミングなどが行われる。
The
レリーズスイッチ５は２段押しのスイッチ構造となっている。撮影モード中に、レリーズスイッチ５が軽く押圧（半押し）されると、ＡＦ動作およびＡＥ動作が行われ撮影準備処理がなされる。この状態でさらにレリーズスイッチ５が強く押圧（全押し）されると、撮影処理が行われ、右眼用画像データおよび左眼用画像データがフレームメモリ３２からメモリカード３８に転送されて記録される。
The
画像表示ＬＣＤ６は、パララックスバリア式、あるいはレンチキュラーレンズ式の３Ｄモニタであり、画像撮影時には電子ビューファインダとして使用され、画像再生時には撮影によって得られた画像データの立体表示を行う。画像表示ＬＣＤ６ａは第１撮像系２ａの出力結果を表示し、画像表示ＬＣＤ６ｂは第２撮像系２ｂの出力結果を表示する。画像表示ＬＣＤ６の詳細な構造は図示しないが、画像表示ＬＣＤ６は、その表面にパララックスバリア表示層を備えている。画像表示ＬＣＤ６は、立体表示を行う際に、パララックスバリア表示層に光透過部と光遮蔽部とが交互に所定のピッチで並んだパターンからなるパララックスバリアを発生させるとともに、その下層の画像表示面に左右の像を示す短冊状の画像断片を交互に配列して表示することで立体視を可能にする。なお、立体視を可能にする表示装置の構成は、スリットアレイシートを用いるパララックス方式に限られる必然性はなく、レンチキュラーレンズシートを用いるレンチキュラー方式、マイクロレンズアレイシートを用いるインテグラルフォトグラフィ方式、干渉現象を用いるホログラフィー方式などが採用されてもよい。
The
２Ｄ／３Ｄ設定スイッチ７は、単視点画像を撮影する２Ｄモードと、多視点画像を撮影する３Ｄモードの切り替えを指示するためのスイッチである。 The 2D / 3D setting switch 7 is a switch for instructing switching between a 2D mode for capturing a single viewpoint image and a 3D mode for capturing a multi-viewpoint image.
基線長／輻輳角制御手段５５は、基線長／輻輳角記憶手段５１に記憶された基線長及び輻輳角に基づいて、基線長／輻輳角駆動手段５６ａ、５６ｂを制御して、第１撮像系２ａ及び第２撮像系２ｂの基線長（第１撮像系２ａと第２撮像系２ｂとの間隔）及び輻輳角（第１撮像系２ａのレンズ光軸Ｌ１と、第２撮像系２ｂのレンズ光軸Ｌ２との成す角度）を調整するものである。
The baseline length / convergence angle control means 55 controls the baseline length / convergence angle driving means 56a, 56b based on the baseline length and the convergence angle stored in the baseline length / convergence angle storage means 51, and the first imaging system. 2a and the base length of the
基線長／輻輳角駆動手段５６ａ、５６ｂは、基線長／輻輳角制御手段５５に接続されており、基線長／輻輳角制御手段５５からの指示に従って、第１撮像系２ａ及び第２撮像系２ｂを駆動するものである。
The baseline length / convergence angle driving means 56a, 56b are connected to the baseline length / convergence angle control means 55, and in accordance with instructions from the baseline length / convergence angle control means 55, the
基線長／輻輳角検出手段５７ａ、５７ｂは、基線長／輻輳角制御手段５５及び基線長／輻輳角駆動手段５６ａ、５６ｂに接続されており、基線長／輻輳角駆動手段５６ａ、５６ｂによってそれぞれ駆動された第１撮像系２ａ及び第２撮像系２ｂの基線長及び輻輳角を検出するものである。基線長／輻輳角制御手段５５は、前記基線長／輻輳角記憶手段５１から読み出した基線長及び輻輳角と、基線長／輻輳角検出手段５７ａ、５７ｂにおいて検出された基線長及び輻輳角に基づいて、基線長／輻輳角駆動手段５６ａ、５６ｂへ指示を出力する。
Baseline length / convergence angle detection means 57a, 57b are connected to baseline length / convergence angle control means 55 and baseline length / convergence angle drive means 56a, 56b, and are driven by baseline length / convergence angle drive means 56a, 56b, respectively. The base line length and the convergence angle of the
距離用駆動／制御手段６０は、距離用発光素子６２ａ、６２ｂの発光タイミングと距離用撮像素子６１ａ、６１ｂとを同期させる制御を行う。
The distance driving /
距離用発光素子６２ａ、６２ｂは、それぞれ第１撮像系２ａおよび第２撮像系２ｂの捉えた同一被写体へ投光スポットを照射するための発光ダイオード（ＬＥＤ）で構成される。
The distance
距離用撮像素子６１ａ、６１ｂは、それぞれ距離用発光素子５２ａ、５２ｂにより投光スポットの照射された被写体像を取得する測距専用の２次元の撮像素子である。距離用撮像素子６１ａ、６１ｂの撮像動作で得られたアナログ画像信号は、それぞれ測距用Ａ／Ｄ変換部６３ａ、６３ｂにおいてデジタル画像データに変換されて、距離情報処理手段６４に出力される。
The distance image pickup devices 61a and 61b are two-dimensional image pickup devices dedicated to distance measurement that acquire subject images irradiated with light projection spots by the distance light emitting devices 52a and 52b, respectively. The analog image signals obtained by the imaging operations of the distance image sensors 61a and 61b are converted into digital image data by the distance measuring A /
距離情報処理手段６４は、距離用発光素子６２ａ、６２ｂから照射された光が被写体で反射されて距離用撮像素子６１ａ、６１ｂに返ってくるまでの時間を測定し、数式１に基づいて距離用撮像素子６１ａ、６１ｂの捉えた被写体までの距離を算出する。そして、算出された結果を用いて、各画素の画素値が距離の値である距離画像をそれぞれ生成する。
［数１］
Ｌ＝ｃ×Ｔｄ／２ （Ｌ：距離、ｃ：光速、Ｔｄ：反射時間）
距離情報記憶手段６５は、距離情報処理手段６４から入力された距離情報、すなわち距離用撮像素子６１ａ、６１ｂでそれぞれ撮影された距離画像を記憶する。
The distance information processing means 64 measures the time until the light emitted from the distance
[Equation 1]
L = c × Td / 2 (L: distance, c: speed of light, Td: reflection time)
The distance
ＥＥＰＲＯＭ２１は、不揮発性メモリであり、各種制御用のプログラムや設定情報などを格納している。メインＣＰＵ１０は、このプログラムや設定情報に基づいて各種処理を実行する。
The
ワークメモリ２４ａ、２４ｂは、ＹＣ処理部３５ａ、３５ｂで処理されたＹＣ信号をそれぞれ格納する。
The
コントローラ３４は、ワークメモリ２４ａ、２４ｂに記憶された右眼用画像データおよび左眼用画像データのＹＣ信号をＹＣ／ＲＧＢ処理部２２に読み出す。
The controller 34 reads the YC signals of the right eye image data and the left eye image data stored in the
ＹＣ／ＲＧＢ処理部２２は、右眼用画像データおよび左眼用画像データのＹＣ信号を、所定方式の映像信号（例えば、ＮＴＳＣ方式のカラー複合映像信号）に変換した上で、画像表示ＬＣＤ６での立体表示を行うための立体画像データに合成し、表示用のＬＣＤドライバ２３に出力する。撮影モード時に電子ビューファインダとして使用される際には、ＹＣ／ＲＧＢ処理部２２によって合成された立体画像データが、ＬＣＤドライバ２３を介して画像表示ＬＣＤ６にライブビュー画像として表示される。また、撮影によって得られた画像データの立体表示を行う場合には、ＹＣ／ＲＧＢ処理部２２は、メモリカード３８に記録された各画像データがメディアコントローラ３７によって読み出されて、圧縮伸張処理手段３６ａ、３６ｂによって伸張処理が行われたデータを立体画像データに変換し、その立体画像データがＬＣＤドライバ２３を介して再生画像として画像表示ＬＣＤ６に表示される。
The YC /
ＬＣＤドライバ２３は、ＹＣ／ＲＧＢ処理部２２から出力されたＲＧＢ信号を画像表示ＬＣＤ６に出力する。
The
ＹＣ処理部３５ａ、３５ｂは、バッファメモリ３２ａ、３２ｂに記憶された画像データを輝度信号（Ｙ信号）及び色差信号（Ｃr,Ｃb 信号）に変換するとともに、ガンマ調整等の所定の処理を施す。
The
圧縮伸張処理手段３６ａ、３６ｂは、それぞれワークメモリ２４ａ、２４ｂに記憶された右眼用画像データおよび左眼用画像データに対して、静止画ではＪＰＥＧ、動画ではＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４方式等の所定の圧縮形式に従って圧縮処理を施す。
The compression / decompression processing means 36a, 36b respectively apply JPEG for still images, MPEG2, MPEG4, H.264 for moving images to the right eye image data and left eye image data stored in the
メディアコントローラ３７は、圧縮伸張処理手段３６ａ、３６ｂによって圧縮処理された各画像データを、Ｉ／Ｆ３９経由で接続されたメモリカード３８やその他の記録メディアに記録させる。
The
メモリカード３８は、複眼デジタルカメラ１に着脱自在なｘＤピクチャカード（登録商標）、スマートメディア（登録商標）に代表される半導体メモリカード、可搬型小型ハードディスク、磁気ディスク、光ディスク、光磁気ディスク等、種々の記録媒体である。
The
２Ｄ／３Ｄモード切替フラグ設定手段５０には、２Ｄモードであることまたは３Ｄモードであることを表すフラグが設定される。 The 2D / 3D mode switching flag setting means 50 is set with a flag indicating the 2D mode or the 3D mode.
基線長／輻輳角記憶手段５１は、測光・測距ＣＰＵ１９ａ、１９ｂに基づいて、適切な基線長や輻輳角を算出して記憶するものである。
The base line length / convergence angle storage means 51 calculates and stores an appropriate base line length and convergence angle based on the photometry / ranging
縦／横撮り検出手段５２は、内蔵のセンサー（図示せず）により、縦撮りまたは横撮りのいずれで撮影を行うかを検出する。なお、縦／横撮り検出手段５２による検出は、縦撮り又は横撮りの設定を縦撮りまたは横撮りの指示を入力することにより行い、その設定を検出することにより行っても良い。 The vertical / horizontal shooting detection means 52 detects whether shooting is performed in vertical shooting or horizontal shooting using a built-in sensor (not shown). The detection by the vertical / horizontal shooting detection means 52 may be performed by setting the vertical shooting or horizontal shooting by inputting an instruction for vertical shooting or horizontal shooting, and detecting the setting.
画像ファイル生成手段５３は、圧縮伸張処理手段３６ａ、３６ｂにより生成されたＪＰＥＧ形式の画像データの画像ファイルを生成するものである。まず、削除、紛失、離散などにより使用できなくなった画像データの修復や画像ファイルの復元ができるように、関連画像情報と付属情報とを生成する。ここで、関連画像情報とは第１撮像系２ａと第２撮像系２ｂで撮影された画像に基づいて生成される情報であり、付属情報とは画像データや関連画像情報に関する情報である。そして、画像ファイル生成手段５３は、画像データと、関連画像情報と、付属情報とが結合されたフォーマットで画像ファイルを生成する。また、画像ファイル生成手段５３は、作成した画像ファイルにＤＣＦ規定に基づいたファイル名を自動的に付けて、メディアコントローラ３７等に出力する。ここで、ＤＣＦ規定に基づいたファイル名とは、例えばＤＳＣＦ０００１のように、アルファベット４桁（４文字の自由文字）と数字４桁（ファイル番号０００１〜９９９９）とで構成されるものである。なお、画像ファイル、関連画像情報、付属情報等の詳細については、後に詳述する。
The image
また、複眼デジタルカメラ１には、電源電池６８が着脱可能に設けられている。
In addition, the compound-eye
電源電池６８は、充電可能な二次電池、例えばニカド電池、ニッケル水素電池、リチウムイオン電池で構成される。電源電池６８は使い切り型の一次電池、例えばリチウム電池、アルカリ電池で構成してもよい。電源電池６８は、図示しない電池収納室に装填することにより、複眼デジタルカメラ１の各手段と電気的に接続される。
The power supply battery 68 is composed of a rechargeable secondary battery such as a nickel-cadmium battery, a nickel metal hydride battery, or a lithium ion battery. The power supply battery 68 may be a single-use primary battery such as a lithium battery or an alkaline battery. The power battery 68 is electrically connected to each means of the compound-eye
充電・発光制御部４３ａ、４３ｂは、電源電池６８からの電力の供給を受けて、それぞれストロボ４４ａ、４４ｂを発光させるために、図示しない閃光発光用のコンデンサを充電し、ストロボ４４ａ、４４ｂの発光を制御する。
The charge / light
充電・発光制御部４３ａ、４３ｂは、レリーズスイッチ５の半押し・全押し操作信号等の各種の信号や、発光量、発光タイミングを示す信号を、メインＣＰＵ１０や測光・測距ＣＰＵ１９ａ、１９ｂから取り込んだことに応じて、ストロボ４４ａ、４４ｂへの電流供給制御を行い、所望の発光量が所望のタイミングで得られるように制御する。
The charging / light
なお、図１の複眼デジタルカメラ１においては、２系統の撮像系（第１撮像系２ａおよび第２撮像系２ｂ）を有する例を示すが、撮像系が３個以上あってもよい。また、撮像系の配置は、横一列でなくても二次元で配置されていてもよい。
1 shows an example having two imaging systems (
また、図１の複眼デジタルカメラ１は、立体撮影のみでなく、マルチ視点や全方向の撮影、パノラマ画像の撮影も可能である。
Further, the compound-eye
上記のように構成された複眼デジタルカメラ１の撮影、記録動作及び再生動作について説明する。
The photographing, recording operation, and reproduction operation of the compound eye
この複眼デジタルカメラ１において、電源ボタン（図示せず）がＯＮ操作されると、メインＣＰＵ１０はこれを検出し、カメラ内電源をＯＮにし、撮影モードで撮影スタンバイ状態にする。また、２Ｄ／３Ｄ設定スイッチ７で２Ｄモードか３Ｄモードのどちらかに設定する。
In this compound-eye
この撮影スタンバイ状態では、メインＣＰＵ１０は、通常、以下のようにして画像表示ＬＣＤ６に動画（ライブビュー画像）を表示させる。
In this photographing standby state, the main CPU 10 normally displays a moving image (live view image) on the
まず、メインＣＰＵ１０は、２Ｄ／３Ｄモード切替フラグ設定手段５０を参照し、単視点画像（２次元画像）を取得する２Ｄモードか、多視点画像（３次元画像）を取得する３Ｄモードかを検出する。２Ｄモードの場合は第１撮像系２ａのみを駆動し、３Ｄモードの場合は第１撮像系２ａ及び第２撮像系２ｂを駆動する。
First, the main CPU 10 refers to the 2D / 3D mode switching flag setting means 50 and detects whether the 2D mode for acquiring a single viewpoint image (two-dimensional image) or the 3D mode for acquiring a multi-viewpoint image (three-dimensional image). To do. In the 2D mode, only the
第１ズームレンズ１１ａ、第２ズームレンズ１１ｂ、第１フォーカスレンズ１３ａ、第２フォーカスレンズ１３ｂが所定位置まで繰り出され、その後第１イメージセンサ１４ａ、第２イメージセンサ１４ｂによってライブビュー画像用の撮影が行われ、画像表示ＬＣＤ６にライブビュー画像が表示される。すなわち、第１イメージセンサ１４ａ、第２イメージセンサ１４ｂで連続的に画像が撮像され、その画像信号が連続的に処理されて、ライブビュー画像用の画像データが生成される。生成された画像データは、順次コントローラ３４に加えられ、表示用の信号形式に変換されて、画像表示ＬＣＤ６に出力される。これにより、第１イメージセンサ１４ａ、第２イメージセンサ１４ｂで捉えた画像が画像表示ＬＣＤ６にスルー表示される。
The
ユーザ（撮影者）は、画像表示ＬＣＤ６に表示されるライブビュー画を見ながらフレーミングしたり、撮影したい被写体を確認したり、撮影後の画像を確認したり、撮影条件を設定したりする。
The user (photographer) performs framing while viewing the live view image displayed on the
上記撮影スタンバイ状態時にレリーズスイッチ５が半押しされると、メインＣＰＵ１０にＳ１ＯＮ信号が入力される。メインＣＰＵ１０はこれを検知し、ＡＥ測光、ＡＦ制御を行う。ＡＥ測光時には、第１イメージセンサ１４ａ、第２イメージセンサ１４ｂを介して取り込まれる画像信号の積算値等に基づいて被写体の明るさを測光する。この測光した値（測光値）は、本撮影時における第１絞り１２ａ、第２絞り１２ｂの絞り値、及びシャッター速度の決定に使用される。同時に、検出された被写体輝度より、ストロボの発光が必要かどうかを判断する。同時に、検出された被写体輝度より、ストロボの発光が必要かどうかを判断する。ストロボ４４ａ、４４ｂの発光が必要と判断された場合には、ストロボ４４ａ、４４ｂをプリ発光させ、その反射光に基づいて本撮影時のストロボ４４ａ、４４ｂの発光量を決定する。３Ｄモードの場合には、上記以外に、基線長／輻輳角記憶手段５１に記憶された撮影者毎の基線長、輻輳角の情報に基づいて、第１撮像系２ａおよび第２撮像系２ｂの基線長及び輻輳角を調整する。
When the
レリーズスイッチ５が全押しされると、メインＣＰＵ１０にＳ２ＯＮ信号が入力される。メインＣＰＵ１０は、このＳ２ＯＮ信号に応動して、撮影、記録処理を実行する。
When the
まず、メインＣＰＵ１０は、前記測光値に基づいて決定した絞り値に基づいて絞り制御部１６ａ、１６ｂを介して第１絞り１２ａ、第２絞り１２ｂを駆動するとともに、前記測光値に基づいて決定したシャッター速度になるように第１イメージセンサ１４ａ、第２イメージセンサ１４ｂでの電荷蓄積時間（いわゆる電子シャッター）を制御する。
First, the main CPU 10 drives the
また、メインＣＰＵ１０は、バッファメモリ３２ａ、３２ｂに格納される右眼用画像データおよび左眼用画像データの各々からＡＦ評価値およびＡＥ評価値を算出する。ＡＦ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値の高周波成分を積算することにより算出され、画像の鮮鋭度を表す。輝度値の高周波成分とは、隣接する画素間の輝度差（コントラスト）を所定領域内について足し合わせたものである。ＡＥ評価値は、各画像データの全領域または所定領域（例えば中央部）について輝度値を積算することにより算出され、画像の明るさを表す。ＡＦ評価値およびＡＥ評価値は、後述する撮影準備処理時に実行されるＡＦ動作およびＡＥ動作においてそれぞれ使用される。
Further, the main CPU 10 calculates an AF evaluation value and an AE evaluation value from each of the right-eye image data and the left-eye image data stored in the
メインＣＰＵ１０は、メインＣＰＵ１０が第１フォーカスレンズ１３ａおよび第２フォーカスレンズ１３ｂを制御してそれぞれ所定方向に移動させながら、順次に得られる右眼用画像データおよび左眼用画像データの各々から算出されたＡＦ評価値の最大値を求めることにより、ＡＦ動作（コントラストＡＦ）を行う。
The main CPU 10 is calculated from each of the right-eye image data and the left-eye image data obtained sequentially while the main CPU 10 controls the
この際、ストロボ４４ａ、４４ｂを発光させる場合は、プリ発光の結果から求めたストロボ４４ａ、４４ｂの発光量に基づいてストロボ４４ａ、４４ｂを発光させる。
At this time, when the
被写体光は、第１ズームレンズ１１ａ、第１絞り１２ａ、および第１フォーカスレンズ１３ａを介して第１イメージセンサ１４ａの受光面に入射する。また、第２ズームレンズ１１ｂ、第２絞り１２ｂ、および第２フォーカスレンズ１３ｂを介して第２イメージセンサ１４ｂの受光面に入射する。
The subject light enters the light receiving surface of the
第１イメージセンサ１４ａ、第２イメージセンサ１４ｂは、所定のカラーフィルタ配列（例えば、ハニカム配列、ベイヤ配列）のＲ、Ｇ、Ｂのカラーフィルタが設けられたカラーＣＣＤで構成されており、第１イメージセンサ１４ａ、第２イメージセンサ１４ｂの受光面に入射した光は、その受光面に配列された各フォトダイオードによって入射光量に応じた量の信号電荷に変換される。各フォトダイオードに蓄積された信号電荷は、タイミングジェネレータ（ＴＧ）１８ａから加えられるタイミング信号に従って読み出され、電圧信号（画像信号）として第１イメージセンサ１４ａ、第２イメージセンサ１４ｂから順次出力され、Ａ／Ｄ変換器３０ａ、３０ｂに入力される。
The
Ａ／Ｄ変換器３０ａ、３０ｂは、ＣＤＳ回路及びアナログアンプを含み、ＣＤＳ回路は、ＣＤＳパルスに基づいてＣＣＤ出力信号を相関二重サンプリング処理し、アナログアンプは、メインＣＰＵ１０から加えられる撮影感度設定用ゲインによってＣＤＳ回路から出力される画像信号を増幅する。Ａ／Ｄ変換器３０ａ、３０ｂにおいて、それぞれアナログの画像信号からデジタルの画像信号に変換される。
The A /
Ａ／Ｄ変換器３０ａ、３０ｂから出力された右眼用画像データおよび左眼用画像データは、それぞれ画像信号処理手段３１ａ、３１ｂで階調変換、ホワイトバランス調整、γ調整処理などの各種画像処理を施され、バッファメモリ３２ａ、３２ｂに一旦蓄えられる。
The image data for the right eye and the image data for the left eye output from the A /
バッファメモリ３２ａ、３２ｂから読み出されたＲ、Ｇ、Ｂの画像信号は、ＹＣ処理部３５ａ、３５ｂにより輝度信号Ｙと色差信号Ｃｒ、Ｃｂ（ＹＣ信号）に変換され、Ｙ信号は、輪郭調整手段により輪郭強調処理される。ＹＣ処理部３５ａ、３５ｂで処理されたＹＣ信号は、それぞれワークメモリ２４ａ、２４ｂに蓄えられる。
The R, G, and B image signals read from the
上記のようにしてバッファメモリ３２ａ、３２ｂに蓄えられたＹＣ信号は、圧縮伸張処理手段３６ａ、３６ｂによって圧縮され、所定のフォーマットの画像ファイルとして、Ｉ／Ｆ３９を介してメモリカード３８に記録される。本例の複眼デジタルカメラ１の場合、静止画の２次元画像のデータは、所定のフォーマットの画像ファイル（画像ファイルについては後に詳述する）としてメモリカード３８に格納される。Ｅｘｉｆファイルは、主画像のデータを格納する領域と、縮小画像（サムネイル画像）のデータを格納する領域とを有している。撮影によって取得された主画像のデータから画素の間引き処理その他の必要なデータ処理を経て、規定サイズ（例えば、１６０×１２０又は８０×６０ピクセルなど）のサムネイル画像が生成される。こうして生成されたサムネイル画像は、主画像とともにＥｘｉｆファイル内に書き込まれる。また、Ｅｘｉｆファイルには、撮影日時、撮影条件、顔検出情報等のタグ情報が付属されている。動画のデータは、ＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４方式等の所定の圧縮形式に従って圧縮処理が施されてメモリカード３８に格納される。
The YC signals stored in the
また、メインＣＰＵ１０は、このＳ２ＯＮ信号に応動して距離用駆動／制御手段６０を制御し、距離用撮像素子６１ａ、６１ｂを介して距離用発光素子５２ａ、５２ｂにより投光スポットの照射された被写体像を取得する。取得された被写体像は、距離情報処理手段６４で処理が行われ、各画素の画素値が距離の値である距離画像が距離用撮像素子６１ａ、６１ｂのそれぞれに対して生成され、距離情報記憶手段６５に記憶される。そして、所定のフォーマットの画像ファイルと共にメモリカード３８に記録される。
The main CPU 10 controls the distance driving / control means 60 in response to the S2ON signal, and the subject irradiated with the projection spot by the distance light emitting elements 52a and 52b via the distance imaging elements 61a and 61b. Get a statue. The acquired subject image is processed by the distance information processing means 64, and a distance image in which the pixel value of each pixel is a distance value is generated for each of the distance image sensors 61a and 61b, and the distance information is stored. It is stored in the
このようにしてメモリカード３８に記録された画像データは、複眼デジタルカメラ１のモードを再生モードに設定することにより、画像表示ＬＣＤ６に再生表示される。再生モードへの移行は、再生ボタン（図示せず）を押下することにより行われる。
The image data recorded on the
再生モードが選択されると、メモリカード３８に記録されている最終コマの画像ファイルがＩ／Ｆ３９を介して読み出される。この読み出された画像ファイルの圧縮データは、圧縮伸張処理手段３６ａ、３６ｂを介して非圧縮のＹＣ信号に伸長される。
When the playback mode is selected, the image file of the last frame recorded on the
伸長されたＹＣ信号は、バッファメモリ３２ａ、３２ｂ（又は図示しないＶＲＡＭ）に保持され、コントローラ３４によって表示用の信号形式に変換されて画像表示ＬＣＤ６に出力される。
The decompressed YC signal is held in the
その後、順コマ送りスイッチ（十字キーの右キー）が押されると、順方向にコマ送りされ、逆コマ送りスイッチ（十字キーの左キー）が押されると、逆方向にコマ送りされる。そして、コマ送りされたコマ位置の画像ファイルがメモリカード３８から読み出され、上記と同様にして画像が画像表示ＬＣＤ６に再生される。
Thereafter, when the forward frame advance switch (right key of the cross key) is pressed, the frame is advanced in the forward direction, and when the reverse frame advance switch (left key of the cross key) is pressed, the frame is advanced in the reverse direction. Then, the frame-positioned image file at the frame position is read from the
画像表示ＬＣＤ６に再生表示された画像を確認しながら、必要に応じて、メモリカード３８に記録された画像を消去することができる。画像の消去は、画像が画像表示ＬＣＤ６に再生表示された状態でフォトモードボタンが押下されることによって行われる。
While confirming the image reproduced and displayed on the
また、画像表示ＬＣＤ６に再生表示された画像を確認しながら、必要に応じて、メモリカード３８に記録された画像を編集することができる。画像の編集は、画像が画像表示ＬＣＤ６に再生表示された状態で、操作部３により編集モードが選択されることによって行われる。
Further, the image recorded on the
以上のように、複眼デジタルカメラ１は画像の撮影、記録及び再生を行う。上記説明は、静止画を撮影する場合について説明したが、動画の場合も同様である。動画、静止画の撮影は、個々のレリーズボタンにより制御される。また、動画、静止画のモードセレクトＳＷやメニューにより、動画、静止画の切り替えを行うようにしてもよい。また、上記説明は、１回のシャッターレリーズ動作で第１撮像系２ａ及び第２撮像系２ｂの２つの撮像系を介して２枚の画像を撮影する場合について説明したが、１回のシャッターレリーズ動作で第１撮像系２ａ及び第２撮像系２ｂにおいて連続的に画像データを取得することにより、２枚以上の画像を撮影し、それらの画像の中から所望の複数枚の画像を選択して立体表示するようにしてもよい。
As described above, the compound-eye
［本願発明の概要］
さて、本願発明では、画像ファイル生成手段５３において、第１撮像系２ａ及び第２撮像系２ｂで撮影された多視点画像を構成する各画像毎にそれぞれ別個の画像ファイルが生成され、それぞれの画像ファイルが関連付けられてメモリカード３８に記録される。画像ファイルには、各画像の画像データ（主画像の画像データ）と、主画像を復元するための関連画像情報と、主画像の画像データと関連画像情報に関する付属情報とが各画像ファイルに含まれる。以下、画像ファイルの構成、配置等の詳細について説明する。
[Outline of the present invention]
In the present invention, the image file generating means 53 generates separate image files for each of the images constituting the multi-viewpoint image captured by the
［画像ファイルの構成について］
＜画像ファイルの構成についての第１の実施の形態＞
画像ファイルの構成についての第１の実施の形態は、主画像とは異なる視点から撮影された画像を関連画像情報として記録する形態である。以下、多視点画像として第１撮像系２ａ及び第２撮像系２ｂにより各２枚（合計４枚）の画像が撮影された場合における画像ファイルの構成についての第１の実施の形態について、図２及び図３を用いて説明する。便宜上、第１撮像系２ａで１回目に撮影された画像を視点１の画像とし、第１撮像系２ａで２回目に撮影された画像を視点２の画像とし、第２撮像系２ｂで１回目に撮影された画像を視点３の画像とし、第２撮像系２ｂで２回目に撮影された画像を視点４の画像として説明する。
[Image file structure]
<First Embodiment Regarding Configuration of Image File>
The first embodiment of the configuration of the image file is a mode in which an image taken from a viewpoint different from the main image is recorded as related image information. Hereinafter, the first embodiment of the configuration of the image file in the case where two images (four images in total) are captured by the
多視点画像の画像ファイルは、視点１の画像ファイルＦ１０（ファイル名：ABCD0001.JPG）と、視点２の画像ファイルＦ１１（ファイル名：ABCD0002.JPG）と、視点３の画像ファイルＦ１２（ファイル名：ABCD0003.JPG）と、視点４の画像ファイルＦ１３（ファイル名：ABCD0004.JPG）との４個の画像ファイルで構成されている。視点１の画像ファイルＦ１０、視点２の画像ファイルＦ１１、視点３の画像ファイルＦ１２及び視点４の画像ファイルＦ１３には連続したファイル名が自動的に付けられ、これらの画像ファイルの関連付けが行われる。
The image file of the multi-viewpoint image includes the image file F10 of the viewpoint 1 (file name: ABCD0001.JPG), the image file F11 of the viewpoint 2 (file name: ABCD0002.JPG), and the image file F12 of the viewpoint 3 (file name: ABCD0003.JPG) and an image file F13 (file name: ABCD0004.JPG) of viewpoint 4 are configured. A continuous file name is automatically assigned to the image file F10 of the
視点１の画像ファイルＦ１０は、画像ファイルＦ１０のデータの先頭を示すマーカＳＯＩ（Start of Image）の格納領域Ａ１０１と、タグ情報格納領域Ａ１０２と、視点１の画像（主画像）の画像データ格納領域Ａ１０３と、データの終了を示すマーカＥＯＩ（End of Image）の格納領域Ａ１０４と、関連画像情報格納領域Ａ１０５とで構成される。視点２の画像ファイルＦ１１は、画像ファイルＦ１１のデータの先頭を示すマーカＳＯＩの格納領域Ａ１１１と、タグ情報格納領域Ａ１１２と、視点２の画像（主画像）の画像データ格納領域Ａ１１３と、データの終了を示すマーカＥＯＩの格納領域Ａ１１４と、関連画像情報格納領域Ａ１１５とで構成される。視点３の画像ファイルＦ１２は、画像ファイルＦ１２のデータの先頭を示すマーカＳＯＩの格納領域Ａ１２１と、タグ情報格納領域Ａ１２２と、視点３の画像（主画像）の画像データ格納領域Ａ１２３と、データの終了を示すマーカＥＯＩの格納領域Ａ１２４と、関連画像情報格納領域Ａ１２５とで構成される。視点４の画像ファイルＦ１３は、画像ファイルＦ１３のデータの先頭を示すマーカＳＯＩの格納領域Ａ１３１と、タグ情報格納領域Ａ１３２と、視点４の画像（主画像）の画像データ格納領域Ａ１３３と、データの終了を示すマーカＥＯＩの格納領域Ａ１３４と、関連画像情報格納領域Ａ１３５とで構成される。
The image file F10 of the
画像データ格納領域Ａ１０３、Ａ１１３、Ａ１２３、Ａ１３３には、各画像ファイルの主画像の画像データが格納される。ここで、主画像とは第１撮像系２ａ及び第２撮像系２ｂで撮影された画像のうちの所望の１枚の画像であり、視点１の画像ファイルＦ１０の場合には視点１の画像が主画像であり、視点２の画像ファイルＦ１１の場合には視点２の画像が主画像であり、視点３の画像ファイルＦ１２の場合には視点３の画像が主画像であり、視点４の画像ファイルＦ１３の場合には視点４の画像が主画像である。
The image data storage areas A103, A113, A123, and A133 store the image data of the main image of each image file. Here, the main image is a desired one of the images captured by the
関連画像情報格納領域Ａ１０５、Ａ１１５、Ａ１２５、Ａ１３５には、主画像とは異なる所望の１枚の視点の画像の画像データが格納される。視点１の画像ファイルＦ１０の関連画像情報格納領域Ａ１０５には、視点４の画像の画像データが格納され、視点２の画像ファイルＦ１１の関連画像情報格納領域Ａ１１５には、視点１の画像の画像データが格納され、視点３の画像ファイルＦ１２の関連画像情報格納領域Ａ１２５には、視点２の画像の画像データが格納され、視点４の画像ファイルＦ１３の関連画像情報格納領域Ａ１３５には、視点１の画像の画像データが格納される。このように、関連画像情報格納領域Ａ１０５、Ａ１１５、Ａ１２５、Ａ１３５に格納される画像データが重複せず、これにより関連画像情報格納領域Ａ１０５、Ａ１１５、Ａ１２５、Ａ１３５により視点１、視点２、視点３及び視点４の全ての主画像の画像データを容易に作成することができる。
In the related image information storage areas A105, A115, A125, and A135, image data of one desired viewpoint image different from the main image is stored. The image data of the viewpoint 4 image is stored in the related image information storage area A105 of the
タグ情報格納領域Ａ１０２、Ａ１１２、Ａ１２２、Ａ１３２には、図３に示すように、Ｅｘｉｆ識別情報Ａ１０２１と、ＴＩＦＦヘッダＡ１０２２と、ＩＦＤ０領域Ａ１０２３と、付属情報Ａ１０２４とで構成される。付属情報Ａ１０２４には、全視点数を格納する領域Ｂ１１と、主画像がどの視点で撮影された画像かを示す情報を格納する領域（視点画像領域）Ｂ１２と、関連画像情報に含まれる画像がどの視点で撮影された画像かを示す情報を格納する領域（関連画像領域）Ｂ１３と、主画像の画像データがどの画像ファイルの関連画像領域に格納されているかを示す情報を格納する領域（関連視点画像情報領域）Ｂ１４と、その他付属情報を格納する領域Ｂ１５とが設けられている。 As shown in FIG. 3, the tag information storage areas A102, A112, A122, and A132 include Exif identification information A1021, a TIFF header A1022, an IFD0 area A1023, and attached information A1024. The attached information A1024 includes an area B11 that stores the total number of viewpoints, an area (viewpoint image area) B12 that stores information indicating which viewpoint the main image is captured from, and an image included in the related image information. An area (related image area) B13 for storing information indicating an image taken from which viewpoint, and an area for storing information indicating the image data of the main image stored in the related image area (related) (Viewpoint image information area) B14 and an area B15 for storing other attached information.
全視点数領域Ｂ１１には、多視点画像を構成する画像の枚数（視点数）が格納される。本実施の形態では、視点１〜４の４枚の画像で多視点画像が構成されるため、全視点数領域Ｂ１１には「４」が格納される。
The total number of viewpoints area B11 stores the number of images (number of viewpoints) constituting the multi-viewpoint image. In the present embodiment, since the multi-viewpoint image is composed of four images of the
視点画像領域Ｂ１２には、画像ファイルの主画像の視点番号が格納される。画像ファイルＦ１０は視点１が主画像の場合であるため、視点画像領域Ｂ１２には「１」が格納される。
In the viewpoint image area B12, the viewpoint number of the main image of the image file is stored. Since the image file F10 is a case where the
関連画像領域Ｂ１３には、関連画像情報に含まれる画像の視点が格納される。画像ファイルＦ１０の場合には、視点４の画像データが関連画像情報に格納されているため、関連画像領域Ｂ１３には「４」が格納される。 In the related image area B13, the viewpoint of the image included in the related image information is stored. In the case of the image file F10, since the image data of the viewpoint 4 is stored in the related image information, “4” is stored in the related image area B13.
関連視点画像情報領域Ｂ１４には、主画像が関連画像情報として格納されている画像ファイルのファイル名及びその画像ファイルが配置されている位置が格納される。画像ファイルＦ１０の場合には、主画像は視点１の画像であり、視点１が関連画像情報として格納されている画像ファイルは視点２の画像ファイルＦ１１であり、視点２の画像ファイルＦ１１はDCIMフォルダ内の100ABCDEフォルダに配置されているため、関連視点画像情報領域には、「/DCIM/100ABCDE/ABCD0002.JPG」が格納される。
In the related viewpoint image information area B14, the file name of the image file in which the main image is stored as the related image information and the position where the image file is arranged are stored. In the case of the image file F10, the main image is the image of
このように、付属情報により画像ファイルＦ１０〜Ｆ１３の関連付けが行われる。全視点数領域Ｂ１１に格納されている全視点数が「４」であり、視点画像領域Ｂ１２に格納されている主画像の視点番号が「１」であるため、視点１の画像ファイルＦ１０（ファイル名：ABCD0001.JPG）を先頭に４枚の画像で多視点画像として関連付けられていることが分かる。なお、画像ファイルの配置については、後に詳述する。
As described above, the image files F10 to F13 are associated with each other by the attached information. Since the total number of viewpoints stored in the total viewpoint number area B11 is “4” and the viewpoint number of the main image stored in the viewpoint image area B12 is “1”, the
このように、視点１〜４の全ての画像に対して生成された画像ファイルＦ１０〜Ｆ１３の関連画像情報に重複する情報が含まれないように、関連画像情報に格納する画像を選択されることにより、最低限の関連画像情報で、関連画像情報に基づいて主画像を復元することができる。また、付属情報に主画像の画像データが関連画像情報として格納されている画像ファイルを示す情報が格納されているため、主画像が復元可能な関連画像情報がどの画像ファイルに含まれているかを、画像ファイルの付属情報から知ることができる。
As described above, an image to be stored in the related image information is selected so that duplicate information is not included in the related image information of the image files F10 to F13 generated for all the images of the
＜画像ファイルの構成についての第２の実施の形態＞
画像ファイルの構成についての第２の実施の形態は、主画像と、主画像とは異なる視点から撮影された画像との差分情報を関連画像情報として記録する形態である。以下、第１撮像系２ａ及び第２撮像系２ｂにより各２枚の画像が撮影され、その中から選択された３枚の画像で多視点画像が構成された場合における画像ファイルの構成についての第２の実施の形態について図４及び図５を用いて説明する。なお、画像ファイルの構成についての第１の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。便宜上、第１撮像系２ａで１回目に撮影された画像を視点１の画像とし、第１撮像系２ａで２回目に撮影された画像を視点２の画像とし、第２撮像系２ｂで１回目に撮影された画像を視点３の画像とし、第２撮像系２ｂで２回目に撮影された画像は使用しないとして説明する。
<Second Embodiment Regarding Configuration of Image File>
The second embodiment of the configuration of the image file is a mode in which difference information between a main image and an image taken from a viewpoint different from the main image is recorded as related image information. Hereinafter, the first
視点画像の画像ファイルは、視点１の画像ファイルＦ２０（ファイル名：3DF_0001.JPG）と、視点２の画像ファイルＦ２１（ファイル名：3DF_0002.JPG）と、視点３の画像ファイルＦ２２（ファイル名：3DF_0003.JPG）との３個の画像ファイルで構成されている。視点１の画像ファイルＦ２０、視点２の画像ファイルＦ２１及び視点３の画像ファイルＦ２２には連続したファイル名が自動的に付けられ、これらの画像ファイルの関連付けが行われる。
The image file of the viewpoint image includes the image file F20 of the viewpoint 1 (file name: 3DF_0001.JPG), the image file F21 of the viewpoint 2 (file name: 3DF_0002.JPG), and the image file F22 of the viewpoint 3 (file name: 3DF_0003). .JPG) and three image files. A continuous file name is automatically given to the image file F20 of the
視点１の画像ファイルＦ２０は、画像ファイルＦ２０のデータの先頭を示すマーカＳＯＩの格納領域Ａ１０１と、タグ情報格納領域Ａ２０２と、視点１の画像（主画像）の画像データ格納領域Ａ１０３と、データの終了を示すマーカＥＯＩの格納領域Ａ１０４と、付属情報領域Ａ２０６と、関連画像情報格納領域Ａ２０５とで構成される。視点２の画像ファイルＦ２１は、画像ファイルＦ２１のデータの先頭を示すマーカＳＯＩの格納領域Ａ１１１と、タグ情報格納領域Ａ２１２と、視点２の画像（主画像）の画像データ格納領域Ａ１１３と、データの終了を示すマーカＥＯＩの格納領域Ａ１１４と、付属情報領域Ａ２１６と、関連画像情報格納領域Ａ２１５とで構成される。視点３の画像ファイルＦ２２は、画像ファイルＦ１２のデータの先頭を示すマーカＳＯＩの格納領域Ａ１２１と、タグ情報格納領域Ａ２２２と、視点３の画像（主画像）の画像データ格納領域Ａ１２３と、データの終了を示すマーカＥＯＩの格納領域Ａ１２４と、付属情報領域Ａ２２６と、関連画像情報格納領域Ａ２２５とで構成される。
The
なお、図４に示す例では、付属情報領域Ａ２０６、Ａ２１６、Ａ２２６及び関連画像情報格納領域Ａ２０５、Ａ２１５、Ａ２２５が、ＥＯＩの格納領域Ａ１０４、Ａ１１４、Ａ１２４の次にそれぞれ格納されているが、図５に示すように、付属情報領域Ａ２０６、Ａ２１６、Ａ２２６及び関連画像情報格納領域Ａ２０５、Ａ２１５、Ａ２２５をタグ情報格納領域Ａ２０２’ 、Ａ２１２’、Ａ２２２ ’の中にそれぞれ格納してもよい。この場合には、タグ情報格納領域Ａ２０２’には、タグ情報格納領域Ａ２０２に格納されているＥｘｉｆ識別情報Ａ１０２１、ＴＩＦＦヘッダＡ１０２２、ＩＦＤ０領域Ａ１０２３及び付属情報Ａ１０２４に加えて、付属情報領域Ａ２０６及び関連画像情報格納領域Ａ２０５画が格納される。タグ情報格納領域Ａ２１２’、Ａ２２２’については、タグ情報格納領域Ａ２０２’と同様の構成であるため、説明を省略する。 In the example shown in FIG. 4, the auxiliary information areas A206, A216, A226 and the related image information storage areas A205, A215, A225 are respectively stored after the EOI storage areas A104, A114, A124. As shown in FIG. 5, the auxiliary information areas A206, A216, A226 and the related image information storage areas A205, A215, A225 may be stored in the tag information storage areas A202 ′, A212 ′, A222 ′, respectively. In this case, in the tag information storage area A202 ′, in addition to the Exif identification information A1021, the TIFF header A1022, the IFD0 area A1023, and the auxiliary information A1024 stored in the tag information storage area A202, the auxiliary information area A206 and the related information An image information storage area A205 is stored. Since the tag information storage areas A212 'and A222' have the same configuration as the tag information storage area A202 ', description thereof will be omitted.
関連画像情報格納領域Ａ２０５、Ａ２１５、Ａ２２５には、主画像以外の全ての画像の画像データと、主画像の画像データとの差分情報が格納される。視点１の画像ファイルＦ２０の関連画像情報格納領域Ａ２０５には、視点２の画像データと視点１（主画像）の画像データとの差分画像データ及び視点３の画像データと視点１の画像データとの差分画像データが格納され、視点２の画像ファイルＦ２１の関連画像情報格納領域Ａ２１５には、視点１の画像データと視点２（主画像）の画像データとの差分画像データ及び視点３の画像データと視点２の画像データとの差分画像データが格納され、視点３の画像ファイルＦ２２の関連画像情報格納領域Ａ２２５には、視点１の画像データと視点３（主画像）の画像データとの差分画像データ及び視点２の画像データと視点３の画像データとの差分画像データが格納される。このように、関連画像情報格納領域Ａ２０５、Ａ２１５、Ａ２２５に主画像以外の所望の画像の画像データと、主画像の画像データとの差分情報を関連画像情報として格納することにより、関連画像情報を保存するのに必要な記憶容量を少なくすることができる。また、主画像以外の全ての画像の画像データと、主画像の画像データとの差分情報が関連画像情報として生成されることにより、１つの画像ファイルの関連画像情報に基づいて、全ての主画像を復元することができる。
In the related image information storage areas A205, A215, and A225, difference information between the image data of all images other than the main image and the image data of the main image is stored. In the related image information storage area A205 of the
付属情報領域Ａ２０６、Ａ２１６、Ａ２２６には、図５に示すように、全視点数を格納する領域Ｂ２１と、主画像がどの視点で撮影された画像かを示す情報を格納する領域（視点画像領域）Ｂ２２と、関連画像情報に含まれる画像がどの視点で撮影された画像かを示す情報を格納する領域（関連画像領域）Ｂ２３、Ｂ２４と、主画像の画像データがどの画像ファイルの関連画像領域に格納されているかを示す情報を格納する領域（関連視点画像情報領域）Ｂ２５、Ｂ２６と、その他付属情報を格納する領域Ｂ２７とが設けられている。 In the attached information areas A206, A216, and A226, as shown in FIG. 5, an area B21 that stores the total number of viewpoints and an area that stores information indicating the viewpoint at which the main image was captured (viewpoint image area) ) B22, areas (related image areas) B23 and B24 for storing information indicating from which viewpoint the image included in the related image information is captured, and the related image area of which image file the main image image data is Regions (related viewpoint image information regions) B25 and B26 for storing information indicating whether they are stored in the area B27, and an area B27 for storing other attached information.
全視点数領域Ｂ２１には、多視点画像を構成する画像の枚数（視点数）が格納される。本実施の形態では、視点１〜３の３枚の画像で多視点画像が構成されるため、全視点数領域Ｂ２１には「３」が格納される。
The total number of viewpoints area B21 stores the number of images (number of viewpoints) constituting the multi-viewpoint image. In the present embodiment, since the multi-viewpoint image is composed of the three images of the
視点画像領域Ｂ２２には、画像ファイルの主画像の視点番号が格納される。画像ファイルＦ２０は視点１が主画像の場合であるため、視点画像領域Ｂ２２には「１」が格納される。
In the viewpoint image area B22, the viewpoint number of the main image of the image file is stored. Since the image file F20 is the case where the
関連画像領域１Ｂ２３、関連画像領域２Ｂ２４には、関連画像情報に含まれる画像データの情報が格納される。画像ファイルＦ２０の場合には、視点２の画像データと視点１の画像データとの差分画像データと、視点３の画像データと視点１の画像データとの差分画像データとが関連画像情報に格納されているため、関連画像領域１Ｂ２３には「△（２−１）」が格納され、関連画像領域２Ｂ２４には「△（３−１）」が格納される。
Information of image data included in the related image information is stored in the related image area 1B23 and the related image area 2B24. In the case of the image file F20, the difference image data between the viewpoint 2 image data and the
関連視点画像情報領域１Ｂ２５、関連視点画像情報領域２Ｂ２６には、主画像が関連画像情報として格納されている画像ファイルのファイル名及びその画像ファイルが配置されている位置が格納される。画像ファイルＦ２０の場合には、主画像は視点１の画像であり、視点１が関連画像情報として格納されている画像ファイルは、視点２の画像ファイルＦ２１及び視点３の画像ファイルＦ２２であり、視点２の画像ファイルＦ２１及び視点３の画像ファイルＦ２２はDCIMフォルダ内の101_3DVFフォルダ内に配置されているため、関連視点画像情報領域１Ｂ２５には、「/DCIM/101_3DVF/3DF_0002.JPG」が格納され、関連視点画像情報領域２Ｂ２６には、「/DCIM/101_3DVF/3DF_0003.JPG」が格納される。
In the related viewpoint image information area 1B25 and the related viewpoint image information area 2B26, the file name of the image file in which the main image is stored as the related image information and the position where the image file is arranged are stored. In the case of the image file F20, the main image is the image of the
このように、付属情報により画像ファイルＦ２０〜Ｆ２２の関連付けが行われる。なお、画像ファイルの配置については、後に詳述する。 As described above, the image files F20 to F22 are associated with each other based on the attached information. The arrangement of the image file will be described later in detail.
このように、主画像以外の全ての画像の画像データ又は主画像以外の全ての画像の画像データと、主画像の画像データとの差分情報が関連画像情報として生成されることにより、１つの画像ファイルの関連画像情報に基づいて、主画像を復元することができる。また、主画像以外の画像データと、主画像の画像データとの差分情報を関連画像情報とすることにより、複数枚の画像に関する情報が関連画像情報に含まれているとしても、関連画像情報を格納するのに必要な記憶容量を少なくすることができる。 As described above, the difference data between the image data of all the images other than the main image or the image data of all the images other than the main image and the image data of the main image is generated as the related image information. The main image can be restored based on the related image information of the file. Further, by making the difference information between the image data other than the main image and the image data of the main image as the related image information, the related image information can be changed even if the information related to a plurality of images is included in the related image information. The storage capacity required for storage can be reduced.
なお、本実施の形態において関連画像情報に格納された視点画像の画像データを用いる場合には、まず関連画像情報に格納された差分画像データと主画像の画像データを足し合わせることにより関連画像情報の視点番号の画像データを作成する必要がある。その後で、後に詳述する画像ファイルの復元処理や関連画像情報の修復処理に使用すればよい。 When image data of the viewpoint image stored in the related image information is used in the present embodiment, first, the related image information is obtained by adding the difference image data stored in the related image information and the image data of the main image. It is necessary to create image data of the viewpoint number. Thereafter, the image file may be used for image file restoration processing and related image information restoration processing, which will be described in detail later.
［画像ファイルの配置について］
＜画像ファイルの配置についての第１の実施の形態＞
多視点画像をフォルダ別に保存する方法について、４枚の画像から多視点画像が構成されている場合（視点数：４）を例に図６を用いて説明する。視点１の画像ファイルABCD0001、視点２の画像ファイルABCD0002、視点３の画像ファイルABCD0003及び視点４の画像ファイルABCD0004が同一のフォルダ100ABCDEに保存される。別の多視点画像を構成する４枚の画像の画像ファイルABCD0005、ABCD0006、ABCD0007及びABCD0008は、画像ファイルABCD0001、ABCD0002、ABCD0003及びABCD0004が保存されているフォルダとは別のフォルダ101ABCDEに保存される。このように多視点画像をフォルダ別に保存することにより、多視点画像を構成する４枚の画像の関連付け及び他の多視点画像との識別が可能となる。
[About image file layout]
<First Embodiment of Image File Arrangement>
A method for storing multi-viewpoint images for each folder will be described with reference to FIG. 6, taking as an example a case where a multi-viewpoint image is composed of four images (number of viewpoints: 4). The image file ABCD0001 of the
なお、本実施の形態では、複眼デジタルカメラ１を用いて多視点画像が撮影された場合を例に説明したが、これに限らず、パノラマ画像等の複数枚の画像を用いることではじめて画像表示ができるようなあらゆる場合にも適用することができる。
In the present embodiment, the case where a multi-viewpoint image is captured using the compound-eye
＜画像ファイルの配置についての第２の実施の形態＞
３枚の画像から多視点画像が構成されている場合（視点数：３）を例に図７を用いて説明する。画像ファイルのファイル名ABCD0001の下２桁01を01,02,03、11,12,13、21,22,23・・・というように変化させる命名規則を設ける。命名された全ての画像ファイルは同一フォルダ100ABCDEに保存される。このように多視点画像毎にファイル名を変えることにより、多視点画像を構成する３枚の画像の関連付け及び他の多視点画像を構成する３枚の画像との識別が可能となる。
<Second Embodiment of Image File Arrangement>
A case where a multi-viewpoint image is composed of three images (number of viewpoints: 3) will be described as an example with reference to FIG. A naming rule is provided that changes the last two digits 01 of the image file name ABCD0001 as 01, 02, 03, 11, 12, 13, 21, 22, 23. All the named image files are stored in the same folder 100ABCDE. In this way, by changing the file name for each multi-viewpoint image, it becomes possible to associate the three images that make up the multi-viewpoint image and to identify the three images that make up another multi-viewpoint image.
＜画像ファイルの配置についての第３の実施の形態＞
３枚の画像から多視点画像が構成されている場合（視点数：３）を例に図８を用いて説明する。画像ファイルのファイル名ABCD0001の下２桁01を01,02,03、04,05,06・・・のように昇順に変化させるという命名規則を設ける。命名された全ての画像ファイルは同一フォルダ100ABCDEに保存される。この場合には、画像ファイルの関連付けは付属情報のみで行われ、多視点画像を構成する画像の枚数や視点番号は、画像ファイル中の付属情報を参照することで判断される。
<Third Embodiment of Image File Arrangement>
A case where a multi-viewpoint image is composed of three images (number of viewpoints: 3) will be described as an example with reference to FIG. A naming rule is provided in which the last two digits 01 of the file name ABCD0001 of the image file are changed in ascending order as 01, 02, 03, 04, 05, 06. All the named image files are stored in the same folder 100ABCDE. In this case, the image file is associated with only the attached information, and the number of images constituting the multi-viewpoint image and the viewpoint number are determined by referring to the attached information in the image file.
［画像ファイルの復元処理］
多視点画像を構成する画像のうちの１枚の画像の画像ファイルを紛失した場合における当該画像ファイルの復元処理について、図９を用いて説明する。以下の処理は、メインＣＰＵ１０によって行われる。
[Image file restoration processing]
With reference to FIG. 9, a description will be given of the restoration processing of an image file in the case where the image file of one image among the images constituting the multi-viewpoint image is lost. The following processing is performed by the main CPU 10.
まず、多視点画像を構成する視点数分の画像ファイルを取得する（ステップＳ１）。視点数分の画像ファイルの取得方法は、先述した画像ファイルの配置の形態によって異なる。図６に示す画像ファイルの配置の場合には、フォルダにより関連付けされているため、所定のフォルダ内の４ファイル（４視点分）、例えばフォルダ100ABCDE内にある４枚の画像ファイルABCD0001、ABCD0002、ABCD0003及びABCD0004を取得する。図７に示す画像ファイルの配置の場合には、ファイル名で関連付けされているため、ファイル名から必要な３視点分のファイルを識別して取得する。例えば、フォルダ100ABCDE内にある画像ファイルのファイル名がABCD0001, ABCD0002, ABCD0003, ABCD0011, ABCD0012, ABCD0013・・・となっているため、ファイル名ABCD0001, ABCD0002, ABCD0003の３枚の画像ファイルで多視点画像を構成すると識別して、これら３枚の画像ファイルを取得する。図８に示す画像ファイルの配置の場合には、まず、任意の１ファイルを取得し、そのファイルの付属情報から視点数と視点番号を取得する。次に、取得した視点数と視点番号から多視点画像を構成する画像ファイルを識別して取得する。例えば、画像ファイルABCD0023.JPGを任意の１ファイルとして取得した場合には、画像ファイルABCD0023.JPGの視点数が３であり、かつ視点番号が２であり、これらの情報から視点番号１の画像ファイルABCD0022.JPGと、視点番号３の画像ファイルはABCD0024.JPGを識別することができる。
First, image files for the number of viewpoints constituting the multi-viewpoint image are acquired (step S1). The method of acquiring image files for the number of viewpoints differs depending on the arrangement form of the image files described above. In the case of the arrangement of the image files shown in FIG. 6, since they are related by folders, four files (for four viewpoints) in a predetermined folder, for example, four image files ABCD0001, ABCD0002, ABCD0003 in the folder 100ABCDE. And ABCD0004. In the case of the arrangement of the image files shown in FIG. 7, since the file names are associated with each other, necessary three viewpoint files are identified and acquired from the file names. For example, the file names of the image files in the folder 100ABCDE are ABCD0001, ABCD0002, ABCD0003, ABCD0011, ABCD0012, ABCD0013... These three image files are acquired. In the case of the image file arrangement shown in FIG. 8, first, an arbitrary file is acquired, and the number of viewpoints and the viewpoint number are acquired from the attached information of the file. Next, an image file constituting a multi-viewpoint image is identified and acquired from the acquired number of viewpoints and viewpoint number. For example, when the image file ABCD0023.JPG is acquired as an arbitrary file, the number of viewpoints of the image file ABCD0023.JPG is 3, and the viewpoint number is 2, and the image file with the
次に、全ての視点画像が揃っているかどうかを判定する（ステップＳ２）。全ての視点画像が揃っている場合（ステップＳ２でＹＥＳ）には、主画像の画像データや関連画像情報の修復要否を判定し、必要に応じて修復処理（後述)を行う（ステップＳ３）。そして、画像ファイルを紛失した場合の処理を終了して、編集、再生、複製などの所望の別処理を行う。 Next, it is determined whether all viewpoint images are prepared (step S2). When all the viewpoint images are prepared (YES in step S2), it is determined whether or not the image data of the main image and related image information need to be repaired, and repair processing (described later) is performed as necessary (step S3). . Then, the processing when the image file is lost is terminated, and other desired processing such as editing, reproduction, and duplication is performed.
全ての視点画像が揃っていない場合（ステップＳ２でＮＯ）には、復元が必要な視点画像の特定を行う（ステップＳ４）。復元が必要な視点画像は、取得した画像ファイルのファイル名や、画像ファイル内の付属情報を参照することによって行うことができる。 If all the viewpoint images are not complete (NO in step S2), the viewpoint images that need to be restored are identified (step S4). The viewpoint image that needs to be restored can be obtained by referring to the file name of the acquired image file or the attached information in the image file.
ステップＳ４で特定された画像ファイルの復元が可能かどうか判定する（ステップＳ５）。例えば、視点数が４の場合で２視点の画像ファイルが無い場合や、視点１の画像ファイルのみが無い場合でも、当該視点画像を関連画像として持つべき画像ファイルから関連画像が消えてしまっている場合などは、復元不可（ステップＳ５でＮＯ）としてエラー処理を行う（ステップＳ６）。 It is determined whether or not the image file specified in step S4 can be restored (step S5). For example, even when the number of viewpoints is 4 and there is no two-viewpoint image file, or when there is no viewpoint-1 image file alone, the related image disappears from the image file that should have the viewpoint image as the related image. In some cases, restoration is impossible (NO in step S5), and error processing is performed (step S6).
以下、ステップＳ５で画像ファイルの復元が可能な場合（ステップＳ５でＹＥＳ）について、図２に示す形態の画像ファイルで「視点２画像ファイル」が無くなっていた場合を例に説明する。 Hereinafter, the case where the image file can be restored in step S5 (YES in step S5) will be described as an example in which the “viewpoint 2 image file” is lost in the image file in the form shown in FIG.
まず、主画像の復元用の画像を抽出する（ステップＳ７）。視点３画像ファイルの付属情報には、関連画像情報に視点２の画像ファイルが格納されていることが記載されているため、視点２の画像データを視点３画像ファイルから抽出する。
First, an image for restoring the main image is extracted (step S7). Since the attached information of the
次に、関連画像情報の復元用の画像を抽出する（ステップＳ８）。視点１画像ファイルの付属情報には、主画像として視点１の画像データが格納されていることが記載されているため、視点１の画像データを視点１画像ファイルから抽出する。
Next, an image for restoring related image information is extracted (step S8). Since the attached information of the
そして、画像ファイルの復元用の付属情報を生成する（ステップＳ９）。他の画像ファイルの付属情報を参照して、復元する視点２画像ファイル用の付属情報（図３参照）を生成する。 Then, auxiliary information for restoring the image file is generated (step S9). By referring to the attached information of the other image file, attached information (see FIG. 3) for the viewpoint 2 image file to be restored is generated.
最後に、ステップＳ７で抽出された主画像の画像データと、ステップＳ８で抽出された関連画像情報と、ステップＳ９で生成された付属情報とを結合することにより、紛失等された画像ファイルを復元して、当該復元した画像ファイルを他の画像ファイルと同じ位置に書き込み（ステップＳ１０）、処理を終了する。 Finally, the lost image file is restored by combining the image data of the main image extracted in step S7, the related image information extracted in step S8, and the attached information generated in step S9. Then, the restored image file is written in the same position as other image files (step S10), and the process is terminated.
これにより、削除、紛失、離散などにより、記録されているはずの画像ファイルが使用できない場合においても、使用できない画像ファイルをその他の画像ファイルから自動的に復元することができる。 Thus, even when an image file that should have been recorded cannot be used due to deletion, loss, discreteness, etc., the unusable image file can be automatically restored from other image files.
また、多視点画像の一部の視点の画像が使用できなくなった場合においても、その画像を復元することができるため、多視点画像が表示できなくなるという不具合を防止することができる。 In addition, even when some viewpoint images of the multi-viewpoint image cannot be used, the image can be restored, so that a problem that the multi-viewpoint image cannot be displayed can be prevented.
［画像ファイルの関連画像情報の修復］
編集モードにおいて画像を編集する場合に、関連画像情報が使用できないかどうかを判断し、使用できない場合には当該関連画像情報を修復する処理について、図１０を用いて説明する。以下の処理は、メインＣＰＵ１０によって行われる。
[Repair related image information of image file]
A process for determining whether or not the related image information can be used when editing the image in the edit mode and repairing the related image information when it cannot be used will be described with reference to FIG. The following processing is performed by the main CPU 10.
編集したい画像が主画像として格納されている画像ファイルを取得し（ステップＳ１）、当該画像ファイルの付属情報を読み込む（ステップＳ２）。 An image file in which an image to be edited is stored as a main image is acquired (step S1), and attached information of the image file is read (step S2).
付属情報に記載された通りの関連画像情報が画像ファイルに格納されているかどうかを判断し（ステップＳ１３）、付属情報に記載された通りの関連画像情報が画像ファイルに格納されていない場合（ステップＳ１３でＮＯ）には、その他付属情報を格納する領域Ｂ２７に関連画像修復フラグをセットし（ステップＳ１４）、主画像の画像データを編集するステップ（ステップＳ１５）へ進む。付属情報に記載された通りの関連画像情報が画像ファイルに格納されている場合（ステップＳ１３でＹＥＳ）には、主画像の画像データを編集するステップ（ステップＳ１５）へ進む。 It is determined whether or not the related image information as described in the attached information is stored in the image file (step S13). When the related image information as described in the attached information is not stored in the image file (step S13) In NO in S13, the related image restoration flag is set in the area B27 for storing other attached information (step S14), and the process proceeds to the step of editing the image data of the main image (step S15). If the related image information as described in the attached information is stored in the image file (YES in step S13), the process proceeds to the step of editing the image data of the main image (step S15).
主画像の画像データの編集（ステップＳ１５）が終了したら、当該画像ファイルの関連画像情報として持つべき視点画像（関連視点画像）が主画像又は関連画像情報として格納されている画像ファイルを取得する（ステップＳ１６）。 When the editing of the image data of the main image (step S15) is completed, an image file in which a viewpoint image (related viewpoint image) to be held as related image information of the image file is stored as the main image or related image information is acquired ( Step S16).
ステップＳ１６で取得された画像ファイルの主画像の画像データ及び関連画像情報の修復が必要かどうかを判断する（ステップＳ１７）。修復の要否は、付属情報に記載された主画像及び関連画像情報の情報と、実際に画像データ格納領域及び関連画像情報格納領域に格納された画像とを比較することによって行われる。ステップＳ１６で取得された画像ファイルの修復が必要ない場合（ステップＳ１７でＮＯ）の場合には、ステップＳ１４において関連画像修復フラグがセットされたかどうかを判断し（ステップＳ１８）、関連画像修復フラグがセットされている場合（ステップＳ１８でＹＥＳ）には、主画像の編集を行った画像ファイルの関連画像情報を修復し（ステップＳ１９）、当該画像ファイルを修復前と同じフォルダ内に書き込む、すなわち上書き処理を行う（ステップＳ２０）。関連画像修復フラグがセットされていない場合（ステップＳ１８でＮＯ）には、当該画像ファイルの書き込み処理を行う（ステップＳ２０）。 It is determined whether or not the image data of the main image and the related image information of the image file acquired in step S16 need to be restored (step S17). The necessity of restoration is determined by comparing the information of the main image and related image information described in the attached information with the images actually stored in the image data storage area and the related image information storage area. If the image file acquired in step S16 does not need to be repaired (NO in step S17), it is determined whether the related image repair flag is set in step S14 (step S18), and the related image repair flag is set. If it is set (YES in step S18), the related image information of the image file whose main image has been edited is repaired (step S19), and the image file is written in the same folder as before the repair, that is, overwritten. Processing is performed (step S20). If the related image restoration flag is not set (NO in step S18), the image file is written (step S20).
ステップＳ１６で取得された画像ファイルの主画像の画像データ及び関連画像情報の修復が必要な場合、すなわち付属情報に記載された主画像及び関連画像情報の情報と、実際に画像データ格納領域及び関連画像情報格納領域に格納された画像と同じでない場合や、主画像の画像データ又は願練画像情報が使用できない場合など（ステップＳ１７でＹＥＳ）には、視点画像の修復（ステップＳ２１）及び関連画像情報の修復（ステップＳ２２）を行い、主画像の画像データや関連画像情報が修復された画像ファイルを修復前と同じフォルダ内に書き込む、すなわち上書きを行い（ステップＳ２３）、その後編集が行われた画像ファイルの関連画像情報修復処理（ステップＳ１８〜Ｓ２０）を行う。なお、視点画像の修復（ステップＳ２１）及び関連画像情報の修復（ステップＳ２２）は、ステップＳ１２、Ｓ１６及びＳ１８〜Ｓ２０とほぼ同様の流れで処理を行なえばよいため、説明を省略する。 When it is necessary to restore the image data and related image information of the main image of the image file acquired in step S16, that is, the information of the main image and related image information described in the attached information, the actual image data storage area and the related image information When the image is not the same as the image stored in the image information storage area, or when the image data of the main image or the desired image information cannot be used (YES in step S17), the restoration of the viewpoint image (step S21) and the related image The information is restored (step S22), and the image file in which the image data of the main image and the related image information are restored is written in the same folder as before the restoration, that is, overwritten (step S23) and then edited. The related image information restoration process (steps S18 to S20) of the image file is performed. Note that the viewpoint image restoration (step S21) and the related image information restoration (step S22) may be performed in substantially the same flow as steps S12, S16, and S18 to S20, and thus description thereof is omitted.
このように、編集対象となる画像を主画像とする画像ファイルの関連画像情報に問題がないかどうかを判断し、関連画像情報に問題があると判断された場合には、当該画像ファイルの付属情報及び当該画像ファイル以外の主画像の画像データ又は関連画像情報に基づいて、問題がある関連画像情報を修復することで、関連画像情報から主画像が修復可能な状態を常に保つことができる。これにより、多視点画像が表示できなくなるという不具合を防止することができる。 In this way, it is determined whether or not there is a problem with the related image information of the image file whose main image is the image to be edited, and if it is determined that there is a problem with the related image information, the attached image file is attached. By repairing the related image information having a problem based on the information and the image data of the main image other than the image file or the related image information, it is possible to always maintain a state in which the main image can be repaired from the related image information. Thereby, the malfunction that a multi-viewpoint image cannot be displayed can be prevented.
また、多視点画像を構成する画像の一部が使用できなくなった場合においても、使用できなくなった画像の復元が可能な状態を維持しながら画像データの編集を行うことができる。 Further, even when some of the images constituting the multi-viewpoint image cannot be used, it is possible to edit the image data while maintaining a state where the unusable image can be restored.
＜他の実施の形態＞
また、本実施の形態では、複眼デジタルカメラ１を用いて画像ファイルの復元処理や、関連画像情報修復処理を行ったが、画像の記録、編集等が可能なパーソナルコンピュータ（ＰＣ）等の画像処理装置を用いてもよい。以下、図１１を用いて画像記録装置１００について説明する。
<Other embodiments>
In the present embodiment, image file restoration processing and related image information restoration processing are performed using the compound-eye
中央処理装置（ＣＰＵ）１０２は、バス１０４を介して画像記録装置１００内の各ブロックに接続されており、各ブロックの動作を制御する。また、ＣＰＵ１０２は、複眼デジタルカメラ１又はメモリカード３８から画像ファイルを読み込み、先に述べたような画像ファイルの復元処理や、関連画像情報修復処理などを行う。
A central processing unit (CPU) 102 is connected to each block in the
主メモリ１０６は、制御プログラムが格納される記憶領域や、プログラム実行時の作業領域を含んでいる。
The
ハードディスク装置１０８には、画像記録装置１００のオペレーティングシステム（ＯＳ）や、各種のアプリケーションソフト、撮影装置１又はメモリカード３８から読み込まれた記録用画像データ（基本ファイルＦ１０及び拡張画像ファイルＦ１００）等が格納される。
The
ＣＤ−ＲＯＭ装置１１０は、図示しないＣＤ−ＲＯＭからのデータの読み込みを行う。
The CD-
カードインターフェース部（カードＩ／Ｆ）１１２は、メモリカード３８から画像データを読み取る。
A card interface unit (card I / F) 112 reads image data from the
表示メモリ１１６は、表示用データを一時記憶する。
The
モニタ１１８は、例えば、ＣＲＴ（Cathode Ray Tube）モニタや液晶モニタにより構成され、この表示メモリ１１６から出力される画像データ、文字データ等に基づいて画像や文字等を表示する。
The
キーボード１２０及びマウス１２２は、操作者からの操作入力を受け付けて、操作入力に応じた信号をＣＰＵ１０２に入力する。なお、ポインティングデバイスとしては、マウス１２２のほか、タッチパネルやタッチパッド等を用いることができる。
The
マウスコントローラ１２４は、マウス１２２の状態を検出してモニタ１１８上のマウスポインタの位置や、マウス１２２の状態等の信号をＣＰＵ１０２に出力する。
The
オーディオ入出力回路１２６には、マイク１２８及びスピーカ１３０が接続され、各種の音声信号が入力されるとともに、キーボード１２０等からの操作入力に応じて各種動作音が再生出力される。通信インターフェイス部（通信Ｉ／Ｆ）１３２は、ネットワークＮＷとの通信を行う。カメラ接続インターフェイス部（カメラ接続Ｉ／Ｆ）１３４は、撮影装置（電子カメラ、デジタルカメラ）１との間でデータの送受信を行う。
A
また、本実施の形態では、画像ファイル生成手段５３において画像ファイルの作成を行い、メインＣＰＵ１０において画像ファイルの復元処理や関連画像情報修復処理などを行う複眼デジタルカメラ１という装置について説明したが、装置に限らず、例えば、撮像装置、ＰＣ、携帯情報端末のような装置に適用するプログラムとして提供してもよい。
In the present embodiment, an image file is created by the image
１：複眼デジタルカメラ、２ａ：第１撮像系、２ｂ：第２撮像系、６ａ、６ｂ：画像表示ＬＣＤ、１０：メインＣＰＵ、３８：メモリカード、５０：２Ｄ／３Ｄモード切替フラグ設定手段、５１：基線長／輻輳角記憶手段、５３：画像ファイル生成手段 1: compound eye digital camera, 2a: first imaging system, 2b: second imaging system, 6a, 6b: image display LCD, 10: main CPU, 38: memory card, 50: 2D / 3D mode switching flag setting means, 51 : Baseline length / convergence angle storage means, 53: Image file generation means
Claims (10)
前記複数枚の画像に基づいて前記複数枚の画像と同数の画像ファイルを作成する画像ファイル作成手段と、
前記画像ファイル作成手段によって作成された複数の画像ファイルを記録媒体に記録する記録手段と、を備え、
前記画像ファイル作成手段は、
前記複数の画像ファイルのうちのいずれか１つの画像ファイルが欠落しても該画像ファイルを復活させるための複数の関連画像情報を、前記複数枚の画像に基づいて生成する関連画像情報生成手段を有し、
前記複数の画像ファイルのうちの任意の１つの画像ファイルを作成するときに、前記複数枚の画像のうちの任意の１つの画像と、前記関連画像情報生成手段によって生成された関連画像情報であって、前記任意の１つの画像以外の画像を復活させるための関連画像情報とが記録された画像ファイルを作成する、
ことを特徴とする画像記録装置。 Image acquisition means for acquiring a plurality of images used simultaneously during reproduction of a predetermined image;
Image file creation means for creating the same number of image files as the plurality of images based on the plurality of images;
Recording means for recording a plurality of image files created by the image file creating means on a recording medium,
The image file creating means
Related image information generating means for generating, based on the plurality of images, a plurality of related image information for reviving the image file even if any one of the plurality of image files is lost. Have
When creating any one image file among the plurality of image files, and any one image among the plurality of images, there Related image information generated by the relevant image information generating means Creating an image file in which related image information for restoring an image other than the one arbitrary image is recorded;
An image recording apparatus.
前記複数枚の画像の関係を特定するための付属情報を生成する付属情報生成手段を更に有し、
前記複数の画像ファイルのうちの任意の１つの画像ファイルを作成するときに、前記複数枚の画像のうちの任意の１つの画像と、前記関連画像情報生成手段によって生成された関連画像情報であって、前記任意の１つの画像以外の画像を復活させるための関連画像情報と、前記付属情報生成手段によって生成された前記任意の１つの画像と前記関連画像情報に対応する前記任意の１つの画像以外の画像との関係と特定するための付属情報とが記録された画像ファイルを作成する、
ことを特徴とする請求項１又は２に記載の画像記録装置。 The image file creating means
Further comprising auxiliary information generation means for generating auxiliary information for specifying a relationship between the plurality of images,
When creating any one image file among the plurality of image files, and any one image among the plurality of images, there Related image information generated by the relevant image information generating means Related image information for reviving an image other than the arbitrary one image, the arbitrary one image generated by the auxiliary information generation means, and the arbitrary one image corresponding to the related image information Create an image file that records the relationship with other images and the attached information for identification,
The image recording apparatus according to claim 1, wherein:
前記複数枚の画像に基づいて、前記判断手段により修復が必要と判断された関連画像情報を修復する修復手段と、 Based on the plurality of images, a repair unit that repairs related image information determined to be repaired by the determination unit;
を備えたことを特徴とする請求項１から７のいずれかに記載の画像記録装置。 The image recording apparatus according to claim 1, further comprising:
編集対象である画像を任意の１つの画像とする画像ファイルの任意の１つの画像を編集する第１の編集手段と、 A first editing means for editing any one image of an image file in which the image to be edited is any one image;
前記編集対象である画像に基づいて作成された関連画像情報に対して、前記第１の編集手段により行われた編集と同じ編集を行う第２の編集手段と、 A second editing unit that performs the same editing as the editing performed by the first editing unit on the related image information created based on the image to be edited;
を備えたことを特徴とする画像編集装置。 An image editing apparatus comprising:
（ｂ）前記複数枚の画像のうちの任意の１つの画像を選択するステップと、
（ｃ）前記選択された任意の１つの画像以外の画像を復活させるための関連画像情報を作成するステップと、
（ｄ）前記選択された任意の１枚の画像と、前記作成された関連画像情報とが記録された画像ファイルを作成するステップと、
を含み、
前記複数枚の画像に基づいて前記複数枚の画像と同数の画像ファイルを作成するように、かつ前記複数の画像ファイルのうちのいずれか１つの画像ファイルが欠落しても該画像ファイルが復活可能なように、前記ステップ（ｂ）〜（ｄ）を繰り返して複数の画像ファイルを作成し、該複数の画像ファイルを記録媒体に記録することを特徴とする画像記録方法。 (A) obtaining a plurality of images used simultaneously during reproduction of a predetermined image;
(B) selecting any one image among the plurality of images,
(C) creating related image information for restoring an image other than the selected one arbitrary image;
(D) creating an image file in which the selected arbitrary one image and the created related image information are recorded;
Including
The same number of image files as the plurality of images are created based on the plurality of images, and the image file can be restored even if any one of the plurality of image files is lost As described above, an image recording method characterized by repeating the steps (b) to (d) to create a plurality of image files and recording the plurality of image files on a recording medium.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007247120A JP4833947B2 (en) | 2007-09-25 | 2007-09-25 | Image recording apparatus, image editing apparatus, and image recording method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2007247120A JP4833947B2 (en) | 2007-09-25 | 2007-09-25 | Image recording apparatus, image editing apparatus, and image recording method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2009081493A JP2009081493A (en) | 2009-04-16 |
| JP4833947B2 true JP4833947B2 (en) | 2011-12-07 |
Family
ID=40655953
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2007247120A Expired - Fee Related JP4833947B2 (en) | 2007-09-25 | 2007-09-25 | Image recording apparatus, image editing apparatus, and image recording method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4833947B2 (en) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5322817B2 (en) | 2009-07-17 | 2013-10-23 | 富士フイルム株式会社 | 3D image pickup apparatus and 3D image display method |
| JP5804055B2 (en) | 2011-05-30 | 2015-11-04 | 株式会社ニコン | Image processing apparatus, image processing method, and program |
| JP4887461B2 (en) * | 2011-07-27 | 2012-02-29 | 富士フイルム株式会社 | 3D image pickup apparatus and 3D image display method |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3081675B2 (en) * | 1991-07-24 | 2000-08-28 | オリンパス光学工業株式会社 | Image recording device and image reproducing device |
| JP4175003B2 (en) * | 2002-03-11 | 2008-11-05 | 株式会社ニコン | Electronic camera |
| JP2004363758A (en) * | 2003-06-03 | 2004-12-24 | Konica Minolta Photo Imaging Inc | Image processing method, imaging apparatus, image processing apparatus, and image recording apparatus |
| JP4347724B2 (en) * | 2004-03-05 | 2009-10-21 | 富士フイルム株式会社 | Image file generating apparatus and method, and image file reproducing apparatus and method |
| US20070283234A1 (en) * | 2004-05-20 | 2007-12-06 | Po-Chieh Hung | Image Data Management and Management Program |
| JP4668602B2 (en) * | 2004-12-24 | 2011-04-13 | 富士フイルム株式会社 | Stereoscopic image generation apparatus and method, and program |
-
2007
- 2007-09-25 JP JP2007247120A patent/JP4833947B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2009081493A (en) | 2009-04-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4720785B2 (en) | Imaging apparatus, image reproducing apparatus, imaging method, and program | |
| JP5096048B2 (en) | Imaging apparatus, stereoscopic image reproduction apparatus, and stereoscopic image reproduction program | |
| JP4662071B2 (en) | Image playback method | |
| JP4914278B2 (en) | Image processing apparatus, method, and program | |
| JP5101101B2 (en) | Image recording apparatus and image recording method | |
| JP4809294B2 (en) | Image recording apparatus and image recording method | |
| US10587860B2 (en) | Imaging apparatus and method for controlling same | |
| JP2008294530A (en) | Imaging apparatus, image reproducing device, imaging method, image reproducing method, and program | |
| JP2011075675A (en) | Compound-eye imaging apparatus | |
| JP4671053B2 (en) | Image recording apparatus and image recording method | |
| JP4748398B2 (en) | Imaging apparatus, imaging method, and program | |
| JP4833947B2 (en) | Image recording apparatus, image editing apparatus, and image recording method | |
| JP2008310187A (en) | Image processing device and image processing method | |
| JP2008311943A (en) | Method and device for recording image | |
| JP4809295B2 (en) | Image recording apparatus and image recording method | |
| JP5144782B2 (en) | Imaging apparatus, image reproducing apparatus, imaging method, and program | |
| JP4874923B2 (en) | Image recording apparatus and image recording method | |
| JP2011082757A (en) | Display mode determination device and method, and imaging device and method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100222 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110526 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110627 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110816 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110831 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110922 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140930 Year of fee payment: 3 |
|
| LAPS | Cancellation because of no payment of annual fees |