JP4415450B2

JP4415450B2 - Stereo image data generation apparatus and stereo image data generation method

Info

Publication number: JP4415450B2
Application number: JP2000141028A
Authority: JP
Inventors: 誠次郎富田
Original assignee: Sony Corp
Current assignee: Sony Corp
Priority date: 2000-05-12
Filing date: 2000-05-12
Publication date: 2010-02-17
Anticipated expiration: 2020-05-12
Also published as: JP2001325618A

Description

【０００１】
【発明の属する技術分野】
本発明は、表示手段に右眼用画像と左眼用画像を視差を有するように表示される画像データが記録された立体画像データ生成装置及び立体画像データ生成方法に関する。
【０００２】
【従来の技術】
従来、２次元の画像を立体的に表示する立体画像表示システムは、右眼用と左眼用となる２台のカメラを人間の眼幅分（約６５ｍｍ）離間して三脚等に固定してなる撮像装置と、上記２台のカメラがそれぞれ撮像した画像データが供給され、これらの画像データを視差を有するように交互に画像を表示する画像表示装置と、画像表示装置に表示される画像に合わせて片眼ずつ見えなくするシャッタ眼鏡とから構成されている。
【０００３】
このような立体画像表示システムでは、撮像装置を構成する２台のカメラを同期させて駆動される。そして、画像表示装置は、２台のカメラで撮像された２つの画像データを交互に表示する。このとき、画像表示装置には、右眼用の画像データと左眼用画像データとが視差を有するように交互に表示される。また、この画像表示装置には、シャッタ眼鏡が接続されている。シャッタ眼鏡は、画像表示装置に右眼用の画像が表示されているとき、右眼用レンズを透視状態にし、左眼用レンズを遮光状態にする。また、シャッタ眼鏡は、画像表示装置に左眼用の画像が表示されているとき、左眼用レンズを透視状態にし、右眼用レンズを遮光状態にする。このように、画像表示システムでは、画像表示装置に表示される画像とシャッタ眼鏡の左右一対のレンズのオンオフを同期させることで、利用者が立体視できるようにしている。
【０００４】
【発明が解決しようとする課題】
ところで、この立体画像表示システムにおいて、２台のカメラで撮影した右眼用画像データと左眼用画像データを保存する方法としては、右眼用画像データの水平走査線のデータと左眼用画像データの水平走査線のデータとが交互になるように保存する方法がある。
【０００５】
しかしながら、このような方法は、既に右眼用画像データと左眼用画像データとが合成してあることから、画像を拡大若しくは縮小するなどの編集を行うことができなかった。
【０００６】
そこで、本発明は、立体表示用の画像を再編集することができるようにデータを記録した立体画像データ生成装置及び立体画像データ生成方法を提供することを目的とする。
【０００７】
【課題を解決するための手段】
本発明に係る立体画像データ生成装置は、上述した課題を解決すべく、１つの撮像素子の略右半分に右眼用画像が取り込まれ、略左半分に左眼用画像が取り込まれて生成された、境界部を挟んで該右眼用画像と該左眼用画像とが並んだ１つの画像データファイルが入力される入力部と、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルを表示する表示部と、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルの上記境界部に分割ラインを指示するとともに、上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を略矩形をなす一の切取線で指示する指示手段と、上記指示手段の指示位置を操作する位置入力手段と、上記指示手段で指示された領域に対応した上記右眼用画像、上記左眼用画像の何れか他方の画像の領域を略矩形をなす他の切取線で表示するように制御し、上記右眼用画像の上記切取線で切り取って形成された右眼用画像データのファイルと、上記左眼用画像の上記切取線で切り取って形成された左眼用画像データのファイルと、上記右眼用画像データと上記左眼用画像データとを上記表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを記録媒体のフォルダ内に保存するように制御する制御装置とを備える。上記制御装置は、上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を上記一の切取線で指示したとき、上記分割ラインと該一方の画像の一の切取線の分割ライン側の線との間隔が、上記他方の画像の分割ラインと反対側の側縁と上記他の切取線の該側縁側の線との間隔と等しくなるように、該他の切取線を表示するように制御する。
【０００８】
また、本発明に係る立体画像データ生成方法は、上述した課題を解決すべく、１つの撮像素子の略右半分に右眼用画像が取り込まれ、略左半分に左眼用画像が取り込まれて生成された、境界部を挟んで該右眼用画像と該左眼用画像とが並んだ１つの画像データファイルを入力部に入力するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルを表示部に表示するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルの上記境界部に分割ラインを指示手段が指示するステップと、上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を略矩形をなす一の切取線で指示するステップと、上記指示手段で指示された領域に対応した上記右眼用画像、上記左眼用画像の何れか他方の画像の領域を略矩形をなす他の切取線で表示するように制御するステップと、上記右眼用画像の上記切取線で切り取って形成された右眼用画像データのファイルと、上記左眼用画像の上記切取線で切り取って形成された左眼用画像データのファイルと、上記右眼用画像データと上記左眼用画像データとを上記表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを記録媒体のフォルダ内に保存するように制御するステップとを有する。上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を上記一の切取線で指示したとき、上記分割ラインと該一方の画像の一の切取線の分割ライン側の線との間隔が、上記他方の画像の分割ラインと反対側の側縁と上記他の切取線の該側縁側の線との間隔と等しくなるように、該他の切取線を表示するように制御する。
【０００９】
更には、本発明に係る立体画像データ生成装置は、上述した課題を解決すべく、１つの撮像素子の略右半分に右眼用画像が取り込まれ、略左半分に左眼用画像が取り込まれて生成された、境界部を挟んで該右眼用画像と該左眼用画像とが並んだ１つの画像データファイルが入力される入力部と、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルを表示する表示部と、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルの上記境界部に分割ラインを指示するとともに、上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を略矩形をなす一の切取線で指示する指示手段と、上記指示手段の指示位置を操作する位置入力手段と、上記指示手段で指示された領域に対応した上記右眼用画像、上記左眼用画像の何れか他方の画像の領域を略矩形をなす他の切取線で表示するように制御し、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルと、該１つの画像データファイルから上記指示手段において指示した上記一の切取線と上記他の切取線の位置を示す切取情報と該切取情報に従って切り取られた上記右眼用画像と上記左眼用画像とを上記表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを記録媒体のフォルダ内に保存するように制御する制御装置とを備える。上記制御装置は、上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を上記一の切取線で指示したとき、上記分割ラインと該一方の画像の一の切取線の分割ライン側の線との間隔が、上記他方の画像の分割ラインと反対側の側縁と上記他の切取線の該側縁側の線との間隔と等しくなるように、該他の切取線を表示するように制御する。
【００１０】
更にまた、本発明に係る立体画像データ生成方法は、上述した課題を解決すべく、１つの撮像素子の略右半分に右眼用画像が取り込まれ、略左半分に左眼用画像が取り込まれて生成された、境界部を挟んで該右眼用画像と該左眼用画像とが並んだ１つの画像データファイルを入力部に入力するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルを表示部に表示するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルの上記境界部に分割ラインを指示手段が指示するステップと、上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を略矩形をなす一の切取線で指示するステップと、上記指示手段で指示された領域に対応した上記右眼用画像、上記左眼用画像の何れか他方の画像の領域を略矩形をなす他の切取線で表示するように制御するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルと、該１つの画像データファイルから上記指示手段において指示した上記一の切取線と上記他の切取線の位置を示す切取情報と該切取情報に従って切り取られた上記右眼用画像と上記左眼用画像とを上記表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを記録媒体のフォルダ内に保存するように制御するステップとを有する。上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を上記一の切取線で指示したとき、上記分割ラインと該一方の画像の一の切取線の分割ライン側の線との間隔が、上記他方の画像の分割ラインと反対側の側縁と上記他の切取線の該側縁側の線との間隔と等しくなるように、該他の切取線を表示するように制御する。
【００１１】
更にまた、本発明に係る立体画像データ生成装置は、上述した課題を解決すべく、１つの撮像素子の略右半分に右眼用画像が取り込まれ、略左半分に左眼用画像が取り込まれて生成された、境界部を挟んで該右眼用画像と該左眼用画像とが並んだ１つの画像データファイルが入力される入力部と、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルを表示する表示部と、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルの上記境界部に分割ラインを指示するとともに、上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を略矩形をなす一の切取線で指示する指示手段と、上記指示手段の指示位置を操作する位置入力手段と、上記指示手段で指示された領域に対応した上記右眼用画像、上記左眼用画像の何れか他方の画像の領域を略矩形をなす他の切取線で表示するように制御し、上記右眼用画像の上記切取線で切り取って形成された右眼用画像データのファイルと、上記左眼用画像の上記切取線で切り取って形成された左眼用画像データのファイルと、上記右眼用画像データと上記左眼用画像データとを上記表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルと、上記右眼用画像データの水平走査線のデータと上記左眼用画像データの水平走査線のデータとが交互に記憶された合成画像データファイルとを記録媒体のフォルダ内に保存するように制御する制御装置とを備える。上記制御装置は、上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を上記一の切取線で指示したとき、上記分割ラインと該一方の画像の一の切取線の分割ライン側の線との間隔が、上記他方の画像の分割ラインと反対側の側縁と上記他の切取線の該側縁側の線との間隔と等しくなるように、該他の切取線を表示するように制御する。
【００１２】
更にまた、本発明に係る立体画像データ生成方法は、上述した課題を解決すべく、１つの撮像素子の略右半分に右眼用画像が取り込まれ、略左半分に左眼用画像が取り込まれて生成された、境界部を挟んで該右眼用画像と該左眼用画像とが並んだ１つの画像データファイルを入力部に入力するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルを表示部に表示するステップと、上記入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルの上記境界部に分割ラインを指示手段が指示するステップと、上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を略矩形をなす一の切取線で指示するステップと、上記指示手段で指示された領域に対応した上記右眼用画像、上記左眼用画像の何れか他方の画像の領域を略矩形をなす他の切取線で表示するように制御するステップと、上記右眼用画像の上記切取線で切り取って形成された右眼用画像データのファイルと、上記左眼用画像の上記切取線で切り取って形成された左眼用画像データのファイルと、上記右眼用画像データと上記左眼用画像データとを上記表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルと、上記右眼用画像データの水平走査線のデータと上記左眼用画像データの水平走査線のデータとが交互に記憶された合成画像データファイルとを記録媒体のフォルダ内に保存するように制御するステップとを有する。上記指示手段が上記表示部に表示された上記右眼用画像、上記左眼用画像の何れか一方の画像の所定領域を上記一の切取線で指示したとき、上記分割ラインと該一方の画像の一の切取線の分割ライン側の線との間隔が、上記他方の画像の分割ラインと反対側の側縁と上記他の切取線の該側縁側の線との間隔と等しくなるように、該他の切取線を表示するように制御する。
【００１３】
【発明の実施の形態】
以下、本発明が適用された立体画像表示システムについて、図面を参照して説明する。
【００１４】
図１に示すように、本発明が適用された立体画像表示システム１は、映像を撮影するためのディジタルカメラ２と、このディジタルカメラ２で生成された画像データを取り込み、この画像データのデータ処理を行い、ディスプレイ５５に視差のある画像を表示する制御装置３と、ディスプレイ５５に表示される画像に合わせて片眼ずつ見えなくするシャッタ眼鏡４とから構成されている。また、ディジタルカメラ２には、撮像レンズ、フォーカスレンズ等のレンズが内蔵された鏡筒に、右眼用の画像と左眼用の画像を取り込むためのアダプタ５が取り付けられている。これにより、このディジタルカメラ２に用いられている１つのＣＣＤ素子には、右眼用の画像と左眼用の画像が取り込まれる。そして、制御装置３には、ディジタルカメラ２で生成された右眼用の画像と左眼用の画像とからなる画像データが供給される。制御装置３は、文字入力手段であるキーボード７ａ、ポインタ等の指示手段の指示位置を操作する位置入力手段となるマウス７ｂ等からなる入力装置７からの入力信号に基づいて、例えば右眼用の画像と左眼用の画像の切り取りを行う。そして、この制御装置３は、ＣＲＴ（Cathode-Ray Tube）や液晶表示パネル等のディスプレイ５５に切り取られた右眼用切取画像と左眼用切取画像を交互に表示する。また、制御装置３とディスプレイ５５との間には、シャッタ眼鏡４のオンオフを制御する眼鏡制御装置６が設けられている。シャッタ眼鏡４は、右眼用レンズ部４ａと左眼用レンズ部４ａとを有し、これら右眼用レンズ部４ａと左眼用レンズ部４ｂとは、液晶シャッタにより構成されている。このようなシャッタ眼鏡４は、この眼鏡制御装置６に接続されている。シャッタ眼鏡４は、眼鏡制御装置６の制御によりディスプレイ５５に交互に表示される右眼用の画像と左眼用の画像に同期させてレンズ部４ａ，４ｂを構成する液晶シャッタを開閉させる。これにより、利用者は、ディスプレイ５５に交互に表示される右眼用切取画像と左眼用切取画像に合わせてシャッタ眼鏡４のレンズ部４ａ，４ｂの開閉を行うことで、ディスプレイ５５に表示される画像を立体的に見ることができる。
【００１５】
以下、以上のような立体画像表示システム１を構成するディジタルカメラ２と、制御装置３と、アダプタ５と、眼鏡制御装置６について、図面を参照して説明する。
【００１６】
ディジタルカメラ２は、通常のディジタルカメラと同様な構成を有しており、図２に示すように、撮像レンズ１１より入射された光を光電変換し、撮像信号を生成するＣＣＤ（Charge Coupled Device）素子１２と、ＣＣＤ素子１２からの撮像信号の雑音を除去するＣＤＳ／ＡＧＣ（Correlated Double Sampling / Automatic Gain Control）１３と、ＣＤＳ／ＡＧＣ１３からの撮像信号をディジタル信号に変換するＡ／Ｄコンバータ１４と、色コーディングに対応した信号処理をする信号処理部１５とを備える。
【００１７】
イメージセンサとなるＣＣＤ素子１２は、画素が数百万設けられた２次元カラーイメージセンサであって、撮像光を原色（Ｒ、Ｇ、Ｂ）或いは補色（Ｙｅ、Ｃｙ、Ｍｇ）の色コーディングフィルタにより色コーディングされた撮像信号に変換して、ＣＤＳ／ＡＧＣ１３に出力する。
【００１８】
ＣＤＳ／ＡＧＣ１３は、ＣＣＤ素子１２から供給された撮像信号の相関２重サンプルホールドを行うとともに、リセット雑音の除去やゲインコントロールをしてＡ／Ｄコンバータ１４に出力する。
【００１９】
Ａ／Ｄコンバータ１４は、ＣＤＳ／ＡＧＣ１３からの撮像信号をディジタル方式の画像データに変換する。そして、Ａ／Ｄコンバータ１４は、ディジタル変換された画像データを信号処理部１５に出力する。
【００２０】
信号処理部１５は、Ａ／Ｄコンバータ１４からの画像データに対してＣＣＤ素子１２の色コーディングフィルタによる色コーディングに対応したデコード処理等を行い画像データから輝度情報、色差情報等を生成する。
【００２１】
また、ディジタルカメラ２は、図２に示すように、信号処理部１５で処理が行われた画像データを圧縮する圧縮部１６と、圧縮部１６で圧縮された画像データを記憶するメモリ１７と、圧縮部１６で圧縮された画像データを制御装置３に送信するためのＵＳＢ（Universal Sirial Bus）用インターフェース１８と、フラッシュメモリ等を記憶媒体に用いるＩＣカード８に画像データを送信するためのＩＣカード用インターフェース１９と、全体を制御する制御部２０とを備える。
【００２２】
圧縮部１６は、信号処理部１５で信号処理された画像データを例えばＪＰＥＧ（Joint Photographic Experts Group）形式で圧縮する。そして、圧縮部１６は、ＪＰＥＧ形式で圧縮した画像データをメモリ１７に出力し、メモリ１７には、ＪＰＥＧ形式で圧縮した画像データが記憶される。
【００２３】
また、ＵＳＢ用インターフェース１８は、例えばメモリ１７に記憶されたＪＰＥＧ形式で圧縮した画像データを制御装置３に転送する。また、ＩＣカード用インターフェース１９は、外部記憶装置となるカード型のＩＣカード８に例えばメモリ１７に記憶されたＪＰＥＧ形式で圧縮した画像データを制御装置３に転送する。
【００２４】
制御部２０は、ディジタルカメラ２の全体を制御する。具体的に、制御部２０は、図示しない操作部からの操作信号に基づき、フォーカスレンズやズームレンズ等を駆動制御する。また、制御部２０は、ＪＰＥＧ形式に圧縮された画像データをメモリ１７に記憶させる。更には、制御部２０は、メモリ１７に圧縮された画像データを記憶させることなく、直接ＵＳＢ用インターフェース１８を介して制御装置３に転送し、また、ＩＣカード用インターフェース１９を介してＩＣカード８に記憶させる。
【００２５】
以上のようなディジタルカメラ２で映像を撮影し、このデータをメモリ１７に記録するとき、ディジタルカメラ２は、撮像レンズ１１より入射された光をＣＣＤ素子１２で光電変換し、生成された撮像信号をＣＤＳ／ＡＧＣ１３を介してＡ／Ｄコンバータ１４でディジタル変換して画像データを生成し、信号処理部１５で信号処理をし、圧縮部１６でＪＰＥＧ形式に画像データを圧縮し、メモリ１７に圧縮された画像データを記憶する。また、メモリ１７に記憶されているＪＰＥＧ形式の画像データをＩＣカード８に記録するとき、制御部２０は、操作部からの操作信号に応じて、ＩＣカード用インターフェース１９を介してディジタルカメラ２に装着されたＩＣカード８に記録し、また、ＵＳＢにより制御装置３に画像データを転送するとき、制御部２０は、操作部からの操作信号に応じて、ＵＳＢ用インターフェース１８を介して制御装置３に転送する。
【００２６】
ところで、図１に示すように、ディジタルカメラ２の鏡筒２ａには、右眼用の画像と左眼用の画像を取り込むためのアダプタ５が取り付けられている。このアダプタ５は、上記ディジタルカメラ２に用いられている１枚のＣＣＤ素子１２に略中央を境に右眼用の画像と左眼用の画像を取り込むためのものである。このアダプタ５は、図３及び図４に示すように、外筐３１の側壁となる左右両側の傾斜壁３２ａ，３２ｂの内面に、第１の平板ミラー３３ａ，３３ｂが設けられている。また、外筐３１の略中央には、略三角の仕切り壁３４が設けられている。この仕切り壁３４の一側面３４ｃは、外筐３１の前面に臨まされ、外筐３１とで外光を取り込むための右眼用開口部３５ａと左眼用開口部３５ｂを構成している。また、この一側面３４ｃと隣り合う２側面３４ａ，３４ｂは、外筐３１の傾斜壁３２ａ，３２ｂと略平行となるように設けられており、これら２側面３４ａ，３４ｂには、第１の平板ミラー３３ａ，３３ｂに略対向するように、第２の平板ミラー３６ａ，３６ｂが設けられている。更には、外筐３１の背面壁３７には、第１の平板ミラー３３ａ，３３ｂと第２の平板ミラー３６ａ，３６ｂに反射された外光をディジタルカメラ２の鏡筒２ａ内に取り込むための開口部３８が形成されている。
【００２７】
以上のように構成されるアダプタ５は、開口部３８をディジタルカメラ２の撮像レンズ１１に臨ませるようにして鏡筒２ａの先端側に取り付けられる。そして、右眼用開口部３５ａより取り込まれる外光Ｒと左眼用開口部３５ｂより取り込まれる外光Ｌは、第１の平板ミラー３３ａ，３３ｂに反射され、次いで第２の平板ミラー３６ａ，３６ｂに反射され、開口部３８に臨まされた撮像レンズ１１を介してディジタルカメラ２のＣＣＤ素子１２に取り込まれる。ここで、図４に示すように、ＣＣＤ素子１２には、図４に示すように、点３９ａ，３９ｂにおける画角をθとすると、画角が２θの画像が取り込まれる。また、点３９ａ，３９ｂの間隔Ｄは、視差を決定するものであるから、間隔Ｄは、人間の眼幅に合わせて６５ｍｍ〜７０ｍｍに設定されている。なお、この間隔Ｄは、個人差に合わせて調整できるようにしてもよい。したがって、ＣＣＤ素子１２には、眼幅分離れた右眼用の画像と左眼用の画像が左右に並んで取り込まれることになる。
【００２８】
ここで、図５は、ディジタルカメラ２にアダプタ５を取り付けた際、ＣＣＤ素子１２に取り込まれた画像であり、この画像４１は、手前に植木鉢の花を置き、背景を山として女性を撮影したものである。図５に示すように、画像４１は、境界部４２を境に、略右半分に右眼用画像４１ａが設けられ、略左半分に左眼用画像４１ｂが設けられている。右眼用画像４１ａと左眼用画像４１ｂとを比較すると、例えば右眼用画像４１ａの花４３ａや山４４ａは、左眼用画像４１ｂの花４３ｂや山４４ｂより図中やや左側にずれている。このように、右眼用画像４１ａと左眼用画像４１ｂとは、左右の視差の分、すなわち間隔Ｄ分ずれている。なお、境界部４２は、実際にはぼやけた白いラインに形成されている。
【００２９】
したがって、ディジタルカメラ２にアダプタ５を取り付けて撮影をした場合には、１つのＣＣＤ素子１２に、右眼用画像４１ａと左眼用画像４１ｂとからなる画像４１が取り込まれ、これを１単位とした画像データがメモリ１７やＩＣカード８に記憶され、また、ＵＳＢ用インターフェース１８を介して制御装置３に転送される。このようなアダプタ５を用いることにより、ディジタルカメラ２では、立体画像用画像４１を１つのファイルで構成することができ、管理を容易にすることができる。また、従来のカメラを２台用いる場合のように、各カメラの同期をとるためのタイミングジェネレータ等を設ける必要もなくなり、構成の簡素化を図ることができる。更に、アダプタ５を取り付けたディジタルカメラ２では、静止画を連続撮影し、動画とする場合にも、２台のカメラを用いることなく左右画像を同時に撮影することができる。更には、アダプタ５が取り付けられたディジタルカメラ２では、２台のカメラレンズの光軸を合わせる必要もないことから、ズームレンズを用いたズーム機能を使用することもできる。
【００３０】
次に、以上のようなアダプタ５が取り付けられたディジタルカメラ２で生成された画像データ、すなわち右眼用画像４１ａと左眼用画像４１ｂとからなる画像４１を編集し表示する制御装置３について、図６を参照して説明する。
【００３１】
この制御装置３は、通常のパーソナルコンピュータと略同様な構成を有しており、上述した画像４１の画像データやこの画像データを編集するためのアプリケーションプログラムや立体的に表示させるためのアプリケーションプログラム等が記録されているハードディスク（以下、ＨＤＤともいう。）５１と、ＨＤＤ５１に記録されているアプリケーションプログラム等を一旦読み込むランダムアクセスメモリ（Random-Access Memory，以下、ＲＡＭともいう。）５２と、上述したディジタルカメラ２とデータ伝送を行うためのＵＳＢ用インターフェース５３と、ＩＣカード８に記録されたデータを読み出すためのＩＣカード用インターフェース５４と、画像を表示するためのディスプレイ５５と、画像データをディスプレイ５５に表示させるためのビデオランダムアクセスメモリ（Video Random-Access Memory，以下、ＶＲＡＭともいう。）５６と、アプリケーションプログラムを実行させるためのコマンドを入力するためのキーボード５７ａやマウス５７ｂとからなる入力装置５７と、ＪＰＥＧ形式のデータを伸長するとともにデータをＪＰＥＧ形式に圧縮する圧縮／伸長部５８と、全体を制御する制御部となるマイクロプロセッサ（Micro Processor Unit，以下、ＭＰＵともいう。）５８とを備える。
【００３２】
ＨＤＤ５１は、オペレーティングシステム（Operating Systen，以下、ＯＳともいう。）や、右眼用画像４１ａと左眼用画像４１ｂとからなる画像４１を編集するための編集プログラムや、この編集プログラムで編集された画像を見るためのブラウザや、右眼用画像４１ａと左眼用画像４１ｂとからなる画像データ等が記録されている。
【００３３】
ＲＡＭ５２は、実行するアプリケーションプログラムや処理を行う画像データがＨＤＤ５１等から読み込まれる。例えば、ＨＤＤ５１より読み出された右眼用画像４１ａと左眼用画像とからなる画像データは、このＲＡＭ５２で単一の画像データよりディスプレイ５５に表示するための右眼用画像と左眼用画像を切り取る切取処理が行われる。
【００３４】
ＵＳＢ用インターフェース５３は、ＵＳＢによりディジタルカメラ２のＵＳＢ用インターフェース１８と接続されたとき、ディジタルカメラ２でＪＰＥＧ方式で圧縮された画像データを受信する。そして、ＵＳＢ用インターフェース５３で受信した画像データは、ＭＰＵ５９によりＨＤＤ５１に記憶される。
【００３５】
ＩＣカード用インターフェース５４は、ＩＣカード８が装置本体に設けられたＩＣカード８のドライブに装着されたとき、ＩＣカード８に記憶された例えばディジタルカメラ２で撮影された画像の画像データを読み出す。そして、ＵＳＢ用インターフェース５３で読み出された画像データは、ＭＰＵ５９によりＨＤＤ５１に記憶される。
【００３６】
ディスプレイ５５は、ＣＲＴや液晶表示パネルからなり、編集処理を行う前には、図５に示すような右眼用画像４１ａと左眼用画像４１ｂとが水平方向に並んで構成された画像４１を表示する。また、右眼用画像４１ａと左眼用画像４１ｂの切取処理の終わった右眼用切取画像データと左眼用切取画像データとを視差を有するように交互に表示する。なお、ディスプレイ５５は、プログレッシブ方式でもインターレース方式であってもよい。
【００３７】
ディスプレイ５５に画像を表示するためのＶＲＡＭ５６は、１フレーム分の切取画像データを記憶するのに必要な容量を有するメモリ部５６ａ，５６ｂを有する。例えば、メモリ部５６ａには、右眼用切取画像データが１フレーム分記憶され、メモリ５６ｂには、左眼用切取画像データが１フレーム分記憶される。そして、ＶＲＡＭ５６は、メモリ部５６ａに記憶された右眼用切取画像データとメモリ部５６ｂに記憶された左眼用切取画像データを交互にディスプレイ５５に出力する。
【００３８】
圧縮／伸長部５８は、例えばＩＣカード８に記録されたＪＰＥＧ形式に圧縮された画像データをＲＡＭ５２に読み出すときこの圧縮された画像データを伸長する。また、圧縮／伸長部５８は、編集された画像データを保存するとき、ＲＡＭ５６の画像データをＪＰＥＧ形式に圧縮してＨＤＤ５１やＩＣカード８に保存する。
【００３９】
ＭＰＵ５９は、装置全体を制御するものである。例えば、ＭＰＵ５９は、ＵＳＢ用インターフェース５３やＩＣカード用インターフェース５４で読み出した画像データをＨＤＤ５１に保存する。また、ＭＰＵ５９は、ＨＤＤ５１より右眼用画像４１ａと左眼用画像４１ｂとからなる画像４１を編集するための編集プログラムやこの編集プログラムで編集された画像を見るためのブラウザやこれらのプログラムで処理される画像データをＲＡＭ５２に読み出す。そして、ＭＰＵ５９は、読み出した単一の画像データよりディスプレイ５５に表示するための右眼用画像と左眼用画像を切り取る切取処理を行い、ＲＡＭ５２より処理を行った右眼用切取画像データをＶＲＡＭ５６のメモリ部５６ａに出力し、左眼用切取画像データをメモリ部５６ｂに出力する。
【００４０】
以上のような制御装置３は、右眼用切取画像と左眼用切取画像とからなる画像データをディスプレイ５５に表示するとき、次のように動作する。すなわち、ＭＰＵ５９は、ＨＤＤ５１等よりＪＰＥＧ形式に圧縮された右眼用画像と左眼用画像とからなる画像データを伸長した後、ＲＡＭ５２にこの画像データを読み出し、利用者が操作する入力装置７からのコマンドに基づき図５に示す右眼用画像４１ａと左眼用画像４１ｂの所定領域を切り出し、切り出した右眼用切取画像データをＶＲＡＭ５６を構成するメモリ部５６ａに出力し、左眼用切取画像データをメモリ部５６ｂに出力する。次いで、ＶＲＡＭ５６は、ディスプレイ５５にメモリ部５６ａより右眼用切取画像データを、メモリ部５６ｂより左眼用切取画像データを交互に出力する。ここで、各切取画像データは、走査線のすべてを順に描く方式、すなわちプログレッシブ方式のディスプレイ５５に出力される。ディスプレイ５５には、右眼用の切取画像と左眼用の切取画像が交互に写し出され、シャッタ眼鏡４をかけた利用者は、ディスプレイ５５に写し出された画像を立体的に見ることができる。
【００４１】
ところで、右眼用の画像と左眼用の画像とをプログレッシブ方式のディスプレイ５５に表示する場合、図１及び図６に示すように、１フレーム分の右眼用切取画像と左眼用切取画像をＶＲＡＭ５６のメモリ部５６ａ，５６ｂより読み出し交互に表示し、シャッタ眼鏡４では、この切り換えに同期させて右眼用レンズ部４ａと左眼用レンズ部４ａのシャッタを切り換える必要がある。このため、ディスプレイ５５とＶＲＡＭ５６との間には、シャッタ眼鏡４を制御する眼鏡制御装置６が取り付けられている。
【００４２】
この眼鏡制御装置６は、図７に示すように、ＶＲＡＭ５６のメモリ部５６ａ，５６ｂに記憶されている１フレーム分の右眼用切取画像データと左眼用切取画像データをディスプレイ５５に出力するとき、各画像データの垂直同期信号を検出する検出部６１と、一方が検出部６１に接続され、他方がシャッタ眼鏡４の右眼用レンズ部４ａの端子６２と左眼用レンズ部４ｂの端子６３に選択的に接続されるスイッチ６４とを備える。
【００４３】
図８（Ａ）に示すように、ＶＲＡＭ５６よりディスプレイ５５に右眼用切取画像データと左眼用切取画像データが交互に出力されているとき、検出部６１は、各切取画像データの垂直同期信号を検出する。例えば、検出部６１は、右眼用の切取画像データがＶＲＡＭ５６のメモリ部５６ａより出力されると、この切取画像データの垂直同期信号を検出する。右眼用切取画像データの垂直同期信号を検出すると、検出部６１は、図８（Ｂ）に示すように、次に表示される左眼用切取画像データを利用者が左眼で見ることができようにするため、シャッタ眼鏡４の左眼用レンズ部４ｂをオフとし、図８（Ｃ）に示すように、右眼用レンズ部４ａをオンとするようにスイッチ６４を切り換える。これにより、ディスプレイ５５に左眼用切取画像が表示されているとき、左眼用レンズ部４ｂが透視状態となり、右眼用レンズ部４ａが透視状態となる。
【００４４】
次いで、検出部６１は、現在表示されている左眼用切取画像データの垂直同期信号を検出すると、図８（Ｃ）に示すように、次に表示される右眼用切取画像データを利用者が右眼で見ることができようにするため、シャッタ眼鏡４の右眼用レンズ部４ａをオフとし、図８（Ｂ）に示すように、左眼用レンズ部４ｂをオンとするようにスイッチ６４を切り換える。これにより、ディスプレイ５５に右眼用の切取画像が表示されているとき、右眼用レンズ部４ａが透視状態となり、左眼用レンズ部４ｂが透視状態となる。以後、このように、右眼用切取画像と左眼用切取画像の切り換えのタイミングに合わせてシャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂのシャッタの切り換えを行うことで、利用者は、ディスプレイ５５に表示される画像を立体的に見ることができる。
【００４５】
インターレース方式のディスプレイ５５を用いる場合について説明すると、上述したＶＲＡＭ５６のメモリ５６ａには、右眼用切取画像データの水平走査線のデータが１ライン毎、例えば偶数番目のラインが間引かれた右眼用切取画像データが記録され、メモリ５６ｂには、左眼用切取画像データの水平走査線のデータが１ライン毎、例えば奇数番目のラインが間引かれた左眼用切取画像データが記録される。そして、メモリ５６ａからは、この右眼用の切取画像データを１フィールド分の画像データとしてディスプレイ５５に出力され、メモリ５６ｂからは、この左眼用の切取画像データを次の１フィールド分の画像データとして出力される。したがって、ディスプレイ５５には、図９（Ａ）に示すように、先ず、偶数番目のラインが間引かれた画像が表示され、次いで、奇数番目のラインが間引かれた画像が表示される。
【００４６】
このとき、眼鏡制御装置６は次のようにシャッタ眼鏡４を制御する。すなわち、図９（Ｂ）に示すように、最初のフィールド分の右眼用切取画像データがメモリ５６ａより出力されると、検出部６１は、このフィールドの最後に設けられた垂直同期信号を検出する。右眼用切取画像データの垂直同期信号を検出すると、検出部６１は、図９（Ｃ）に示すように、次に表示される左眼用切取画像データを利用者が左眼で見ることができようにするため、シャッタ眼鏡４の左眼用レンズ部４ｂをオフとし、図９（Ｄ）に示すように、右眼用レンズ部４ａをオンとするようにスイッチ６４を切り換える。これにより、ディスプレイ５５に左眼用の切取画像が表示されているとき、左眼用レンズ部４ｂが透視状態となり、右眼用レンズ部４ａが遮光状態となる。
【００４７】
次いで、検出部６１は、図９（Ｂ）に示すように、現在表示されている左眼用切取画像データの垂直同期信号を検出すると、図９（Ｄ）に示すように、次に表示される右眼用切取画像データを利用者が右眼で見ることができようにするため、シャッタ眼鏡４の右眼用レンズ部４ａをオフとし、図９（Ｃ）に示すように、左眼用レンズ部４ｂをオンとするようにスイッチ６４を切り換える。これにより、ディスプレイ５５に右眼用の切取画像が表示されているとき、右眼用レンズ部４ａが透視状態となり、左眼用レンズ部４ｂが透視状態となる。以後、このように、右眼用切取画像と左眼用切取画像の切り換えのタイミングに合わせてシャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂのシャッタの切り換えを行うことで、利用者は、ディスプレイ５５に表示される画像を立体的に見ることができる。
【００４８】
なお、プログレッシブ方式の場合であっても、上述したように、例えば偶数番目のラインが間引かれた右眼用切取画像データをメモリ部５６ａに記録し、奇数番目のラインが間引かれた左眼用切取画像データを記録するようにしてもよい。この場合、インターレース方式のように、ディスプレイ５５には、偶数番目のラインが間引かれた右眼用切取画像と奇数番目のラインが間引かれた左眼用切取画像が交互に表示される。また、水平ラインを間引いて右眼用切取画像データと左眼用切取画像データをＶＲＡＭ５６に出力する場合であっても、上述したようにディジタルカメラ２のＣＣＤ素子１２は、数百万画素を有するものが用いられることから、利用者に画質の劣化を感じさせることはない。
【００４９】
次に、上述したディジタルカメラ２にアダプタ５を取り付けて撮影した画像データの上記制御装置３を用いた処理、すなわち画像データの編集処理について図１０を参照して説明する。
【００５０】
先ず、ステップＳ１において、例えばディスプレイ５５に表示された編集プログラムを起動するためのアイコンをマウス５７ｂでクリックすると、ＭＰＵ５９は、ＨＤＤ５１より該編集プログラムをＲＡＭ５２に読み出し起動し、ステップＳ２に進む。
【００５１】
ステップＳ２において、ＭＰＵ５９は、キーボード５７ａやマウス５７ｂからなる入力装置５７からのコマンドに基づいて、編集する画像データのファイルを選択し、この選択されたファイルを開く。ここで、この画像データは、ＪＰＥＧ形式に圧縮されたファイルである。具体的に、ＭＰＵ５９は、ディジタルカメラ２と制御装置３とがＵＳＢで接続されているときにはディジタルカメラ２のメモリ１７より該当ファイルを圧縮／伸長部５８で伸長した後ＲＡＭ５２に読み出し、また、制御装置３のドライブにＩＣカード８が装着されているときにはこのＩＣカード８より該当ファイルを圧縮／伸長部５８で伸長しＲＡＭ５２に読み出し、ＨＤＤ５１に該当ファイルが記録されているときにはＨＤＤ５１よりこのファイルを圧縮／伸長部５８で伸長した後ＲＡＭ５２に読み出し、ステップＳ３に進む。
【００５２】
ステップＳ３において、ＭＰＵ５９は、ＲＡＭ５２に一旦記録されている読み出した画像データをＶＲＡＭ５６を介してプログレッシブ方式若しくはインターレース方式のディスプレイ５５に出力し、ディスプレイ５５に画像を表示させ、ステップＳ４に進む。このステップＳ３でディスプレイ５５には、上記図５に示した画像４１が表示される。すなわち、ディスプレイ５５には、水平方向に並んで右眼用画像４１ａと左眼用画像４１ｂが１つの画像として表示される。そして、右眼用画像４１ａと左眼用画像４１ｂとは、左右の視差の分ずれている。なお、右眼用画像４１ａと左眼用画像４１ｂの境界部４２は、ややぼやけた白いラインとして表示されている。
【００５３】
ステップＳ４において、ＭＰＵ５９は、図１１（Ａ）に示すように、画像４１を右眼用画像４１ａと左眼用画像４１に分割するための分割ライン７１をディスプレイ５５の垂直方向に表示する。そして、この分割ライン７１は、マウス５７ｂがクリックされることによってポインタ７２に保持され、利用者の目視で、画像４１の境界部４２と重なるように移動される。これによって、ＭＰＵ５９は、画像４１を右眼用画像４１ａと左眼用画像４１ｂに分割する。これによって、利用者は、右眼用画像４１ａと左眼用画像４１ｂとを容易に見分けることができる。
【００５４】
ステップＳ５において、ＭＰＵ５９は、図１１（Ｂ）に示すように、ディスプレイ５５に表示された分割ライン７１で分割された右眼用画像４１ａと左眼用画像４１ｂの垂直方向のセンターを見やすくするため、右眼用画像４１ａ用の垂直センターライン７３ａと左眼用画像４１ｂ用の垂直センターライン７３ｂを表示する。ここで、ＭＰＵ５９は、右眼用画像４１ａ用の垂直センターライン７３ａと左眼用画像４１ｂ用の垂直センターライン７３ｂを、分割ライン７１からの距離が等しくなるように表示する。そして、右眼用画像４１ａ用の垂直センターライン７３ａは、マウス５７ｂがクリックされることによってポインタ７２に保持され、利用者の目視で、利用者が所望する垂直方向のセンターに水平方向に移動される。これと同じくして、左眼用画像４１ｂ用の垂直センターライン７３ｂは、右眼用画像４１ａ用の垂直センターライン７３ａの移動量と同じ量だけ、同方向に自動的に移動される。かくして、ＭＰＵ５９は、利用者が右眼用画像４１ａの垂直方向のセンターと左眼用画像４１ｂの垂直方向のセンターを見易くし、これら設定された垂直センターライン７３ａ，７３ｂが次のステップで右眼用画像４１ａと左眼用画像４１ｂの切り取り操作の目安となるようにしている。
【００５５】
ステップＳ６において、ＭＰＵ５９は、図１１（Ｃ）に示すように、ディスプレイ５５に表示された分割ライン７１で分割された右眼用画像４１ａと左眼用画像４１ｂの水平方向のセンターを見易くするため、水平センターライン７４を表示する。ここで、ＭＰＵ５９は、右眼用画像４１ａと左眼用画像４１ｂに亘って垂直方向のセンターに表示する。そして、水平センターライン７４は、マウス５７ｂがクリックされることによってポインタ７２に保持され、利用者の目視で、利用者が所望する水平方向のセンターに垂直方向に移動される。かくして、ＭＰＵ５９は、利用者が右眼用画像４１ａと左眼用画像４１ｂの水平方向のセンターを見易くするとともに、上述した垂直センターライン７３ａ，７３ｂとで右眼用画像４１ａと左眼用画像４１ｂの中心点７５ａ，７５ｂを見極め易くし、次のステップで右眼用画像４１ａと左眼用画像４１ｂの切り取り操作の目安となるようにしている。
【００５６】
なお、この中心点７５ａ，７５ｂは、再調整を行うこともできる。すなわち、垂直センターライン７３ａ，７３ｂの調整は、図１１（Ｂ）に示すように、再度、右眼用画像４１ａ用のセンターライン７３ａを水平方向に移動させることで行うことができ、水平センターライン７４の調整は、図１１（Ｃ）に示すように、水平センターライン７４を垂直方向に移動させることで行うことができる。
【００５７】
ステップＳ７において、ＭＰＵ５９は、利用者の所望な画像の切出処理を行う。具体的に、右眼用画像４１ａにおいて利用者が上記垂直センターライン７３ａや水平センターライン７４や中心点７５ａを参考に、マウス５７ｂのポインタ７２により始点７６を決定し、対角線方向にポインタ７２が移動されると、図１１（Ｄ）に示すように、右眼用画像４１ａには、略矩形の切取線７７ａが表示される。これと同じくして、ＭＰＵ５９は、左眼用画像４１ｂにも、切取線７７ａと同形状の切取線７７ｂを表示する。このとき、ＭＰＵ５９は、分割ライン７１と切取線７７ａの分割ライン７１側の線との間隔が、左眼用画像４１ｂの分割ライン７１と反対側の側縁と切取線７７ｂの該側縁側の線との間隔と等しくなるように、切取線７７ｂを表示する。
【００５８】
かくして、ＭＰＵ５９は、ディスプレイ５５で立体表示するための右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データを生成する。ところで、以上のように利用者は、ＨＤＤ５１に実際に切り取った画像のデータを保存する前に、利用者がどの様にディスプレイ５５で立体表示されるのが見たい場合がある。そこで、ステップＳ８において、ＭＰＵ５９は、右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データをＶＲＡＭ５６に出力し、プレービューモードを起動する。なお、このプレビューモードについては、詳細は後述する。そして、ステップＳ１０において、ＭＰＵ５９は、右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データを圧縮／伸長部５８でＪＰＥＧ形式に圧縮した後ＨＤＤ５１に保存する。なお、この保存方法についても詳細は後述する。
【００５９】
以上のような画像データの編集処理方法では、画像４１の画像データから利用者所望の領域を切り取りとることで、ディスプレイ５５に利用者の好みにあった立体画像をディスプレイ５５に表示することができる。また、画像４１の画像データを編集する際、ディスプレイ５５には、垂直センターライン７３ａ，７３ｂと水平センターライン７４が表示されることから、利用者は、画像４１の切り取り作業を容易に行うことができる。
【００６０】
なお、以上のような画像４１の編集作業は、右眼用画像４１ａを用いて行うものであることから、境界部４２をＭＰＵ５９に自動認識させるようにして、ディスプレイ５５には、編集作業用の右眼用画像４１ａのみを表示するようにしてもよい。
【００６１】
次いで、上記ステップＳ８のプレビューモードについて図１２を参照して説明する。ステップＳ１１において、ＭＰＵ５９は、入力装置５７からのコマンドに基づいて、プレビューモードを起動する。
【００６２】
ステップＳ１２において、ＭＰＵ５９は、ディスプレイ５５に表示形式の選択画面を表示する。ここで、立体画像を表示する態様としては、図１３（Ａ）に示すように、縦横比が３：４の略矩形の枠７９ａと、図１３（Ｂ）に示すように、縦横比が９：１６の略矩形の枠７９ｂと、図１３（Ｃ）に示すように、略円形の枠７９ｃとがある。そして、利用者によって入力装置５７からのコマンドに基づいて、ＭＰＵ５９は、上記図１３（Ａ）乃至図１３（Ｃ）に示す枠の中から何れか一の枠７９を選択し、ステップＳ１３に進む。
【００６３】
ステップＳ１３において、利用者によって入力装置５７からの入力信号に基づいて、右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データのＶＲＡＭ５６からの出力順序を決定する。具体的に、この出力順序は、右眼用切取画像７８ａの画像データからディスプレイ５５に表示するか、左眼用切取画像７８ｂの画像データからディスプレイ５５に表示するかである。
【００６４】
ステップＳ１４において、ＭＰＵ５９は、ディスプレイ５５に視差を有するように右眼用切取画像７８ａと左眼用切取画像７８ｂとを交互に表示する。具体的に、ＭＰＵ５９は、右眼用切取画像７８ａの画像データをＶＲＡＭ５６のメモリ部５６ａに出力し、左眼用切取画像７８ｂの画像データをＶＲＡＭ５６のメモリ部５６ｂに出力する。そして、ＶＲＡＭ５６は、ステップＳ１３において決定された画像データの出力順序に基づいて、右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データを交互にディスプレイ５５に出力し、ディスプレイ５５に、右眼用切取画像７８ａと左眼用切取画像７８ｂとを交互に表示させる。
【００６５】
この結果、図１４（Ａ）及び図１４（Ｂ）に示すように、ディスプレイ５５には、右眼用切取画像７８ａと左眼用切取画像７８ｂがずれたように表示される。具体的に、ディスプレイ５５に表示される右眼用切取画像７８ａと左眼用切取画像７８ｂは、利用者の視点の位置においてずれ量が０となるように表示され、このずれ量が０の位置から利用者から見て手前の方向や奥の方向に向かってずれ量が大きくなるように表示される。なお、以下、このずれ量が０の位置をクロスポイント８１という。すなわち、図１４（Ａ）に示す画像中、人の位置をクロスポイント８１とした場合、山は人より奥にあることから一方向にずれて表示され、花は人より手前にあることから他方向にずれて表示される。
【００６６】
また、上述したように、眼鏡制御装置６は、ステップＳ１３における画像データの出力順序に合わせて右眼用レンズ部４ａと左眼用レンズ部４ｂのシャッタの切換を行う。この切り換えに際して、眼鏡制御装置６は、検出部６１で右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データの垂直同期信号を検出し、ディスプレイ５５に表示される右眼用切出画像７８ａと左眼用切出画像７８ｂの切換のタイミングに合わせてシャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂのシャッタの切換を行う。これにより、利用者は、ディスプレイ５５に表示された画像を立体的に見ることができる。以降のステップでは、利用者はシャッタ眼鏡４をかけた状態でプレビューモードの処理を行う。
【００６７】
ステップＳ１５において、利用者にとって最も立体画像を見易くするため、奥行き調整、すなわちクロスポイント８１の調整が行われる。すなわち、ＭＰＵ５９は、図１４（Ａ）に示す画面８２にクロスポイント８１の調整を行うための調整釦８３，８４を表示している。ここで調整釦８３は、クロスポイント８１を面中手前、すなわち水平に一方向に移動させるためのものであり、調整釦８４は、クロスポイント８１を画面中奥、すなわち水平に他方向に移動させるためのものである。これら調整釦８３，８４は、クロスポイント８１を水平方向に移動させるものであるから、操作を行い易くするため、画面８２中水平方向に並んで表示されている。
【００６８】
利用者が入力装置５７で調整釦８３を押したとき、ＭＰＵ５９は、クロスポイント８１を手前、すなわち図１４（Ａ）の画面８２中左下の方向に移動させる。そして、例えばクロスポイント８１が花の位置まで移動すると、ディスプレイ５５には、人の位置の右眼用切取画像７８ａと左眼用切取画像７８ｂが一方向にずれ、山の位置の画像が更に大きく一方向にずれたように表示されることになる。これによって、シャッタ眼鏡４をかけた利用者には、花を基準に人が奥にあり、更に奥に山があるように見える。また、利用者が入力装置５７で調整釦８４を押したとき、ＭＰＵ５９は、クロスポイント８１を奥、すなわち図１４（Ａ）の画面８２中右上の方向に移動させる。そして、例えばクロスポイント８１が山の位置まで移動すると、ディスプレイ５５には、人の位置の右眼用切取画像７８ａと左眼用切取画像７８ｂが他方向にずれ、花の位置の画像が更に大きく他方向にずれたように表示されることになる。これにより、利用者には、山を基準に人が手前にあり、更に手前に山があるように見える。以上のようにして、利用者は、最も立体画像を見やすい位置に奥行き調整、すなわちクロスポイント８１の調整を行うことができる。
【００６９】
ステップＳ１６において、利用者にとって最も立体画像を見易くするため、垂直方向の調整が行われる。すなわち、ディジタルカメラ２にアダプタ５を取り付けて撮影をする場合に、アダプタ５がディジタルカメラ２に対して傾いて取り付けられており、撮影された図５に示す画像４１が傾いているときがある。このような傾いた画像４１を立体的に見ることは困難である。そこで、このステップＳ１６では、ＭＰＵ５９は、画面８２に右眼用切出画像７８ａと左眼用切出画像７８ｂを垂直方向に調整するための調整釦８５，８６を表示する。利用者が入力装置５７で調整釦８５を押したとき、ＭＰＵ５９は、右眼用切出画像７８ａを上側にずらし、左眼用切出画像７８ｂを下側にずらす。また、利用者が入力装置５７で調整釦８６を押したとき、ＭＰＵ５９は、右眼用切出画像７８ａを下側にずらし、左眼用切出画像７８ｂを上側にずらす。以上のようにして、利用者は、最も立体画像を見やすい位置に右眼用切出画像７８ａと左眼用切出画像７８ｂの垂直方向の位置を調整することができる。なお、調整釦８５，８６は、画像を垂直方向に移動させるものであることから、操作を行い易くするため、画面８２中垂直方向に並んで表示されている。
【００７０】
以上のようなプレービューモードでは、画面８２に設けられた調整釦８３，８４で奥行き、クロスポイント８１の調整を行い、また、画面８２に設けられた調整釦８５，８６で右眼用切出画像７８ａと左眼用切出画像７８ｂの垂直方向の調整を行うことができることから、右眼用切出画像７８ａと左眼用切出画像７８ｂをＨＤＤ５１に保存する前に、利用者が最も立体画像を見やすい状態で保存することができる。
【００７１】
ところで、図１５に示すように、例えば上述したプレービューモードで右眼用切出画像７８ａと左眼用切出画像７８ｂとが交互に表示されている立体画像７８上を入力装置５７を構成するマウス５７ｂのポインタ７２を移動させることがある。このとき、ポインタ７２が２次元、すなわちクロスポイント８１での表示状態で表示されていると、利用者がポインタ７２を見づらくなってしまう。そこで、ＭＰＵ５９は、立体画像７８上にあるポインタ７２の位置の視差、すなわち右眼用切出画像７８ａと左眼用切出画像７８ｂのずれ量に合わせて、ポインタ７２もずらすようにしている。すなわち、図１５に示すように、クロスポイント８１が人の位置にあり、ポインタ７２が立体画像７８中奥の山の近くにあるときに、ＭＰＵ５９は、この位置における右眼用切出画像７８ａと左眼用切出画像７８ｂのずれ量に合わせてポインタ７２もずらして表示し、また、ポインタ７２が立体画像７８中手前の花の近くにあるとき、ＭＰＵ５９は、この位置における右眼用切出画像７８ａと左眼用切出画像７８ｂのずれ量に合わせてポインタ７２もずらして表示する。更には、ポインタ７２がクロスポイント８１にあるとき、ＭＰＵ５９は、右眼用切出画像７８ａと左眼用切出画像７８ｂのずれもないことから、ポインタ７２もずらすことなく平面的に表示する。これにより、利用者は、立体表示を行う立体画像７８上をポインタ７２が移動するとき、ポインタ７２が常に背景にある画像の視差に合わせて表示され、ポインタ７２を立体的に見ることができることから、利用者がポインタ７２を見づらくなることを防止することができる。
【００７２】
また、図１５に示すように、画像４１の編集を行っているとき、画像４１中に文字８７を入力することができる。すなわち、マウス５７ｂのポインタ７２によって立体画像７８中文字８７を入力する位置が指定され、キーボード５７ａによって文字（例えば「Ａ」）が入力されると、ＭＰＵ５９は、立体画像７８中の当該位置に文字８７を表示する。このとき、ＭＰＵ５９は、立体画像７８上の文字８７が入力された座標上の視差、すなわち右眼用切出画像７８ａと左眼用切出画像７８ｂのずれ量に合わせて、文字８７もずらして表示する。すなわち、クロスポイント８１が人の位置にあり、文字８７が立体画像７８中奥の山の近くに表示するとき、ＭＰＵ５９は、この位置における右眼用切出画像７８ａと左眼用切出画像７８ｂのずれ量に合わせて文字８７もずらして表示し、また、文字８７が立体画像７８中手前の花の近くにあるとき、ＭＰＵ５９は、この位置における右眼用切出画像７８ａと左眼用切出画像７８ｂのずれ量に合わせて文字８７もずらして表示する。更には、文字８７がクロスポイント８１に表示されるとき、ＭＰＵ５９は、右眼用切出画像７８ａと左眼用切出画像７８ｂのずれもないことから、文字８７もずらすことなく平面的に表示する。これにより、利用者は、立体表示を行う立体画像７８上に文字８７を表示するとき、文字８７が常に背景にある画像の視差に合わせて表示され、文字８７も立体的に見ることができることから、文字８７が見づらくなることを防止することができる。また、文字８７のずれ量を画像中最も手前のずれ量に合わしたときには、利用者には文字８７が最も手前にあるように見え、文字８７を強調することができる。
【００７３】
また、図１４（Ａ）に示すように右眼用切取画像７８ａと左眼用切取画像７８ｂが交互に表示されているとき、基準となる面は、ディスプレイ５５の画面８２や、図１３に示す枠７９となっている。すなわち、画面８２や画面上の枠７９は、視差を考慮しない平面的表示形態となっている。このため、シャッタ眼鏡４をかけて図１４（Ａ）の立体画像７８を見ている利用者は、画面８２上に表示された立体画像７８の周囲が平面的に表示されていることから、立体画像７８を立体的に見づらくなってしまう。そこで、立体画像７８の周囲には、図１６に示すように、例えば額縁のような所定の幅を有する枠体８８を表示するようにしている。この枠体８８のずれ量を、最も手前に見えるもの、例えば花のずれ量と同じ若しくはこれ以上とした場合には、利用者に、立体画像７８が枠体８８の内側に立体表示されたように見せることができる。また、この枠体８８のずれ量を、最も奥に見えるもの、例えば山のずれ量と同じ若しくはこれ以上とした場合には、利用者に、立体画像７８のものが枠体８８の飛び出したように見せることができる。このように、立体画像７８の周囲に、所定幅の枠体８８を設けることにより、利用者に、一層立体画像を見やすくすることができる。
【００７４】
次に、以上のように編集された右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂからなる画像データとから構成された立体画像７８の画像データの管理方法、すなわち上記図１０中ステップＳ９の切取画像データの管理方法について図１７を参照して説明する。図１４（Ａ）に示す右眼用切取画像７９ａの画像データと左眼用切取画像７９ｂの画像データを保存するときには、先ず、入力装置５７のマウス５７ｂ等で画面８２に表示された保存釦８９が押される。保存釦８９がポインタ７２により押されると、ＭＰＵ５９は、ＲＡＭ５２上の右眼用切取画像７９ａの画像データと左眼用切取画像７９ｂの画像データをバスを介してＨＤＤ５１やＩＣカード８に保存する。具体的に、図１７に示すように、ＭＰＵ５９は、フォルダ９１内に、右眼用切取画像データファイル９２と、左眼用切取画像データファイル９３と、これらファイル９２，９３を関連づける情報からなる情報ファイル９４を保存する。
【００７５】
右眼用切取画像データファイル９２は、図１０中ステップＳ７で切り取られた右眼用切取画像７８ａの画像データであり、この画像データは、圧縮／伸長部５８でＪＰＥＧ方式に圧縮されている。また、左眼用切取画像データファイル９３は、右眼用切取画像７８ｂの画像データであり、この画像データは、圧縮／伸長部５８でＪＰＥＧ方式に圧縮されている。
【００７６】
情報ファイル９４は、右眼用切取画像７８ａと、左眼用切取画像７８ｂを交互に表示する際のクロスポイント８１の座標が記録されている。また、上述したように、偶数番目のラインが間引かれた右眼用切取画像データと奇数番目のラインが間引かれた左眼用切取画像データをディスプレイ５５に表示する際には、何れのデータが一番目のラインとなるかを示すライン情報が記録されている。すなわち、情報ファイル９４には、保存時の立体画像を再現するのに必要なデータが記録される。
【００７７】
以上のようなデータの管理方法では、右眼用切取画像データファイル９２と左眼用切取画像データファイル９３と情報ファイル９４とが分割して設けられていることから、これらのデータを、圧縮伸長しても再編集を行うことができる。すなわち、このフォルダ９１には、右眼用切取画像データファイル９２と左眼用切取画像データファイル９３があることから、利用者は、再度、右眼用切取画像７８ａと左眼用切取画像７８ｂを拡大若しくは縮小する等の再編集を行うことができる。
【００７８】
また、右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データとは、図１８に示すように保存することもできる。すなわち、フォルダ９６には、上記図５に示す右眼用画像４１ａと左眼用画像４１ｂとからなる画像データからなる画像データファイル９７と、この画像データファイル９７から右眼用切取画像７８ａと右眼用切取画像７８ｂを生成するための情報からなる情報ファイル９８とが記録される。すなわち、画像データファイル９７は、上記図１０に示す編集処理前の画像データが圧縮／伸長部５８でＪＰＥＧ形式に圧縮されたものである。また、情報ファイル９８は、図１１（Ｄ）に示す分割ライン７１の位置データや垂直センターライン７３ａ，７３ｂの位置データや水平センターライン７４の位置データや切取線７７ａ，７７ｂの位置データが記録されている。また、情報ファイル９６には、右眼用切取画像７８ａと、左眼用切取画像７８ｂを交互に表示する際のクロスポイント８１の座標が記録されている。更には、偶数番目のラインが間引かれた右眼用切取画像データと奇数番目のラインが間引かれた左眼用切取画像データをディスプレイ５５に表示する際には、何れのデータが一番目のラインとなるかを示すライン情報が記録されている。すなわち、情報ファイル９８には、保存時の立体画像を再現するのに必要なデータが記録される。
【００７９】
以上のようなデータの管理方法では、右眼用画像４１ａと左眼用画像４１ｂとからなる画像データを保存していることから、この画像データを圧縮伸長しても図１７に示す保存方法より更に多くの編集作業を行うことができる。具体的には、この管理方法では、図１０に示すような編集作業を、フォルダ９６から画像データファイル９７と情報ファイル９８を読み出して再度、図１０及び図１１に示すような画像の切取等の編集作業を行うことができる。
【００８０】
更に、右眼用切取画像７８ａの画像データと左眼用切取画像７８ｂの画像データとは、次のように保存することもできる。すなわち、この保存方法は、右眼用切取画像７８ａの画像データの水平走査線のデータと左眼用切取画像７８ｂの画像データの水平走査線のデータとが交互に記憶された合成画像データを保存する方法であり、図１９に示すように、フォルダ１０１には、偶数番目のラインが間引かれた右眼用切取画像データと奇数番目のラインが間引かれた左眼用切取画像データとが合成された合成画像データが記録される合成画像データファイル１０２が記録される。
【００８１】
このような管理方法では、上記図１７及び上記図１８に示す画像データの管理方法に対して、情報ファイルが設けられないことから、再編集を行うことができないが、データサイズを小さくすることができる。なお、このフォルダ１０１には、合成画像データファイル１０２に加えて、上記図１７に示した右眼用切取画像データファイル９２と、左眼用切取画像データファイル９３と、これらファイル９２，９３に関連する情報からなる情報ファイル９４を保存するようにしてもよい。また、このフォルダ１０１には、合成画像データファイル１０２に加えて、上記図１８に示した右眼用画像４１ａと左眼用画像４１ｂとからなる画像データからなる画像データファイル９７と、この画像データファイル９７から右眼用画像７８ａと右眼用画像７８ｂを生成するための情報からなる情報ファイル９８を保存するようにしてもよい。
【００８２】
以上、図１７乃至図１９に異なるデータの管理方法について説明したが、この制御装置３では、図１７乃至図１９に異なるデータの管理方法のいずれか１つの方法で画像データをＨＤＤ５１に保存するようにしてもよく、また、これらの方法の中から何れか１つを選択してＨＤＤ５１に保存することができるようにしてもよい。例えば図１７に示す保存方法は、編集作業を中断し、再編集を行うときに便利であり、図１８に示す保存方法は、電子メールに添付して相手方に送信するとき、相手方が画像の拡大縮小を行うことができ便利である。また、図１９に示す保存方法は、ホームページ等を保存するのに便利である。
【００８３】
ところで、以上のような編集プログラムによって編集され、ＨＤＤ５１等の記録手段に上記図１７乃至図１９の形式で保存されたデータを読み出し、ディスプレイ５５に表示するブラウザについて説明する。
【００８４】
先ず、ブラウザの起動について、図２０を参照して説明すると、ステップＳ２１において、例えばディスプレイ５５に表示されたブラウザを起動するためのアイコンをマウス５７ｂでクリックすると、ＭＰＵ５９は、ＨＤＤ５１よりブラウザのプログラムをＲＡＭ５２に読み出し、ステップＳ２２に進む。
【００８５】
ステップＳ２２において、ＭＰＵ５９は、図２１に示す起動画面１１１をディスプレイ５５の画面８２略中央に表示させる。このとき、詳細は後述するが、眼鏡制御装置６は、この起動画面１１１の信号を検出して、シャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂのオンオフを制御する。
【００８６】
ステップＳ２４において、ＭＰＵ５９は、ディスプレイ５５の画面８２にブラウザ１１２を表示する。すなわち、ＶＲＡＭ５６は、メモリ部５６ａからブラウザ１１２の右眼用画像データをディスプレイ５５に出力し、メモリ部５６ｂからブラウザ１１２の左眼用画像をディスプレイ５５に出力する。ディスプレイ５５には、ブラウザ１１２の右眼用画像と左眼用画像が視差を有するようにずらされて交互に表示される。これにより、シャッタ眼鏡４をかけた利用者は、ブラウザ１１２の画面を立体的に見ることができる。
【００８７】
ステップＳ２５において、ＭＰＵ５９は、キーボード５７ａやマウス５７ｂからなる入力装置５７からのコマンドに基づいて、編集する画像データのフォルダ、すなわち図１７乃至図１９に示すフォルダ９１，９６，１０１を開く。ここで、選択されたファイル９１，９６，１０１は、ＪＰＥＧ形式に圧縮されていることから、ＭＰＵ５９は、ファイル９１，９６，１０１を圧縮／伸長部５８で伸長した後、ＲＡＭ５２に読み出し、ディスプレイ５５に表示されたブラウザ１１２上に右眼用切取画像７８ａと左眼用切取画像７８ｂを視差を有するように交互に表示する。すなわち、ＶＲＡＭ５６は、情報ファイル９４，９８に記録された偶数番目のラインが間引かれた右眼用切取画像データと奇数番目のラインが間引かれた左眼用切取画像データをディスプレイ５５に表示する際には、何れのデータが一番目のラインとなるかを示すライン情報に基づいて、先ずメモリ部５６ａから右眼用切取画像７８ａの画像データを出力し、次いで、左眼用切取画像７８ｂの画像データをメモリ部５６ｂから出力し、以後これを繰り返すことによってディスプレイ５５に立体画像７８を表示する。したがって、右眼用切取画像７８ａと左眼用切取画像７８ｂは、シャッタ眼鏡４をかけた利用者から見て、立体的に表示された枠体１１３の中に更に立体的に表示されることになる。このように、立体的な枠体１１３の中に更に立体的な立体画像７８を表示するようにすることで、ブラウザ１１２は、利用者にとって立体画像が見やすくなるようにしている。
【００８８】
また、このブラウザ１１２の終了動作について、図２２を参照して説明すると、ステップＳ３１において、ブラウザ１１２のコーナ部にある「×」印からなる終了指示部１１４をマウス５７ｂでクリックすると、ＭＰＵ５９は、ブラウザ１１２の終了動作を開始する。すると、ステップＳ３２において、ＭＰＵ５９は、図２１に示すように、ディスプレイ５５の画面８２の略中央に起動画面１１１と略同じ終了画面１１５を表示する。このとき、詳細は後述するが、眼鏡制御装置６は、この終了画面１１５の信号を検出して、シャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂを共にオフにする。そして、ステップＳ３３において、ＭＰＵ５９は、ブラウザ１１２の終了動作を完了する。
【００８９】
ところで、ブラウザ１１２を起動したときには、シャッタ眼鏡４を駆動する必要があり、このため、上記図２０に示すステップＳ２２、すなわちディスプレイ５５の画面８２に起動画面１１１が表示されているとき、眼鏡制御装置６は、このブラウザ１１２が起動したかどうかを検出するようにしている。すなわち、ブラウザ１１２が起動されたとき、図２４（Ａ）に示すように、ＶＲＡＭ５６は、ディスプレイ５５に、起動画面１１１を表示するための例えば白→黒→白→黒のパターンの映像信号を供給するようにしている。
【００９０】
ここで、図７に示す眼鏡制御装置６の検出部６１は、白→黒→白→黒のパターンの画像信号を検出し、図２０中ステップＳ２５において、最初にメモリ部５６ａから出力されるブラウザ１１２の右眼用画像の画像データを出力に合わせて、右眼用画像を利用者が右眼で見ることができようにするため、シャッタ眼鏡４の右眼用レンズ部４ａをオフとし、左眼用レンズ部４ｂをオンとするようにスイッチ６４を切り換える。これにより、ディスプレイ５５に右眼用画像が表示されているとき、右眼用レンズ部４ａが透視状態となり、左眼用レンズ部４ｂが遮光状態となる。
【００９１】
次いで、上述図８に示すように、検出部６１は、右眼用画像データの垂直同期信号を検出すると、次に表示されるブラウザ１１２の左眼用画像データを利用者が左眼で見ることができようにするため、シャッタ眼鏡４の左眼用レンズ部４ｂをオフとし、右眼用レンズ部４ａをオンとするようにスイッチ６４を切り換える。これにより、ディスプレイ５５に左眼用画像が表示されているとき、左眼用レンズ部４ｂが透視状態となり、右眼用レンズ部４ａが遮光状態となる。以後、このように、右眼用画像７８ａと左眼用画像７８ｂの切り換えのタイミングに合わせてシャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂのシャッタの切り換えを行うことで、利用者は、ディスプレイ５５に表示されるブラウザ１１２の画像を立体的に見ることができる。
【００９２】
なお、ＭＰＵ５９は、白→黒→白→黒のパターンの映像信号を検出することで、画面８２上のブラウザ１１２が表示されていない領域のアイコン、文字等を視差を有する画像にし、利用者が画面全部に表示されたものを立体的に見ることができるようにしてもよい。これによって、画面全体が立体表示画像となり、右眼用切取画像７８ａと左眼用切取画像７８ｂとからなる立体画像７８が表示されていない領域がちらつくことを防止することができる。このように、白→黒→白→黒のパターンの映像信号は、シャッタ眼鏡４とディスプレイ５５に表示される画像とを同期させるための同期信号として用いられるとともに、ブラウザ１１２が開いたことを検出するための検出信号として用いられている。
【００９３】
また、ブラウザ１１２を終了するとき、シャッタ眼鏡４の駆動を停止する必要があり、このため、上記図２３に示すステップＳ３２、すなわちディスプレイ５５の画面８２に終了画面が表示されているとき、眼鏡制御装置６は、このブラウザ１１２が終了したかどうかを検出するようにしている。すなわち、ブラウザ１１２が終了するとき、図２４（Ｂ）に示すように、ＶＲＡＭ５６は、ディスプレイ５５に、終了画面１１５を表示するための例えば白→黒→黒→白のパターンの画像信号を供給するようにしている。
【００９４】
ここで、図７に示す眼鏡制御装置６の検出部６１は、白→黒→黒→白のパターンの映像信号を検出すると、以降立体画像を見ることができなくなることから、シャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂを共にオフとし、右眼用レンズ部４ａと左眼用レンズ部４ｂをともに透視状態にする。すなわち、シャッタ眼鏡４をオフにしレンズ部４ａ，４ｂを透視状態とすることで、利用者がブラウザ１１２を起動していないとき、平面的表示を見易くなるようにしている。
【００９５】
なお、上述した画面８２上のブラウザ１１２が表示されていない領域のアイコン、文字等を視差を有する画像にし、利用者が画面全部に表示されたものを立体的に見ることができるようにした場合には、この白→黒→黒→白のパターンの映像信号を検出することで、ＭＰＵ５９は、アイコン、文字等を視差を有する画像を止め、ずれのない画像に切り換える。すなわち、白→黒→黒→白のパターンの映像信号は、シャッタ眼鏡４をオフにするための検出信号として用いられるとともに、ブラウザ１１２が閉じたことを検出するための検出信号として用いられている。
【００９６】
以上のように、ブラウザ１１２では、起動するときに、白→黒→白→黒のパターンの映像信号をＶＲＡＭ５６より出力し、眼鏡制御装置６でこの信号を検出するようにすることで、ディスプレイ５５に交互に出力されるブラウザ１１２の右眼用画像データと左眼用画像データに同期させてシャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂの液晶シャッタの切り換え制御をすることができる。これによって、例えばディスプレイ５５に右眼用画像が表示されているときに、右眼用レンズ部４ａが透視状態で左眼用レンズ部４ｂが透視状態となり、右眼用画像を左眼で見るといった不具合を無くすことができる。また、ブラウザ１１２では、終了するとき、白→黒→黒→白のパターンの映像信号をＶＲＡＭ５６より出力し、眼鏡検出装置６でこの信号を検出するようにすることで、シャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂを共にオフとし、右眼用レンズ部４ａと左眼用レンズ部４ｂをともに透視状態にすることで、平面的表示を見易くすることができる。また、起動画面１１１と終了画面１１５に以上のような画像信号を用いることで、利用者が目に付くことを防止することができる。
【００９７】
なお、ブラウザ１１２の起動時と終了時の映像信号は、起動時の白→黒→白→黒のパターンや白→黒→黒→白のパターンに限定されるものではなく、目に付きやすくない色のパターンであればどの様な色や組み合わせであってもよい。
【００９８】
ところで、第１の立体画像となる立体表示されたブラウザ１１２上に更に第２の立体画像を重畳してディスプレイ５５に表示する場合がある。例えば、図２５に示すように、既に切り取られた立体画像をブラウザ１１２上に貼り付けたり、ブラウザ１１２上に表示された立体画像７８を移動させる場合である。図９及び図２５に示すように、水平走査線のデータの偶数番目のラインが間引かれた右眼用切取画像と水平走査線のデータの奇数番目のラインが間引かれた左眼用切取画像とを交互に表示する場合には、ブラウザ１１２上で立体画像７８を貼り付けたり移動したときに、ブラウザ１１２の右眼用のライン上に立体画像７８の左眼用のラインが位置してしまうことがある。すなわち、ブラウザ１１２が右眼用画像を表示しているときに立体画像７８が左眼用画像を表示し、或いは、ブラウザ１１２が左眼用画像を表示しているときに立体画像７８が右眼用画像を表示することになる。この場合、利用者は、立体画像７８を立体的に見ることができなくなってしまう。そこで、このブラウザ１１２は、図２５に示すように、立体画像７８を移動した際、ブラウザ１１２のラインと立体画像７８のラインとが一致しなかった場合に、垂直方向に立体画像７８を１ライン分ずらし、ブラウザ１１２のラインと立体画像７８のラインとが一致するようにしている。
【００９９】
具体的に、図２６に示すように、ステップＳ４１において、マウス５７ｂにより例えば図２５中左上の第１の位置にある立体画像７８選択し、図２５中右下の第２の位置に立体画像７８の移動先を指定し、又は貼り付け先を指定すると、ステップＳ４２において、ＭＰＵ５９は、第１の位置にある立体画像７８を第２の位置に移動させ又は立体画像７８を貼り付ける。
【０１００】
そして、ＭＰＵ５９は、ステップＳ４３において、立体画像７８の移動先若しくは貼り付け先である第２の位置において、走査方向の最も上流側の座標Ａ（Ｘ，Ｙ）のＹがブラウザ１１２の右眼用の水平走査線のライン上にあるか左眼用の水平走査線のライン上にあるかを検出する。そして、ＭＰＵ５９は、立体画像７８の一番目の水平走査線のラインとブラウザ１１２の水平走査線のラインとが一致しているとき処理を終了し、一致していないときステップＳ４４に進む。すなわち、立体画像７８の１番目の水平走査線のラインが右眼用である場合に、Ｙがブラウザ１１２の右眼用の水平走査線のライン上にある場合には、ブラウザ１１２の水平走査線のラインと立体画像７８の一番目の水平走査線のラインが一致しているものとして、ＭＰＵ５９は、処理を終了する。また、立体画像７８の１番目の水平走査線のラインが右眼用である場合に、Ｙがブラウザ１１２の左眼用の水平走査線おライン上にある場合には、ブラウザ１１２の水平走査線のラインと立体画像７８の一番目の水平走査線のラインが一致していないものとして、ＭＰＵ５９は、ステップＳ４４に進む。
【０１０１】
ステップＳ４４において、ＭＰＵ５９は、上下何れか一方に１ライン分立体画像７８を移動する。これにより、ＭＰＵ５９は、立体画像７８の一番目の水平走査線のラインとブラウザ１１２の水平走査線のラインとを一致させ、利用者が立体画像７８を立体的に見ることができるようにする。そして、ＭＰＵ５９は、処理を終了する。
【０１０２】
以上のようにブラウザ１１２では、立体画像７８を移動し、また、立体画像７８を貼り付ける場合であっても、常に、立体画像７８を画像の枠となるブラウザ１１２のラインと立体画像７８のラインとを一致させることから、利用者は常に立体画像を見ることができる。
【０１０３】
また、図２７に示すように、第１の立体画像となるブラウザ１１２上に表示された第２の立体画像となる立体画像７８を拡大若しくは縮小する場合がある。図９及び図２７に示すように、偶数番目の水平走査線のラインが間引かれた右眼用切取画像と奇数番目の水平走査線のラインが間引かれた左眼用切取画像とを交互に表示する場合には、ブラウザ１１２上で立体画像７８を拡大若しくは縮小したときに、ブラウザ１１２の右眼用の水平走査線のライン上に立体画像７８の左眼用の水平走査線のラインが位置してしまうことがある。すなわち、ブラウザ１１２が右眼用画像を表示しているときに立体画像７８が左眼用画像を表示し、或いは、ブラウザ１１２が左眼用画像を表示しているときに立体画像７８が右眼用画像を表示することになる。この場合、利用者は、立体画像７８を立体的に見ることができなくなってしまう。そこで、このブラウザ１１２は、図２７に示すように、立体画像７８を拡大若しくは縮小した際、ブラウザ１１２の水平走査線のラインと立体画像７８の水平走査線ラインとが一致しなかった場合に、垂直方向に立体画像７８を１ライン分ずらし、ブラウザ１１２のラインと立体画像７８のラインとが一致するようにしている。
【０１０４】
具体的に、図２８に示すように、ステップＳ５１において、入力装置５７により立体画像７８選択し、選択した立体画像７８の表示倍率を指定する。そして、ＭＰＵ５９は、ステップＳ５２において、利用者により指定された表示倍率に基づいて、立体画像７８を拡大若しくは縮小する。
【０１０５】
そして、ＭＰＵ５９は、ステップＳ５３において、立体画像７８を拡大した画像１２１ａ又は縮小した画像１２１ｂの走査方向の最も上流側の座標Ｂ₁（Ｘ₁，Ｙ₁）、Ｂ₂（Ｘ₂ ，Ｙ₂ ）のＹ₁ ，Ｙ₂ がブラウザ１１２の右眼用の水平走査線のライン上にあるか左眼用のライン上にあるかを検出する。そして、ＭＰＵ５９は、画像１２１ａ，１２１ｂの一番目の水平走査線のラインとブラウザ１１２の水平走査線のラインとが一致しているとき処理を終了し、一致していないときステップＳ５４に進む。すなわち、画像１２１ａ，１２１ｂの１番目の水平走査線のラインが右眼用である場合に、Ｙ₁ ，Ｙ₂ がブラウザ１１２の右眼用の水平走査線のライン上にある場合には、ブラウザ１１２のラインと立体画像７８の一番目の水平走査線のラインが一致しているものとして、ＭＰＵ５９は、処理を終了する。また、立体画像７８の１番目の水平走査線のラインが右眼用である場合に、Ｙ₁ ，Ｙ₂ がブラウザ１１２の左眼用の水平走査線のライン上にある場合には、ブラウザ１１２のラインと立体画像７８の一番目の水平走査線のラインが一致していないものとして、ＭＰＵ５９は、ステップＳ４４に進む。
【０１０６】
ステップＳ５４において、ＭＰＵ５９は、上下何れか一方に１ライン分画像１２１ａ，１２１ｂを移動し、画像１２１ａ，１２１ｂの一番目の水平走査線のラインとブラウザ１１２の水平走査線のラインとを一致させる。また、他の方法として、ＭＰＵ５９は、画像１２１ａ，１２１ｂの一番目の水平走査線のラインとブラウザ１１２の水平走査線のラインとを一致させるように、利用者が指定した表示倍率に最も近いところで、画像１２１ａ，１２１ｂを再度拡大又は縮小する。以上のような方法によって、ＭＰＵ５９は、画像１２１ａ，１２１ｂの一番目のラインとブラウザ１１２の水平走査線のラインとを一致させ、利用者が拡大若しくは縮小された画像１２１ａ，１２１ｂを立体的に見ることができるようにする。そして、ＭＰＵ５９は、処理を終了する。
【０１０７】
以上のようにブラウザ１１２では、画像１２１ａ，１２１ｂを拡大又は縮小する場合であっても、常に、画像１２１ａ，１２１ｂを画像の枠となるブラウザ１１２のラインと立体画像７８のラインとを一致させることから、利用者は常に立体画像を見ることができる。
【０１０８】
ところで、以上のような右眼用画像４１ａと左眼用画像４１ｂとからなる画像４１を編集するための編集プログラムや、この編集プログラムで編集された画像を見るためのブラウザは、ＨＤＤ５１に記憶保存しておく他、磁気ディスク、光磁気ディスク、光ディスク、半導体メモリ等の記録媒体に記憶保存しておくこともできる。この場合、これらプログラムは、図６に示すように、上記記録媒体がドライブ部１３１に装着され、入力装置５７によって起動する操作がなされると、ＭＰＵ５９は、記録媒体よりバスを介してＲＡＭ５２に読み出される。そして、上述した処理は、記録媒体より読み出されたプログラムによって処理が実行される。
【０１０９】
また、これらプログラムは、当該プログラムが記録された磁気ディスク、光磁気ディスク、光ディスク、半導体メモリ等の利用者に提供する提供媒体を介して、ドライブ部１３１よりＨＤＤ５１にインストールすることもできる。また、このような提供媒体を介してＨＤＤ５１にこれらプログラムをインストールする他、ダウンロードサイトから無線又は有線で送受信部１３２を介してＨＤＤ５１にインストールすることもできる。
【０１１０】
次に、以上のように構成された立体画像システム１を用いたネットワークシステム１５１について、図２９を参照して説明する。このネットワークシステム１５１は、立体画像データを蓄積するサーバ装置１５２と、サーバ装置１５２にアクセスして立体画像データをダウンロードする個人端末装置１５３とを備える。そして、サーバ装置１５２と複数の個人端末装置１５３とは、ネットワークを介して接続されている。
【０１１１】
サーバ装置１５２は、通常のコンピュータとほぼ同様な構成を有しており、立体画像データ等を蓄積している記憶部１６１と、全体の動作を制御するプログラム等の各種プログラムが記憶されているリードオンリメモリ（Read-Only Memory，以下、ＲＯＭともいう。）１６２と、ＲＯＭ１６２に記録されているプログラム等を一旦読み込むＲＡＭ１６３と、個人端末装置１５３とデータの送受信を行うための送受信部１６４と、全体を制御するＭＰＵからなる制御部１６５とを備える。
【０１１２】
このようなサーバ装置１５２は、ＲＯＭ１６２からＲＡＭ１６３に全体の動作を制御するプログラムが一旦読み出され、制御部１６５で実行されることにより装置全体の動作が制御される。サーバ装置１５２には、記憶部１６１に、立体画像等で構成されたホームページが開設されており、個人端末装置１５３からこのホームページにアクセス、すなわち閲覧することができるようになっている。
【０１１３】
また、個人端末装置１５３は、上述した制御装置３に相当するものであり、同様な構成を有している。すなわち、図２９に示すように、画像４１を立体的に表示させるための閲覧検索ソフトウェア（ブラウザ１１２）や電子メールプログラム等が記録されているＨＤＤ５１と、ＨＤＤ５１に記録されているアプリケーションプログラム等を一旦読み込むＲＡＭ５２と、画像４１等を表示するためのディスプレイ５５と、ＶＲＡＭ５６と、入力装置５７と、ＪＰＥＧ形式のデータを伸長するとともにデータをＪＰＥＧ形式に圧縮する圧縮／伸長部５８と、全体を制御するＭＰＵ５９とを備える。
【０１１４】
この個人端末装置１５３は、例えば個人の利用者宅に設置されており、変調復調器及び電話回線、ターミナルアダプタ及びＩＳＤＮ（Integrated Services Digital Network）回線、ＣＡＴＶ（Cable Television）回線等を介してインターネット１５４内のプロバイダに接続されている。例えば、サーバ装置１５２に開設されたホームページを閲覧するときには、利用者が入力装置５７を操作して所望のホームページのＵＲＬ（Uniform Resource Locator）の入力操作を行うと、ブラウザ１１２、ＴＣＰ／ＩＰプロトコル(Transmission Control Protocol/Internet Protocol)等が実行され、この結果、個人端末装置１５３は、インターネット１５４を介してサーバ装置１５２にアクセスして、アクセスしたホームページをダウンロードしディスプレイ５５に表示する。また、利用者は、この個人端末装置１５３を使用してインターネット１５４を介して他の利用者の個人端末装置１５３に電子メールを送信することができる。
【０１１５】
また、この個人端末装置１５３には、図２９に示すように、ＶＲＡＭ５６とディスプレイ５５との間に、ディスプレイ５５に表示されている画像を立体的にみるためのシャッタ眼鏡４が眼鏡制御装置６を介して接続されている。したがって、利用者は、このシャッタ眼鏡４をかけることによってホームページに表示された視差を有する画像を立体的に見ることができる。
【０１１６】
以上のようなネットワークシステム１５１で利用者が個人端末装置１５３でサーバ装置１５２に開設されたホームページを閲覧する場合について説明する。このサーバ装置１５２には、視差を有する画像として、例えば図１９に示すような方法で立体画像用のデータが蓄積されている。この立体画像用のデータは、図１９に示すように、偶数番目のラインが間引かれた右眼用切取画像データと奇数番目のラインが間引かれた左眼用切取画像データとが合成された合成画像データが記録される合成画像データファイル１０２が蓄積されている。このような合成画像データファイル１０２は、データサイズが小さいことから、サーバ装置１５２から合成画像データファイル１０２をダウンロードする時間を短縮することができる。
【０１１７】
一方、個人端末装置１５３では、図３０に示すステップＳ６１において、図２０及び図２１に示すように、ホームページを閲覧する場合に、先ず、ディスプレイ５５に表示されたブラウザを起動するためのアイコンをマウス５７ｂでクリックすると、ＭＰＵ５９は、ＨＤＤ５１よりブラウザのプログラムをＲＡＭ５２に読み出し、図２１に示す起動画面１１１をディスプレイ５５の画面８２に表示する。ここで、図２４（Ａ）に示すように、ＶＲＡＭ５６は、ディスプレイ５５に、起動画面１１１を表示するための白→黒→白→黒のパターンの映像信号を供給する。眼鏡制御装置６の検出部６１は、白→黒→白→黒のパターンの映像信号を検出し、ブラウザ１１２が起動されたことを検出する。ブラウザ１１２の起動が終了すると、ＶＲＡＭ５６からは、ブラウザ１１２の右眼用画像データと左眼用画像データが交互に出力され、ディスプレイ５５にには、右眼用画像と左眼用画像が交互に視差を有するように表示される。
【０１１８】
ブラウザ１１２の起動が終了するのと同時に、眼鏡制御装置６は、ステップＳ６２において、ブラウザ１１２の右眼用画像が表示されたとき、シャッタ眼鏡４の右眼用レンズ４ａを透視状態とし、左眼用レンズ部４ｂが遮光状態となるように制御し、次いで、ブラウザ１１２の左眼用画像が表示されたとき、シャッタ眼鏡４の左眼用レンズ４ｂを透視状態とし、右眼用レンズ部４ａが遮光状態となるように制御し、これを繰り返すようにシャッタ眼鏡４を制御する。このように、ブラウザ１１２の右眼用画像と左眼用画像の切り換えのタイミングに合わせてシャッタ眼鏡４の右眼用レンズ部４ａと左眼用レンズ部４ｂのシャッタの切り換えを行うことで、利用者は、ディスプレイ５５に表示されるブラウザ１１２の画像を立体的に見ることができる。
【０１１９】
そして、ステップＳ６３において、利用者が入力装置５７を操作して所望のホームページのＵＲＬの入力操作を行うと、個人端末装置１５３は、インターネット１５４を介してサーバ装置１５２にアクセスして、アクセスしたホームページをダウンロードしディスプレイ５５に表示する。また、ホームページに掲載された立体画像を選択し、ダウンロードすることもできる。この選択された画像は、サーバ装置１５２の記憶部１６１に図１７に示す方法で立体画像データが蓄積されている。図１７に示す画像データは、右眼用画像データファイル９２と、左眼用画像データファイル９３と、これらファイル９２，９３に関連する情報からなる情報ファイル９４とから構成されている。この画像データは、右眼用画像データファイル９２と左眼用画像データファイル９３があることから、個人端末装置１５３で、右眼用画像と左眼用画像を拡大若しくは縮小する編集作業を編集プログラムによって行うことができる。
【０１２０】
以上のようなネットワークシステム１５１では、サーバ装置１５２に図１７や図１９に示す方法で立体画像用の画像データを蓄積し、個人端末装置１５３側で利用者がシャッタ眼鏡４をかけてディスプレイ５５に表示されたホームページを見ることで、ディスプレイ５５に表示された画像を立体的に見ることができる。例えば、利用者がインターネット１５４を介して商品を購入するとき、利用者は商品を立体的に見ることができ、商品を購入するか否かの判断を容易に行うことができるようになる。
【０１２１】
また、このネットワークシステム１５１では、個人端末装置１５３間で電子メールのやり取りを行うこともできる。例えば、上述したディジタルカメラ２にアダプタ５を取り付けて上述した編集処理を行った画像データを電子メールに添付して他の個人端末装置１５３に送信する場合である。ここで、送信側の個人端末装置１５３のＨＤＤ５１に図１７に示す方法で画像データが保存されている場合について説明する。この場合、上述したように、フォルダ９１には、右眼用切取画像データファイル９２と、左眼用切取画像データファイル９３と、これらファイル９２，９３に関連する情報からなる情報ファイル９４とが保存されている。
【０１２２】
送信側となる個人端末装置１５３は、利用者が入力装置５７を操作して、送信先であるサーバ装置１５２のアドレスにフォルダ９１を送信する。これによって、サーバ装置１５２の記憶部１６１には、送信されたフォルダ９１が蓄積される。この後、受信者となる利用者の個人端末装置１５３がサーバ装置１５２のアドレスにアクセスすると、受信者の個人端末装置１５３は、フォルダ９１をダウンロードし、ＨＤＤ５１に蓄積する。
【０１２３】
受信者側の個人端末装置１５３では、フォルダ９１に保存された画像を見る際に、図２１に示す手順でブラウザ１１２が起動される。そして、受信者である利用者は、受信したファイル９１を開き、ＶＲＡＭ５６が右眼用切取画像データファイル９２と左眼用切取画像データファイル９３とを視差を有するように交互にディスプレイ５５に表示することによってシャッタ眼鏡４をかけた状態でブラウザ１１２に表示された画像を立体的に見ることができる。ところで、このフォルダ９１には、右眼用切取画像データファイル９２と左眼用切取画像データファイル９３があることから、利用者は、再度、右眼用切取画像７８ａと左眼用切取画像７８ｂを拡大若しくは縮小する等の再編集を行うことができる。
【０１２４】
次に、ＨＤＤ５１に図１８に示す方法で画像データが保存されている場合について説明する。この場合、上述したように、フォルダ９６には、上記図５に示す右眼用画像４１ａと左眼用画像４１ｂとからなる画像データからなる画像データファイル９７と、この画像データファイル９７から右眼用画像７８ａと右眼用画像７８ｂを生成するための情報からなる情報ファイル９８とが保存されている。
【０１２５】
送信側となる個人端末装置１５３は、利用者が入力装置５７を操作して、サーバ装置１５２を介して受信者となる利用者の個人端末装置１５３にフォルダ９６に送信する。
【０１２６】
受信者側の個人端末装置１５３では、フォルダ９６に保存された画像を見る際に、図２１に示す手順でブラウザ１１２が起動される。そして、受信者である利用者は、受信したファイル９６を開き、ＶＲＡＭ５６が右眼用切取画像データファイル９２と左眼用切取画像データファイル９３とを視差を有するように交互にディスプレイ５５に表示することによってシャッタ眼鏡４をかけた状態でブラウザ１１２に表示された画像を立体的に見ることができる。ところで、このフォルダ９１には、画像データファイル９７があることから、利用者は、再度、図１０に示すような編集作業、すなわち右眼用画像と左眼用画像の切取等の編集作業を行うことができる。
【０１２７】
以上のようなネットワークシステム１５１では、各個人端末装置１５３が少なくともブラウザ１１２を有していることで、電子メールに立体画像を添付して、立体画像データのやり取りを行うことができる。
【０１２８】
以上、画像データをＪＰＥＧ形式で圧縮して保存等する例に取り説明したが、本発明は、ＭＰＥＧ（motion picture expert group）等の圧縮方式であってもよい。また、以上、静止画の例を説明したが、動画であってもよい。
【０１２９】
【発明の効果】
本発明に係る立体画像データ生成装置及び立体画像データ生成方法によれば、右眼用画像の切取線で切り取って形成された右眼用画像データのファイルと、左眼用画像の切取線で切り取って形成された左眼用画像データのファイルと、右眼用画像データと左眼用画像データとを表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを有することから、利用者は、再度、右眼用画像データと左眼用画像データを拡大若しくは縮小する等の再編集を行うことができる。
【０１３０】
また、本発明に係る立体画像データ生成装置及び立体画像データ生成方法によれば、入力部より入力された境界部を挟んで右眼用画像と左眼用画像とが並んだ１つの画像データファイルと、１つの画像データファイルから指示手段において指示した一の切取線と他の切取線の位置を示す切取情報と切取情報に従って切り取られた右眼用画像と左眼用画像とを表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを有することから、利用者は、画像の切取等の編集作業を行うことができる。
【０１３１】
更に、本発明に係る立体画像データ生成装置及び立体画像データ生成方法によれば、右眼用画像の切取線で切り取って形成された右眼用画像データのファイルと、左眼用画像の切取線で切り取って形成された左眼用画像データのファイルと、右眼用画像データと左眼用画像データとを表示部に視差を有するように表示するためのクロスポイントの座標情報が記録された情報ファイルとを用いて、立体用画像の読み出しを行うことができるとともに、右眼用画像データの水平走査線のデータと左眼用画像データの水平走査線のデータとが交互に記憶された合成画像データファイルを用いて立体用画像の読み出しを行うことができる。右眼用画像データのファイルと、左眼用画像データのファイルと、右眼用画像データと情報ファイルとを用いて読み出しを行ったときには、画像の切取等の編集作業を行うことができる。
【図面の簡単な説明】
【図１】立体画像表示システムの全体構成を示す図である。
【図２】ディジタルカメラの構成を説明するブロック図である。
【図３】ディジタルカメラの鏡筒に取り付けられるアダプタの斜視図である。
【図４】上記アダプタの構成を説明する図である。
【図５】ディジタルカメラにアダプタを取り付けた際、ＣＣＤ素子に取り込まれた画像を説明する図である。
【図６】ディジタルカメラで撮影された右眼用画像と左眼用画像とからなる画像データを編集し表示する制御装置のブロック図である。
【図７】シャッタ眼鏡を制御する眼鏡制御装置のブロック図である。
【図８】プログレッシブ方式のときに、シャッタ眼鏡の右眼用レンズ部と左眼用レンズ部の切り換えのタイミングを説明する図である。
【図９】インターレース方式のときに、シャッタ眼鏡の右眼用レンズ部と左眼用レンズ部の切り換えのタイミングを説明する図である。
【図１０】画像データを編集処理を説明する図である。
【図１１】編集画面を説明する図である。
【図１２】プレビューモードを説明する図である。
【図１３】プレビューモードにおける画像の表示態様を説明する図である。
【図１４】プレービューモードの表示画面を説明する図である。
【図１５】プレービューモードの表示画面上にあるポインタや文字の表示方法を説明する図である。
【図１６】画像の周囲に立体的な枠を表示する方法を説明する図である。
【図１７】画像データの保存形式を説明する図である。
【図１８】画像データの保存形式の他の例を説明する図である。
【図１９】画像データの保存形式の更に他の例を説明する図である。
【図２０】ブラウザの起動手順を説明する図である。
【図２１】ブラウザの起動画面を説明する図である。
【図２２】ブラウザに画像が表示された状態を示す図である。
【図２３】ブラウザを閉じるときの手順を説明する図である。
【図２４】ブラウザの起動画面及び終了画面のときの信号を説明する図である。
【図２５】ブラウザ上に表示された画像を移動する状態を説明する図である。
【図２６】ブラウザ上に表示された画像を移動する手順を説明する図である。
【図２７】ブラウザ上に表示された画像を拡大又は縮小する状態を説明する図である。
【図２８】ブラウザ上に表示された画像を拡大又は縮小する手順を説明する図である。
【図２９】立体画像システムを用いたネットワークシステムを説明する図である。
【図３０】ホームページを見るときの手順を説明する図である。
【符号の説明】
１立体画像システム、２ディジタルカメラ、３制御装置、４シャッタ眼鏡、５アダプタ、６眼鏡制御装置[0001]
BACKGROUND OF THE INVENTION
In the present invention, image data for displaying a right-eye image and a left-eye image with parallax is recorded on the display means. Stereo image data generation apparatus and stereo image data generation method About.
[0002]
[Prior art]
Conventionally, a stereoscopic image display system that displays a two-dimensional image stereoscopically has two cameras for the right eye and the left eye that are fixed to a tripod or the like, separated by a human eye width (about 65 mm). Image data captured by each of the two cameras, an image display device that alternately displays images of these image data so as to have parallax, and an image displayed on the image display device In addition, it is composed of shutter glasses that make one eye invisible.
[0003]
In such a stereoscopic image display system, the two cameras constituting the imaging device are driven in synchronization. The image display device alternately displays the two image data captured by the two cameras. At this time, the image data for the right eye and the image data for the left eye are alternately displayed on the image display device so as to have parallax. In addition, shutter glasses are connected to the image display device. When the right eye image is displayed on the image display device, the shutter glasses put the right eye lens in a see-through state and the left eye lens in a light shielding state. In addition, when the left eye image is displayed on the image display device, the shutter glasses put the left eye lens in a see-through state and the right eye lens in a light shielding state. As described above, in the image display system, the user can view stereoscopically by synchronizing the image displayed on the image display device and the on / off of the pair of left and right lenses of the shutter glasses.
[0004]
[Problems to be solved by the invention]
By the way, in this stereoscopic image display system, as a method for storing the image data for the right eye and the image data for the left eye photographed by two cameras, the horizontal scanning line data of the image data for the right eye and the image for the left eye are used. There is a method of storing the data so that the data of the horizontal scanning lines alternate.
[0005]
However, in such a method, since the image data for the right eye and the image data for the left eye have already been synthesized, editing such as enlarging or reducing the image cannot be performed.
[0006]
Therefore, the present invention records data so that an image for stereoscopic display can be re-edited. Stereo image data generation apparatus and stereo image data generation method The purpose is to provide.
[0007]
[Means for Solving the Problems]
In order to solve the above-described problem, the stereoscopic image data generation device according to the present invention generates a right-eye image captured in substantially the right half of one image sensor and a left-eye image captured in approximately the left half. In addition, an input unit for inputting one image data file in which the right-eye image and the left-eye image are arranged across the boundary, and the right-eye for the boundary input from the input unit A display unit that displays a single image data file in which an image and a left-eye image are arranged, and a single image in which a right-eye image and a left-eye image are arranged across a boundary input from the input unit Split lines at the boundary of the data file Instructions In addition, a predetermined region of one of the right-eye image and the left-eye image displayed on the display unit is formed by one cut line that forms a substantially rectangular shape. Instruction means for instructing, position input means for operating the indicated position of the instruction means, and instruction by the instruction means The other image area of the right-eye image or the left-eye image corresponding to the region that has been made is another cut line that forms a substantially rectangular shape. Control to display, Above right eye image above With tear line The right-eye image data file formed by cutting and the left-eye image With tear line Cross-point coordinate information for displaying the left-eye image data file formed by cutting, the right-eye image data, and the left-eye image data with parallax on the display unit. Record Saved information files in a folder on the recording medium Control device to control With. the above Control device Is The instruction means A predetermined area of one of the right-eye image and the left-eye image displayed on the display unit is defined by the one cut line. Instructions The distance between the dividing line and the line on the dividing line side of one cut line of the one image is such that the side edge on the side opposite to the dividing line of the other image and the line on the side edge side of the other cutting line The other cut line so that it is equal to the distance between display Do To control .
[0008]
Further, in the stereoscopic image data generation method according to the present invention, in order to solve the above-described problem, a right-eye image is captured in a substantially right half of a single image sensor, and a left-eye image is captured in a substantially left half. A step of inputting the generated image data file in which the right-eye image and the left-eye image are arranged across the boundary portion to the input portion; and the boundary portion input from the input portion The step of displaying one image data file in which the image for the right eye and the image for the left eye are arranged on the display unit, and the image for the right eye and the image for the left eye across the boundary input from the input unit Divide lines at the boundary of one image data file Instruction means indicate And steps to The instruction means A predetermined region of one of the right-eye image and the left-eye image displayed on the display unit is formed by one cut line that forms a substantially rectangular shape. Instructing step and the above instruction means The other image area of the right-eye image or the left-eye image corresponding to the region that has been made is another cut line that forms a substantially rectangular shape. Control to display Step and above of the image for the right eye With tear line The right-eye image data file formed by cutting and the left-eye image With tear line Cross-point coordinate information for displaying the left-eye image data file formed by cutting, the right-eye image data, and the left-eye image data with parallax on the display unit. Record Saved information files in a folder on the recording medium To control Steps. The instruction means A predetermined area of one of the right-eye image and the left-eye image displayed on the display unit is defined by the one cut line. Instructions The distance between the dividing line and the line on the dividing line side of one cut line of the one image is such that the side edge on the side opposite to the dividing line of the other image and the line on the side edge side of the other cutting line The other cut line so that it is equal to the distance between display Do To control .
[0009]
Furthermore, in order to solve the above-described problem, the stereoscopic image data generation device according to the present invention captures a right-eye image in approximately the right half of one image sensor, and captures a left-eye image in approximately the left half. An input unit to which one image data file in which the image for the right eye and the image for the left eye are arranged with the boundary portion interposed therebetween is input, and the boundary portion input from the input portion A display unit that displays one image data file in which an image for the right eye and an image for the left eye are arranged, and an image for the right eye and an image for the left eye are arranged across the boundary input from the input unit. Dividing lines at the boundary of one image data file Instructions In addition, a predetermined region of one of the right-eye image and the left-eye image displayed on the display unit is formed by one cut line that forms a substantially rectangular shape. Instruction means for instructing, position input means for operating the indicated position of the instruction means, and instruction by the instruction means The other image area of the right-eye image or the left-eye image corresponding to the region that has been made is another cut line that forms a substantially rectangular shape. Control to display, One image data file in which a right-eye image and a left-eye image are arranged across the boundary input from the input unit, and the one image data file Instruction means In Instructions For displaying the cut-out information indicating the positions of the one cut-out line and the other cut-out line, and the right-eye image and the left-eye image cut according to the cut-out information so as to have parallax on the display unit. Cross point coordinate information Record Saved information files in a folder on the recording medium Control device to control With. the above Control device Is The instruction means A predetermined area of one of the right-eye image and the left-eye image displayed on the display unit is defined by the one cut line. Instructions The distance between the dividing line and the line on the dividing line side of one cut line of the one image is such that the side edge on the side opposite to the dividing line of the other image and the line on the side edge side of the other cutting line. The other cut line so that it is equal to the distance between display Do To control .
[0010]
Furthermore, in order to solve the above-described problem, the stereoscopic image data generation method according to the present invention captures a right-eye image in approximately the right half of one image sensor and captures a left-eye image in approximately the left half. A step of inputting, to the input unit, one image data file in which the right-eye image and the left-eye image are arranged across the boundary, and the boundary input from the input unit And displaying one image data file in which the right-eye image and the left-eye image are arranged on the display unit, and the right-eye image and the left-eye image across the boundary input from the input unit. Divide lines at the boundary of one image data file Instruction means indicate And steps to The instruction means A predetermined region of one of the right-eye image and the left-eye image displayed on the display unit is formed by one cut line that forms a substantially rectangular shape. Instructing step and the above instruction means The other image area of the right-eye image or the left-eye image corresponding to the region that has been formed is another cut line that forms a substantially rectangular shape. Control to display A step, a single image data file in which a right eye image and a left eye image are arranged across the boundary input from the input unit, and the single image data file Instruction means In Instructions For displaying the cut-out information indicating the positions of the one cut-out line and the other cut-out line, and the right-eye image and the left-eye image cut according to the cut-out information so as to have parallax on the display unit. Cross point coordinate information Record Saved information files in a folder on the recording medium To control Steps. The instruction means A predetermined area of one of the right-eye image and the left-eye image displayed on the display unit is defined by the one cut line. Instructions The distance between the dividing line and the line on the dividing line side of one cut line of the one image is such that the side edge on the side opposite to the dividing line of the other image and the line on the side edge side of the other cutting line The other cut line so that it is equal to the distance between display Do To control .
[0011]
Furthermore, in order to solve the above-described problem, the stereoscopic image data generation device according to the present invention captures a right-eye image in approximately the right half of one imaging device and captures a left-eye image in approximately the left half. An input unit to which one image data file in which the image for the right eye and the image for the left eye are arranged is input with the boundary part interposed therebetween, and the boundary part input from the input part A display unit for displaying one image data file in which a right-eye image and a left-eye image are arranged, and a right-eye image and a left-eye image are arranged with a boundary input from the input unit interposed therebetween. Dividing lines at the boundary of one image data file Instructions In addition, a predetermined region of one of the right-eye image and the left-eye image displayed on the display unit is formed by a single cut line that forms a substantially rectangular shape. Instruction means for instructing, position input means for operating the indicated position of the instruction means, and instruction by the instruction means The other image area of the right-eye image or the left-eye image corresponding to the region that has been formed is another cut line that forms a substantially rectangular shape. Control to display, Above right eye image above With tear line The right-eye image data file formed by cutting and the left-eye image With tear line Cross-point coordinate information for displaying the left-eye image data file formed by cutting, the right-eye image data, and the left-eye image data with parallax on the display unit. Record And a composite image data file in which the horizontal scanning line data of the right-eye image data and the horizontal scanning line data of the left-eye image data are alternately stored in a folder of the recording medium. save Control device to control With. the above Control device Is The instruction means A predetermined area of one of the right-eye image and the left-eye image displayed on the display unit is defined by the one cut line. Instructions The distance between the dividing line and the line on the dividing line side of one cut line of the one image is such that the side edge on the side opposite to the dividing line of the other image and the line on the side edge side of the other cutting line The other cut line so that it is equal to the distance between display Do To control .
[0012]
Furthermore, in order to solve the above-described problem, the stereoscopic image data generation method according to the present invention captures a right-eye image in approximately the right half of one image sensor and captures a left-eye image in approximately the left half. A step of inputting, to the input unit, one image data file in which the right-eye image and the left-eye image are arranged across the boundary, and the boundary input from the input unit And displaying one image data file in which the right-eye image and the left-eye image are arranged on the display unit, and the right-eye image and the left-eye image across the boundary input from the input unit. Divide lines at the boundary of one image data file Instruction means indicate And steps to The instruction means A predetermined region of one of the right-eye image and the left-eye image displayed on the display unit is formed by one cut line that forms a substantially rectangular shape. Instructing step and the above instruction means The other image area of the right-eye image or the left-eye image corresponding to the region that has been formed is another cut line that forms a substantially rectangular shape. Control to display Step and above of the image for the right eye With tear line The right-eye image data file formed by cutting and the left-eye image With tear line Cross-point coordinate information for displaying the left-eye image data file formed by cutting, the right-eye image data, and the left-eye image data with parallax on the display unit. Record And a composite image data file in which the horizontal scanning line data of the right-eye image data and the horizontal scanning line data of the left-eye image data are alternately stored in a folder of the recording medium. save To control Steps. The instruction means A predetermined area of one of the right-eye image and the left-eye image displayed on the display unit is defined by the one cut line. Instructions The distance between the dividing line and the line on the dividing line side of one cut line of the one image is such that the side edge on the side opposite to the dividing line of the other image and the line on the side edge side of the other cutting line The other cut line so that it is equal to the distance between display Do To control .
[0013]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, a stereoscopic image display system to which the present invention is applied will be described with reference to the drawings.
[0014]
As shown in FIG. 1, a stereoscopic image display system 1 to which the present invention is applied takes a digital camera 2 for capturing a video and image data generated by the digital camera 2 and performs data processing of the image data. And the control device 3 that displays an image with parallax on the display 55 and the shutter glasses 4 that make each eye invisible according to the image displayed on the display 55. In addition, the digital camera 2 is provided with an adapter 5 for capturing a right-eye image and a left-eye image in a lens barrel having a built-in lens such as an imaging lens and a focus lens. As a result, the right eye image and the left eye image are captured in one CCD element used in the digital camera 2. The control device 3 is supplied with image data including a right-eye image and a left-eye image generated by the digital camera 2. The control device 3 is, for example, for the right eye based on an input signal from the input device 7 including a keyboard 7a as a character input unit, a mouse 7b as a position input unit for operating an indication position of an instruction unit such as a pointer. Cut out the image and the image for the left eye. The control device 3 alternately displays the cut-out image for the right eye and the cut-out image for the left eye on the display 55 such as a CRT (Cathode-Ray Tube) or a liquid crystal display panel. Further, between the control device 3 and the display 55, a glasses control device 6 that controls on / off of the shutter glasses 4 is provided. The shutter glasses 4 include a right-eye lens unit 4a and a left-eye lens unit 4a, and the right-eye lens unit 4a and the left-eye lens unit 4b are configured by a liquid crystal shutter. Such shutter glasses 4 are connected to the glasses control device 6. The shutter glasses 4 open and close the liquid crystal shutters constituting the lens units 4 a and 4 b in synchronization with the right-eye images and the left-eye images displayed alternately on the display 55 under the control of the glasses control device 6. Thereby, the user opens and closes the lens portions 4a and 4b of the shutter glasses 4 according to the cut-out images for the right eye and the cut-out images for the left eye that are alternately displayed on the display 55, so that the display is displayed on the display 55. Images can be viewed stereoscopically.
[0015]
Hereinafter, the digital camera 2, the control device 3, the adapter 5, and the eyeglass control device 6 constituting the stereoscopic image display system 1 as described above will be described with reference to the drawings.
[0016]
The digital camera 2 has a configuration similar to that of a normal digital camera. As shown in FIG. 2, a CCD (Charge Coupled Device) that photoelectrically converts light incident from the imaging lens 11 and generates an imaging signal. An element 12, a CDS / AGC (Correlated Double Sampling / Automatic Gain Control) 13 that removes noise of the imaging signal from the CCD element 12, and an A / D converter 14 that converts the imaging signal from the CDS / AGC 13 into a digital signal And a signal processing unit 15 that performs signal processing corresponding to color coding.
[0017]
The CCD element 12 serving as an image sensor is a two-dimensional color image sensor provided with millions of pixels, and a color coding filter for imaging light of primary colors (R, G, B) or complementary colors (Ye, Cy, Mg). Are converted into color-coded imaging signals and output to the CDS / AGC 13.
[0018]
The CDS / AGC 13 performs correlated double sample hold of the image pickup signal supplied from the CCD element 12, removes reset noise and controls gain, and outputs the result to the A / D converter 14.
[0019]
The A / D converter 14 converts the imaging signal from the CDS / AGC 13 into digital image data. Then, the A / D converter 14 outputs the digitally converted image data to the signal processing unit 15.
[0020]
The signal processing unit 15 performs a decoding process corresponding to the color coding by the color coding filter of the CCD element 12 on the image data from the A / D converter 14, and generates luminance information, color difference information, and the like from the image data.
[0021]
As shown in FIG. 2, the digital camera 2 includes a compression unit 16 that compresses the image data processed by the signal processing unit 15, a memory 17 that stores the image data compressed by the compression unit 16, and A USB (Universal Sirial Bus) interface 18 for transmitting the image data compressed by the compression unit 16 to the control device 3 and an IC card for transmitting the image data to the IC card 8 using a flash memory or the like as a storage medium. Interface 19 and a control unit 20 for controlling the whole.
[0022]
The compression unit 16 compresses the image data signal-processed by the signal processing unit 15 in, for example, JPEG (Joint Photographic Experts Group) format. The compression unit 16 outputs the image data compressed in the JPEG format to the memory 17, and the memory 17 stores the image data compressed in the JPEG format.
[0023]
Further, the USB interface 18 transfers image data compressed in, for example, the JPEG format stored in the memory 17 to the control device 3. The IC card interface 19 transfers image data compressed in, for example, the JPEG format stored in the memory 17 to the card-type IC card 8 serving as an external storage device, to the control device 3.
[0024]
The control unit 20 controls the entire digital camera 2. Specifically, the control unit 20 controls driving of a focus lens, a zoom lens, and the like based on an operation signal from an operation unit (not shown). In addition, the control unit 20 stores the image data compressed in the JPEG format in the memory 17. Further, the control unit 20 directly transfers the compressed image data to the control device 3 via the USB interface 18 without storing the compressed image data in the memory 17, and also the IC card 8 via the IC card interface 19. Remember me.
[0025]
When an image is photographed by the digital camera 2 as described above and this data is recorded in the memory 17, the digital camera 2 photoelectrically converts the light incident from the imaging lens 11 by the CCD element 12, and generates an imaging signal. Is digitally converted by the A / D converter 14 via the CDS / AGC 13 to generate image data, the signal processing unit 15 performs signal processing, the compression unit 16 compresses the image data to the JPEG format, and the memory 17 compresses the image data. Stored image data is stored. In addition, when the JPEG format image data stored in the memory 17 is recorded on the IC card 8, the control unit 20 is connected to the digital camera 2 via the IC card interface 19 in accordance with an operation signal from the operation unit. When recording on the mounted IC card 8 and transferring image data to the control device 3 by USB, the control unit 20 responds to an operation signal from the operation unit via the USB interface 18. Forward to.
[0026]
Incidentally, as shown in FIG. 1, an adapter 5 for capturing an image for the right eye and an image for the left eye is attached to the lens barrel 2 a of the digital camera 2. This adapter 5 is for taking in an image for the right eye and an image for the left eye at the approximate center of one CCD element 12 used in the digital camera 2. As shown in FIGS. 3 and 4, the adapter 5 is provided with first flat mirrors 33 a and 33 b on the inner surfaces of the left and right inclined walls 32 a and 32 b which are the side walls of the outer casing 31. A substantially triangular partition wall 34 is provided in the approximate center of the outer casing 31. One side surface 34 c of the partition wall 34 faces the front surface of the outer casing 31, and forms a right-eye opening 35 a and a left-eye opening 35 b for capturing external light with the outer casing 31. The two side surfaces 34a and 34b adjacent to the one side surface 34c are provided so as to be substantially parallel to the inclined walls 32a and 32b of the outer casing 31, and the two side surfaces 34a and 34b include a first flat plate. Second flat mirrors 36a and 36b are provided so as to substantially face the mirrors 33a and 33b. Further, the back wall 37 of the outer casing 31 has an opening for taking outside light reflected by the first flat mirrors 33 a and 33 b and the second flat mirrors 36 a and 36 b into the lens barrel 2 a of the digital camera 2. A portion 38 is formed.
[0027]
The adapter 5 configured as described above is attached to the distal end side of the lens barrel 2 a so that the opening 38 faces the imaging lens 11 of the digital camera 2. The external light R captured from the right-eye opening 35a and the external light L captured from the left-eye opening 35b are reflected by the first flat mirrors 33a and 33b, and then the second flat mirrors 36a and 36b. And is taken into the CCD element 12 of the digital camera 2 through the imaging lens 11 facing the opening 38. Here, as shown in FIG. 4, the CCD element 12 captures an image having an angle of view of 2θ, where θ is the angle of view at the points 39a and 39b, as shown in FIG. Further, since the distance D between the points 39a and 39b determines the parallax, the distance D is set to 65 mm to 70 mm in accordance with the human eye width. The interval D may be adjusted according to individual differences. Therefore, the CCD element 12 captures the right-eye image and the left-eye image separated from each other in the left-right direction.
[0028]
Here, FIG. 5 is an image captured by the CCD element 12 when the adapter 5 is attached to the digital camera 2. This image 41 is a picture of a woman with a flowerpot placed in front and a background as a mountain. Is. As shown in FIG. 5, the image 41 is provided with a right-eye image 41 a in a substantially right half and a left-eye image 41 b in a substantially left half with a boundary portion 42 as a boundary. Comparing the right-eye image 41a and the left-eye image 41b, for example, the flower 43a and the mountain 44a for the right-eye image 41a are shifted slightly to the left in the figure from the flower 43b and the mountain 44b for the left-eye image 41b. . Thus, the right-eye image 41a and the left-eye image 41b are shifted by the amount of left and right parallax, that is, the interval D. Note that the boundary portion 42 is actually formed as a blurred white line.
[0029]
Therefore, when shooting is performed with the adapter 5 attached to the digital camera 2, the image 41 composed of the right-eye image 41 a and the left-eye image 41 b is taken into one CCD element 12, and this is regarded as one unit. The processed image data is stored in the memory 17 or the IC card 8 and transferred to the control device 3 via the USB interface 18. By using such an adapter 5, in the digital camera 2, the stereoscopic image 41 can be configured by one file, and management can be facilitated. Further, unlike the case where two conventional cameras are used, it is not necessary to provide a timing generator or the like for synchronizing each camera, and the configuration can be simplified. Furthermore, in the digital camera 2 to which the adapter 5 is attached, the left and right images can be simultaneously photographed without using two cameras even when still images are continuously photographed to make a moving image. Furthermore, in the digital camera 2 to which the adapter 5 is attached, it is not necessary to match the optical axes of the two camera lenses, so that a zoom function using a zoom lens can be used.
[0030]
Next, regarding the control device 3 that edits and displays the image data generated by the digital camera 2 to which the adapter 5 as described above is attached, that is, the image 41 composed of the right-eye image 41a and the left-eye image 41b, This will be described with reference to FIG.
[0031]
The control device 3 has substantially the same configuration as that of a normal personal computer. The image data of the image 41 described above, an application program for editing the image data, an application program for displaying the image three-dimensionally, and the like. , A hard disk (hereinafter also referred to as HDD) 51, a random access memory (hereinafter also referred to as RAM) 52 for temporarily reading an application program or the like recorded in the HDD 51, and the above-mentioned. USB interface 53 for data transmission with digital camera 2, IC card interface 54 for reading data recorded on IC card 8, display 55 for displaying images, and image data for display 55 To display An input device 57 including a video random access memory (hereinafter also referred to as VRAM) 56, a keyboard 57a and a mouse 57b for inputting a command for executing an application program, and a JPEG format A compression / decompression unit 58 that decompresses data and compresses the data into a JPEG format, and a microprocessor (Micro Processor Unit, hereinafter also referred to as MPU) 58 that serves as a control unit for controlling the whole are provided.
[0032]
The HDD 51 is edited by an operating system (Operating Systen, hereinafter also referred to as OS), an editing program for editing the image 41 composed of the right-eye image 41a and the left-eye image 41b, and the editing program. A browser for viewing an image, image data including a right-eye image 41a and a left-eye image 41b, and the like are recorded.
[0033]
The RAM 52 reads application programs to be executed and image data to be processed from the HDD 51 or the like. For example, image data composed of a right-eye image 41 a and a left-eye image read from the HDD 51 is a right-eye image and a left-eye image to be displayed on the display 55 from a single image data in the RAM 52. A cutting process is performed to cut out.
[0034]
When the USB interface 53 is connected to the USB interface 18 of the digital camera 2 by USB, the USB interface 53 receives image data compressed by the digital camera 2 by the JPEG method. The image data received by the USB interface 53 is stored in the HDD 51 by the MPU 59.
[0035]
The IC card interface 54 reads out image data of an image photographed by, for example, the digital camera 2 stored in the IC card 8 when the IC card 8 is attached to a drive of the IC card 8 provided in the apparatus main body. The image data read by the USB interface 53 is stored in the HDD 51 by the MPU 59.
[0036]
The display 55 is composed of a CRT or a liquid crystal display panel, and before editing processing, an image 41 in which a right-eye image 41a and a left-eye image 41b as shown in FIG. 5 are arranged in the horizontal direction is displayed. indicate. Further, the right-eye cut image data and the left-eye cut image data that have undergone the cut-out processing of the right-eye image 41a and the left-eye image 41b are alternately displayed so as to have parallax. The display 55 may be a progressive method or an interlace method.
[0037]
The VRAM 56 for displaying an image on the display 55 includes memory units 56a and 56b having a capacity necessary for storing cut image data for one frame. For example, the memory unit 56a stores the right-eye cut image data for one frame, and the memory 56b stores the left-eye cut image data for one frame. Then, the VRAM 56 alternately outputs the cut-out image data for the right eye stored in the memory unit 56a and the cut-out image data for the left eye stored in the memory unit 56b to the display 55.
[0038]
The compression / decompression unit 58 decompresses the compressed image data, for example, when reading the image data compressed in the JPEG format recorded on the IC card 8 into the RAM 52. Further, when storing the edited image data, the compression / decompression unit 58 compresses the image data in the RAM 56 into the JPEG format and stores it in the HDD 51 or the IC card 8.
[0039]
The MPU 59 controls the entire apparatus. For example, the MPU 59 stores the image data read by the USB interface 53 or the IC card interface 54 in the HDD 51. Further, the MPU 59 is processed by the editing program for editing the image 41 composed of the right-eye image 41a and the left-eye image 41b from the HDD 51, the browser for viewing the image edited by this editing program, and these programs. The image data to be read is read into the RAM 52. Then, the MPU 59 performs a cutting process for cutting out the right eye image and the left eye image to be displayed on the display 55 from the read single image data, and the right eye cut image data processed by the RAM 52 is stored in the VRAM 56. Are output to the memory unit 56a, and the cut-out image data for the left eye are output to the memory unit 56b.
[0040]
The control device 3 as described above operates as follows when displaying the image data including the cut-out image for the right eye and the cut-out image for the left eye on the display 55. That is, the MPU 59 decompresses the image data composed of the right-eye image and the left-eye image compressed in the JPEG format from the HDD 51 or the like, and then reads the image data into the RAM 52, from the input device 7 operated by the user. 5 is cut out from the predetermined area of the right eye image 41a and the left eye image 41b shown in FIG. 5, and the cut out right eye cut image data is output to the memory unit 56a of the VRAM 56, and the left eye cut image is output. The data is output to the memory unit 56b. Next, the VRAM 56 alternately outputs cut-out image data for the right eye from the memory unit 56a and cut-out image data for the left eye from the memory unit 56b. Here, each cut-out image data is output to a display 55 of a progressive method in which all of the scanning lines are drawn in order. On the display 55, a cut-out image for the right eye and a cut-out image for the left eye are alternately displayed, and the user wearing the shutter glasses 4 can see the image displayed on the display 55 in a three-dimensional manner.
[0041]
By the way, when the right-eye image and the left-eye image are displayed on the progressive display 55, as shown in FIGS. 1 and 6, the right-eye cut image and the left-eye cut image are displayed for one frame. Is read out from the memory units 56a and 56b of the VRAM 56 and displayed alternately. In the shutter glasses 4, it is necessary to switch the shutters of the right-eye lens unit 4a and the left-eye lens unit 4a in synchronization with this switching. For this reason, a glasses control device 6 for controlling the shutter glasses 4 is attached between the display 55 and the VRAM 56.
[0042]
As shown in FIG. 7, the eyeglass control device 6 outputs the right-eye cut image data and the left-eye cut image data for one frame stored in the memory units 56 a and 56 b of the VRAM 56 to the display 55. A detection unit 61 that detects a vertical synchronization signal of each image data, one is connected to the detection unit 61, and the other is a terminal 62 of the right-eye lens unit 4a of the shutter glasses 4 and a terminal 63 of the left-eye lens unit 4b. And a switch 64 selectively connected to the switch.
[0043]
As shown in FIG. 8A, when the right-eye cut image data and the left-eye cut image data are alternately output from the VRAM 56 to the display 55, the detection unit 61 detects the vertical synchronization signal of each cut image data. Is detected. For example, when the cut-out image data for the right eye is output from the memory unit 56a of the VRAM 56, the detection unit 61 detects a vertical synchronization signal of the cut-out image data. When detecting the vertical synchronization signal of the cut-out image data for the right eye, the detection unit 61 allows the user to view the cut-out image data for the left eye to be displayed next with the left eye, as shown in FIG. 8B. In order to do so, the switch 64 is switched so that the left-eye lens unit 4b of the shutter glasses 4 is turned off and the right-eye lens unit 4a is turned on as shown in FIG. 8C. Thereby, when the cut-out image for the left eye is displayed on the display 55, the left-eye lens unit 4b is in a see-through state, and the right-eye lens unit 4a is in a see-through state.
[0044]
Next, when the detection unit 61 detects the vertical synchronization signal of the currently displayed left-eye cut-out image data, as shown in FIG. 8C, the right-eye cut-out image data to be displayed next is displayed on the user. Is switched off so that the right-eye lens portion 4a of the shutter glasses 4 is turned off and the left-eye lens portion 4b is turned on as shown in FIG. 8B. 64 is switched. Thereby, when the cut-out image for the right eye is displayed on the display 55, the right-eye lens unit 4a is in a see-through state, and the left-eye lens unit 4b is in a see-through state. Thereafter, by switching the shutters of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4 in accordance with the switching timing of the right-eye cut image and the left-eye cut image, as described above, The user can see the image displayed on the display 55 in three dimensions.
[0045]
The case where the interlaced display 55 is used will be described. The memory 56a of the VRAM 56 described above stores the right-eye cut-out image data in the horizontal scanning line data for each line, for example, the right eye in which even-numbered lines are thinned out. Cut-out image data is recorded, and left-eye cut-out image data in which the horizontal scanning line data of the left-eye cut-out image data is thinned out for each line, for example, odd-numbered lines, is recorded in the memory 56b. . Then, from the memory 56a, the cut-out image data for the right eye is output as image data for one field to the display 55, and the cut-out image data for the left eye is output from the memory 56b to the image for the next one field. Output as data. Therefore, as shown in FIG. 9A, the display 55 first displays an image with even-numbered lines thinned out, and then displays an image with odd-numbered lines thinned out.
[0046]
At this time, the glasses control device 6 controls the shutter glasses 4 as follows. That is, as shown in FIG. 9B, when the cut-out image data for the right eye for the first field is output from the memory 56a, the detection unit 61 detects the vertical synchronization signal provided at the end of this field. To do. When detecting the vertical synchronization signal of the cut-out image data for the right eye, the detection unit 61 allows the user to view the cut-out image data for the left eye to be displayed next with the left eye, as shown in FIG. 9C. In order to do so, the switch 64 is switched so that the left-eye lens unit 4b of the shutter glasses 4 is turned off and the right-eye lens unit 4a is turned on as shown in FIG. 9D. Thereby, when the cut-out image for the left eye is displayed on the display 55, the left-eye lens unit 4b is in a see-through state, and the right-eye lens unit 4a is in a light-shielding state.
[0047]
Next, when detecting the vertical synchronization signal of the currently displayed left-eye cut-out image data as shown in FIG. 9B, the detection unit 61 displays the next as shown in FIG. 9D. In order to allow the user to view the cut-out image data for the right eye with the right eye, the right-eye lens unit 4a of the shutter glasses 4 is turned off, and as shown in FIG. The switch 64 is switched so as to turn on the lens unit 4b. Thereby, when the cut-out image for the right eye is displayed on the display 55, the right-eye lens unit 4a is in a see-through state, and the left-eye lens unit 4b is in a see-through state. Thereafter, by switching the shutters of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4 in accordance with the switching timing of the right-eye cut image and the left-eye cut image, as described above, The user can see the image displayed on the display 55 in three dimensions.
[0048]
Even in the case of the progressive method, as described above, for example, right-eye cut-out image data in which even-numbered lines are thinned out is recorded in the memory unit 56a, and odd-numbered lines are thinned out to the left. Cut-out image data for the eye may be recorded. In this case, like the interlace method, the cut-out image for the right eye in which the even-numbered lines are thinned out and the cut-out image for the left eye in which the odd-numbered lines are thinned are alternately displayed on the display 55. Even when the right-eye cut-out image data and the left-eye cut-out image data are output to the VRAM 56 by thinning out the horizontal lines, the CCD element 12 of the digital camera 2 has several million pixels as described above. Since things are used, the user is not made to feel the deterioration of the image quality.
[0049]
Next, processing using the control device 3 for image data captured by attaching the adapter 5 to the digital camera 2 described above, that is, image data editing processing will be described with reference to FIG.
[0050]
First, in step S1, for example, when an icon for starting an editing program displayed on the display 55 is clicked with the mouse 57b, the MPU 59 reads the editing program from the HDD 51 into the RAM 52 and starts it, and the process proceeds to step S2.
[0051]
In step S2, the MPU 59 selects an image data file to be edited based on a command from the input device 57 including the keyboard 57a and the mouse 57b, and opens the selected file. Here, the image data is a file compressed in the JPEG format. Specifically, when the digital camera 2 and the control device 3 are connected by USB, the MPU 59 decompresses the corresponding file from the memory 17 of the digital camera 2 by the compression / decompression unit 58 and then reads the file to the RAM 52. When the IC card 8 is attached to the third drive, the corresponding file is decompressed from the IC card 8 by the compression / decompression unit 58 and read out to the RAM 52. When the corresponding file is recorded in the HDD 51, the file is compressed / compressed by the HDD 51. After decompression by the decompression unit 58, the data is read out to the RAM 52, and the process proceeds to step S3.
[0052]
In step S3, the MPU 59 outputs the read image data once recorded in the RAM 52 to the progressive or interlace display 55 via the VRAM 56, displays the image on the display 55, and proceeds to step S4. In step S3, the display 41 displays the image 41 shown in FIG. That is, on the display 55, the right-eye image 41a and the left-eye image 41b are displayed as one image side by side in the horizontal direction. The right-eye image 41a and the left-eye image 41b are shifted by the amount of left and right parallax. Note that the boundary portion 42 between the right-eye image 41a and the left-eye image 41b is displayed as a slightly blurred white line.
[0053]
In step S4, the MPU 59 displays a dividing line 71 for dividing the image 41 into the right eye image 41a and the left eye image 41 in the vertical direction of the display 55 as shown in FIG. The dividing line 71 is held by the pointer 72 when the mouse 57b is clicked, and is moved so as to overlap the boundary portion 42 of the image 41 with the user's eyes. Accordingly, the MPU 59 divides the image 41 into a right eye image 41a and a left eye image 41b. Thus, the user can easily distinguish the right-eye image 41a and the left-eye image 41b.
[0054]
In step S5, as shown in FIG. 11B, the MPU 59 makes it easy to see the vertical center of the right-eye image 41a and the left-eye image 41b divided by the division line 71 displayed on the display 55. The vertical center line 73a for the right eye image 41a and the vertical center line 73b for the left eye image 41b are displayed. Here, the MPU 59 displays the vertical center line 73a for the right eye image 41a and the vertical center line 73b for the left eye image 41b so that the distance from the division line 71 is equal. The vertical center line 73a for the right-eye image 41a is held by the pointer 72 when the mouse 57b is clicked, and is visually moved to the vertical center desired by the user. The In the same manner, the vertical center line 73b for the left eye image 41b is automatically moved in the same direction by the same amount as the movement amount of the vertical center line 73a for the right eye image 41a. Thus, the MPU 59 makes it easy for the user to see the vertical center of the right eye image 41a and the vertical center of the left eye image 41b, and the set vertical center lines 73a and 73b are used for the right eye in the next step. The image 41a and the left-eye image 41b are used as a guide for the cutting operation.
[0055]
In step S6, the MPU 59 makes it easy to see the horizontal center of the right-eye image 41a and the left-eye image 41b divided by the division line 71 displayed on the display 55, as shown in FIG. The horizontal center line 74 is displayed. Here, the MPU 59 displays the image for the right eye 41a and the image for the left eye 41b at the center in the vertical direction. The horizontal center line 74 is held by the pointer 72 when the mouse 57b is clicked, and is visually moved to the horizontal center desired by the user. Thus, the MPU 59 makes it easy for the user to see the horizontal center of the right-eye image 41a and the left-eye image 41b, and the right-eye image 41a and the left-eye image 41b with the vertical center lines 73a and 73b described above. The center points 75a and 75b are easily identified, and the next step is used as a guide for cutting out the right-eye image 41a and the left-eye image 41b.
[0056]
The center points 75a and 75b can be readjusted. That is, the vertical center lines 73a and 73b can be adjusted by moving the center line 73a for the right-eye image 41a in the horizontal direction again as shown in FIG. Adjustment of 74 can be performed by moving the horizontal center line 74 in the vertical direction, as shown in FIG.
[0057]
In step S 7, the MPU 59 performs a process for cutting out an image desired by the user. Specifically, in the right-eye image 41a, the user determines the start point 76 with the pointer 72 of the mouse 57b with reference to the vertical center line 73a, the horizontal center line 74, and the center point 75a, and the pointer 72 moves in the diagonal direction. Then, as shown in FIG. 11D, a substantially rectangular cut line 77a is displayed in the right eye image 41a. In the same manner, the MPU 59 displays a cut line 77b having the same shape as the cut line 77a in the left-eye image 41b. At this time, the MPU 59 determines that the interval between the dividing line 71 and the line on the dividing line 71 side of the cutoff line 77a is the same as the dividing line 71 of the left-eye image 41b. Opposite side The cut line 77b is displayed so as to be equal to the distance between the side edge of the cut line 77b and the line on the side edge side of the cut line 77b.
[0058]
Thus, the MPU 59 generates image data of the right-eye cut image 78a and image data of the left-eye cut image 78b for stereoscopic display on the display 55. Incidentally, as described above, the user may want to see how the user stereoscopically displays on the display 55 before saving the image data actually cut out in the HDD 51. Therefore, in step S8, the MPU 59 outputs the image data of the right-eye cut image 78a and the image data of the left-eye cut image 78b to the VRAM 56, and activates the preview mode. Details of this preview mode will be described later. In step S 10, the MPU 59 compresses the image data of the right-eye cut image 78 a and the image data of the left-eye cut image 78 b into the JPEG format by the compression / decompression unit 58 and then saves the data in the HDD 51. Details of this storage method will be described later.
[0059]
In the image data editing processing method as described above, a user-desired region is cut out from the image data of the image 41, so that a stereoscopic image that suits the user's preference can be displayed on the display 55. . Further, when editing the image data of the image 41, the vertical center lines 73a and 73b and the horizontal center line 74 are displayed on the display 55, so that the user can easily cut out the image 41. it can.
[0060]
Since the editing operation of the image 41 as described above is performed using the right-eye image 41a, the display unit 55 is used for the editing operation by causing the MPU 59 to automatically recognize the boundary portion 42. Only the right eye image 41a may be displayed.
[0061]
Next, the preview mode in step S8 will be described with reference to FIG. In step S 11, the MPU 59 activates the preview mode based on a command from the input device 57.
[0062]
In step S 12, the MPU 59 displays a display format selection screen on the display 55. Here, as a mode of displaying a stereoscopic image, as shown in FIG. 13A, a substantially rectangular frame 79a having an aspect ratio of 3: 4 and an aspect ratio of 9 as shown in FIG. 16 is a substantially rectangular frame 79b, and as shown in FIG. 13C, there is a substantially circular frame 79c. Then, based on the command from the input device 57 by the user, the MPU 59 selects any one frame 79 from the frames shown in FIGS. 13A to 13C and proceeds to step S13. .
[0063]
In step S13, the output order from the VRAM 56 of the image data of the right-eye cut image 78a and the image data of the left-eye cut image 78b is determined based on the input signal from the input device 57 by the user. Specifically, the output order is to display on the display 55 from the image data of the right-eye cut image 78a or to display on the display 55 from the image data of the left-eye cut image 78b.
[0064]
In step S14, the MPU 59 alternately displays the right-eye cut image 78a and the left-eye cut image 78b so that the display 55 has parallax. Specifically, the MPU 59 outputs the image data of the right-eye cut image 78 a to the memory unit 56 a of the VRAM 56, and outputs the image data of the left-eye cut image 78 b to the memory unit 56 b of the VRAM 56. The VRAM 56 alternately outputs the image data of the right-eye cut image 78a and the image data of the left-eye cut image 78b to the display 55 based on the output order of the image data determined in step S13. In addition, the right-eye cut image 78a and the left-eye cut image 78b are alternately displayed.
[0065]
As a result, as shown in FIG. 14A and FIG. 14B, the cut-out image 78a for the right eye and the cut-out image 78b for the left eye are displayed on the display 55 as being shifted. Specifically, the right-eye cut image 78a and the left-eye cut image 78b displayed on the display 55 are displayed such that the shift amount is 0 at the position of the user's viewpoint, and the shift amount is a position where the shift amount is 0. Are displayed so that the amount of deviation increases in the direction toward the front or the direction toward the back as viewed from the user. Hereinafter, the position where the deviation amount is 0 is referred to as a cross point 81. That is, in the image shown in FIG. 14A, when the position of the person is the cross point 81, the mountain is displayed in a direction that is behind the person and the flower is in front of the person. It is displayed with the direction shifted.
[0066]
Further, as described above, the glasses control device 6 switches the shutters of the right-eye lens unit 4a and the left-eye lens unit 4b in accordance with the output order of the image data in step S13. In this switching, the spectacles control device 6 detects the vertical synchronization signal of the image data of the right-eye cut image 78 a and the image data of the left-eye cut image 78 b by the detection unit 61, and the right-eye image displayed on the display 55 is displayed. The shutter of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4 is switched in accordance with the switching timing of the cut-out image 78a and the left-eye cut-out image 78b. Thereby, the user can see the image displayed on the display 55 in three dimensions. In subsequent steps, the user performs preview mode processing with the shutter glasses 4 on.
[0067]
In step S15, the depth adjustment, that is, the adjustment of the cross point 81 is performed in order to make the stereoscopic image most visible to the user. That is, the MPU 59 displays adjustment buttons 83 and 84 for adjusting the cross point 81 on the screen 82 shown in FIG. Here, the adjustment button 83 is for moving the cross point 81 in front of the plane, that is, horizontally in one direction, and the adjustment button 84 is for moving the cross point 81 in the middle of the screen, that is, horizontally in the other direction. Is for. Since these adjustment buttons 83 and 84 move the cross point 81 in the horizontal direction, they are displayed side by side in the horizontal direction on the screen 82 for easy operation.
[0068]
When the user presses the adjustment button 83 with the input device 57, the MPU 59 moves the cross point 81 forward, that is, in the lower left direction in the screen 82 of FIG. For example, when the cross point 81 moves to the position of the flower, the cut-out image 78a for the right eye and the cut-out image 78b for the left eye at the human position are shifted in one direction on the display 55, and the image at the mountain position is further enlarged. It will be displayed as if it is shifted in one direction. Thereby, it seems to the user wearing the shutter glasses 4 that there is a person in the back and a mountain in the back, based on the flower. When the user presses the adjustment button 84 with the input device 57, the MPU 59 moves the cross point 81 to the back, that is, in the upper right direction in the screen 82 in FIG. For example, when the cross point 81 moves to the mountain position, the cut-out image 78a for the right eye and the cut-out image 78b for the left eye at the human position are shifted in the other direction on the display 55, and the image at the flower position is further enlarged. It will be displayed as if it is shifted in the other direction. As a result, it seems to the user that there is a person in front of the mountain and a mountain in front of it. As described above, the user can perform depth adjustment, that is, adjustment of the cross point 81, at a position where the stereoscopic image is most easily seen.
[0069]
In step S 16, vertical adjustment is performed to make it easier for the user to see the stereoscopic image. That is, when the adapter 5 is attached to the digital camera 2 and photographing is performed, the adapter 5 may be attached to the digital camera 2 so that the image 41 shown in FIG. 5 is inclined. It is difficult to view such an inclined image 41 in a three-dimensional manner. Therefore, in this step S16, the MPU 59 displays on the screen 82 adjustment buttons 85 and 86 for adjusting the right-eye cut image 78a and the left-eye cut image 78b in the vertical direction. When the user presses the adjustment button 85 with the input device 57, the MPU 59 shifts the right-eye cut image 78a upward and the left-eye cut image 78b downward. When the user presses the adjustment button 86 with the input device 57, the MPU 59 shifts the right-eye cut image 78a downward and the left-eye cut image 78b upward. As described above, the user can adjust the vertical positions of the right-eye cut-out image 78a and the left-eye cut-out image 78b to the position where the stereoscopic image can be seen most easily. Since the adjustment buttons 85 and 86 move the image in the vertical direction, the adjustment buttons 85 and 86 are displayed side by side in the vertical direction in the screen 82 for easy operation.
[0070]
In the play view mode as described above, the depth and the cross point 81 are adjusted with the adjustment buttons 83 and 84 provided on the screen 82, and the right eye is cut out with the adjustment buttons 85 and 86 provided on the screen 82. Since the vertical adjustment of the image 78a and the left-eye cut-out image 78b can be performed, before the right-eye cut-out image 78a and the left-eye cut-out image 78b are stored in the HDD 51, the user is most stereoscopic. Images can be saved in an easy-to-view state.
[0071]
By the way, as shown in FIG. 15, for example, the input device 57 is configured on the stereoscopic image 78 in which the right-eye cut image 78a and the left-eye cut image 78b are alternately displayed in the above-described play view mode. The pointer 72 of the mouse 57b may be moved. At this time, if the pointer 72 is displayed two-dimensionally, that is, in a display state at the cross point 81, it is difficult for the user to see the pointer 72. Therefore, the MPU 59 shifts the pointer 72 in accordance with the parallax of the position of the pointer 72 on the stereoscopic image 78, that is, the shift amount of the right-eye cut image 78a and the left-eye cut image 78b. That is, as shown in FIG. 15, when the cross point 81 is at a person's position and the pointer 72 is near the back mountain in the stereoscopic image 78, the MPU 59 The pointer 72 is also displayed while being shifted in accordance with the shift amount of the left-eye cutout image 78b. When the pointer 72 is near the flower in the middle of the stereoscopic image 78, the MPU 59 cuts out the right-eye cutout at this position. The pointer 72 is also shifted and displayed in accordance with the shift amount between the image 78a and the left-eye cutout image 78b. Furthermore, when the pointer 72 is at the cross point 81, the MPU 59 displays the two-dimensional image without shifting the pointer 72 because there is no shift between the right-eye cut image 78a and the left-eye cut image 78b. Thus, when the pointer 72 moves on the stereoscopic image 78 for stereoscopic display, the user is always displayed according to the parallax of the image in the background, and the pointer 72 can be viewed stereoscopically. It is possible to prevent the user from seeing the pointer 72.
[0072]
Further, as shown in FIG. 15, when the image 41 is being edited, a character 87 can be input into the image 41. That is, when the position for inputting the character 87 in the stereoscopic image 78 is designated by the pointer 72 of the mouse 57b and the character (for example, “A”) is input by the keyboard 57a, the MPU 59 sets the character at the position in the stereoscopic image 78. 87 is displayed. At this time, the MPU 59 shifts the character 87 in accordance with the parallax on the coordinates where the character 87 on the stereoscopic image 78 is input, that is, the shift amount between the right-eye cut image 78a and the left-eye cut image 78b. indicate. That is, when the cross point 81 is at a person's position and the character 87 is displayed near a mountain in the back of the stereoscopic image 78, the MPU 59 causes the right-eye cut image 78a and the left-eye cut image 78b to be displayed at this position. The character 87 is also displayed so as to be shifted in accordance with the shift amount of the image, and when the character 87 is near the flower in the front of the three-dimensional image 78, the MPU 59 displays the right-eye cut image 78a and the left-eye cut-off at this position. Characters 87 are also shifted and displayed in accordance with the shift amount of the output image 78b. Furthermore, when the character 87 is displayed at the cross point 81, the MPU 59 displays the two-dimensional image without shifting the character 87 because there is no shift between the right-eye cut image 78a and the left-eye cut image 78b. To do. Thus, when the user displays the character 87 on the stereoscopic image 78 that performs stereoscopic display, the character 87 is always displayed in accordance with the parallax of the image in the background, and the character 87 can also be viewed stereoscopically. The character 87 can be prevented from being difficult to see. Further, when the shift amount of the character 87 is matched with the shift amount in the foreground in the image, the character 87 appears to the user as the forefront, and the character 87 can be emphasized.
[0073]
14A, when the right-eye cut image 78a and the left-eye cut image 78b are alternately displayed, the reference plane is the screen 82 of the display 55 or the screen shown in FIG. A frame 79 is formed. That is, the screen 82 and the frame 79 on the screen have a planar display form that does not consider parallax. For this reason, the user who is viewing the stereoscopic image 78 of FIG. 14A wearing the shutter glasses 4 displays the periphery of the stereoscopic image 78 displayed on the screen 82 in a planar manner. It becomes difficult to view the image 78 three-dimensionally. Therefore, a frame 88 having a predetermined width such as a frame is displayed around the stereoscopic image 78 as shown in FIG. When the amount of shift of the frame 88 is the most visible, for example, the same or more than the amount of shift of the flower, the stereoscopic image 78 seems to be displayed stereoscopically on the inside of the frame 88. Can show. In addition, when the amount of shift of the frame 88 is the deepest, for example, the amount of shift of the mountain is equal to or greater than the amount of shift of the mountain, the stereoscopic image 78 seems to have popped out of the frame 88 to the user. Can show. As described above, by providing the frame 88 having a predetermined width around the stereoscopic image 78, the stereoscopic image can be more easily seen by the user.
[0074]
Next, a method for managing the image data of the three-dimensional image 78 composed of the image data of the right-eye cut image 78a and the left-eye cut image 78b edited as described above, that is, in FIG. The method for managing cut image data in step S9 will be described with reference to FIG. When the image data of the right-eye cut image 79a and the image data of the left-eye cut image 79b shown in FIG. 14A are to be saved, first, the save button 89 displayed on the screen 82 with the mouse 57b of the input device 57 or the like. Is pressed. When the save button 89 is pressed by the pointer 72, the MPU 59 saves the image data of the right-eye cut image 79a and the image data of the left-eye cut image 79b on the RAM 52 to the HDD 51 or the IC card 8 via the bus. Specifically, as illustrated in FIG. 17, the MPU 59 includes information including a right-eye cut-out image data file 92, a left-eye cut-out image data file 93, and information relating these files 92 and 93 in the folder 91. Save the file 94.
[0075]
The right-eye cut image data file 92 is image data of the right-eye cut image 78a cut in step S7 in FIG. 10, and this image data is compressed by the compression / expansion unit 58 into the JPEG format. The left-eye cut image data file 93 is image data of the right-eye cut image 78b, and this image data is compressed by the compression / decompression unit 58 in the JPEG format.
[0076]
The information file 94 records the coordinates of the cross point 81 when the right-eye cut image 78a and the left-eye cut image 78b are alternately displayed. As described above, when the cut-out image data for the right eye with the even-numbered lines thinned out and the cut-out image data for the left eye with the odd-numbered lines thinned are displayed on the display 55, Line information indicating whether the data is the first line is recorded. That is, the information file 94 records data necessary for reproducing the stereoscopic image at the time of storage.
[0077]
In the data management method as described above, the right-eye cut-out image data file 92, the left-eye cut-out image data file 93, and the information file 94 are provided separately, so that these data are compressed and decompressed. You can re-edit. That is, since the folder 91 includes the right-eye cut image data file 92 and the left-eye cut image data file 93, the user again stores the right-eye cut image 78a and the left-eye cut image 78b. Re-editing such as enlargement or reduction can be performed.
[0078]
Further, the image data of the right-eye cut image 78a and the image data of the left-eye cut image 78b can be stored as shown in FIG. That is, the folder 96 includes an image data file 97 composed of image data composed of the right eye image 41a and the left eye image 41b shown in FIG. An information file 98 composed of information for generating the eye cut image 78b is recorded. That is, the image data file 97 is obtained by compressing the image data before the editing process shown in FIG. 10 into the JPEG format by the compression / decompression unit 58. Further, the information file 98 is recorded with position data of the dividing line 71, position data of the vertical center lines 73a and 73b, position data of the horizontal center line 74, and position data of the cut lines 77a and 77b shown in FIG. Yes. The information file 96 records the coordinates of the cross point 81 when the right-eye cut image 78a and the left-eye cut image 78b are alternately displayed. Further, when the cut-out image data for the right eye with the even-numbered lines thinned out and the cut-out image data for the left eye with the odd-numbered lines thinned are displayed on the display 55, which data is the first. Line information indicating whether the line is to be recorded is recorded. That is, the information file 98 records data necessary for reproducing the stereoscopic image at the time of storage.
[0079]
In the data management method as described above, the image data composed of the right-eye image 41a and the left-eye image 41b is stored. Therefore, even if this image data is compressed and expanded, the storage method shown in FIG. Further editing operations can be performed. Specifically, in this management method, an editing operation as shown in FIG. 10 is performed, such as reading out the image data file 97 and the information file 98 from the folder 96 and again cutting the image as shown in FIGS. Edit work can be done.
[0080]
Further, the image data of the right-eye cut image 78a and the image data of the left-eye cut image 78b can be stored as follows. That is, this storage method stores composite image data in which the horizontal scanning line data of the image data of the right-eye cut image 78a and the horizontal scanning line data of the image data of the left-eye cut image 78b are alternately stored. As shown in FIG. 19, the folder 101 contains right-eye cut-out image data in which even-numbered lines are thinned out and left-eye cut-out image data in which odd-numbered lines are thinned out. A composite image data file 102 in which the composite image data that has been combined is recorded is recorded.
[0081]
In such a management method, the information file is not provided in the image data management method shown in FIGS. 17 and 18 above, so that re-editing cannot be performed, but the data size can be reduced. it can. In this folder 101, in addition to the composite image data file 102, a cut-out image data file 92 for the right eye, a cut-out image data file 93 for the left eye shown in FIG. An information file 94 composed of information to be stored may be stored. Further, in this folder 101, in addition to the composite image data file 102, an image data file 97 composed of image data composed of the right eye image 41a and the left eye image 41b shown in FIG. You may make it preserve | save the information file 98 which consists of the information for producing | generating the image 78a for right eyes, and the image 78b for right eyes from the file 97. FIG.
[0082]
The different data management methods have been described above with reference to FIGS. 17 to 19, but the control device 3 stores image data in the HDD 51 by any one of the different data management methods illustrated in FIGS. 17 to 19. Alternatively, any one of these methods may be selected and stored in the HDD 51. For example, the saving method shown in FIG. 17 is convenient when the editing operation is interrupted and re-editing is performed. When the saving method shown in FIG. 18 is attached to an email and transmitted to the other party, the other party enlarges the image. It can be reduced and is convenient. Further, the saving method shown in FIG. 19 is convenient for saving a homepage or the like.
[0083]
Now, a browser that reads the data edited by the editing program as described above and saved in the recording means such as the HDD 51 in the format shown in FIGS. 17 to 19 and displays the data on the display 55 will be described.
[0084]
First, the activation of the browser will be described with reference to FIG. 20. In step S 21, for example, when the icon for starting the browser displayed on the display 55 is clicked with the mouse 57 b, the MPU 59 loads the browser program from the HDD 51. The data is read into the RAM 52, and the process proceeds to Step S22.
[0085]
In step S22, the MPU 59 displays the activation screen 111 shown in FIG. At this time, although details will be described later, the eyeglass control device 6 detects the signal on the activation screen 111 and controls on / off of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4.
[0086]
In step S 24, the MPU 59 displays the browser 112 on the screen 82 of the display 55. That is, the VRAM 56 outputs the image data for the right eye of the browser 112 from the memory unit 56 a to the display 55, and outputs the image for the left eye of the browser 112 to the display 55 from the memory unit 56 b. On the display 55, the right-eye image and the left-eye image of the browser 112 are alternately displayed so as to have a parallax. Thereby, the user wearing the shutter glasses 4 can view the screen of the browser 112 in three dimensions.
[0087]
In step S25, the MPU 59 opens the image data folder to be edited, that is, the folders 91, 96, and 101 shown in FIGS. 17 to 19, based on the command from the input device 57 including the keyboard 57a and the mouse 57b. Here, since the selected files 91, 96, 101 are compressed in the JPEG format, the MPU 59 decompresses the files 91, 96, 101 by the compression / decompression unit 58, reads them to the RAM 52, and displays the display 55. The right-eye cut image 78a and the left-eye cut image 78b are alternately displayed on the browser 112 displayed in FIG. That is, the VRAM 56 displays on the display 55 the right-eye cut image data in which the even-numbered lines recorded in the information files 94 and 98 are thinned and the left-eye cut-out image data in which the odd-numbered lines are thinned. In this case, based on the line information indicating which data is the first line, first, the image data of the right-eye cut image 78a is output from the memory unit 56a, and then the left-eye cut image 78b. The image data is output from the memory unit 56b, and thereafter, the three-dimensional image 78 is displayed on the display 55 by repeating this. Therefore, the right-eye cut image 78a and the left-eye cut image 78b are displayed further three-dimensionally in the three-dimensional frame 113 as viewed from the user wearing the shutter glasses 4. Become. In this way, by further displaying the stereoscopic image 78 in the stereoscopic frame 113, the browser 112 makes it easy for the user to see the stereoscopic image.
[0088]
Further, the termination operation of the browser 112 will be described with reference to FIG. 22. When the termination instruction unit 114 consisting of “X” in the corner portion of the browser 112 is clicked with the mouse 57b in step S31, the MPU 59 The termination operation of the browser 112 is started. Then, in step S32, the MPU 59 displays an end screen 115 that is substantially the same as the start screen 111 in the approximate center of the screen 82 of the display 55, as shown in FIG. At this time, although details will be described later, the spectacles control device 6 detects the signal on the end screen 115 and turns off both the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4. In step S33, the MPU 59 completes the end operation of the browser 112.
[0089]
By the way, when the browser 112 is activated, the shutter glasses 4 need to be driven. For this reason, when the activation screen 111 is displayed on the screen 82 of step S22 shown in FIG. 6 detects whether the browser 112 is activated. That is, when the browser 112 is activated, as shown in FIG. 24A, the VRAM 56 supplies a video signal of, for example, a white → black → white → black pattern for displaying the activation screen 111 on the display 55. Like to do.
[0090]
Here, the detection unit 61 of the spectacles control device 6 shown in FIG. 7 detects an image signal of a white → black → white → black pattern, and in step S25 in FIG. 20, the browser first output from the memory unit 56a. The right eye lens unit 4a of the shutter glasses 4 is turned off so that the user can see the right eye image with the right eye by matching the image data of the right eye image 112 with the output. The switch 64 is switched so that the ophthalmic lens unit 4b is turned on. Thereby, when the right-eye image is displayed on the display 55, the right-eye lens unit 4a is in a see-through state, and the left-eye lens unit 4b is in a light-shielding state.
[0091]
Next, as illustrated in FIG. 8 described above, when the detection unit 61 detects the vertical synchronization signal of the right-eye image data, the user views the left-eye image data of the browser 112 displayed next with the left eye. Therefore, the switch 64 is switched so that the left-eye lens portion 4b of the shutter glasses 4 is turned off and the right-eye lens portion 4a is turned on. Thereby, when the image for left eyes is displayed on the display 55, the lens part 4b for left eyes will be in a see-through state, and the lens part 4a for right eyes will be in a light-shielding state. Thereafter, by switching the shutters of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4 in accordance with the switching timing of the right-eye image 78a and the left-eye image 78b as described above, The user can view the image of the browser 112 displayed on the display 55 in three dimensions.
[0092]
The MPU 59 detects an image signal of a white → black → white → black pattern, thereby converting an icon, a character, or the like of an area on the screen 82 where the browser 112 is not displayed into an image having parallax. What is displayed on the entire screen may be viewed three-dimensionally. As a result, the entire screen becomes a three-dimensional display image, and it is possible to prevent a region where the three-dimensional image 78 composed of the right-eye cut image 78a and the left-eye cut image 78b is not displayed from flickering. As described above, the video signal of the white → black → white → black pattern is used as a synchronizing signal for synchronizing the shutter glasses 4 and the image displayed on the display 55 and detects that the browser 112 is opened. It is used as a detection signal for
[0093]
Further, when the browser 112 is terminated, the driving of the shutter glasses 4 needs to be stopped. For this reason, when the end screen is displayed on step S32 shown in FIG. The apparatus 6 detects whether or not the browser 112 has been terminated. That is, when the browser 112 ends, as shown in FIG. 24B, the VRAM 56 supplies an image signal of, for example, a white → black → black → white pattern for displaying the end screen 115 on the display 55. I am doing so.
[0094]
Here, when the detection unit 61 of the glasses control device 6 shown in FIG. 7 detects a video signal of a white → black → black → white pattern, a stereoscopic image cannot be seen thereafter, so the right side of the shutter glasses 4 Both the ophthalmic lens unit 4a and the left-eye lens unit 4b are turned off, and both the right-eye lens unit 4a and the left-eye lens unit 4b are made transparent. That is, the shutter glasses 4 are turned off and the lens units 4a and 4b are made transparent so that the planar display can be easily seen when the user does not activate the browser 112.
[0095]
In addition, when the icons, characters, etc. of the area on the screen 82 where the browser 112 is not displayed are changed to an image having parallax so that the user can see what is displayed on the entire screen in three dimensions. In other words, by detecting the video signal of this white → black → black → white pattern, the MPU 59 stops the image having parallax for icons, characters, and the like, and switches to an image without deviation. That is, the video signal of the white → black → black → white pattern is used as a detection signal for turning off the shutter glasses 4 and as a detection signal for detecting that the browser 112 is closed. .
[0096]
As described above, when the browser 112 is activated, the video signal of the white → black → white → black pattern is output from the VRAM 56, and the eyeglass control device 6 detects this signal, whereby the display 55 is displayed. The switching of the liquid-crystal shutters of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4 is controlled in synchronization with the right-eye image data and the left-eye image data of the browser 112 that are alternately output. Can do. Thereby, for example, when the right-eye image is displayed on the display 55, the right-eye lens unit 4a is in a see-through state, the left-eye lens unit 4b is in a see-through state, and the right-eye image is viewed with the left eye. The trouble can be eliminated. When the browser 112 ends, the video signal of the white → black → black → white pattern is output from the VRAM 56 and this signal is detected by the glasses detection device 6, so that the right eye of the shutter glasses 4 can be detected. By turning off both the lens unit 4a for the left eye and the lens unit 4b for the left eye, and making both the lens unit 4a for the right eye and the lens unit 4b for the left eye transparent, it is possible to make the planar display easy to see. Further, by using the image signals as described above for the start screen 111 and the end screen 115, it is possible to prevent the user from seeing.
[0097]
Note that the video signal at the start and end of the browser 112 is not limited to the white → black → white → black pattern or the white → black → black → white pattern at the start, and is not easily noticeable. Any color or combination may be used as long as it is a color pattern.
[0098]
Incidentally, there is a case where a second stereoscopic image is further superimposed on the stereoscopically displayed browser 112 that becomes the first stereoscopic image and displayed on the display 55. For example, as illustrated in FIG. 25, a stereoscopic image that has already been cut out is pasted on the browser 112 or the stereoscopic image 78 displayed on the browser 112 is moved. As shown in FIGS. 9 and 25, a right-eye cut-out image in which even-numbered lines of horizontal scanning line data are thinned out and a left-eye cut-out in which odd-numbered lines of horizontal scanning line data are thinned out. In the case of alternately displaying images, when the stereoscopic image 78 is pasted or moved on the browser 112, the left eye line of the stereoscopic image 78 is positioned on the right eye line of the browser 112. It may end up. That is, the stereoscopic image 78 displays the left-eye image when the browser 112 displays the right-eye image, or the stereoscopic image 78 displays the right-eye when the browser 112 displays the left-eye image. An image for use will be displayed. In this case, the user cannot see the stereoscopic image 78 stereoscopically. Therefore, as shown in FIG. 25, when the browser 112 moves the stereoscopic image 78 and the line of the browser 112 does not match the line of the stereoscopic image 78, the browser 112 converts the stereoscopic image 78 to one line in the vertical direction. The line of the browser 112 and the line of the stereoscopic image 78 are made to coincide with each other.
[0099]
Specifically, as shown in FIG. 26, in step S41, for example, the stereoscopic image 78 at the first position at the upper left in FIG. 25 is selected by the mouse 57b, and the stereoscopic image 78 at the second position at the lower right in FIG. In step S42, the MPU 59 moves the stereoscopic image 78 at the first position to the second position or pastes the stereoscopic image 78.
[0100]
In step S43, the MPU 59 determines that Y at the most upstream coordinate A (X, Y) in the scanning direction is for the right eye of the browser 112 at the second position where the stereoscopic image 78 is moved or pasted. It is detected whether it is on the horizontal scanning line or the horizontal scanning line for the left eye. Then, the MPU 59 ends the process when the first horizontal scanning line of the stereoscopic image 78 matches the horizontal scanning line of the browser 112, and proceeds to step S44 when they do not match. That is, when the first horizontal scanning line of the stereoscopic image 78 is for the right eye and Y is on the horizontal scanning line for the right eye of the browser 112, the horizontal scanning line of the browser 112 is displayed. The MPU 59 finishes the process assuming that the line of the first horizontal scanning line of the stereoscopic image 78 coincides with this line. Further, when the first horizontal scanning line of the stereoscopic image 78 is for the right eye and Y is on the horizontal scanning line for the left eye of the browser 112, the horizontal scanning line of the browser 112 is displayed. The MPU 59 proceeds to step S44 on the assumption that this line does not match the first horizontal scanning line of the stereoscopic image 78.
[0101]
In step S44, the MPU 59 moves the stereoscopic image 78 by one line up or down. As a result, the MPU 59 matches the first horizontal scanning line of the stereoscopic image 78 with the horizontal scanning line of the browser 112 so that the user can view the stereoscopic image 78 stereoscopically. Then, the MPU 59 ends the process.
[0102]
As described above, in the browser 112, even when the stereoscopic image 78 is moved and the stereoscopic image 78 is pasted, the stereoscopic image 78 is always converted into the line of the browser 112 and the stereoscopic image 78 as the image frame. Therefore, the user can always see a stereoscopic image.
[0103]
In addition, as illustrated in FIG. 27, a stereoscopic image 78 that is a second stereoscopic image displayed on the browser 112 that is a first stereoscopic image may be enlarged or reduced. As shown in FIGS. 9 and 27, the right-eye cut-out image in which even-numbered horizontal scanning lines are thinned out and the left-eye cut-out image in which odd-numbered horizontal scanning lines are thinned out alternately. When the stereoscopic image 78 is enlarged or reduced on the browser 112, the horizontal scanning line for the left eye of the stereoscopic image 78 is displayed on the horizontal scanning line for the right eye of the browser 112. May be located. That is, the stereoscopic image 78 displays the left-eye image when the browser 112 displays the right-eye image, or the stereoscopic image 78 displays the right-eye when the browser 112 displays the left-eye image. An image for use will be displayed. In this case, the user cannot see the stereoscopic image 78 stereoscopically. Therefore, as shown in FIG. 27, when the browser 112 enlarges or reduces the stereoscopic image 78, when the horizontal scanning line of the browser 112 does not match the horizontal scanning line of the stereoscopic image 78, The stereoscopic image 78 is shifted by one line in the vertical direction so that the browser 112 line and the stereoscopic image 78 line coincide.
[0104]
Specifically, as shown in FIG. 28, in step S51, a stereoscopic image 78 is selected by the input device 57, and the display magnification of the selected stereoscopic image 78 is designated. In step S52, the MPU 59 enlarges or reduces the stereoscopic image 78 based on the display magnification specified by the user.
[0105]
Then, in step S53, the MPU 59 determines the coordinate B on the most upstream side in the scanning direction of the image 121a obtained by enlarging the stereoscopic image 78 or the reduced image 121b. ₁ (X ₁ , Y ₁ ), B ₂ (X ₂ , Y ₂ Y) ₁ , Y ₂ Is on the horizontal scanning line for the right eye of the browser 112 or on the line for the left eye. Then, the MPU 59 ends the process when the first horizontal scanning line of the images 121a and 121b matches the horizontal scanning line of the browser 112, and proceeds to step S54 when they do not match. That is, if the first horizontal scanning line of the images 121a and 121b is for the right eye, Y ₁ , Y ₂ Is on the horizontal scanning line for the right eye of the browser 112, the MPU 59 assumes that the line of the browser 112 and the first horizontal scanning line of the stereoscopic image 78 coincide with each other. finish. In addition, when the line of the first horizontal scanning line of the stereoscopic image 78 is for the right eye, Y ₁ , Y ₂ Is located on the horizontal scanning line for the left eye of the browser 112, the MPU 59 determines that the line of the browser 112 and the first horizontal scanning line of the stereoscopic image 78 do not coincide with each other in step S44. Proceed to
[0106]
In step S54, the MPU 59 moves the images 121a and 121b by one line up or down, and matches the first horizontal scanning line of the images 121a and 121b with the horizontal scanning line of the browser 112. As another method, the MPU 59 is closest to the display magnification specified by the user so that the first horizontal scanning line of the images 121a and 121b matches the horizontal scanning line of the browser 112. The images 121a and 121b are enlarged or reduced again. By the above method, the MPU 59 matches the first line of the images 121a and 121b with the horizontal scanning line of the browser 112, and the user views the images 121a and 121b enlarged or reduced in three dimensions. To be able to. Then, the MPU 59 ends the process.
[0107]
As described above, in the browser 112, even when the images 121a and 121b are enlarged or reduced, the lines of the browser 112 and the lines of the stereoscopic image 78, which are the frames of the images 121a and 121b, are always matched. Therefore, the user can always see a stereoscopic image.
[0108]
By the way, an editing program for editing the image 41 composed of the right-eye image 41 a and the left-eye image 41 b as described above and a browser for viewing an image edited by the editing program are stored in the HDD 51. In addition, it can be stored and stored in a recording medium such as a magnetic disk, a magneto-optical disk, an optical disk, or a semiconductor memory. In this case, as shown in FIG. 6, these programs are loaded into the RAM 52 from the recording medium via the bus when the recording medium is loaded in the drive unit 131 and the program is activated by the input device 57. It is. And the process mentioned above is performed by the program read from the recording medium.
[0109]
These programs can also be installed in the HDD 51 from the drive unit 131 via a providing medium provided to the user such as a magnetic disk, a magneto-optical disk, an optical disk, or a semiconductor memory in which the program is recorded. In addition to installing these programs in the HDD 51 via such a providing medium, the programs can also be installed in the HDD 51 via a transmission / reception unit 132 from a download site wirelessly or by wire.
[0110]
Next, a network system 151 using the stereoscopic image system 1 configured as described above will be described with reference to FIG. The network system 151 includes a server device 152 that accumulates stereoscopic image data, and a personal terminal device 153 that accesses the server device 152 and downloads stereoscopic image data. The server device 152 and the plurality of personal terminal devices 153 are connected via a network.
[0111]
The server device 152 has substantially the same configuration as a normal computer, and a storage unit 161 that accumulates stereoscopic image data and the like, and a read that stores various programs such as a program that controls the overall operation. An only memory (Read-Only Memory, hereinafter also referred to as ROM) 162, a RAM 163 that once reads a program or the like recorded in the ROM 162, a transmission / reception unit 164 for transmitting / receiving data to / from the personal terminal device 153, and the whole And a control unit 165 composed of an MPU for controlling.
[0112]
In such a server device 152, a program for controlling the entire operation is once read from the ROM 162 to the RAM 163, and is executed by the control unit 165, whereby the operation of the entire device is controlled. In the server device 152, a home page composed of a stereoscopic image or the like is opened in the storage unit 161, and this home page can be accessed, that is, viewed from the personal terminal device 153.
[0113]
The personal terminal device 153 corresponds to the control device 3 described above and has a similar configuration. That is, as shown in FIG. 29, an HDD 51 in which browsing search software (browser 112) for displaying the image 41 in three dimensions, an e-mail program, and the like, and an application program and the like recorded in the HDD 51 are temporarily stored. RAM 52 to be read, display 55 for displaying image 41, VRAM 56, input device 57, compression / decompression unit 58 for decompressing data in JPEG format and compressing the data in JPEG format, and the whole. MPU59.
[0114]
The personal terminal device 153 is installed, for example, in an individual user's house, and is connected to the Internet 154 via a modulator / demodulator and a telephone line, a terminal adapter, an ISDN (Integrated Services Digital Network) line, a CATV (Cable Television) line, and the like. Connected to the provider in For example, when browsing a home page established on the server device 152, if the user operates the input device 57 to input a URL (Uniform Resource Locator) of a desired home page, the browser 112, TCP / IP protocol ( As a result, the personal terminal device 153 accesses the server device 152 via the Internet 154, downloads the accessed home page, and displays it on the display 55. Also, the user can use this personal terminal device 153 to send an e-mail to the personal terminal device 153 of another user via the Internet 154.
[0115]
Further, in this personal terminal device 153, as shown in FIG. 29, shutter glasses 4 for viewing an image displayed on the display 55 in three dimensions are provided between the VRAM 56 and the display 55. Connected through. Therefore, the user can see the image having parallax displayed on the homepage in three dimensions by putting on the shutter glasses 4.
[0116]
A case where a user browses a homepage established in the server device 152 by the personal terminal device 153 in the network system 151 as described above will be described. In the server device 152, stereoscopic image data is stored as an image having parallax, for example, by a method shown in FIG. As shown in FIG. 19, the stereoscopic image data is composed of right-eye cut-out image data with even-numbered lines thinned out and left-eye cut-out image data with odd-numbered lines thinned out. A composite image data file 102 in which the composite image data is recorded is stored. Since the composite image data file 102 has a small data size, the time for downloading the composite image data file 102 from the server device 152 can be shortened.
[0117]
On the other hand, in the personal terminal device 153, when browsing a home page as shown in FIG. 20 and FIG. 21 in step S61 shown in FIG. 30, first, an icon for starting a browser displayed on the display 55 is used as a mouse. When clicked at 57 b, the MPU 59 reads the browser program from the HDD 51 into the RAM 52, and displays the startup screen 111 shown in FIG. 21 on the screen 82 of the display 55. Here, as shown in FIG. 24A, the VRAM 56 supplies a video signal of a white → black → white → black pattern for displaying the activation screen 111 to the display 55. The detection unit 61 of the glasses control device 6 detects a video signal of a white → black → white → black pattern and detects that the browser 112 is activated. When the startup of the browser 112 is completed, the right-eye image data and the left-eye image data of the browser 112 are alternately output from the VRAM 56, and the right-eye image and the left-eye image are alternately displayed on the display 55. Displayed with parallax.
[0118]
Simultaneously with the start of the browser 112, when the right eye image of the browser 112 is displayed in step S 62, the glasses control device 6 sets the right eye lens 4 a of the shutter glasses 4 in a see-through state, and the left eye When the left-eye image of the browser 112 is displayed, the left-eye lens 4b of the shutter glasses 4 is made transparent, and the right-eye lens unit 4a The shutter glasses 4 are controlled so as to be in a light shielding state and to repeat this. As described above, by switching the shutters of the right-eye lens unit 4a and the left-eye lens unit 4b of the shutter glasses 4 in accordance with the switching timing of the right-eye image and the left-eye image of the browser 112, the usage can be performed. The person can view the image of the browser 112 displayed on the display 55 in three dimensions.
[0119]
In step S63, when the user operates the input device 57 to input the URL of a desired home page, the personal terminal device 153 accesses the server device 152 via the Internet 154 to access the accessed home page. Is downloaded and displayed on the display 55. It is also possible to select and download a 3D image posted on the homepage. For the selected image, stereoscopic image data is accumulated in the storage unit 161 of the server device 152 by the method shown in FIG. The image data shown in FIG. 17 includes a right-eye image data file 92, a left-eye image data file 93, and an information file 94 including information related to the files 92 and 93. Since this image data includes a right-eye image data file 92 and a left-eye image data file 93, an editing program for enlarging or reducing the right-eye image and the left-eye image on the personal terminal device 153 Can be done by.
[0120]
In the network system 151 as described above, stereoscopic image data is stored in the server device 152 by the method shown in FIGS. 17 and 19, and the user wears the shutter glasses 4 on the personal terminal device 153 side and displays it on the display 55. By viewing the displayed home page, the image displayed on the display 55 can be viewed three-dimensionally. For example, when a user purchases a product via the Internet 154, the user can view the product in three dimensions and can easily determine whether or not to purchase the product.
[0121]
The network system 151 can also exchange electronic mail between the personal terminal devices 153. For example, the image data obtained by attaching the adapter 5 to the digital camera 2 and performing the editing process described above is attached to an e-mail and transmitted to another personal terminal device 153. Here, a case where image data is stored in the HDD 51 of the personal terminal device 153 on the transmission side by the method shown in FIG. 17 will be described. In this case, as described above, the cut-out image data file 92 for the right eye, the cut-out image data file 93 for the left eye, and the information file 94 including information related to the files 92 and 93 are stored in the folder 91. Has been.
[0122]
In the personal terminal device 153 on the transmission side, the user operates the input device 57 to transmit the folder 91 to the address of the server device 152 that is the transmission destination. As a result, the transmitted folder 91 is accumulated in the storage unit 161 of the server device 152. Thereafter, when the personal terminal device 153 of the user who is the recipient accesses the address of the server device 152, the personal terminal device 153 of the recipient downloads the folder 91 and stores it in the HDD 51.
[0123]
In the personal terminal device 153 on the receiver side, when viewing an image stored in the folder 91, the browser 112 is activated by the procedure shown in FIG. Then, the user who is the receiver opens the received file 91 and the VRAM 56 alternately displays the right-eye cut image data file 92 and the left-eye cut image data file 93 on the display 55 so as to have parallax. As a result, the image displayed on the browser 112 with the shutter glasses 4 on can be viewed three-dimensionally. By the way, since the right-eye cut image data file 92 and the left-eye cut image data file 93 are stored in the folder 91, the user again selects the right-eye cut image 78a and the left-eye cut image 78b. Re-editing such as enlargement or reduction can be performed.
[0124]
Next, a case where image data is stored in the HDD 51 by the method shown in FIG. 18 will be described. In this case, as described above, in the folder 96, the image data file 97 composed of the image data composed of the right eye image 41a and the left eye image 41b shown in FIG. An information file 98 composed of information for generating the image 78a for the right eye and the image 78b for the right eye is stored.
[0125]
The personal terminal device 153 on the transmission side is transmitted to the folder 96 via the server device 152 by the user operating the input device 57 to the personal terminal device 153 of the user serving as the receiver.
[0126]
In the personal terminal device 153 on the receiver side, when viewing an image stored in the folder 96, the browser 112 is activated according to the procedure shown in FIG. Then, the user who is the receiver opens the received file 96 and the VRAM 56 alternately displays the right-eye cut image data file 92 and the left-eye cut image data file 93 on the display 55 so as to have parallax. As a result, the image displayed on the browser 112 with the shutter glasses 4 on can be viewed three-dimensionally. By the way, since there is an image data file 97 in this folder 91, the user again performs an editing operation as shown in FIG. 10, that is, an editing operation such as cutting of the right eye image and the left eye image. be able to.
[0127]
In the network system 151 as described above, since each personal terminal device 153 has at least the browser 112, it is possible to attach a stereoscopic image to an e-mail and exchange stereoscopic image data.
[0128]
The example in which image data is compressed and stored in the JPEG format has been described above, but the present invention may be a compression method such as MPEG (motion picture expert group). In addition, although an example of a still image has been described above, a moving image may be used.
[0129]
【The invention's effect】
According to the stereoscopic image data generation device and the stereoscopic image data generation method according to the present invention, the right-eye image With tear line The right eye image data file formed by cutting and the left eye image file With tear line Cross-point coordinate information for displaying the left-eye image data file, the right-eye image data, and the left-eye image data that are cut and formed so as to have parallax on the display unit. Record Thus, the user can perform re-editing such as enlarging or reducing the right-eye image data and the left-eye image data again.
[0130]
In addition, according to the stereoscopic image data generation device and the stereoscopic image data generation method according to the present invention, one image data file in which the right-eye image and the left-eye image are arranged across the boundary input from the input unit. And from one image data file Instruction means In Instructions Cross point coordinate information for displaying the right eye image and the left eye image cut according to the cut information indicating the positions of the one cut line and the other cut lines and the image for the left eye with parallax on the display unit. Record Therefore, the user can perform editing operations such as image cutting.
[0131]
Furthermore, according to the stereoscopic image data generation device and the stereoscopic image data generation method according to the present invention, With tear line The right eye image data file formed by cutting and the left eye image file With tear line Cross-point coordinate information for displaying the left-eye image data file, the right-eye image data, and the left-eye image data that are cut and formed so as to have parallax on the display unit. Record The stereoscopic image can be read using the information file thus obtained, and the horizontal scanning line data of the right-eye image data and the horizontal scanning line data of the left-eye image data are alternately stored. The three-dimensional image can be read using the synthesized image data file. When reading is performed using the right-eye image data file, the left-eye image data file, the right-eye image data, and the information file, editing operations such as image cutting can be performed.
[Brief description of the drawings]
FIG. 1 is a diagram illustrating an overall configuration of a stereoscopic image display system.
FIG. 2 is a block diagram illustrating a configuration of a digital camera.
FIG. 3 is a perspective view of an adapter attached to a lens barrel of a digital camera.
FIG. 4 is a diagram illustrating the configuration of the adapter.
FIG. 5 is a diagram illustrating an image captured by a CCD element when an adapter is attached to a digital camera.
FIG. 6 is a block diagram of a control device that edits and displays image data composed of a right-eye image and a left-eye image captured by a digital camera.
FIG. 7 is a block diagram of an eyeglass control device that controls shutter eyeglasses.
FIG. 8 is a diagram for explaining the switching timing of the right eye lens unit and the left eye lens unit of the shutter glasses in the progressive method.
FIG. 9 is a diagram for explaining the switching timing of the right eye lens unit and the left eye lens unit of the shutter glasses in the interlace method.
FIG. 10 is a diagram illustrating image data editing processing.
FIG. 11 is a diagram illustrating an editing screen.
FIG. 12 is a diagram illustrating a preview mode.
FIG. 13 is a diagram illustrating an image display mode in a preview mode.
FIG. 14 is a diagram illustrating a display screen in a play view mode.
FIG. 15 is a diagram illustrating a method of displaying a pointer and characters on the display screen in the play view mode.
FIG. 16 is a diagram illustrating a method of displaying a three-dimensional frame around an image.
FIG. 17 is a diagram illustrating a storage format of image data.
FIG. 18 is a diagram illustrating another example of a storage format of image data.
FIG. 19 is a diagram illustrating still another example of the image data storage format.
FIG. 20 is a diagram illustrating a startup procedure of a browser.
FIG. 21 is a diagram illustrating a browser startup screen.
FIG. 22 is a diagram illustrating a state in which an image is displayed on the browser.
FIG. 23 is a diagram illustrating a procedure for closing a browser.
FIG. 24 is a diagram illustrating signals at the time of a browser start screen and an end screen.
FIG. 25 is a diagram illustrating a state in which an image displayed on a browser is moved.
FIG. 26 is a diagram illustrating a procedure for moving an image displayed on a browser.
FIG. 27 is a diagram illustrating a state in which an image displayed on a browser is enlarged or reduced.
FIG. 28 is a diagram illustrating a procedure for enlarging or reducing an image displayed on a browser.
FIG. 29 is a diagram illustrating a network system using a stereoscopic image system.
FIG. 30 is a diagram illustrating a procedure for viewing a home page.
[Explanation of symbols]
1 stereoscopic image system, 2 digital camera, 3 control device, 4 shutter glasses, 5 adapter, 6 eyeglass control device

Claims

The right-eye image and the left-eye image generated by capturing the right-eye image in approximately the right half of one image sensor and generating the left-eye image in approximately the left half, with the boundary portion interposed therebetween. An input unit for inputting one image data file in which
A display unit that displays one image data file in which a right-eye image and a left-eye image are arranged across a boundary input from the input unit;
The dividing line is instructed to the boundary part of one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary part input from the input part, and the above-mentioned display displayed on the display part An instruction means for instructing a predetermined region of one of the right-eye image and the left-eye image with one cut line that forms a substantially rectangular shape ;
Position input means for operating the indicated position of the indicating means;
The right eye image or the left eye image corresponding to the area instructed by the instructing means is controlled so as to display the other image area with another cut line having a substantially rectangular shape. and file of the right-eye image data formed by cutting in the above cutting line of the image, and the file of the image data for the left eye formed by cutting in the above cutting line of the left-eye image, the image data and the for the right eye a left-eye image data and a control unit for controlling to store the folder information file and the recording medium in which the coordinate information of the cross point is recorded for displaying to have parallax on the display unit ,
The control device, when the instruction means that instructs the image for the right eye displayed on the display unit, a predetermined region of one of the images of the left eye image at tear line the one, and the division line The interval between the cut line of one of the one image and the line on the dividing line side is equal to the interval between the side edge opposite to the divided line of the other image and the line on the side edge of the other cut line. And a stereoscopic image data generation device that controls to display the other cut line.

The instruction means is displayed on the display section, the right-eye image of the cutoff line in cut and formed right-eye image and the left eye image of the image for the left eye formed by cutting in the cutting line You can adjust the cross point by moving horizontally with
The stereoscopic image data generation device according to claim 1, wherein when the cross point is adjusted, the control device records the coordinate of the cross point after the adjustment in the information file.

The right-eye image and the left-eye image generated by capturing the right-eye image in approximately the right half of one image sensor and generating the left-eye image in approximately the left half, with the boundary portion interposed therebetween. A step of inputting one image data file in which are arranged in the input unit;
Displaying one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary input from the input unit on the display unit;
An instruction means for instructing a dividing line to the boundary portion of one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary portion input from the input portion;
The instruction means instructing a predetermined region of one of the image for the right eye and the image for the left eye displayed on the display unit with one cut line having a substantially rectangular shape ;
Controlling to display the area of the other image of the right-eye image and the left-eye image corresponding to the area instructed by the instructing means with another cutting line having a substantially rectangular shape;
And file of the right-eye image data formed by cutting in the above cutting line of the right-eye image, and the file of the image data for the left eye formed by cutting in the above cutting line of the left-eye image, for the right eye controlling the image data and the left-eye image data to be stored in the folder information file and the recording medium in which the coordinate information of the cross point is recorded for displaying to have parallax on the display unit And
Said indicating means for image the right eye displayed on the display unit, when a predetermined region of one of the images of the left eye image are indicated on the cutting line of the one of the division line and said one of the images The other cut line is equal to the line on the side opposite to the divided line of the other image and the line on the side edge side of the other cut line is equal to the line on the side of the other cut line. A stereoscopic image data generation method for controlling to display a cut line.

Displayed on the display unit, and an image for the left eye formed by cutting in the above cutting line of the right-eye image for the right eye are formed by cutting in the above cutting line of the image and the left eye image horizontally You can move and adjust the above crosspoint,
4. The method for generating stereoscopic image data according to claim 3, wherein when the cross point is adjusted, the coordinates of the adjusted cross point are recorded in the information file.

The right-eye image and the left-eye image generated by capturing the right-eye image in approximately the right half of one image sensor and generating the left-eye image in approximately the left half, with the boundary portion interposed therebetween. An input unit for inputting one image data file in which
A display unit that displays one image data file in which a right-eye image and a left-eye image are arranged across a boundary input from the input unit;
The dividing line is instructed to the boundary part of one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary part input from the input part, and the above-mentioned display displayed on the display part An instruction means for instructing a predetermined region of one of the right-eye image and the left-eye image with one cut line that forms a substantially rectangular shape ;
Position input means for operating the indicated position of the indicating means;
Control is performed so that the area of the other image of the right-eye image or the left-eye image corresponding to the area instructed by the instructing means is displayed with another cut line having a substantially rectangular shape, from the input unit One image data file in which the image for the right eye and the image for the left eye are arranged across the input boundary, and the one cut line and the other cut line designated by the instruction means from the one image data file Information in which cross-point coordinate information for displaying the right-eye image and the left-eye image clipped according to the cut-out information so as to have parallax on the display unit is recorded. And a control device for controlling the file to be stored in a folder of the recording medium,
The control device, when the instruction means that instructs the image for the right eye displayed on the display unit, a predetermined region of one of the images of the left eye image at tear line the one, and the division line The interval between the cut line of one of the one image and the line on the dividing line side is equal to the interval between the side edge opposite to the divided line of the other image and the line on the side edge of the other cut line. And a stereoscopic image data generation device that controls to display the other cut line.

The instruction means is displayed on the display section, the right-eye image of the cutoff line in cut and formed right-eye image and the left eye image of the image for the left eye formed by cutting in the cutting line You can adjust the cross point by moving horizontally with
6. The stereoscopic image data generation device according to claim 5, wherein when the cross point is adjusted, the control device records the coordinate of the cross point after the adjustment in the information file.

The right-eye image and the left-eye image generated by capturing the right-eye image in approximately the right half of one image sensor and generating the left-eye image in approximately the left half, with the boundary portion interposed therebetween. A step of inputting one image data file in which are arranged in the input unit;
Displaying one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary input from the input unit on the display unit;
An instruction means for instructing a dividing line to the boundary portion of one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary portion input from the input portion;
The instruction means instructing a predetermined region of one of the image for the right eye and the image for the left eye displayed on the display unit with one cut line having a substantially rectangular shape ;
Controlling to display the area of the other image of the right-eye image and the left-eye image corresponding to the area instructed by the instructing means with another cutting line having a substantially rectangular shape;
One image data file in which the image for the right eye and the image for the left eye are arranged across the boundary input from the input unit , and the one cut line instructed by the instruction means from the one image data file, Cross-point coordinate information for displaying the cut-out information indicating the position of the other cut-out line and the right-eye image and the left-eye image cut in accordance with the cut-out information with parallax on the display unit. and a step of controlling so as to store the recorded information file in the folder of the recording medium,
Said indicating means for image the right eye displayed on the display unit, when a predetermined region of one of the images of the left eye image are indicated on the cutting line of the one of the division line and said one of the images The other cut line is equal to the line on the side opposite to the divided line of the other image and the line on the side edge side of the other cut line is equal to the line on the side of the other cut line. A stereoscopic image data generation method for controlling to display a cut line.

Displayed on the display unit, and an image for the left eye formed by cutting in the above cutting line of the right-eye image for the right eye are formed by cutting in the above cutting line of the image and the left eye image horizontally You can move and adjust the above crosspoint,
The stereoscopic image data generation method according to claim 7, wherein when the cross point is adjusted, the coordinates of the adjusted cross point are recorded in the information file.

The right-eye image and the left-eye image generated by capturing the right-eye image in approximately the right half of one image sensor and generating the left-eye image in approximately the left half, with the boundary portion interposed therebetween. An input unit for inputting one image data file in which
A display unit that displays one image data file in which a right-eye image and a left-eye image are arranged across a boundary input from the input unit;
The dividing line is instructed to the boundary part of one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary part input from the input part, and the above-mentioned display displayed on the display part An instruction means for instructing a predetermined region of one of the right-eye image and the left-eye image with one cut line that forms a substantially rectangular shape ;
Position input means for operating the indicated position of the indicating means;
The right eye image or the left eye image corresponding to the area instructed by the instructing means is controlled so as to display the other image area with another cut line having a substantially rectangular shape. and file of the right-eye image data formed by cutting in the above cutting line of the image, and the file of the image data for the left eye formed by cutting in the above cutting line of the left-eye image, the image data and the for the right eye and information file coordinate information of the cross point for displaying the left-eye image data so as to have a parallax on the display unit is recorded, data and the left eye of the horizontal scanning lines of the image data for the right eye A control device for controlling to store a composite image data file in which horizontal scanning line data of image data is alternately stored in a folder of a recording medium,
The control device, when the instruction means that instructs the image for the right eye displayed on the display unit, a predetermined region of one of the images of the left eye image at tear line the one, and the division line The interval between the cut line of one of the one image and the line on the dividing line side is equal to the interval between the side edge opposite to the divided line of the other image and the line on the side edge of the other cut line. And a stereoscopic image data generation device that controls to display the other cut line.

The instruction means is displayed on the display section, the right-eye image of the cutoff line in cut and formed right-eye image and the left eye image of the image for the left eye formed by cutting in the cutting line You can adjust the cross point by moving horizontally with
The stereoscopic image data generation device according to claim 9, wherein when the cross point is adjusted, the control device records the coordinate of the adjusted cross point in the information file.

The right-eye image and the left-eye image generated by capturing the right-eye image in approximately the right half of one image sensor and generating the left-eye image in approximately the left half, with the boundary portion interposed therebetween. A step of inputting one image data file in which are arranged in the input unit;
Displaying one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary input from the input unit on the display unit;
An instruction means for instructing a dividing line to the boundary portion of one image data file in which the image for the right eye and the image for the left eye are arranged across the boundary portion input from the input portion;
The instruction means instructing a predetermined region of one of the image for the right eye and the image for the left eye displayed on the display unit with one cut line having a substantially rectangular shape ;
Controlling to display the area of the other image of the right-eye image and the left-eye image corresponding to the area instructed by the instructing means with another cutting line having a substantially rectangular shape;
And file of the right-eye image data formed by cutting in the above cutting line of the right-eye image, and the file of the image data for the left eye formed by cutting in the above cutting line of the left-eye image, for the right eye An information file in which coordinate information of cross points for displaying the image data and the image data for the left eye on the display unit so as to have a parallax is recorded ; Controlling to store a composite image data file in which horizontal scanning line data of the left-eye image data is alternately stored in a folder of a recording medium,
Said indicating means for image the right eye displayed on the display unit, when a predetermined region of one of the images of the left eye image are indicated on the cutting line of the one of the division line and said one of the images The other cut line is equal to the line on the side opposite to the divided line of the other image and the line on the side edge side of the other cut line is equal to the line on the side of the other cut line. A stereoscopic image data generation method for controlling to display a cut line.

Displayed on the display unit, and an image for the left eye formed by cutting in the above cutting line of the right-eye image for the right eye are formed by cutting in the above cutting line of the image and the left eye image horizontally You can move and adjust the above crosspoint,
12. The method for generating stereoscopic image data according to claim 11, wherein when the cross point is adjusted, the coordinates of the adjusted cross point are recorded in the information file.