JP4624588B2

JP4624588B2 - Image generating apparatus, program, and information storage medium

Info

Publication number: JP4624588B2
Application number: JP2001096463A
Authority: JP
Inventors: 兼太郎山口
Original assignee: Namco Ltd; Namco Bandai Games Inc
Current assignee: Namco Ltd; Bandai Namco Entertainment Inc
Priority date: 2001-03-29
Filing date: 2001-03-29
Publication date: 2011-02-02
Anticipated expiration: 2021-03-29
Also published as: JP2002300612A

Description

【０００１】
【発明の属する技術分野】
本発明は、立体視画像の表示に好適な画像生成装置、これを実現するためのプログラム及び情報記憶媒体に関する。
【０００２】
【背景技術及び発明が解決しようとする課題】
近年、画像生成装置（例えば、ゲーム装置）や映画等の分野において、より臨場感あふれる雰囲気を作り出すため、立体視画像が用いられることがある。立体視画像は、観者（例えば、ゲーム装置の場合はプレーヤ）の左右の眼に対し、それぞれ左眼用及び右眼用の画像を用意し、これら画像の視差により観者の注視点にある物体に立体感を与える。
【０００３】
このような立体視画像を生成する方式としては、種々提案されており、専用の眼鏡等を必要としない方式として、例えばパララックスバリア（Parallax Barrier）方式、レンティキュラ（Lenticular）方式、インテグラルフォトグラフィ（Integral Photography）方式がある。
【０００４】
パララックスバリア方式は、表示画面に、短冊状（縦格子状）の隙間（スリット）を有するパララックスバリアの隙間から観者の左右の眼が見るべき画像を短冊状に配置し、左右の眼にそれぞれ互いに視差を有する左眼用画像と右眼用画像のみが見えるようにすることで、左右視差が形成され立体視が可能となる。
【０００５】
レンティキュラ方式も、パララックスバリア方式と同様に、互いに視差を有する左眼用画像と右眼用画像とを短冊状に並べて、左眼用短冊画像及び右眼用短冊画像の対として構成される短冊集合画像に対応したかまぼこ状のレンズ（レンティキュラレンズ）の焦点面に、左右の眼が見るべき画像としてそれぞれ上記左眼用画像及び右眼用画像が位置するように配置することで左右視差を形成する。
【０００６】
これに対して、インテグラルフォトグラフィ方式は、昆虫の複眼に似た蝿の眼レンズ板を配置し、各レンズに対応して更に視点を変えた方向の複数の画像を用意することで、左右視差だけでなく上下方向の視差を形成する。
【０００７】
このような種々の方式により生成される立体視画像は、専用の眼鏡等を観者に装着させる必要がなく、臨場感あふれる画像を表示することができる。
【０００８】
ところで、より臨場感あふれる雰囲気を作り出すために、立体視画像は、視点の移動可能範囲が大きいほうが望ましい。
【０００９】
しかしながら、パララックスバリア方式やレンティキュラレンズ方式では、簡素な構成で立体視を実現することができる一方、原理的に、立体視が可能な範囲が狭い。したがって、近年の半導体技術や実装技術等の進歩により電子機器の軽量化、携帯化が進み、携帯電話や携帯型ゲーム機、ＰＤＡ（Personal Digital Assistant）等に、これら方式を用いた表示装置を備えたとしても、観者の視点の移動可能範囲が制限され、立体視の不連続感が残る等、実用的ではない。
【００１０】
本発明は、以上のような課題に鑑みてなされたものであり、その目的とするところは、処理負荷をかけることなく視点の移動可能範囲を拡大させて立体視画像を表示することができる画像生成装置、これを実現するためのプログラム及び情報記憶媒体を提供することにある。
【００１１】
【課題を解決するための手段】
上記課題を解決するために、本発明は、画像生成を行う画像生成装置であって、左眼用画像及び右眼用画像をそれぞれ画面の上下方向に短冊状に分割した左眼用短冊画像及び右眼用短冊画像を対とした短冊集合画像が、画面の左右方向に複数配列された立体視画像を表示する表示手段と、前記画面の上下方向を第１の軸とした場合に、前記画面の前記第１の軸回りの回転角度を取得する角度取得手段と、取得された回転角度に応じて、短冊集合画像を変更する画像変更手段とを含み、前記画像変更手段は、各短冊集合画像の左眼用短冊画像と右眼用短冊画像とを入れ替えることを特徴とする。
【００１２】
また本発明に係るプログラムは、コンピュータにより使用可能なプログラム（情報記憶媒体又は搬送波に具現化されるプログラム）であって、上記手段をコンピュータに実現させることを特徴とする。また本発明に係る情報記憶媒体は、コンピュータにより使用可能な情報記憶媒体であって、上記手段をコンピュータに実現させるためのプログラムを含むことを特徴とする。
【００１３】
ここで、左眼用画像及び右眼用画像とは、本来観者の着目する物体に立体感を与えるために互いに左右方向の視差を有する画像であって、それぞれ観者の左眼で見るべき画像、右眼で見るべき画像をいう。
【００１４】
また、画面の上下方向に短冊状に分割するとは、画面の上下方向を長手方向として、画面の左右方向に複数の領域に分割することをいう。
【００１５】
また、立体視画像とは、この左眼用画像及び右眼用画像に基づく左右方向の視差によって、観者が注視する物体に立体感を与えるための画像をいう。なお、表示させる立体視画像は、３次元空間であるオブジェクト空間において生成されたオブジェクト画像であってもよいし、３次元画像を模した擬似的な２次元画像であってもよい。
【００１６】
更に、表示手段の画面とは、上述した立体視画像の表示画面を意味する。
【００１７】
更にまた、角度取得手段は、ソフトウェア又はハードウェアに関わらず、上述した表示手段の画面の上下方向である第１の軸回りの回転角度を取得する。このような角度取得手段としては、例えばジャイロセンサのようなハードウェアとしての角速度取得手段で角速度を取得し、これをソフトウェアで積分演算等を行って回転角度を取得するようにしてもよい。
【００１８】
本発明によれば、画面の上下方向である第１の軸回りの回転角度に応じて、観者の左眼で見るべき左眼用短冊画像、観者の右眼で見るべき右眼用短冊画像を互いに入れ替えて表示することにより、所定の回転角度を越えたときに発生する立体視の不連続性を解消し、観者の視点の移動可能範囲を拡大することができる。また、単に各短冊集合画像表示領域において、各短冊画像を入れ替えるだけでよいので、立体視画像生成に伴う処理負荷の増加を軽微なものに抑えつつ、観者の視点の移動可能範囲の拡大を実現することができる。
【００１９】
また本発明は、画像生成を行う画像生成装置であって、左眼用画像及び右眼用画像をそれぞれ画面の上下方向に（当該上下方向を長手方向として）短冊状に分割した左眼用短冊画像及び右眼用短冊画像を対とした第１〜第Ｎの短冊集合画像が、画面の左右方向に複数配列された立体視画像を表示する表示手段と、前記画面の上下方向を第１の軸とした場合に、前記第１の軸回りの回転角度を取得する角度取得手段と、取得された回転角度に応じて、少なくとも第１〜第Ｎの短冊集合画像のうちいずれかを変更する画像変更手段とを含み、前記画像変更手段は、第ｍ（１＜ｍ＜Ｎ、ｍは自然数）の短冊集合画像において、取得された回転角度に応じて、左眼用短冊画像及び右眼用短冊画像のうち少なくとも一方を、隣接する短冊集合画像の左眼用短冊画像若しくは右眼用短冊画像に変更することを特徴とする。
【００２０】
また本発明に係るプログラムは、コンピュータにより使用可能なプログラム（情報記憶媒体又は搬送波に具現化されるプログラム）であって、上記手段をコンピュータに実現させることを特徴とする。また本発明に係る情報記憶媒体は、コンピュータにより使用可能な情報記憶媒体であって、上記手段をコンピュータに実現させるためのプログラムを含むことを特徴とする。
【００２１】
本発明においては、取得された回転角度に応じて短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像を左右方向にずらすようにした。すなわち、左眼用短冊画像として、取得された回転角度に応じて隣接する短冊集合画像の左眼用短冊画像若しくは右眼用短冊画像をずらして表示させる。同様に、右眼用短冊画像としては、取得された回転角度に応じて隣接する短冊集合画像の左眼用短冊画像若しくは右眼用短冊画像をずらして表示させる。
【００２２】
これにより、観者の視点の移動に伴って、観察できる左眼用短冊画像及び右眼用短冊画像に基づいて左右方向の視差を維持させることが可能となるので、立体視の不連続感を解消し、観者の視点の移動可能範囲を拡大することができる。また、単に各短冊集合画像表示領域において、各短冊画像を左右方向にずらすだけでよいので、立体視画像生成に伴う処理負荷の増加を軽微なものに抑えつつ、観者の視点の移動可能範囲の拡大を実現することができる。
【００２３】
また本発明に係る画像生成装置、プログラム及び情報記憶媒体は、前記画像変更手段は、第ｍ（１＜ｍ＜Ｎ、ｍは自然数）の短冊集合画像において、取得された回転角度に応じて、左眼用短冊画像及び右眼用短冊画像のうち少なくとも一方を、当該回転角度の回転方向に基づき移動させた視点からの短冊画像に変更することを特徴とする。
【００２４】
本発明によれば、観者の視点の移動に応じて、観察できる左眼用短冊画像及び右眼用短冊画像に基づいて左右方向の視差を維持させた画像を、対応する短冊画像として表示させることにより、立体視の不連続感を解消し、観者の視点の移動可能範囲を拡大することができる。
【００２５】
また本発明に係る画像生成装置、プログラム及び情報記憶媒体は、前記視点からの短冊画像は、予め用意された画像であることを特徴とする。
【００２６】
本発明によれば、予め用意された画像を用いるようにしたので、画像生成に伴う処理負荷を伴うことなく、観者の視点の移動に伴って、立体視の不連続性が解消する立体視画像を表示させることができる。
【００２７】
また本発明に係る画像生成装置、プログラム及び情報記憶媒体は、前記角度取得手段によって取得された回転角度に応じて、オブジェクト空間での左眼用及び右眼用の仮想カメラの視点設定を行う仮想カメラ設定手段と、オブジェクト空間において設定された前記左眼用及び右眼用の仮想カメラを視点とした左眼用短冊画像及び右眼用短冊画像を生成する画像生成手段とを含み（或いは該手段をコンピュータに実現させ、或いは該手段をコンピュータに実現させるプログラムを含み）、前記視点からの短冊画像は、前記画像生成手段で生成された画像であることを特徴とする。
【００２８】
ここで、オブジェクト空間とは、例えば定義点（ポリゴンの頂点或いは自由曲面の制御点など）により形状が特定されるオブジェクトが配置される仮想的な３次元空間をいう。
【００２９】
また、仮想カメラとは、上述したオブジェクト空間における視点を意味する。
【００３０】
本発明によれば、更に、リアルタイム処理によって、オブジェクト空間におけるオブジェクト画像を生成するといういわゆる３次元画像の生成処理を適用するようにしたので、画面の回転角度に基づいて設定された視点からの画像を予め用意する必要がなくなると共に、当該画面の変化を滑らかに表現することができ、その変化のバリエーションを多様化させることができる。
【００３１】
また本発明に係る画像生成装置は、前記表示手段は、画面に表示される各短冊集合画像の対応した位置に短冊状の隙間を有するパララックスバリアを含み、前記パララックスバリアの隙間から、観者の右眼には各短冊集合画像の右眼用短冊画像、観者の左眼には各短冊集合画像の左眼用短冊画像が見えるように前記立体視画像が表示されることを特徴とする。
【００３２】
本発明によれば、表示手段の画面の前面に、立体視画像を構成する左眼用画像及び右眼用画像の対応した位置にその隙間が位置するように配置されるパララックスバリアを用いたパララックスバリア方式による立体視を行う場合に、観者の視点の移動可能範囲を拡大させる立体視画像を表示させる画像生成装置を安価に提供することができる。
【００３３】
また本発明に係る画像生成装置は、前記表示手段は、画面に表示される各短冊集合画像に対応して、焦点面が合うように配置されたレンティキュラレンズを含み、前記レンティキュラレンズを介して、観者の右眼には各短冊集合画像の右眼用短冊画像、観者の左眼には各短冊集合画像の左眼用短冊画像が見えるように前記立体視画像が表示されることを特徴とする。
【００３４】
本発明によれば、表示手段の画面の前面に、立体視画像を構成する左眼用画像及び右眼用画像の対応した位置に、その焦点面が合うように配置されるレンティキュラレンズ方式による立体視を行う場合に、観者の視点の移動可能範囲を拡大させる立体視画像を表示させる画像生成装置を安価に提供することができる。
【００３５】
また本発明に係る画像生成装置、プログラム及び情報記憶媒体は、前記角度取得手段は、前記第１の軸回りの回転角速度を検出する角速度検出手段によって検出された回転角速度に基づいて前記回転角度を取得することを特徴とする。
【００３６】
本発明によれば、角速度検出手段として安価で入手しやすいジャイロセンサを用いて、左右方向の視差を持たせるために必要な第１の軸回りの回転角度を取得するようにしたので、画像生成装置の小型軽量化及び低コスト化を図ることができる。
【００３７】
また本発明に係る画像生成装置、プログラム及び情報記憶媒体は、前記取得した回転角度を、時間経過に伴い所与の値に近付ける手段を含むことを特徴とする。
【００３８】
本発明によれば、角速度検出手段として安価で入手しやすいジャイロセンサの検出精度が著しく低い場合であっても、装置本体の第１の軸回りの回転角度に応じた短冊画像を含む立体視画像を表示可能な画像生成装置を提供することができる。この場合、臨場感あふれる立体視画像の表示と、低コスト化とを両立することができる。
【００３９】
【発明の実施の形態】
以下、本発明の好適な実施形態について図面を用いて説明する。
【００４０】
１．立体視の原理
本発明が適用された画像生成装置は、観者（例えば、ゲーム装置の場合はプレーヤ）の左右の眼に対し、それぞれ左眼用及び右眼用の画像を用意する。
【００４１】
図１（Ａ）、（Ｂ）に、このような画像生成装置によって生成された立体視画像の一例を示す。
【００４２】
画像生成装置は、立体視画像として図１（Ａ）に示すように、画面１０上に、左眼用画像ＩＬと右眼用画像ＩＲを表示する。この場合、左眼用画像ＩＬは、画面１０の観者の左眼Ｅ_Lにのみ見えるようになっており、右眼用画像ＩＲは、画面１０の観者の右眼Ｅ_Rにのみ見えるようになっている。
【００４３】
これにより、図１（Ｂ）に示すように、画面１０に表示される立体視画像は、左眼Ｅ_Lと注視点とを結ぶ視線と、右眼Ｅ_Rと注視点とを結ぶ視線との交点１２に位置するように感じられ、立体感のある物体が観察されることになる。
【００４４】
１．２立体視画像
このような立体視画像を生成することで観者の立体視を可能にする方式としては、種々の方式が知られており、例えばパララックスバリア方式や、レンティキュラ方式がある。
【００４５】
図２に、パララックスバリア方式による立体視表示を行う場合の画面の構成について模式的に示す。以下では、画面の左右方向の軸をｘ軸、画面の上下方向の軸をｙ軸、画面に対して垂直な方向の軸をｚ軸とする。
【００４６】
この場合、画像生成装置の画面３０の前面（観者の視点（左眼Ｅ_L、右眼Ｅ_R）が存在するｚ軸方向）には、パララックスバリア３２が配置される。
【００４７】
パララックスバリア３２は、画面のｙ軸方向にスリットが設けられている。
【００４８】
画面３０に表示される立体視画像の表示領域は、左眼用短冊画像表示領域（Ｌ）３４と右眼用短冊画像表示領域（Ｒ）３６とから構成されている。左眼用短冊画像表示領域３４及び右眼用短冊画像表示領域３６は、それぞれ画面３０のｙ軸方向に細長い短冊形状をしており、ｘ軸方向に交互に配置される。
【００４９】
パララックスバリア３２の各スリットは、観者の所与の観察点を基準として、それぞれ一組の左眼用短冊画像表示領域３４及び右眼用短冊画像表示領域３６を有する短冊集合画像表示領域３８に対応した位置に形成される。
【００５０】
図３に、左眼用短冊画像及び右眼用短冊画像と立体視画像の関係を説明するための図を示す。
【００５１】
左眼用短冊画像４０と右眼用短冊画像４２は、それぞれｘ軸方向に所与のライン幅ごとに分割される。このライン幅としては、例えば１ピクセルであってもよいし、数ピクセル単位であってもよいが、当該ライン幅はパララックスバリア３２のスリット幅と関連付けられる。なお、これら左眼用短冊画像４０及び右眼用短冊画像４２は、所与のフレーム周期で生成される。
【００５２】
このような所与のライン幅単位に分割された左眼用短冊画像４０₁〜４０_Nと右眼用短冊画像４２₁〜４２_Nとを交互に配置することによって、立体視画像４４を構成することができる。
【００５３】
すなわち、パララックスバリア３２のスリットに対応した左眼用短冊画像及び右眼用短冊画像の組み合わせを短冊集合画像とすると、立体視画像４４は、第１〜第Ｎの短冊集合画像４６₁〜４６_Nをｘ軸方向に配列することで構成される。
【００５４】
このように立体視画像を構成することによって、図２において、観者の左眼Ｅ_Lには、パララックスバリア３２の隙間から画面３０の左眼用短冊画像表示領域３４に表示された左眼用短冊画像が入射される。また、観者の右眼Ｅ_Rには、パララックスバリア３２の隙間から画面３０の右眼用短冊画像表示領域３６に表示された右眼用短冊画像が入射される。したがって、観者の左眼は左眼用短冊画像のみを、観者の右眼は右眼用短冊画像のみを見ることになり、これら左眼用短冊画像の集合である左眼用画像及び右眼用短冊画像の集合である右眼用画像による左右視差により立体視が可能となる。
【００５５】
図４に、レンティキュラ方式による立体視表示を行う場合の画面の構成について模式的に示す。
【００５６】
この場合、画像生成装置の画面５０の前面（観者の視点（左眼Ｅ_L、右眼Ｅ_R）が存在するｚ軸方向）には、レンティキュラレンズ５２が配置されている。
【００５７】
レンティキュラレンズ５２は、複数の円筒状凸レンズをｘ軸方向に連ねることで構成される。
【００５８】
画面５０に表示される立体視画像の表示領域は、左眼用短冊画像表示領域５４と、右眼用短冊画像表示領域５６とから構成されている。左眼用短冊画像表示領域５４及び右眼用短冊画像表示領域５６は、それぞれ画面のｙ軸方向に細長い短冊形状をしており、ｘ軸方向に交互に配置される。
【００５９】
レンティキュラレンズの各凸レンズは、観者の所与の観察点を基準として、それぞれ一組の左眼用短冊画像表示領域５４及び右眼用短冊画像表示領域５６を含む短冊集合画像表示領域５８に対応した位置に形成される。
【００６０】
図４において、観者の左眼Ｅ_Lには、レンティキュラレンズ５２の光屈折作用により、画面５０の左眼用短冊画像表示領域５４に表示された左眼用短冊画像が入射される。また、観者の右眼Ｅ_Rには、レンティキュラレンズ５２の光屈折作用により、画面５０の右眼用短冊画像表示領域５６に表示された右眼用短冊画像が入射される。したがって、観者の左眼は左眼用短冊画像のみを、観者の右眼は右眼用短冊画像のみを見ることになり、これら左眼用短冊画像の集合である左眼用画像及び右眼用短冊画像の集合である右眼用画像による左右視差により立体視が可能となる。
【００６１】
しかしながら、図２乃至図４に示したような複数の短冊集合画像をｙ軸方向に配列して構成した立体視画像による立体視を行う場合、観者の移動可能範囲が制限されるという問題がある。この点について、レンティキュラレンズ方式を例に説明する。
【００６２】
図５に、レンティキュラレンズ方式による立体視表示を行う場合に、観者の移動可能範囲について説明するための模式図を示す。
【００６３】
ただし、図４に示した部分と同一部分には同一符号を付し、適宜説明を省略する。また、第１〜第Ｎの短冊集合画像表示領域のうち、第ｍ（１＜ｍ＜Ｎ、ｍは自然数）の短冊集合画像が表示される第ｍの短冊集合画像表示領域に着目して説明する。
【００６４】
画面５０には、上述したように各短冊集合画像表示領域に、左眼用短冊画像及び右眼用短冊画像からなる短冊集合画像が表示される。すなわち、第ｍの短冊集合画像表示領域の場合、当該短冊集合画像表示領域を構成する左眼用短冊画像表示領域Ｌ_mに左眼用短冊画像ＩＬ_m、右眼用短冊画像表示領域Ｒ_mに右眼用短冊画像ＩＲ_mが表示される。
【００６５】
ここで、観者の左眼又は右眼の視線がＥ−１の場合、右眼用短冊画像ＩＲ_m及び左眼用短冊画像ＩＬ_mが表示される第ｍの短冊集合画像表示領域に対応したレンティキュラレンズ５２の凸レンズＣＬ_mより、第ｍの短冊集合画像の左眼用短冊画像ＩＬ_mが観察される。
【００６６】
また、観者の左眼又は右眼の視線がＥ−２の場合、この第ｍの短冊集合画像表示領域に対応したレンティキュラレンズ５２の凸レンズＣＬ_mより、第ｍの短冊集合画像の右眼用短冊画像ＩＲ_mが観察される。
【００６７】
したがって、観者の左眼Ｅ_L及び右眼Ｅ_Rからの視線がそれぞれＥ−１、Ｅ−２の場合、第ｍの短冊集合画像の左眼用短冊画像ＩＬ_m及び右眼用短冊画像ＩＲ_mの観察領域にあるため、左眼は画像ＩＬを、右眼は画像ＩＲを観察し、両画像による正しい左右視差により立体視が可能となる。
【００６８】
ところで、このような画面５０に対して、観者の視線がＥ−３のように移動した場合、第ｍの短冊集合画像表示領域に対応したレンティキュラレンズ５２の凸レンズＣＬ_mより、第（ｍ＋１）の短冊集合画像の右眼用短冊画像ＩＲ_m+1が観察されてしまう。同様に、観者の視線がＥ−４のように移動した場合、第ｍの短冊集合画像表示領域に対応したレンティキュラレンズ５２の凸レンズＣＬ_mより、第（ｍ−１）の短冊集合画像の左眼用短冊画像ＩＬ_m-1が観察されてしまう。
【００６９】
したがって、例えば観者の左眼Ｅ_L及び右眼Ｅ_Rからの視線がそれぞれＥ−２、Ｅ−４の場合、第ｍの短冊集合画像の右眼用短冊画像ＩＲ_m及び第（ｍ−１）の短冊集合画像の左眼用短冊画像ＩＬ_m-1の観察領域にあるため、左眼は画像ＩＲを、右眼は画像ＩＬを観察し、両画像による誤った視差により立体視が不可能となる。
【００７０】
このように、画面５０に対する観者の左眼Ｅ_L及び右眼Ｅ_Rからの視線方向によって、正しい左右視差を有する視差画像を観察することができないため、画面５０に対する観者の移動可能範囲が制限されることになる。
【００７１】
そこで、本発明が適用された画像生成装置では、画面と観者の視線方向の角度として、画面のｙ軸回りの回転角度を取得し、当該回転角度に応じて画面の各短冊集合画像表示領域に表示される左眼用短冊画像及び右眼用短冊画像を変更することで、観者の視点の移動可能範囲を拡大することを特徴としている。
【００７２】
これにより、観者の視点の移動可能範囲を越えてしまうと、正しい視差画像を観察することができなくなり、例えば立体視の不連続感が生じてしまうという問題を解消することができる。
【００７３】
２．原理構成
図６に、本発明が適用される画像生成装置（例えばゲーム装置）の原理構成の概要を示す。
【００７４】
この画像生成装置６０は、画像生成部６２、角度取得部６４、表示部６６を含む。画像生成部６２は、より具体的には左原画像生成部６８、右原画像生成部７０、立体視画像生成部７２、短冊画像表示位置変更部７４を含む。
【００７５】
画像生成部６２は、角度取得部６４によって取得されたｙ軸回りの回転角度に応じた立体視画像を生成し、表示部６６に出力する。
【００７６】
画像生成部６２は、より具体的には、角度取得部６４によって取得されたｙ軸回りの回転角度に応じて、表示部６６の観者の左眼と右眼に対して視差を有する立体視画像を生成する。このため左原画像生成部６８は、表示部６６の観者の左眼で見るべき左眼用画像を生成する。また、右原画像生成部７０は、表示部６６の観者の右眼で見るべき右眼用画像を生成する。
【００７７】
立体視画像生成部７２は、左原画像生成部６８によって生成された左眼用画像と、右原画像生成部７０によって生成された右眼用原画像とに基づいて、立体視画像を生成する。より具体的には、立体視画像生成部７２は、図３に示したように、左眼用原画像及び右眼用原画像をそれぞれ画面のｙ軸方向に短冊領域に分割し、分割した左眼用短冊画像と右眼用短冊画像を画面のｘ軸方向に交互に配列させた立体視画像を生成する。
【００７８】
短冊画像表示位置変更部７４は、角度取得部６４によって取得された回転角度に応じて、立体視画像生成部７２によって生成された各短冊集合画像の左眼用短冊画像、右眼用短冊画像のうち少なくとも一方を変更し、表示部６６に出力する。
【００７９】
また、角度取得部６４は、基準位置からのｙ軸回りの回転角度を取得し、画像生成部６２に出力する。角度取得部６４は、表示部６６と同一筐体内に含まれていなくてもよいが、同一筐体内に含まれる場合には表示部６６には、表示部６６自体の回転角度に応じた立体視画像を表示させることが可能となる。
【００８０】
表示部６６は、図１（Ａ）、（Ｂ）に示したように、立体視画像生成部７２及び短冊画像表示位置変更部７４によって生成された立体視画像として、表示部６６の観者の左眼には左眼用短冊画像、当該観者の右眼には右眼用短冊画像がそれぞれ同時に見えるように表示させる。
【００８１】
このような表示部６６としては、図２で説明したパララックスバリア、若しくは図４で説明したレンティキュラレンズを配置することで実現することができる。
【００８２】
このような構成の画像生成装置６０は、短冊画像表示位置変更部７４により、角度取得部６４で取得された回転角度に応じて、左眼用短冊画像及び右眼用短冊画像のうち少なくとも一方の画像を変更することによって、観者の視線の移動可能範囲を大幅に拡大して、より臨場感あふれる立体視画像を表示することができる。
【００８３】
この短冊画像表示位置変更部７４は、種々の方式にしたがって短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像を変更することで、観者の視点の移動可能範囲を拡大させることができる。
【００８４】
以下では、短冊画像表示位置変更部７４の動作態様によってそれぞれ異なる立体視画像を生成する第１〜第３の実施形態における画像生成装置について詳細に説明する。
【００８５】
３．第１の実施形態
図７に、本発明が適用された第１の実施形態における画像生成装置の短冊画像表示位置変更部の動作を説明するための説明図を示す。
【００８６】
第１の実施形態における画像生成装置の表示部の画面７６は、上述したようにｘ軸に沿って第１〜第Ｎの短冊集合画像表示領域を有している。第ｍ（１≦ｍ≦Ｎ、ｍは自然数）の短冊集合画像表示領域は、左眼用短冊画像表示領域Ｌ_m及び右眼用短冊画像表示領域Ｒ_mを含む。左眼用短冊画像表示領域Ｌ_mには、左眼用短冊画像ＩＬ_mが表示される。右眼用短冊画像表示領域Ｒ_mには、右眼用短冊画像ＩＲ_mが表示される。
【００８７】
ここで、角度取得部によって取得された回転角度が所与の閾値を越えると、短冊画像表示位置変更部は、各短冊集合画像において左眼用短冊画像及び右眼用短冊画像を入れ替える。例えば、第ｍの短冊集合画像表示領域の場合、角度取得部によって取得された回転角度が所与の閾値を越えたとき、第ｍの短冊集合画像表示領域の左眼用短冊画像表示領域Ｌ_mに右眼用短冊画像ＩＲ_m、右眼用短冊画像表示領域Ｒ_mに左眼用短冊画像ＩＬ_mが表示される。
【００８８】
このように、取得された回転角度に応じて短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像を入れ替えた短冊集合画像を画面７６に表示させることによって、立体視の不連続感を解消し、観者の視点の移動可能範囲を拡大することができる。また、単に各短冊集合画像表示領域において、各短冊画像を入れ替えるだけでよいので、立体視画像生成に伴う処理負荷の増加を軽微なものに抑えることができる。
【００８９】
３．１ゲーム装置
３．１．１外観
図８に、第１の実施形態における画像生成装置を適用したゲーム装置の外観正面図を示す。
【００９０】
第１の実施形態のゲーム装置（広義には、画像生成装置）８０は、図６に示した構成の画像生成装置を含み、更に、携帯可能な筐体８２の正面側に配置される画面８４、左操作部８６、右操作部８８を含む。
【００９１】
ここでは、説明の便宜上、画面８４の左右方向をｘ軸、画面８４の上下方向をｙ軸、画面に垂直な方向をｚ軸とする。
【００９２】
画面８４は、上述した立体視画像が表示されるＬＣＤを含み、その前面にパララックスバリア若しくはレンティキュラレンズが設けられている。すなわち、画面８４を構成するＬＣＤには、１枚（１フレーム）の左眼用画像を表示するための表示領域と、１枚の右眼用画像を表示するための表示領域とが、短冊状に左眼用短冊画像表示領域及び右眼用短冊画像表示領域として交互に配置され、両短冊画像が同時に表示される。
【００９３】
左操作部８６及び右操作部８８は、それぞれ１又は複数の押下ボタンにより構成される。これら左操作部８６及び右操作部８８は、プレーヤが例えば筐体８２を両手で把持した状態で、プレーヤの左手の指及び右手の指でそれぞれ操作可能となるように配置される。
【００９４】
このゲーム装置８０は、図８に示したｙ軸回りの回転角度を求め、求められた回転角度に応じて、短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像を変更した立体視画像を表示する。
【００９５】
３．１．２機能ブロック構成
図９に、第１の実施形態のゲーム装置の機能ブロック図の一例を示す。
【００９６】
なお同図において、第１の実施形態は、少なくとも処理部１００、表示部１９０、角速度検出部１９８を含めばよく、それ以外のブロック（例えば、操作部１６０、音出力部１９２、携帯型情報記憶装置１９４、通信部１９６）については任意の構成要素とすることができる。
【００９７】
ここで処理部１００は、装置全体の制御、装置内の各ブロックへの命令の指示、ゲーム処理、画像処理、又は音処理等の各種の処理を行うものであり、その機能は、各種プロセッサ（ＣＰＵ、ＤＳＰ等）、或いはＡＳＩＣ（ゲートアレイ等）等のハードウェアや、所与のプログラム（ゲームプログラム）により実現できる。
【００９８】
操作部１６０は、プレーヤが操作データを入力するためのものであり、図８に示した左操作部８６、右操作部８８を含み、その機能は、レバー、ボタン、マイク等のハードウェアにより実現できる。
【００９９】
主記憶部１７０は、処理部１００や通信部１９６等のワーク領域となるもので、その機能はＲＡＭ等のハードウェアにより実現できる。
【０１００】
情報記憶媒体（コンピュータにより使用可能な記憶媒体）１８０は、プログラムやデータ等の情報を格納するものであり、その機能はハードディスク、或いはメモリ（ＲＯＭ）等のハードウェアにより実現できる。処理部１００は、この情報記憶媒体１８０に格納される情報に基づいて本発明（第１の実施形態）の種々の処理を行う。すなわち情報記憶媒体１８０には、本発明（第１の実施形態）の手段（特に処理部１００に含まれるブロック）を実行するための情報（プログラム或いはデータ）が格納される。
【０１０１】
なお、情報記憶媒体１８０に格納される情報の一部又は全部は、装置への電源導入時等に主記憶部１７０に転送されることになる。また情報記憶媒体１８０には、本発明の処理を行うためのプログラム、画像データ、音データ、表示物の形状データ、本発明の処理を指示するための情報、或いはその指示にしたがって処理を行うための情報等を含ませることができる。
【０１０２】
表示部１９０は、第１の実施形態により生成された画像を出力するものであり、図８に示す画面８４を含み、その機能は、左眼用画像及び右眼用画像とに基づいて形成される左右視差による立体視が可能なＬＣＤ等のハードウェアにより実現できる。より具体的には、表示部１９０は、有限個の画素からなるＬＣＤの前面にパララックスバリア若しくはレンティキュラレンズが配置される。ＬＣＤには、１枚（１フレーム）の左眼用画像を表示するための表示領域と、１枚の右眼用画像を表示するための表示領域とが、短冊状に左眼用短冊画像表示領域及び右眼用短冊画像表示領域として交互に配置されている。パララックスバリアが配置される場合、その隙間からは、表示部１９０の観者の左眼には左眼用短冊画像表示領域に表示される左眼用短冊画像、右眼には右眼用短冊画像表示領域に表示される右眼用短冊画像のみが見えるようになっている。また、レンティキュラレンズが配置される場合、各短冊集合画像に対応したレンズの光屈折効果により、表示部１９０の観者の左眼には左眼用短冊画像表示領域に表示される左眼用短冊画像、右眼には右眼用短冊画像表示領域に表示される右眼用短冊画像のみが見えるようになっている。
【０１０３】
音出力部１９２は、第１の実施形態により生成された音を出力するものであり、その機能は、スピーカ等のハードウェアにより実現できる。
【０１０４】
携帯型情報記憶装置１９４は、プレーヤの個人データやゲームのセーブデータ等が記憶されるものであり、この携帯型情報記憶装置１９４としては、メモリカード等を考えることができる。
【０１０５】
通信部１９６は、外部（例えばホスト装置や他のゲーム装置）との間で通信を行うための各種の制御を行うものであり、その機能は、各種プロセッサ、或いは通信用ＡＳＩＣ等のハードウェアや、プログラム等により実現できる。
【０１０６】
角速度検出部１９８は、基準位置から、図８に示すｙ軸回りの回転角速度を検出するものであり、ジャイロセンサ等のハードウェアにより実現できる。検出された回転角速度は、積分演算により回転角度として把握される。ここではジャイロセンサを採用することにより、装置の低コスト化を図ることが可能となる。ただし、例えば磁気センサによる絶対角度の検出のように、基準位置からの図８に示すｙ軸回りの回転角度を安価な構成で検出できるのであれば、角速度検出部に代え、角度演算部を除去して角度取得部を含めるようにしてもよい。
【０１０７】
なお本発明（第１の実施形態）の手段を実行するためのプログラム或いはデータは、ホスト装置（サーバ）が有する情報記憶媒体からネットワーク及び通信部１９６を介して情報記憶媒体１８０に配信するようにしてもよい。このようなホスト装置（サーバ）の情報記憶媒体の使用も本発明の範囲内に含まれる。
【０１０８】
処理部１００（プロセッサ）は、ゲーム処理部１１０、画像生成部１２０、角度演算部１３０を含む。
【０１０９】
ゲーム処理部１１０は、各種モードの設定処理、ゲームの進行処理、選択画面の設定処理、オブジェクト（１又は複数のプリミティブ面）の位置やオブジェクト空間における回転角度（Ｘ、Ｙ又はＺ軸回り回転角度）を求める処理、オブジェクトを動作させる処理（モーション処理）、オブジェクト空間における視点の位置（仮想カメラの位置）や視線角度（仮想カメラの回転角度）を求める処理、マップオブジェクト等のオブジェクトをオブジェクト空間へ配置する処理、ヒットチェック処理、ゲーム結果(結果、成績)を演算する処理、複数のプレーヤが共通のゲーム空間でプレイするための処理、或いはゲームオーバー処理等の種々のゲーム処理を、操作部１６０からの操作データや、携帯型情報記憶装置１９４からの個人データや、保存データや、ゲームプログラム等に基づいて行う。
【０１１０】
ここで、オブジェクト空間とは、例えば定義点（ポリゴンの頂点或いは自由曲面の制御点など）により形状が特定されるオブジェクトが配置される仮想的な３次元空間をいう。
【０１１１】
また、仮想カメラとは、上述したオブジェクト空間における視点を意味する。
【０１１２】
画像生成部１２０は、ゲーム処理部１１０からの指示等にしたがって各種の画像処理を行い、例えばオブジェクト空間内で左眼用及び右眼用の仮想カメラ（視点）から見える左眼用画像及び右眼用画像を生成し、これらに基づいて生成される立体視画像を表示部１９０に出力する。その際、角度演算部１３０によって演算された回転角度に基づいて、例えばオブジェクト空間内で左眼用及び右眼用の仮想カメラ（視点）を設定し、これらから見える左眼用画像及び右眼用画像を生成する。
【０１１３】
角度演算部１３０は、角速度検出部１９８によって検出されたゲーム装置の図８に示すｙ軸回りの回転角速度に基づいて基準位置からの回転角度を演算して求める。より具体的には、角度演算部１３０は、角速度検出部１９８によって検出された回転角速度に対して積分演算を行って回転角度を取得する。この回転角度は、画像生成部１２０において、短冊画像の表示位置を変更するために用いられる。
【０１１４】
更に、処理部１００は、上記のゲーム処理結果に基づいて各種の音処理を行い、ＢＧＭ、効果音、又は音声等の音を生成し、音出力部１９２に出力する。
【０１１５】
なお、処理部１００の機能は、その全てをハードウェアにより実現してもよいし、その全てをプログラムにより実現してもよい。或いは、ハードウェアとプログラムの両方により実現してもよい。
【０１１６】
画像生成部１２０は、ジオメトリ処理部１２２、描画（レンダリング）部１２４、立体視画像処理部１２６を含む。
【０１１７】
ジオメトリ処理部１２２は、座標変換、クリッピング処理、透視変換、或いは光源計算等の種々のジオメトリ処理（３次元演算）を行う。そして、本実施形態では、オブジェクト空間における左眼用及び右眼用の仮想カメラの位置を、角度演算部１３０で求められた回転角度に応じて設定し、この設定した左眼用及び右眼用の仮想カメラそれぞれを視点として上述のジオメトリ処理を行い、同一フレームにおいて２種類のジオメトリ処理後（透視変換後）のオブジェクトデータ（オブジェクトの頂点座標、頂点テクスチャ座標、或いは輝度データ等）が、主記憶部１７０に格納される。
【０１１８】
描画部１２４は、左眼用及び右眼用の画像それぞれについて、ジオメトリ処理後（透視変換後）のオブジェクトデータと、所与のテクスチャとに基づいて、オブジェクトをフレームバッファに描画する。これにより、オブジェクトが移動するオブジェクト空間において、左眼用及び右眼用仮想カメラ（視点）から見える画像が描画（生成）される。
【０１１９】
立体視画像処理部１２６は、上述した左眼用及び右眼用仮想カメラを視点としたオブジェクト画像である左眼用画像及び右眼用画像から、表示部１９０のＬＣＤに立体視画像を表示するための立体視画像情報を生成する。より具体的には、立体視画像処理部１２６は、表示部１９０の画面の前面に配置されたパララックスバリア若しくはレンティキュラレンズに対応して、１枚（１フレーム）の左眼用画像を表示するための表示領域と、１枚の右眼用画像を表示するための表示領域とが、短冊状に左眼用短冊画像表示領域及び右眼用短冊画像表示領域として交互に配置される画面に、立体視画像を生成する。
【０１２０】
なお、本実施形態のゲーム装置は、１人のプレーヤのみがプレイできるシングルプレーヤモード専用のシステムにしてもよいし、このようなシングルプレーヤモードのみならず、複数のプレーヤがプレイできるマルチプレーヤモードを備えるシステムにしてもよい。
【０１２１】
また複数のプレーヤがプレイする場合に、これらの複数のプレーヤに提供するゲーム画像やゲーム音を、１つの端末を用いて生成してもよいし、ネットワーク（伝送ライン、通信回線）等で接続された複数の端末を用いて生成してもよい。
【０１２２】
３．１．３回転角度取得
第１の実施形態におけるゲーム装置は、角速度検出部１９８によって検出される回転角速度に基づく回転角度に応じて、第１〜第Ｎの短冊集合画像の左眼用短冊画像及び右眼用短冊画像を入れ替えることができる。
【０１２３】
そのため、第１の実施形態におけるゲーム装置は、角速度検出部１９８としてジャイロセンサが設けられ、図８に示すｙ軸回りの回転角速度ωｙを検出する。
ゲーム装置のｙ軸回りの回転角度θｙは、この回転角速度ωｙを積分することにより求められる。
【０１２４】
ところで、角速度検出部１９８としてのジャイロセンサは、一般に携帯型ゲーム装置に適用できるものは検出精度が低い。すなわち、小型軽量化と低コストとを両立させるジャイロセンサの検出精度は低いのが現状である。
【０１２５】
図１０に、このような検出精度の低いジャイロセンサにより検出される回転角速度ωｙとこれによって生成される回転角度θｙの変化を示す。
【０１２６】
時間経過に伴い、図８に示す筐体８２をｙ軸回りに回転させると、角速度検出部１９８としてのジャイロセンサによって、その回転角速度ωｙが検出される。例えば、ある時間ｔ１において回転を停止した場合、本来は回転角速度ωｙが０になるべきにもかかわらず、ジャイロセンサの検出精度に起因したある微小な回転角速度ωｙが検出されてしまう場合がある。
【０１２７】
上述したように回転角度θｙは、回転角速度ωｙを積分したものであるため、時間ｔ１以降はＡ１のように固定値になるべきにもかかわらず、微小な回転角速度ωｙが積分され、Ａ２のように次第に回転角度が変化してしまう。
【０１２８】
したがって、このような回転角度θｙに基づいて、各短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像を変更すると、筐体８２をｙ軸回りに回転させていないにもかかわらず、観者によって観察される立体視画像が変化してしまう。
【０１２９】
そこで、第１の実施形態におけるゲーム装置の角度演算部１３０では、角速度検出部１９８によって検出された回転角速度ωｙを積分演算して求められた回転角度θｙの値を常にゆっくりと所与の値（例えば、０）に近付けることによって、検出精度の低いジャイロセンサを角速度検出部１９８として適用した場合であっても、ジャイロセンサの検出精度に依存することなく、ゲームの面白みを増大させることができるようになっている。
【０１３０】
図１１に、検出精度の低いジャイロセンサにより検出される回転角速度ωｙと、これに基づいて第１の実施形態における角度演算部１３０によって演算された回転角度θｙの変化を示す。
【０１３１】
時間経過に伴い、図８に示す筐体８２をｙ軸回りに回転させると、角速度検出部１９８としてのジャイロセンサによって、その回転角速度ωｙが検出されるが、例えばある時間ｔ１において回転を停止した場合、本来は回転角速度ωｙが０になるべきにもかかわらず、ジャイロセンサの検出精度に起因したある微小な回転角速度ωｙが検出されてしまう場合がある。
【０１３２】
しかしながら、第１の実施形態では、常に回転角度θｙをゆっくり０に近付けるようにしているため、回転角速度ωｙを積分した回転角度θｙについて、時間ｔ１以降においてＡ１のようにならず、Ｂ１のように変化する。
【０１３３】
例えば、取得された回転角度θｙについて、（１）式に示すように所与の関数ｆにしたがって回転角度θｙを０に近付ける。
【０１３４】
θｙ＝ｆ（θｙ）・・・（１）
また、（２）式に示すように１未満の定数の乗算により回転角度θｙの絶対値が０に近付くようにしてもよい。
【０１３５】
θｙ＝β・θｙ（０＜β＜１、βは定数）・・・（２）
このように、回転角度θｙを０に戻すようにすることによって、角速度検出部１９８としてのジャイロセンサの誤差によりθｙが次第に正しい値からずれてしまうのを防ぐことができる。
【０１３６】
第１の実施形態におけるゲーム装置は、所与のフレーム周期で、このようにして角度演算部１３０に求められたｙ軸回りの回転角度θｙに応じて、画像生成部１２０においてオブジェクト空間における左眼用及び右眼用の仮想カメラを設定し、ジオメトリ処理部１２２においてジオメトリ処理された後、描画部１２４でこれに基づくオブジェクト画像が生成される。
【０１３７】
このようにして生成された左眼用画像及び右眼用画像は、図３に示すように、立体視画像処理部１２６において処理され、立体視画像が生成される。
【０１３８】
３．１．４ｙ軸回りの回転角度
次に、第１の実施形態において、図８に示すｙ軸回りの回転角度に応じて各短冊集合画像の左眼用短冊画像及び右眼用短冊画像を変更する短冊画像表示位置変更部の動作について説明する。
【０１３９】
図１２に、表示部１９０の画面に表示される左眼用画像及び右眼用画像とからなる立体視画像と観者の視点との関係を示す。
【０１４０】
ここでは、表示部１９０の画面２５０のｚ軸方向の所与の位置に、図２に示したパララックスバリア又は図４に示したレンティキュラレンズ（図示せず）が存在するものとする。また、画面２５０における注視点Ｍにおいて、画面２５０に垂直な方向におけるθｙの値を０（正面）とし、反時計回りを正方向とする。
【０１４１】
パララックスバリア方式又はレンティキュラ方式により、画面２５０に表示される立体視画像において、左眼用短冊画像表示領域Ｌ₁〜Ｌ_Nを合わせたものをＳＬ、右眼用短冊画像表示領域Ｒ₁〜Ｒ_Nを合わせたものをＳＲとすると、回転角度θｙの変化に伴い、観者の眼（左眼Ｅ_L、右眼Ｅ_R）がＳＬ、ＳＲに表示される画像を観察する範囲が交互に存在することになる。
【０１４２】
したがって、ＳＬには常に左眼Ｅ_L用の左眼用画像、ＳＲには常に右眼Ｅ_R用の右眼用画像を表示する場合、正面付近（回転角度θｙ＝０）の位置では、左眼Ｅ_L及び右眼Ｅ_Rには、それぞれＳＬ及びＳＲに表示される画像が観察され、正しい立体視を得ることができる。
【０１４３】
ところが、画面２５０における注視点Ｍと観者の視点との相対的な角度（ｙ軸回りの回転角度）が変化すると、例えば回転角度θｙの値がθｙ₁に観者の視点が移動したとき、左眼Ｅ_L´にはＳＲに表示される画像、右眼Ｅ_R´にはＳＬに表示される画像が観察されてしまい、互いに正しい左右視差を有しなくなるため、立体視が不可能となってしまう。
【０１４４】
なお、ここでは回転角度θｙ₁を中心に左眼用画像は左眼Ｅ_L´、右眼用画像は右眼Ｅ_R´として、所与のオフセット分だけずれた位置からそれぞれの画像を注視しているものとしている。
【０１４５】
そこで、第１の実施形態では、画面２５０における注視点Ｍと観者の視点との相対的な角度（ｙ軸回りの回転角度）に応じて、ＳＬ及びＳＲに表示すべき画像を変更するようにしている。
【０１４６】
より具体的には、観者の視点が正面付近（回転角度θｙ＝０）の位置では、ＳＬ及びＳＲには上述した場合と同様にそれぞれ左眼用画像ＩＬ及び右眼用画像ＩＲを表示させるが、回転角度θｙの値がθｙ₁のとき左眼用画像ＩＬ及び右眼用画像ＩＲを入れ替えて、ＳＬ及びＳＲにはそれぞれ右眼用画像ＩＲ及び左眼用画像ＩＬを表示させる。
【０１４７】
こうすることで、注視点Ｍと観者の視点との相対的な角度が変化しても、立体視の不連続性を解消する。
【０１４８】
３．１．５処理例
次に、上述した第１の実施形態の処理の詳細例について、フローチャートを用いて説明する。
【０１４９】
以下では、画面２５０上の第１〜第Ｎの短冊集合画像表示領域を構成する左眼用短冊画像表示領域Ｌ₁〜Ｌ_N、右眼用短冊画像表示領域Ｒ₁〜Ｒ_Nが、ｘ軸に沿って順にＲ₁、Ｌ₁、Ｒ₂、Ｌ₂、Ｒ₃、Ｌ₃、・・・と配列されているものとする。また、左眼用画像ＩＬを分割して得られる左眼用短冊画像をＩＬ₁〜ＩＬ_N、右眼用画像ＩＲを分割して得られる右眼用短冊画像をＩＲ₁〜ＩＲ_Nとする。
【０１５０】
図１３に、第１の実施形態におけるｙ軸回りの回転角度θｙに応じた立体視画像の生成処理の一例を示す。
【０１５１】
まず、処理部１００は、角速度検出部１９８によって検出されるｙ軸回りの回転角速度ωｙを取り出し、角度演算部１３０において積分演算を行ってｙ軸回りの回転角度θｙを取得する（ステップＳ１０）。
【０１５２】
次に、この取得したｙ軸回りの回転角度θｙの値が、「−（θ₁＋θ₂）／２」より小さいか否かを判別する（ステップＳ１１）。
【０１５３】
回転角度θｙの値が「−（θ₁＋θ₂）／２」より小さいと判別されたとき（ステップＳ１１：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_i（１≦ｉ≦Ｎ、ｉは自然数、以下同様）を右眼用短冊画像表示領域Ｒ_iに、左眼用短冊画像ＩＬ_iを左眼用短冊画像表示領域Ｌ_iにそのまま表示させるようにする（ステップＳ１２）。
【０１５４】
これにより、図１２におけるＳＬには左眼用画像、ＳＲには右眼用画像が表示され、観者の右眼には右眼用画像が、左眼には左眼用画像が観察され、正しい左右方向の視差を有する立体視画像による立体視が可能となる。
【０１５５】
また、回転角度θｙの値が「−（θ₁＋θ₂）／２」より小さくないと判別されたとき（ステップＳ１１：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「−θ₁／２」より小さいか否かを判別する（ステップＳ１３）。
【０１５６】
回転角度θｙの値が「−θ₁／２」より小さいと判別されたとき（ステップＳ１３：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_iを左眼用短冊画像表示領域Ｌ_iに、左眼用短冊画像ＩＬ_iを右眼用短冊画像表示領域Ｒ_iに表示させるように設定する（ステップＳ１４）。
【０１５７】
このように、各短冊集合画像表示領域において、左眼用短冊画像及び右眼用短冊画像を入れ替えることにより、ＳＬには右眼用画像、ＳＲには左眼用画像が表示され、観者の右眼には右眼用画像が、左眼には左眼用画像が観察され、正面位置から移動しながら観察される立体視について不連続感が発生しなくなり、観者の視点の移動可能範囲を拡大させることができる。
【０１５８】
回転角度θｙの値が「−θ₁／２」より小さいと判別されなかったとき（ステップＳ１３：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「θ₁／２」以下であるか否かを判別する（ステップＳ１５）。
【０１５９】
回転角度θｙの値が「θ₁／２」以下であると判別されたとき（ステップＳ１５：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_iを右眼用短冊画像表示領域Ｒ_iに、左眼用短冊画像ＩＬ_iを左眼用短冊画像表示領域Ｌ_iにそのまま表示させるようにする（ステップＳ１６）。
【０１６０】
回転角度θｙの値が「θ₁／２」以下であると判別されなかったとき（ステップＳ１５：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「（θ₁＋θ₂）／２」以下であるか否かを判別する（ステップＳ１７）。
【０１６１】
回転角度θｙの値が「（θ₁＋θ₂）／２」以下であると判別されたとき（ステップＳ１７：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_iを左眼用短冊画像表示領域Ｌ_iに、左眼用短冊画像ＩＬ_iを右眼用短冊画像表示領域Ｒ_iに表示させるように設定する（ステップＳ１８）。
【０１６２】
回転角度θｙの値が「（θ₁＋θ₂）／２」以下であると判別されなかったとき（ステップＳ１７：Ｎ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_iを右眼用短冊画像表示領域Ｒ_iに、左眼用短冊画像ＩＬ_iを左眼用短冊画像表示領域Ｌ_iにそのまま表示させるようにする（ステップＳ１９）。
【０１６３】
そして、ステップＳ１２、ステップＳ１４、ステップＳ１６、ステップＳ１８、ステップＳ１９で設定されたように、立体視画像生成部に生成された立体視画像の各短冊画像が、左眼用短冊画像表示領域Ｌ_i及び右眼用短冊画像表示領域Ｒ_iに表示される立体視画像が生成され（ステップＳ２０）、表示部１９０のＬＣＤに出力される（ステップＳ２１）。
【０１６４】
続いて、所与の終了操作の有無を判別し（ステップＳ２２）、終了操作がなかったと判別されたとき（ステップＳ２２：Ｎ）、ステップＳ１０に戻る。
【０１６５】
一方、所与の終了操作があったと判別されたとき（ステップＳ２２：Ｙ）、一連の処理を終了する（エンド）。
【０１６６】
このように第１の実施形態によれば、パララックスバリア方式やレンティキュラ方式のように左右視差による立体視を可能にするための立体視画像において、表示部の画面のｙ軸回りの回転角度に応じて左眼用短冊画像及び右眼用短冊画像を入れ替えて表示するようにしたので、立体視が可能な観者の視点の移動可能範囲を拡大することができる。
【０１６７】
４．第２の実施形態
第１の実施形態では、画面のｙ軸回りの回転角度に応じて各短冊集合画像表示領域に表示される左眼用短冊画像及び右眼用短冊画像を入れ替えるようにすることで、観者の視点の移動可能範囲を拡大するようにしていたが、本発明はこれに限定されるものではない。第２の実施形態では、画面のｙ軸回りの回転角度に応じて、各短冊集合画像表示領域に表示される左眼用短冊画像及び右眼用短冊画像を左右方向にずらすことで、観者の視点の移動可能範囲を拡大するようにしている。
【０１６８】
図１４に、第２の実施形態における画像生成装置の短冊画像表示位置変更部の動作を説明するための説明図を示す。
【０１６９】
第２の実施形態における画像生成装置の表示部の画面２６０は、上述したようにｘ軸に沿って第１〜第Ｎの短冊集合画像表示領域を有している。第ｍ（１≦ｍ≦Ｎ、ｍは自然数）の短冊集合画像表示領域は、左眼用短冊画像表示領域Ｌ_m及び右眼用短冊画像表示領域Ｒ_mを含む。左眼用短冊画像表示領域Ｌ_mには、左眼用短冊画像ＩＬ_mが表示される。右眼用短冊画像表示領域Ｒ_mには、右眼用短冊画像ＩＲ_mが表示される。
【０１７０】
ここで、角度取得部によって取得された回転角度が第１の回転方向に所与の閾値を越えると、短冊画像表示位置変更部は、各短冊集合画像において左眼用短冊画像及び右眼用短冊画像をずらす。例えば、第ｍの短冊集合画像表示領域の場合、第ｍの短冊集合画像表示領域の左眼用短冊画像表示領域Ｌ_mに当該短冊集合画像表示領域の右眼用短冊画像ＩＲ_m、右眼用短冊画像表示領域Ｒ_mに隣接する第（ｍ−１）の短冊集合画像表示領域の左眼用画像ＩＬ_m-1が表示される。
【０１７１】
一方、角度取得部によって取得された回転角度が第１の回転方向と反対方向の第２の回転方向に所与の閾値を越えると、短冊画像表示位置変更部は、各短冊集合画像において左眼用短冊画像及び右眼用短冊画像をずらす。例えば、第ｍの短冊集合画像表示領域の場合、第ｍの短冊集合画像表示領域の左眼用短冊画像表示領域Ｌ_mに隣接する第（ｍ＋１）の短冊集合画像表示領域の右眼用画像ＩＲ_m+1、右眼用短冊画像表示領域Ｒ_mに当該短冊集合画像表示領域の左眼用画像ＩＬ_mが表示される。
【０１７２】
このように、取得された回転角度に応じて短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像を左右方向にずらした短冊集合画像を画面２６０に表示させることによって、立体視の不連続感を解消し、観者の視点の移動可能範囲を拡大することができる。また、単に各短冊集合画像表示領域において、各短冊画像を左右方向にずらすだけでよいので、立体視画像生成に伴う処理負荷の増加を軽微なものに抑えることができる。
【０１７３】
第２の実施形態における画像生成装置についても、第１の実施形態と同様にゲーム装置に適用することができる。その構成及び動作は、図８乃至図１１に示した第１の実施形態と同様のため、その図示及び説明を省略する。
【０１７４】
第２の実施形態が、第１の実施形態が異なる点は、短冊画像表示位置変更部の動作である。
【０１７５】
図１２及び図１５を参照しながら、第２の実施形態における短冊画像表示位置変更部の動作を含む第２の実施形態の処理の詳細例について、フローチャートを用いて説明する。
【０１７６】
図１５に、第２の実施形態におけるｙ軸回りの回転角度θｙに応じた立体視画像の生成処理の一例を示す。
【０１７７】
処理部１００は、角速度検出部１９８によって検出されるｙ軸回りの回転角速度ωｙを取り出し、角度演算部１３０において積分演算を行ってｙ軸回りの回転角度θｙを取得する（ステップＳ３０）。
【０１７８】
次に、この取得したｙ軸回りの回転角度θｙの値が、「−（θ₁＋θ₂）／２」より小さいか否かを判別する（ステップＳ３１）。
【０１７９】
回転角度θｙの値が「−（θ₁＋θ₂）／２」より小さいと判別されたとき（ステップＳ３１：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_i-1を右眼用短冊画像表示領域Ｒ_iに、左眼用短冊画像ＩＬ_i-1を左眼用短冊画像表示領域Ｌ_iに表示させるようにする（ステップＳ３２）。
【０１８０】
これにより、図１２におけるＳＬには左眼用画像、ＳＲには右眼用画像が表示され、観者の右眼には右眼用画像が、左眼には左眼用画像が観察され、正しい左右方向の視差を有する立体視画像による立体視が可能となる。
【０１８１】
また、回転角度θｙの値が「−（θ₁＋θ₂）／２」より小さくないと判別されたとき（ステップＳ３１：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「−θ₁／２」より小さいか否かを判別する（ステップＳ３３）。
【０１８２】
回転角度θｙの値が「−θ₁／２」より小さいと判別されたとき（ステップＳ３３：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の左眼用短冊画像ＩＬ_i-1を右眼用短冊画像表示領域Ｒ_iに、右眼用短冊画像ＩＲ_iを左眼用短冊画像表示領域Ｌ_iに表示させるように設定する（ステップＳ３４）。
【０１８３】
このように、各短冊集合画像表示領域において、左眼用短冊画像及び右眼用短冊画像を１つずつずらすことにより、ＳＬには右眼用画像、ＳＲには左眼用画像が表示され、観者の右眼には右眼用画像が、左眼には左眼用画像が観察され、正面位置から移動しながら観察される立体視について不連続感が発生しなくなり、観者の視点の移動可能範囲を拡大させることができる。
【０１８４】
回転角度θｙの値が「−θ₁／２」より小さいと判別されなかったとき（ステップＳ３３：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「θ₁／２」以下であるか否かを判別する（ステップＳ３５）。
【０１８５】
回転角度θｙの値が「θ₁／２」以下であると判別されたとき（ステップＳ３５：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_iを右眼用短冊画像表示領域Ｒ_iに、左眼用短冊画像ＩＬ_iを左眼用短冊画像表示領域Ｌ_iにそのまま表示させるように設定する（ステップＳ３６）。
【０１８６】
回転角度θｙの値が「θ₁／２」以下であると判別されなかったとき（ステップＳ３５：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「（θ₁＋θ₂）／２」以下であるか否かを判別する（ステップＳ３７）。
【０１８７】
回転角度θｙの値が「（θ₁＋θ₂）／２」以下であると判別されたとき（ステップＳ３７：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の左眼用短冊画像ＩＬ_iを右眼用短冊画像表示領域Ｒ_iに、右眼用短冊画像ＩＲ_i+1を左眼用短冊画像表示領域Ｌ_iに表示させるようにする（ステップＳ３８）。
【０１８８】
回転角度θｙの値が「（θ₁＋θ₂）／２」以下であると判別されなかったとき（ステップＳ３７：Ｎ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像の右眼用短冊画像ＩＲ_i+1を右眼用短冊画像表示領域Ｒ_iに、左眼用短冊画像ＩＬ_i+1を左眼用短冊画像表示領域Ｌ_iに表示させるようにする（ステップＳ３９）。
【０１８９】
そして、ステップＳ３２、ステップＳ３４、ステップＳ３６、ステップＳ３８、ステップＳ３９で設定されたように、立体視画像生成部に生成された立体視画像の各短冊画像が、左眼用短冊画像表示領域Ｌ_i及び右眼用短冊画像表示領域Ｒ_iに表示される立体視画像が生成され（ステップＳ４０）、表示部１９０のＬＣＤに出力される（ステップＳ４１）。
【０１９０】
続いて、所与の終了操作の有無を判別し（ステップＳ４２）、終了操作がなかったと判別されたとき（ステップＳ４２：Ｎ）、ステップＳ３０に戻る。
【０１９１】
一方、所与の終了操作があったと判別されたとき（ステップＳ４２：Ｙ）、一連の処理を終了する（エンド）。
【０１９２】
なお、上述した左眼用短冊画像表示領域Ｌ₁、Ｌ_N、右眼用短冊画像表示領域Ｒ₁、Ｒ_Nのうち、ずらすべき短冊画像がない場合には、そのまま左眼用短冊画像及び右眼用短冊画像を表示させるようにしてもよいし、予め用意された短冊画像を表示するようにしてもよい。
【０１９３】
このように第２の実施形態によれば、パララックスバリア方式やレンティキュラ方式のように左右視差による立体視を可能にするための立体視画像において、表示部の画面のｙ軸回りの回転角度に応じて左眼用短冊画像及び右眼用短冊画像を１つ若しくは２つずつずらして表示するようにしたので、立体視が可能な観者の視点の移動可能範囲を拡大することができる。
【０１９４】
５．第３の実施形態
第１及び第２の実施形態では、画面のｙ軸回りの回転角度に応じて各短冊集合画像表示領域に表示される左眼用短冊画像及び右眼用短冊画像の位置を変更することで、観者の視点の移動可能範囲を拡大するようにしていたが、本発明はこれに限定されるものではない。第３の実施形態では、画面のｙ軸回りの回転角度に応じて、各短冊集合画像表示領域に表示される左眼用短冊画像若しくは右眼用短冊画像について、更に左方向若しくは右方向に移動させた視点からの短冊画像に変更することで、観者の視点の移動可能範囲を拡大するようにしている。
【０１９５】
例えば、図１２において、観者の視点が正面付近（回転角度θｙ＝０）の位置では、左眼Ｅ_L及び右眼Ｅ_Rには左眼用画像ＩＬ及び右眼用画像ＩＲが観察されるが、回転角度θｙの値がθｙ₁のとき、ＳＲには右眼用画像ＩＲを、ＳＬには右眼用画像ＩＲよりも更に右の方向から見た右眼用画像ＩＲＲに切り替えることにより、正しい立体視が得られるようにしている。
【０１９６】
この場合、右眼用画像ＩＲＲは、予め用意した画像であってもよいし、オブジェクト空間において仮想カメラを右眼用画像ＩＲよりも更に右側にオフセットした位置に設定して作成されたものであってもよい。
【０１９７】
また、逆方向に観者の視点が変化したときには、左眼用画像ＩＬについても同様に行う。
【０１９８】
図１６に、第３の実施形態における画像生成装置の短冊画像表示位置変更部の動作を説明するための説明図を示す。
【０１９９】
第３の実施形態における画像生成装置の表示部の画面２７０は、上述したようにｘ軸に沿って第１〜第Ｎの短冊集合画像表示領域を有している。第ｍ（１≦ｍ≦Ｎ、ｍは自然数）の短冊集合画像表示領域は、左眼用短冊画像表示領域Ｌ_m及び右眼用短冊画像表示領域Ｒ_mを含む。左眼用短冊画像表示領域Ｌ_mには、左眼用短冊画像ＩＬ_mが表示される。右眼用短冊画像表示領域Ｒ_mには、右眼用短冊画像ＩＲ_mが表示される。
【０２００】
ここで、角度取得部によって取得された回転角度が第１の回転方向に所与の閾値を越えると、短冊画像表示位置変更部は、各短冊集合画像において左眼用短冊画像及び右眼用短冊画像のうち一方に、更に視点を移動させた場合の短冊画像を表示させる。例えば、第ｍの短冊集合画像表示領域の場合、第ｍの短冊集合画像表示領域の左眼用短冊画像表示領域Ｌ_mにはそのまま当該短冊集合画像表示領域の左眼用短冊画像ＩＬ_mが、右眼用短冊画像表示領域Ｒ_mには更に視点を左方向に移動させた左眼用画像ＩＬＬを分割して得られる左眼用短冊画像ＩＬＬ_mが表示される。これにより、観者の左眼には画像ＩＬＬが、右眼には画像ＩＬが観察されるため、立体視の不連続性が解消される。
【０２０１】
同様に、角度取得部によって取得された回転角度が第１の回転方向と反対方向の第２の回転方向に所与の閾値を越えると、短冊画像表示位置変更部は、各短冊集合画像において左眼用短冊画像及び右眼用短冊画像のうち一方に、更に視点を移動させた場合の短冊画像を表示させる。例えば、第ｍの短冊集合画像表示領域の場合、第ｍの短冊集合画像表示領域の左眼用短冊画像表示領域Ｌ_mには更に視点を右方向に移動させた右眼用画像ＩＲＲを分割して得られる右眼用短冊画像ＩＲＲ_mが、右眼用短冊画像表示領域Ｒ_mにはそのまま当該短冊画像表示領域の右眼用短冊画像ＩＲ_mが表示される。
【０２０２】
このように、取得された回転角度に応じて短冊集合画像を構成する左眼用短冊画像及び右眼用短冊画像のうち一方に、更に視点を移動させた短冊画像に変更した短冊集合画像を画面２７０に表示させることによって、立体視の不連続感を解消し、観者の視点の移動可能範囲を拡大することができる。
【０２０３】
第３の実施形態における画像生成装置についても、第１及び第２の実施形態と同様にゲーム装置に適用することができる。その構成及び動作は、図８乃至図１１に示した第１の実施形態と同様のため、その図示及び説明を省略する。
【０２０４】
第３の実施形態が、第１及び第２の実施形態が異なる点は、短冊画像表示位置変更部の動作である。
【０２０５】
図１２及び図１７を参照しながら、第３の実施形態における短冊画像表示位置変更部の動作を含む第２の実施形態の処理の詳細例について、フローチャートを用いて説明する。
【０２０６】
図１７に、第３の実施形態におけるｙ軸回りの回転角度θｙに応じた立体視画像の生成処理の一例を示す。
【０２０７】
処理部１００は、角速度検出部１９８によって検出されるｙ軸回りの回転角速度ωｙを取り出し、角度演算部１３０において積分演算を行ってｙ軸回りの回転角度θｙを取得する（ステップＳ５０）。
【０２０８】
次に、この取得したｙ軸回りの回転角度θｙの値が、「−（θ₁＋θ₂）／２」より小さいか否かを判別する（ステップＳ５１）。
【０２０９】
回転角度θｙの値が「−（θ₁＋θ₂）／２」より小さいと判別されたとき（ステップＳ５１：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像について、更に左方向に移動させた左眼用仮想カメラからの左眼用画像ＩＬＬを分割して得られる左眼用短冊画像ＩＬＬ_iを右眼用短冊画像表示領域Ｒ_iに、同様に左眼用短冊画像ＩＬＬ_iを左眼用短冊画像表示領域Ｌ_iに表示させるように設定する（ステップＳ５２）。
【０２１０】
これにより、図１２におけるＳＬにはＩＬＬが表示され左眼から観察され、ＳＲにはＩＬＬが表示され右眼から観察され、互いに左右方向の視差がないため立体視ができない状態となる。しかしながら、観者の視点を移動させることによる不連続性を解消できる利点がある。
【０２１１】
また、回転角度θｙの値が「−（θ₁＋θ₂）／２」より小さくないと判別されたとき（ステップＳ５１：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「−θ₁／２」より小さいか否かを判別する（ステップＳ５３）。
【０２１２】
回転角度θｙの値が「−θ₁／２」より小さいと判別されたとき（ステップＳ５３：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像について、更に左方向に移動させた左眼用仮想カメラからの左眼用画像ＩＬＬを分割して得られる左眼用短冊画像ＩＬＬ_iを右眼用短冊画像表示領域Ｒ_iに、左眼用画像ＩＬを分割して得られる左眼用短冊画像ＩＬ_iを左眼用短冊画像表示領域Ｌ_iに表示させるように設定する（ステップＳ５４）。
【０２１３】
このように、更に左方向に視点を移動させた左眼用仮想カメラからの左眼用画像ＩＬＬを用いて、ＳＲには当該左眼用画像ＩＬＬ、ＳＬには左眼用画像ＩＬが表示される。これにより、ＳＬを見る観者の右眼にはＩＬが観察され、ＳＲを見る観者の左眼にはＩＬＬが観察されることになり、正面位置から移動しながら観察される立体視について不連続感が発生しなくなり、観者の視点の移動可能範囲を拡大させることができる。
【０２１４】
回転角度θｙの値が「−θ₁／２」より小さいと判別されなかったとき（ステップＳ５３：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「θ₁／２」以下であるか否かを判別する（ステップＳ５５）。
【０２１５】
回転角度θｙの値が「θ₁／２」以下であると判別されたとき（ステップＳ５５：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像について、右眼用画像ＩＲを分割して得られる右眼用短冊画像ＩＲ_iを右眼用短冊画像表示領域Ｒ_iに、左眼用画像ＩＬを分割して得られる左眼用短冊画像ＩＬ_iを左眼用短冊画像表示領域Ｌ_iに表示させるように設定する（ステップＳ５６）。
【０２１６】
回転角度θｙの値が「θ₁／２」以下であると判別されなかったとき（ステップＳ５５：Ｎ）、取得されたｙ軸回りの回転角度θｙの値が「（θ₁＋θ₂）／２」以下であるか否かを判別する（ステップＳ５７）。
【０２１７】
回転角度θｙの値が「（θ₁＋θ₂）／２」以下であると判別されたとき（ステップＳ５７：Ｙ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像について、右眼用画像ＩＲを分割して得られる右眼用短冊画像ＩＲ_iを右眼用短冊画像表示領域Ｒ_iに、更に右方向に移動させた右眼用仮想カメラからの右眼用画像ＩＲＲを分割して得られる右眼用短冊画像ＩＲＲ_iを左眼用短冊画像表示領域Ｌ_iに表示させるように設定する（ステップＳ５８）。
【０２１８】
回転角度θｙの値が「（θ₁＋θ₂）／２」以下であると判別されなかったとき（ステップＳ５７：Ｎ）、短冊画像表示位置変更部は、立体視画像生成部に生成された立体視画像について、更に右方向に移動させた右眼用仮想カメラからの右眼用画像ＩＲＲを分割して得られる右眼用短冊画像ＩＲＲ_iを右眼用短冊画像表示領域Ｒ_iに、同様に右眼用短冊画像ＩＲＲ_iを左眼用短冊画像表示領域Ｌ_iに表示させるように設定する（ステップＳ５９）。
【０２１９】
そして、ステップＳ５２、ステップＳ５４、ステップＳ５６、ステップＳ５８、ステップＳ５９で設定されたように、立体視画像生成部に生成された立体視画像の各短冊画像が、左眼用短冊画像表示領域Ｌ_i及び右眼用短冊画像表示領域Ｒ_iに表示される立体視画像が生成され（ステップＳ６０）、表示部１９０のＬＣＤに出力される（ステップＳ６１）。
【０２２０】
続いて、所与の終了操作の有無を判別し（ステップＳ６２）、終了操作がなかったと判別されたとき（ステップＳ６２：Ｎ）、ステップＳ５０に戻る。
【０２２１】
一方、所与の終了操作があったと判別されたとき（ステップＳ６２：Ｙ）、一連の処理を終了する（エンド）。
【０２２２】
なお、上述した左眼用短冊画像表示領域Ｌ₁、Ｌ_N、右眼用短冊画像表示領域Ｒ₁、Ｒ_Nのうち、ずらすべき短冊画像がない場合には、そのまま左眼用短冊画像及び右眼用短冊画像を表示させるようにしてもよいし、予め用意された短冊画像を表示するようにしてもよい。
【０２２３】
このように第３の実施形態によれば、パララックスバリア方式やレンティキュラ方式のように左右視差による立体視を可能にするための立体視画像において、表示部の画面のｙ軸回りの回転角度に応じて左眼用短冊画像及び右眼用短冊画像の少なくとも１つを、更に視点を移動させた短冊画像に変更するようにしたので、立体視が可能な観者の視点の移動範囲を拡大することができる。また、これら画像を、仮想カメラの視点設定により生成するようにしたので、時間的、空間的に連続性のある画像を容易に生成することができる。
【０２２４】
なお、第３の実施形態では、オブジェクト空間において左眼用画像Ｌ及び右眼用画像Ｒを生成するための左眼用仮想カメラＣ_L及び右眼用仮想カメラＣ_Rの位置を、ｙ軸回りに回転角度θｙに応じて設定し、その都度左眼用画像ＩＬＬ及び右眼用画像ＩＲＲを生成するようにしていたが、これに限定されるものではない。例えば、予め左眼用画像ＩＬＬ及び右眼用画像ＩＲＲを用意して、回転角度θｙに応じて表示される画像を切り替えるようにしもよい。この場合、画像生成による処理負荷を大幅に低減することができる。
【０２２５】
また、第１〜第３の実施形態では、仮想カメラの設定によりオブジェクト空間における左眼用画像及び右眼用画像を生成するようにしたので、従来のように画素単位に多くの種類の画像を用意する必要がなく、表示解像度を劣化させることがなくなる。また、観者の眼の残像効果によるフレーム画像の表示期間内で左眼用画像及び右眼用画像の２枚の画像を生成すればよいので、リアルタイムの画像生成処理が可能となって、例えば３次元のオブジェクト空間におけるグラフィック処理により生成される動画の立体視画像を表示させることが容易となる。なお、表示させる立体視画像は、オブジェクト空間における３次元画像である必要はなく、３次元画像を模した擬似的な２次元画像であってもよい。いずれにしろ表示画像の生成に必要な処理コストを大幅に削減することができる。
【０２２６】
なお、本発明の各手段は、その全てを、ハードウェアのみにより実行してもよいし、情報記憶媒体に格納されるプログラムや通信インターフェースを介して配信されるプログラムのみにより実行してもよい。或いは、ハードウェアとプログラムの両方により実行してもよい。
【０２２７】
なお本発明は、上記実施形態で説明したものに限らず、種々の変形実施が可能である。
【０２２８】
また第１〜第３の実施形態では、オブジェクト空間における３次元画像を生成するものとして説明したが、これに限定されるものではない。左眼用画像及び右眼用画像として、３次元画像を模した擬似的な２次元画像であって、リアルタイム処理することなく、予め用意された複数の画像を切り替えるようにしてもよい。
【０２２９】
更にまた、第１〜第３の実施形態における表示部として、パララックスバリア方式及びレンティキュラ方式を例に説明したが、立体視画像の表示方式によって限定されるものではなく、左眼用画像及び右眼用画像によって形成される左右視差による立体視が表示可能な方式であればよい。
【０２３０】
また、第１〜第３の実施形態では画像生成装置としてゲーム装置について説明したが、これに限定されるものではない。例えば携帯電話機やＰＤＡにも同様に適用することが可能である。
【図面の簡単な説明】
【図１】図１（Ａ）、（Ｂ）は、立体視画像の一例を示す説明図である。
【図２】表示部がパララックスバリア方式による立体視表示を行う場合について説明するための説明図である。
【図３】左眼用短冊画像及び右眼用短冊画像と立体視画像の関係を説明するための説明図である。
【図４】表示部がレンティキュラレンズ方式による立体視表示を行う場合について説明するための説明図である。
【図５】レンティキュラレンズ方式による立体視表示を行う場合に、観者の移動可能範囲について説明するための模式図である。
【図６】本発明が適用される画像生成装置の原理構成の概要を示す構成図である。
【図７】第１の実施形態における画像生成装置の短冊画像表示位置変更部の動作を説明するための説明図である。
【図８】第１の実施形態における画像生成装置を適用したゲーム装置の外観正面図である。
【図９】第１の実施形態のゲーム装置の機能ブロックの一例を示すブロック図である。
【図１０】検出精度の低いジャイロセンサにより検出される回転角速度ωｙとこれによって生成される回転角度θｙの変化を示す説明図である。
【図１１】検出精度の低いジャイロセンサにより検出される回転角速度ωｙと、これに基づいて第１の実施形態における角度演算部によって演算された回転角度θｙの変化を示す説明図である。
【図１２】表示部の画面に表示される左眼用画像及び右眼用画像とからなる立体視画像と観者の視点との関係を示す説明図である。
【図１３】第１の実施形態におけるｙ軸回りの回転角度θｙに応じた立体視画像の生成処理の一例を示すフローチャートである。
【図１４】第２の実施形態における画像生成装置の短冊画像表示位置変更部の動作を説明するための説明図である。
【図１５】第２の実施形態におけるｙ軸回りの回転角度θｙに応じた立体視画像の生成処理の一例を示すフローチャートである。
【図１６】第３の実施形態における画像生成装置の短冊画像表示位置変更部の動作を説明するための説明図である。
【図１７】第３の実施形態におけるｙ軸回りの回転角度θｙに応じた立体視画像の生成処理の一例を示すフローチャートである。
【符号の説明】
１０、３０、５０、７６、８４、２５０、２６０、２７０画面
１２交点
３２パララックスバリア
３４、５４左眼用短冊画像表示領域
３６、５６右眼用短冊画像表示領域
３８、５８短冊集合画像表示領域
４０左眼用画像
４０₁〜４０_N 左眼用短冊画像
４２右眼用画像
４２₁〜４２_N 右眼用短冊画像
４４立体視画像
４６₁〜４６_N 第１〜第Ｎの短冊集合画像
５２レンティキュラレンズ
６０画像生成装置
６２画像生成部
６４角度取得部
６６、１９０表示部
６８左原画像生成部
７０右原画像生成部
７２立体視画像生成部
７４短冊画像表示位置変更部
８０ゲーム装置
８２筐体
８６左操作部
８８右操作部
１００処理部
１１０ゲーム処理部
１２０画像生成部
１２２ジオメトリ処理部
１２４描画部
１２６立体視画像処理部
１３０角度演算部
１６０操作部
１７０主記憶部
１８０情報記憶媒体
１９２音出力部
１９４携帯型情報記憶装置
１９６通信部
１９８角速度検出部
Ｃ_L 左眼用仮想カメラ
ＣＬ_m 凸レンズ
Ｃ_R 右眼用仮想カメラ
Ｅ_L 左眼
Ｅ_R 右眼
ＩＬ、ＩＬＬ左眼用画像
ＩＬ₁〜ＩＬ_N 左眼用短冊画像
ＩＲ、ＩＲＲ右眼用画像
ＩＲ₁〜ＩＲ_N 右眼用短冊画像
Ｌ₁〜Ｌ_N 左眼用短冊画像表示領域
Ｒ₁〜Ｒ_N 右眼用短冊画像表示領域
θｙ、θｙ１回転角度
ωｙ回転角速度[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image generation apparatus suitable for displaying a stereoscopic image, a program for realizing this, and an information storage medium.
[0002]
[Background Art and Problems to be Solved by the Invention]
In recent years, stereoscopic images are sometimes used in the fields of image generation devices (for example, game devices) and movies to create a more realistic atmosphere. Stereoscopic images are prepared for the left and right eyes of the viewer (for example, a player in the case of a game device) for the left eye and the right eye, respectively, and are at the viewer's gazing point due to the parallax of these images. Give the object a three-dimensional effect.
[0003]
Various methods for generating such a stereoscopic image have been proposed. As a method that does not require dedicated glasses, for example, a parallax barrier method, a lenticular method, an integral photo, etc. There is a graphic (Integral Photography) system.
[0004]
In the parallax barrier method, images to be viewed by the left and right eyes of the viewer are arranged in a strip shape from the gap of the parallax barrier having a strip-like (vertical grid-like) gap (slit) on the display screen. By making only the left-eye image and the right-eye image that have parallax from each other visible, the left-right parallax is formed and stereoscopic viewing is possible.
[0005]
Similarly to the parallax barrier method, the lenticular method is also configured as a pair of a left eye strip image and a right eye strip image by arranging a parallax left eye image and a right eye image in a strip shape. Left and right parallax by arranging the left eye image and right eye image as images to be seen by the left and right eyes, respectively, on the focal plane of a semi-cylindrical lens (lenticular lens) corresponding to the strip aggregate image Form.
[0006]
In contrast, the integral photography method arranges eyelid lens plates that resemble insect compound eyes, and prepares multiple images in different directions for each lens. Not only the parallax but also the vertical parallax is formed.
[0007]
A stereoscopic image generated by such various methods does not require the viewer to wear dedicated glasses or the like, and can display an image full of realism.
[0008]
By the way, in order to create a more realistic atmosphere, it is desirable that a stereoscopic image has a large viewpoint movable range.
[0009]
However, in the parallax barrier method and the lenticular lens method, stereoscopic vision can be realized with a simple configuration, but in principle, the range in which stereoscopic vision is possible is narrow. Therefore, electronic devices have become lighter and more portable due to recent advances in semiconductor technology and packaging technology, and mobile phones, portable game machines, PDAs (Personal Digital Assistants), etc. are equipped with display devices using these methods. Even so, the range in which the viewer's viewpoint can be moved is limited, and a stereoscopic discontinuity remains, which is not practical.
[0010]
The present invention has been made in view of the problems as described above, and an object of the present invention is to display a stereoscopic image by expanding the movable range of the viewpoint without applying a processing load. An object of the present invention is to provide a generation device, a program for realizing this, and an information storage medium.
[0011]
[Means for Solving the Problems]
In order to solve the above problems, the present invention is an image generation apparatus that performs image generation, and includes a left-eye strip image obtained by dividing a left-eye image and a right-eye image into strips in the vertical direction of the screen, and When the strip-collected image paired with the right-eye strip images is a display unit that displays a plurality of stereoscopic images arranged in the left-right direction of the screen, and the screen has the first axis in the vertical direction of the screen, the screen An angle acquisition unit that acquires a rotation angle around the first axis, and an image change unit that changes a strip set image according to the acquired rotation angle, and the image change unit includes each strip set image. The left-eye strip image and the right-eye strip image are replaced with each other.
[0012]
The program according to the present invention is a program that can be used by a computer (a program embodied in an information storage medium or a carrier wave), and causes the computer to realize the above means. The information storage medium according to the present invention is an information storage medium that can be used by a computer, and includes a program for causing the computer to realize the above means.
[0013]
Here, the image for the left eye and the image for the right eye are images that have parallax in the left-right direction in order to give a stereoscopic effect to the object of interest of the viewer, and should be viewed with the left eye of the viewer. Image, the image that should be seen with the right eye.
[0014]
Moreover, dividing into strips in the vertical direction of the screen means dividing into a plurality of regions in the horizontal direction of the screen with the vertical direction of the screen as the longitudinal direction.
[0015]
Further, the stereoscopic image refers to an image for giving a stereoscopic effect to an object that is viewed by the viewer by left-right parallax based on the left-eye image and the right-eye image. Note that the stereoscopic image to be displayed may be an object image generated in an object space that is a three-dimensional space, or a pseudo two-dimensional image imitating a three-dimensional image.
[0016]
Further, the screen of the display means means the above-described stereoscopic image display screen.
[0017]
Furthermore, the angle acquisition means acquires the rotation angle around the first axis that is the vertical direction of the screen of the display means described above, regardless of software or hardware. As such angle acquisition means, for example, the angular velocity may be acquired by an angular velocity acquisition means as hardware such as a gyro sensor, and the rotation angle may be acquired by performing an integration operation or the like using software.
[0018]
According to the present invention, the strip image for the left eye to be viewed with the viewer's left eye and the strip for the right eye to be viewed with the viewer's right eye according to the rotation angle around the first axis that is the vertical direction of the screen. By displaying the images interchanged with each other, it is possible to eliminate the discontinuity of the stereoscopic view that occurs when the predetermined rotation angle is exceeded, and to expand the movable range of the viewer's viewpoint. In addition, it is only necessary to replace each strip image in each strip aggregate image display area, so that an increase in the range of movement of the viewer's viewpoint can be suppressed while suppressing an increase in processing load accompanying the generation of a stereoscopic image. Can be realized.
[0019]
The present invention is also an image generation apparatus that performs image generation, and a left-eye strip obtained by dividing a left-eye image and a right-eye image into strips in the vertical direction of the screen (the vertical direction is the longitudinal direction). Display means for displaying a stereoscopic image in which a plurality of first to Nth strip aggregate images, each paired with an image and a right-eye strip image, are arranged in the left-right direction of the screen; In the case of an axis, an angle acquisition unit that acquires a rotation angle around the first axis, and an image that changes at least one of the first to Nth strip aggregate images according to the acquired rotation angle The image changing means includes a left-eye strip image and a right-eye strip in an m-th (1 <m <N, m is a natural number) strip set image according to the acquired rotation angle. At least one of the images in the left eye of the adjacent strip collection image And changes to the elongated image or right-eye strip images.
[0020]
The program according to the present invention is a program that can be used by a computer (a program embodied in an information storage medium or a carrier wave), and causes the computer to realize the above means. The information storage medium according to the present invention is an information storage medium that can be used by a computer, and includes a program for causing the computer to realize the above means.
[0021]
In the present invention, the strip image for the left eye and the strip image for the right eye constituting the strip aggregate image are shifted in the left-right direction according to the acquired rotation angle. That is, as the left eye strip image, the left eye strip image or the right eye strip image of the adjacent strip set image is shifted and displayed according to the acquired rotation angle. Similarly, as the strip image for the right eye, the strip image for the left eye or the strip image for the right eye of the adjacent strip aggregate image is displayed in a shifted manner according to the acquired rotation angle.
[0022]
This makes it possible to maintain the parallax in the left-right direction based on the strip image for the left eye and the strip image for the right eye that can be observed along with the movement of the viewpoint of the viewer. This eliminates the range of movement of the viewer's viewpoint. In addition, in each strip aggregate image display area, it is only necessary to shift each strip image in the left-right direction, so that the increase in the processing load associated with the generation of the stereoscopic image is suppressed, and the movable range of the viewer's viewpoint is suppressed. Can be realized.
[0023]
Further, in the image generating device, the program, and the information storage medium according to the present invention, the image changing unit may be configured so that the m-th (1 <m <N, m is a natural number) strip set image in accordance with the acquired rotation angle. At least one of the left-eye strip image and the right-eye strip image is changed to a strip image from a viewpoint moved based on the rotation direction of the rotation angle.
[0024]
According to the present invention, according to the movement of the viewer's viewpoint, an image in which the parallax in the horizontal direction is maintained based on the strip image for the left eye and the strip image for the right eye that can be observed is displayed as a corresponding strip image. Accordingly, it is possible to eliminate the discontinuity of stereoscopic vision and to expand the movable range of the viewer's viewpoint.
[0025]
The image generation apparatus, program, and information storage medium according to the present invention are characterized in that the strip image from the viewpoint is an image prepared in advance.
[0026]
According to the present invention, since an image prepared in advance is used, a stereoscopic view that eliminates the discontinuity of the stereoscopic view with the movement of the viewer's viewpoint without accompanying the processing load accompanying the image generation. An image can be displayed.
[0027]
The image generation apparatus, the program, and the information storage medium according to the present invention also perform virtual setting for setting the viewpoints of the left-eye and right-eye virtual cameras in the object space according to the rotation angle acquired by the angle acquisition unit. Camera setting means, and image generation means for generating a left eye strip image and a right eye strip image from the viewpoint of the left eye and right eye virtual cameras set in the object space (or the means) And a strip image from the viewpoint are images generated by the image generating means.
[0028]
Here, the object space refers to a virtual three-dimensional space in which an object whose shape is specified by a definition point (such as a vertex of a polygon or a control point of a free-form surface) is arranged.
[0029]
The virtual camera means a viewpoint in the object space described above.
[0030]
According to the present invention, since the so-called three-dimensional image generation process of generating the object image in the object space is applied by real-time processing, the image from the viewpoint set based on the rotation angle of the screen is applied. Need not be prepared in advance, the change of the screen can be expressed smoothly, and variations of the change can be diversified.
[0031]
In the image generating apparatus according to the present invention, the display means includes a parallax barrier having a strip-shaped gap at a corresponding position of each strip aggregate image displayed on the screen. The stereoscopic image is displayed so that the strip image for the right eye of each strip set image can be seen on the right eye of the viewer, and the strip image for the left eye of each strip set image can be seen on the left eye of the viewer. To do.
[0032]
According to the present invention, a parallax barrier is used on the front surface of the screen of the display unit so that the gap is located at a corresponding position between the left-eye image and the right-eye image constituting the stereoscopic image. When performing stereoscopic viewing by the parallax barrier method, it is possible to provide an image generating apparatus that displays a stereoscopic image that expands the movable range of the viewpoint of the viewer at low cost.
[0033]
In the image generating apparatus according to the present invention, the display unit includes a lenticular lens arranged so as to have a focal plane corresponding to each strip aggregate image displayed on the screen, and the lenticular lens is interposed therebetween. The stereoscopic image is displayed so that the viewer's right eye can see the strip image for the right eye of each strip set image, and the viewer's left eye can see the strip image for the left eye of each strip set image. It is characterized by.
[0034]
According to the present invention, by the lenticular lens system in which the focal plane is arranged at the corresponding position of the left-eye image and the right-eye image constituting the stereoscopic image on the front surface of the screen of the display means. When performing stereoscopic viewing, it is possible to provide an image generating apparatus that displays a stereoscopic image that expands the movable range of the viewer's viewpoint at low cost.
[0035]
In the image generation device, the program, and the information storage medium according to the present invention, the angle acquisition unit may calculate the rotation angle based on the rotation angular velocity detected by the angular velocity detection unit that detects the rotation angular velocity around the first axis. It is characterized by acquiring.
[0036]
According to the present invention, since an inexpensive and easily available gyro sensor is used as the angular velocity detection means, the rotation angle around the first axis necessary for providing the parallax in the left-right direction is obtained. It is possible to reduce the size and weight of the device and reduce the cost.
[0037]
The image generating apparatus, the program, and the information storage medium according to the present invention include means for bringing the acquired rotation angle closer to a given value as time passes.
[0038]
According to the present invention, a stereoscopic image including a strip image corresponding to the rotation angle around the first axis of the apparatus main body is obtained even when the detection accuracy of an inexpensive and easily available gyro sensor as the angular velocity detection means is extremely low. Can be provided. In this case, it is possible to achieve both display of a stereoscopic image full of realism and cost reduction.
[0039]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.
[0040]
1. The principle of stereoscopic vision
An image generation apparatus to which the present invention is applied prepares left-eye and right-eye images for the left and right eyes of a viewer (for example, a player in the case of a game device).
[0041]
FIGS. 1A and 1B show an example of a stereoscopic image generated by such an image generation apparatus.
[0042]
As shown in FIG. 1A, the image generation apparatus displays a left-eye image IL and a right-eye image IR on the screen 10 as a stereoscopic image. In this case, the image for the left eye IL is the left eye E of the viewer on the screen 10. _L The right-eye image IR is displayed on the right eye E of the viewer on the screen 10. _R It can only be seen in
[0043]
Thereby, as shown in FIG. 1B, the stereoscopic image displayed on the screen 10 is the left eye E. _L And the right eye E _R It is felt as if it is located at the intersection 12 with the line of sight connecting the gazing point, and an object with a three-dimensional effect is observed.
[0044]
1.2 Stereoscopic images
Various methods are known as methods for enabling a viewer to stereoscopically view by generating such a stereoscopic image, such as a parallax barrier method and a lenticular method.
[0045]
FIG. 2 schematically shows the configuration of a screen when performing stereoscopic display by the parallax barrier method. In the following, the horizontal axis of the screen is the x axis, the vertical axis of the screen is the y axis, and the axis perpendicular to the screen is the z axis.
[0046]
In this case, the front surface (viewer's viewpoint (left eye E _L , Right eye E _R In the z-axis direction), the parallax barrier 32 is disposed.
[0047]
The parallax barrier 32 is provided with a slit in the y-axis direction of the screen.
[0048]
The stereoscopic image display area displayed on the screen 30 includes a left-eye strip image display area (L) 34 and a right-eye strip image display area (R) 36. The left-eye strip image display area 34 and the right-eye strip image display area 36 each have an elongated strip shape in the y-axis direction of the screen 30 and are alternately arranged in the x-axis direction.
[0049]
Each slit of the parallax barrier 32 has a strip aggregate image display area 38 having a pair of a left eye strip image display area 34 and a right eye strip image display area 36 with respect to a given observation point of the viewer. It is formed at a position corresponding to.
[0050]
FIG. 3 is a diagram for explaining the relationship between the strip image for the left eye, the strip image for the right eye, and the stereoscopic image.
[0051]
The left-eye strip image 40 and the right-eye strip image 42 are each divided for each given line width in the x-axis direction. The line width may be, for example, one pixel or several pixels, but the line width is associated with the slit width of the parallax barrier 32. The left eye strip image 40 and the right eye strip image 42 are generated at a given frame period.
[0052]
The strip image 40 for the left eye divided into the given line width units. ₁ ~ 40 _N And right eye strip image 42 ₁ ~ 42 _N Are alternately arranged, a stereoscopic image 44 can be formed.
[0053]
That is, assuming that the combination of the left eye strip image and the right eye strip image corresponding to the slit of the parallax barrier 32 is a strip aggregate image, the stereoscopic image 44 has the first to Nth strip aggregate images 46. ₁ ~ 46 _N Are arranged in the x-axis direction.
[0054]
By constructing a stereoscopic image in this way, in FIG. _L The left-eye strip image displayed in the left-eye strip image display area 34 of the screen 30 is incident on the gap between the parallax barriers 32. The viewer's right eye E _R The right eye strip image displayed in the right eye strip image display area 36 of the screen 30 is incident on the gap between the parallax barriers 32. Therefore, the viewer's left eye sees only the left eye strip image, and the viewer's right eye sees only the right eye strip image, and the left eye image and right Stereoscopic viewing is possible by right-and-left parallax from the right-eye image that is a set of ophthalmic strip images.
[0055]
FIG. 4 schematically shows the configuration of a screen when performing stereoscopic display by the lenticular method.
[0056]
In this case, the front surface (viewer's viewpoint (left eye E _L , Right eye E _R Lenticular lens 52 is arranged in the z-axis direction).
[0057]
The lenticular lens 52 is configured by connecting a plurality of cylindrical convex lenses in the x-axis direction.
[0058]
The display area of the stereoscopic image displayed on the screen 50 includes a left-eye strip image display area 54 and a right-eye strip image display area 56. The left-eye strip image display area 54 and the right-eye strip image display area 56 each have an elongated strip shape in the y-axis direction of the screen, and are alternately arranged in the x-axis direction.
[0059]
Each convex lens of the lenticular lens has a strip collection image display region 58 including a pair of left eye strip image display region 54 and right eye strip image display region 56, respectively, based on a given observation point of the viewer. It is formed in the corresponding position.
[0060]
In FIG. 4, the viewer's left eye E _L The left eye strip image displayed in the left eye strip image display area 54 of the screen 50 is incident on the screen due to the photorefractive action of the lenticular lens 52. The viewer's right eye E _R The right eye strip image displayed in the right eye strip image display area 56 of the screen 50 is incident on the screen due to the photorefractive action of the lenticular lens 52. Therefore, the viewer's left eye sees only the left eye strip image, and the viewer's right eye sees only the right eye strip image, and the left eye image and right Stereoscopic viewing is possible by right-and-left parallax from the right-eye image that is a set of ophthalmic strip images.
[0061]
However, when performing stereoscopic viewing using a stereoscopic image configured by arranging a plurality of strip aggregate images as shown in FIGS. 2 to 4 in the y-axis direction, there is a problem that the range in which the viewer can move is limited. is there. This point will be described by taking a lenticular lens system as an example.
[0062]
FIG. 5 is a schematic diagram for explaining the viewer's movable range when performing stereoscopic display by the lenticular lens method.
[0063]
However, the same parts as those shown in FIG. Further, the description will be made focusing on the m-th strip aggregate image display area in which the m-th (1 <m <N, m is a natural number) strip aggregate image is displayed among the first to N-th strip aggregate image display areas. To do.
[0064]
On the screen 50, as described above, a strip set image including a strip image for the left eye and a strip image for the right eye is displayed in each strip set image display area. That is, in the case of the mth strip aggregate image display area, the left eye strip image display area L constituting the strip aggregate image display area. _m Left eye strip image IL _m , Right eye strip image display area R _m Right eye strip image IR _m Is displayed.
[0065]
When the viewer's left eye or right eye line of sight is E-1, the right eye strip image IR _m And left eye strip image IL _m Is a convex lens CL of the lenticular lens 52 corresponding to the mth strip aggregate image display area _m Therefore, the left eye strip image IL of the m th strip aggregate image _m Is observed.
[0066]
Further, when the line of sight of the left eye or right eye of the viewer is E-2, the convex lens CL of the lenticular lens 52 corresponding to this mth strip aggregate image display area _m Therefore, the right eye strip image IR of the mth strip aggregate image _m Is observed.
[0067]
Therefore, the viewer's left eye E _L And right eye E _R When the line of sight from E-1 and E-2 are respectively, the left eye strip image IL of the m-th strip aggregate image _m And right eye strip image IR _m Therefore, the left eye observes the image IL, the right eye observes the image IR, and stereoscopic viewing is possible with correct right and left parallax of both images.
[0068]
By the way, when the viewer's line of sight moves like E-3 with respect to such a screen 50, the convex lens CL of the lenticular lens 52 corresponding to the mth strip aggregate image display region. _m Therefore, the right eye strip image IR of the (m + 1) th strip aggregate image _{m + 1} Will be observed. Similarly, when the viewer's line of sight moves like E-4, the convex lens CL of the lenticular lens 52 corresponding to the mth strip aggregate image display region. _m Accordingly, the strip image IL for the left eye of the (m−1) th strip collection image _m-1 Will be observed.
[0069]
Thus, for example, the viewer's left eye E _L And right eye E _R From the right eye strip image IR of the mth strip aggregate image _m And a strip image IL for the left eye of the (m-1) th strip collection image _m-1 Since the left eye observes the image IR and the right eye observes the image IL, stereoscopic vision becomes impossible due to erroneous parallax between the two images.
[0070]
Thus, the left eye E of the viewer with respect to the screen 50 _L And right eye E _R Since the parallax image having the right and left parallax cannot be observed depending on the viewing direction from the viewer, the range in which the viewer can move with respect to the screen 50 is limited.
[0071]
Therefore, in the image generation apparatus to which the present invention is applied, the rotation angle around the y-axis of the screen is obtained as the angle between the screen and the viewer's line-of-sight direction, and each strip aggregate image display area of the screen is determined according to the rotation angle. By changing the strip image for the left eye and the strip image for the right eye displayed on the screen, the movable range of the viewer's viewpoint is expanded.
[0072]
As a result, when the range of movement of the viewer's viewpoint is exceeded, it is not possible to observe a correct parallax image, and for example, the problem that a discontinuity in stereoscopic vision occurs can be solved.
[0073]
2. Principle configuration
FIG. 6 shows an outline of the principle configuration of an image generation apparatus (for example, a game apparatus) to which the present invention is applied.
[0074]
The image generation device 60 includes an image generation unit 62, an angle acquisition unit 64, and a display unit 66. More specifically, the image generation unit 62 includes a left original image generation unit 68, a right original image generation unit 70, a stereoscopic image generation unit 72, and a strip image display position change unit 74.
[0075]
The image generation unit 62 generates a stereoscopic image corresponding to the rotation angle around the y axis acquired by the angle acquisition unit 64 and outputs the stereoscopic image to the display unit 66.
[0076]
More specifically, the image generation unit 62 performs stereoscopic viewing with parallax with respect to the left eye and right eye of the viewer of the display unit 66 according to the rotation angle around the y axis acquired by the angle acquisition unit 64 Generate an image. For this reason, the left original image generation unit 68 generates a left-eye image to be viewed with the left eye of the viewer of the display unit 66. In addition, the right original image generation unit 70 generates a right eye image to be viewed with the right eye of the viewer of the display unit 66.
[0077]
The stereoscopic image generation unit 72 generates a stereoscopic image based on the left-eye image generated by the left original image generation unit 68 and the right-eye original image generated by the right original image generation unit 70. . More specifically, as shown in FIG. 3, the stereoscopic image generation unit 72 divides the original image for the left eye and the original image for the right eye into strip regions in the y-axis direction of the screen, respectively, A stereoscopic image in which the eye strip images and the right eye strip images are alternately arranged in the x-axis direction of the screen is generated.
[0078]
The strip image display position changing unit 74 determines the strip image for the left eye and the strip image for the right eye of each strip aggregate image generated by the stereoscopic image generation unit 72 according to the rotation angle acquired by the angle acquisition unit 64. At least one of them is changed and output to the display unit 66.
[0079]
In addition, the angle acquisition unit 64 acquires a rotation angle around the y-axis from the reference position and outputs the rotation angle to the image generation unit 62. The angle acquisition unit 64 does not have to be included in the same housing as the display unit 66, but when included in the same housing, the display unit 66 has a stereoscopic view corresponding to the rotation angle of the display unit 66 itself. An image can be displayed.
[0080]
As shown in FIGS. 1A and 1B, the display unit 66 displays the stereoscopic image generated by the stereoscopic image generation unit 72 and the strip image display position change unit 74 by the viewer of the display unit 66. The left eye strip image is displayed on the left eye, and the right eye strip image is displayed on the viewer's right eye so that they can be viewed simultaneously.
[0081]
Such a display unit 66 can be realized by arranging the parallax barrier described in FIG. 2 or the lenticular lens described in FIG.
[0082]
The image generating apparatus 60 having such a configuration has at least one of the left-eye strip image and the right-eye strip image according to the rotation angle acquired by the angle acquisition unit 64 by the strip image display position changing unit 74. By changing the image, it is possible to greatly expand the movable range of the line of sight of the viewer and display a stereoscopic image full of a sense of reality.
[0083]
The strip image display position changing unit 74 expands the movable range of the viewer's viewpoint by changing the strip image for the left eye and the strip image for the right eye that constitute the strip aggregate image according to various methods. Can do.
[0084]
Below, the image generation apparatus in the 1st-3rd embodiment which produces | generates each different stereoscopic image by the operation | movement aspect of the strip image display position change part 74 is demonstrated in detail.
[0085]
3. First embodiment
FIG. 7 is an explanatory diagram for explaining the operation of the strip image display position changing unit of the image generating apparatus according to the first embodiment to which the present invention is applied.
[0086]
The screen 76 of the display unit of the image generation apparatus according to the first embodiment has the first to Nth strip aggregate image display areas along the x axis as described above. The m-th (1 ≦ m ≦ N, m is a natural number) strip set image display area is a left-eye strip image display area L. _m And right eye strip image display area R _m including. Left eye strip image display area L _m The left eye strip image IL _m Is displayed. Right eye strip image display area R _m The right eye strip image IR _m Is displayed.
[0087]
Here, when the rotation angle acquired by the angle acquisition unit exceeds a given threshold, the strip image display position changing unit replaces the left-eye strip image and the right-eye strip image in each strip aggregate image. For example, in the case of the mth strip aggregate image display area, when the rotation angle acquired by the angle acquisition unit exceeds a given threshold, the left eye strip image display area L of the mth strip aggregate image display area. _m Right eye strip image IR _m , Right eye strip image display area R _m Left eye strip image IL _m Is displayed.
[0088]
In this way, by displaying on the screen 76 a strip collection image in which the strip image for the left eye and the strip image for the right eye constituting the strip collection image are displayed according to the acquired rotation angle, the discontinuity of stereoscopic vision is displayed. And the range of movement of the viewer's viewpoint can be expanded. Further, since it is only necessary to replace each strip image in each strip aggregate image display area, an increase in processing load accompanying the generation of a stereoscopic image can be suppressed to a slight one.
[0089]
3.1 Game device
3.1.1 Appearance
FIG. 8 shows an external front view of a game device to which the image generating device according to the first embodiment is applied.
[0090]
A game apparatus (image generating apparatus in a broad sense) 80 according to the first embodiment includes the image generating apparatus having the configuration shown in FIG. 6, and further has a screen 84 arranged on the front side of the portable housing 82. The left operation unit 86 and the right operation unit 88 are included.
[0091]
Here, for convenience of explanation, the horizontal direction of the screen 84 is the x axis, the vertical direction of the screen 84 is the y axis, and the direction perpendicular to the screen is the z axis.
[0092]
The screen 84 includes an LCD on which the above-described stereoscopic image is displayed, and a parallax barrier or lenticular lens is provided on the front surface thereof. In other words, the LCD constituting the screen 84 has a strip-shaped display area for displaying one (one frame) image for the left eye and a display area for displaying one image for the right eye. Are alternately arranged as a left-eye strip image display region and a right-eye strip image display region, and both strip images are displayed simultaneously.
[0093]
Each of the left operation unit 86 and the right operation unit 88 includes one or a plurality of push buttons. The left operation unit 86 and the right operation unit 88 are arranged so that the player can operate with the left and right fingers of the player, for example, while holding the casing 82 with both hands.
[0094]
The game apparatus 80 obtains the rotation angle about the y-axis shown in FIG. 8, and the three-dimensional image obtained by changing the left eye strip image and the right eye strip image constituting the strip aggregate image according to the obtained rotation angle. Display visual images.
[0095]
3.1.2 Functional block configuration
FIG. 9 shows an example of a functional block diagram of the game device of the first embodiment.
[0096]
In the figure, the first embodiment may include at least the processing unit 100, the display unit 190, and the angular velocity detection unit 198, and other blocks (for example, the operation unit 160, the sound output unit 192, the portable information storage). The device 194 and the communication unit 196) can be arbitrary constituent elements.
[0097]
Here, the processing unit 100 performs various processes such as control of the entire apparatus, instruction instruction to each block in the apparatus, game processing, image processing, or sound processing, and functions thereof are various processors ( CPU, DSP, etc.) or hardware such as ASIC (gate array, etc.) or a given program (game program).
[0098]
The operation unit 160 is for the player to input operation data, and includes the left operation unit 86 and the right operation unit 88 shown in FIG. 8, and the functions are realized by hardware such as a lever, a button, and a microphone. it can.
[0099]
The main storage unit 170 serves as a work area for the processing unit 100, the communication unit 196, and the like, and its function can be realized by hardware such as a RAM.
[0100]
An information storage medium (storage medium that can be used by a computer) 180 stores information such as programs and data, and its function can be realized by hardware such as a hard disk or memory (ROM). The processing unit 100 performs various processes of the present invention (first embodiment) based on information stored in the information storage medium 180. That is, the information storage medium 180 stores information (program or data) for executing the means of the present invention (first embodiment) (particularly, the block included in the processing unit 100).
[0101]
Part or all of the information stored in the information storage medium 180 is transferred to the main storage unit 170 at the time of power supply to the apparatus. In addition, the information storage medium 180 has a program for performing the processing of the present invention, image data, sound data, shape data of a display object, information for instructing the processing of the present invention, or processing in accordance with the instruction. Can be included.
[0102]
The display unit 190 outputs the image generated according to the first embodiment, and includes a screen 84 shown in FIG. 8, and the function is formed based on the left-eye image and the right-eye image. It can be realized by hardware such as LCD capable of stereoscopic viewing with left and right parallax. More specifically, in the display unit 190, a parallax barrier or lenticular lens is arranged on the front surface of an LCD composed of a finite number of pixels. The LCD has a display area for displaying one (one frame) image for the left eye and a display area for displaying one image for the right eye. These are alternately arranged as areas and strip image display areas for the right eye. When the parallax barrier is arranged, from the gap, the left eye strip image displayed in the left eye strip image display area is displayed on the left eye of the viewer of the display unit 190, and the right eye strip is displayed on the right eye. Only the strip image for the right eye displayed in the image display area can be seen. Further, when a lenticular lens is arranged, the left-eye image displayed in the left-eye strip image display area is displayed on the left eye of the viewer of the display unit 190 due to the photorefractive effect of the lens corresponding to each strip aggregate image. Only the strip image for the right eye displayed in the strip image display area for the right eye is visible to the strip image and the right eye.
[0103]
The sound output unit 192 outputs the sound generated by the first embodiment, and its function can be realized by hardware such as a speaker.
[0104]
The portable information storage device 194 stores player personal data, game save data, and the like. As the portable information storage device 194, a memory card or the like can be considered.
[0105]
The communication unit 196 performs various controls for communicating with the outside (for example, a host device or other game devices), and functions thereof include various processors, hardware such as a communication ASIC, It can be realized by a program.
[0106]
The angular velocity detection unit 198 detects the rotational angular velocity around the y axis shown in FIG. 8 from the reference position, and can be realized by hardware such as a gyro sensor. The detected rotational angular velocity is grasped as a rotational angle by integration calculation. Here, by using a gyro sensor, the cost of the apparatus can be reduced. However, if the rotation angle around the y axis shown in FIG. 8 from the reference position can be detected with an inexpensive configuration, such as detection of an absolute angle by a magnetic sensor, the angle calculation unit is removed instead of the angular velocity detection unit. Then, an angle acquisition unit may be included.
[0107]
The program or data for executing the means of the present invention (first embodiment) is distributed from the information storage medium of the host device (server) to the information storage medium 180 via the network and the communication unit 196. May be. Use of such an information storage medium of the host device (server) is also included in the scope of the present invention.
[0108]
The processing unit 100 (processor) includes a game processing unit 110, an image generation unit 120, and an angle calculation unit 130.
[0109]
The game processing unit 110 performs various mode setting processing, game progress processing, selection screen setting processing, the position of an object (one or a plurality of primitive planes), and a rotation angle (X, Y, or Z axis rotation angle) in the object space. ), Object motion processing (motion processing), viewpoint position (virtual camera position) and line-of-sight angle (virtual camera rotation angle) processing in the object space, and objects such as map objects to the object space The operation unit 160 performs various game processes such as an arrangement process, a hit check process, a process for calculating game results (results, results), a process for a plurality of players to play in a common game space, or a game over process. Operation data, personal data from the portable information storage device 194, Perform data and, based on the game program and the like.
[0110]
Here, the object space refers to a virtual three-dimensional space in which an object whose shape is specified by a definition point (such as a vertex of a polygon or a control point of a free-form surface) is arranged.
[0111]
The virtual camera means a viewpoint in the object space described above.
[0112]
The image generation unit 120 performs various types of image processing in accordance with instructions from the game processing unit 110 and the like. A production image is generated, and a stereoscopic image generated based on these images is output to the display unit 190. At this time, based on the rotation angle calculated by the angle calculation unit 130, for example, left-eye and right-eye virtual cameras (viewpoints) are set in the object space, and the left-eye image and the right-eye image that can be seen from these are set. Generate an image.
[0113]
The angle calculation unit 130 calculates and calculates the rotation angle from the reference position based on the rotation angular velocity around the y axis shown in FIG. 8 of the game device detected by the angular velocity detection unit 198. More specifically, the angle calculation unit 130 performs an integration operation on the rotation angular velocity detected by the angular velocity detection unit 198 to acquire the rotation angle. This rotation angle is used in the image generation unit 120 to change the display position of the strip image.
[0114]
Further, the processing unit 100 performs various kinds of sound processing based on the above game processing result, generates a sound such as BGM, sound effect, or voice, and outputs the sound to the sound output unit 192.
[0115]
Note that all of the functions of the processing unit 100 may be realized by hardware, or all of them may be realized by a program. Alternatively, it may be realized by both hardware and a program.
[0116]
The image generation unit 120 includes a geometry processing unit 122, a drawing (rendering) unit 124, and a stereoscopic image processing unit 126.
[0117]
The geometry processing unit 122 performs various types of geometry processing (three-dimensional calculation) such as coordinate transformation, clipping processing, perspective transformation, or light source calculation. In this embodiment, the positions of the left-eye and right-eye virtual cameras in the object space are set according to the rotation angle obtained by the angle calculation unit 130, and the left-eye and right-eye settings thus set are performed. The above-described geometry processing is performed with each virtual camera as a viewpoint, and object data (object vertex coordinates, vertex texture coordinates, brightness data, etc.) after two types of geometry processing (after perspective transformation) in the same frame is stored in the main memory. Stored in the unit 170.
[0118]
The drawing unit 124 draws an object in the frame buffer for each of the left-eye and right-eye images based on the object data after geometry processing (after perspective transformation) and a given texture. Thereby, in the object space in which the object moves, an image that can be seen from the left-eye and right-eye virtual cameras (viewpoints) is drawn (generated).
[0119]
The stereoscopic image processing unit 126 displays a stereoscopic image on the LCD of the display unit 190 from the left-eye image and the right-eye image that are object images with the left-eye and right-eye virtual cameras as viewpoints. Stereoscopic image information is generated. More specifically, the stereoscopic image processing unit 126 displays one (one frame) image for the left eye corresponding to the parallax barrier or lenticular lens disposed on the front surface of the screen of the display unit 190. And a display area for displaying one image for the right eye on a screen alternately arranged as a strip image display area for the left eye and a strip image display area for the right eye in a strip shape. A stereoscopic image is generated.
[0120]
Note that the game apparatus of the present embodiment may be a system dedicated to the single player mode that can be played by only one player, or not only such a single player mode but also a multiplayer mode in which a plurality of players can play. A system may be provided.
[0121]
Further, when a plurality of players play, game images and game sounds to be provided to the plurality of players may be generated using one terminal, or connected via a network (transmission line, communication line) or the like. Alternatively, it may be generated using a plurality of terminals.
[0122]
3.1.3 Rotation angle acquisition
The game device according to the first embodiment displays the left-eye strip image and the right-eye strip image of the first to Nth strip aggregate images according to the rotation angle based on the rotation angular velocity detected by the angular velocity detection unit 198. Can be replaced.
[0123]
Therefore, the game device according to the first embodiment is provided with a gyro sensor as the angular velocity detection unit 198, and detects the rotational angular velocity ωy about the y axis shown in FIG.
The rotation angle θy about the y-axis of the game device can be obtained by integrating this rotation angular velocity ωy.
[0124]
By the way, the gyro sensor as the angular velocity detection unit 198 is generally low in detection accuracy when applied to a portable game device. That is, at present, the detection accuracy of a gyro sensor that achieves both a reduction in size and weight and a low cost is low.
[0125]
FIG. 10 shows changes in the rotational angular velocity ωy detected by such a gyro sensor with low detection accuracy and the rotational angle θy generated thereby.
[0126]
When the casing 82 shown in FIG. 8 is rotated around the y axis with the passage of time, the rotational angular velocity ωy is detected by the gyro sensor as the angular velocity detector 198. For example, when the rotation is stopped at a certain time t1, a minute rotation angular velocity ωy due to the detection accuracy of the gyro sensor may be detected even though the rotation angular velocity ωy should originally be zero.
[0127]
As described above, since the rotation angle θy is obtained by integrating the rotation angular velocity ωy, the minute rotation angular velocity ωy is integrated after the time t1 even though it should be a fixed value like A1, and as shown in A2. The rotation angle gradually changes.
[0128]
Therefore, when the left eye strip image and the right eye strip image constituting each strip aggregate image are changed based on such a rotation angle θy, the casing 82 is not rotated around the y axis. The stereoscopic image observed by the viewer changes.
[0129]
Therefore, in the angle calculation unit 130 of the game device in the first embodiment, the value of the rotation angle θy obtained by integrating the rotation angular velocity ωy detected by the angular velocity detection unit 198 is always slowly given a given value ( For example, by approaching 0), even when a gyro sensor with low detection accuracy is applied as the angular velocity detection unit 198, the fun of the game can be increased without depending on the detection accuracy of the gyro sensor. It has become.
[0130]
FIG. 11 shows the rotational angular velocity ωy detected by the gyro sensor with low detection accuracy and the change in the rotational angle θy calculated by the angle calculation unit 130 in the first embodiment based on this.
[0131]
When the casing 82 shown in FIG. 8 is rotated around the y-axis with the passage of time, the rotational angular velocity ωy is detected by the gyro sensor as the angular velocity detecting unit 198. For example, the rotation is stopped at a certain time t1. In this case, there is a case where a minute rotational angular velocity ωy due to the detection accuracy of the gyro sensor is detected although the rotational angular velocity ωy should be zero.
[0132]
However, in the first embodiment, since the rotation angle θy is always slowly approaching 0, the rotation angle θy obtained by integrating the rotation angular velocity ωy does not become A1 after time t1, but as B1. Change.
[0133]
For example, for the obtained rotation angle θy, the rotation angle θy is brought close to 0 according to a given function f as shown in the equation (1).
[0134]
θy = f (θy) (1)
Further, as shown in the equation (2), the absolute value of the rotation angle θy may approach 0 by multiplication of a constant less than 1.
[0135]
θy = β · θy (0 <β <1, β is a constant) (2)
Thus, by returning the rotation angle θy to 0, it is possible to prevent the θy from gradually deviating from the correct value due to the error of the gyro sensor as the angular velocity detection unit 198.
[0136]
In the game device according to the first embodiment, the left eye in the object space is generated in the image generation unit 120 in accordance with the rotation angle θy about the y-axis thus obtained by the angle calculation unit 130 in a given frame period. After setting the virtual camera for the right eye and the right eye and performing the geometry processing in the geometry processing unit 122, the drawing unit 124 generates an object image based on the geometry processing.
[0137]
The left-eye image and the right-eye image generated in this way are processed in the stereoscopic image processing unit 126 as shown in FIG. 3, and a stereoscopic image is generated.
[0138]
3.1.4 Rotation angle around y-axis
Next, in the first embodiment, the operation of the strip image display position changing unit that changes the strip image for the left eye and the strip image for the right eye of each strip aggregate image according to the rotation angle around the y axis shown in FIG. Will be described.
[0139]
FIG. 12 shows the relationship between a stereoscopic image composed of a left-eye image and a right-eye image displayed on the screen of the display unit 190 and the viewer's viewpoint.
[0140]
Here, it is assumed that the parallax barrier shown in FIG. 2 or the lenticular lens (not shown) shown in FIG. 4 exists at a given position on the screen 250 of the display unit 190. Further, at the gazing point M on the screen 250, the value of θy in the direction perpendicular to the screen 250 is 0 (front), and the counterclockwise direction is the positive direction.
[0141]
In the stereoscopic image displayed on the screen 250 by the parallax barrier method or the lenticular method, the strip image display area L for the left eye is displayed. ₁ ~ L _N SL, right eye strip image display area R ₁ ~ R _N SR is a combination of the eye and the viewer's eyes (the left eye E) with the change in the rotation angle θy. _L , Right eye E _R ), There are alternating ranges for observing images displayed on SL and SR.
[0142]
Therefore, the left eye E is always in SL. _L The left-eye image for the image, always the right eye E _R When the right eye image is displayed, the left eye E is located near the front (rotation angle θy = 0). _L And right eye E _R The images displayed on the SL and SR are respectively observed, and a correct stereoscopic view can be obtained.
[0143]
However, when the relative angle (the rotation angle around the y axis) between the gazing point M and the viewer's viewpoint on the screen 250 changes, for example, the value of the rotation angle θy becomes θy. ₁ When the viewer's viewpoint moves to the left eye E _L 'Is the image displayed on the SR, right eye E _R Since the image displayed on SL is observed at ′, and the right and left parallaxes are not correct, stereoscopic viewing is impossible.
[0144]
Here, the rotation angle θy ₁ The left eye image centered on the left eye E _L ', Right eye image is right eye E _R It is assumed that each image is watched from a position shifted by a given offset.
[0145]
Therefore, in the first embodiment, the images to be displayed on the SL and SR are changed according to the relative angle (the rotation angle about the y axis) between the gazing point M and the viewer's viewpoint on the screen 250. I have to.
[0146]
More specifically, when the viewer's viewpoint is in the vicinity of the front (rotation angle θy = 0), the left eye image IL and the right eye image IR are displayed on SL and SR, respectively, in the same manner as described above. Is the value of the rotation angle θy is θy ₁ At this time, the left-eye image IL and the right-eye image IR are interchanged, and the right-eye image IR and the left-eye image IL are displayed on SL and SR, respectively.
[0147]
In this way, even if the relative angle between the gazing point M and the viewer's viewpoint changes, the discontinuity in stereoscopic vision is eliminated.
[0148]
3.1.5 Processing example
Next, a detailed example of the process of the first embodiment described above will be described using a flowchart.
[0149]
In the following, the left-eye strip image display area L constituting the first to Nth strip aggregate image display areas on the screen 250 will be described. ₁ ~ L _N , Right eye strip image display area R ₁ ~ R _N But in order along the x-axis R ₁ , L ₁ , R ₂ , L ₂ , R _Three , L _Three ,... Are arranged. In addition, a strip image for the left eye obtained by dividing the image for the left eye IL ₁ ~ IL _N , Right eye strip image obtained by dividing right eye image IR ₁ ~ IR _N And
[0150]
FIG. 13 illustrates an example of a stereoscopic image generation process according to the rotation angle θy about the y axis in the first embodiment.
[0151]
First, the processing unit 100 extracts the rotational angular velocity ωy about the y axis detected by the angular velocity detection unit 198, and performs an integration operation in the angle calculation unit 130 to obtain the rotational angle θy about the y axis (step S10).
[0152]
Next, the acquired value of the rotation angle θy around the y-axis is “− (θ ₁ + Θ ₂ ) / 2 "or not (step S11).
[0153]
The value of the rotation angle θy is “− (θ ₁ + Θ ₂ ) / 2 ”(step S11: Y), the strip image display position changing unit changes the right-eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i (1 ≦ i ≦ N, i is a natural number, the same applies hereinafter) a strip image display region R for the right eye _i The left eye strip image IL _i The left eye strip image display area L _i Is displayed as it is (step S12).
[0154]
As a result, the left eye image is displayed in SL in FIG. 12, the right eye image is displayed in SR, the right eye image is observed in the viewer's right eye, and the left eye image is observed in the left eye. Stereoscopic viewing with a stereoscopic image having correct right-and-left parallax is possible.
[0155]
Further, the value of the rotation angle θy is “− (θ ₁ + Θ ₂ ) / 2 ”(step S11: N), the obtained value of the rotation angle θy about the y-axis is“ −θ ₁ It is determined whether it is smaller than "/ 2" (step S13).
[0156]
The value of the rotation angle θy is “−θ ₁ When it is determined that the image is smaller than “/ 2” (step S13: Y), the strip image display position changing unit changes the right-eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i The left eye strip image display area L _i The left eye strip image IL _i To the right eye strip image display area R _i (Step S14).
[0157]
Thus, by switching the left eye strip image and the right eye strip image in each strip aggregate image display area, the right eye image is displayed in SL, and the left eye image is displayed in SR. An image for the right eye is observed for the right eye and an image for the left eye is observed for the left eye, so that discontinuity does not occur in the stereoscopic view observed while moving from the front position, and the viewer's viewpoint can be moved. Can be enlarged.
[0158]
The value of the rotation angle θy is “−θ ₁ / 2 ”is not determined to be smaller (step S13: N), the acquired value of the rotation angle θy around the y-axis is“ θ ₁ / 2 "or less (step S15).
[0159]
The value of the rotation angle θy is “θ ₁ / 2 "or less (step S15: Y), the strip image display position changing unit changes the right-eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i To the right eye strip image display area R _i The left eye strip image IL _i The left eye strip image display area L _i Is displayed as it is (step S16).
[0160]
The value of the rotation angle θy is “θ ₁ / 2 ”or less (step S15: N), the acquired value of the rotation angle θy about the y axis is“ (θ ₁ + Θ ₂ ) / 2 "or less (step S17).
[0161]
The value of the rotation angle θy is “(θ ₁ + Θ ₂ ) / 2 ”or less (step S17: Y), the strip image display position changing unit changes the right eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i The left eye strip image display area L _i The left eye strip image IL _i To the right eye strip image display area R _i (Step S18).
[0162]
The value of the rotation angle θy is “(θ ₁ + Θ ₂ ) / 2 ”or less (step S17: N), the strip image display position changing unit changes the right-eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i To the right eye strip image display area R _i The left eye strip image IL _i The left eye strip image display area L _i Is displayed as it is (step S19).
[0163]
Then, as set in step S12, step S14, step S16, step S18, and step S19, each strip image of the stereoscopic image generated in the stereoscopic image generation unit is converted into the strip image display area L for the left eye. _i And right eye strip image display area R _i Is displayed (step S20), and is output to the LCD of the display unit 190 (step S21).
[0164]
Subsequently, the presence / absence of a given end operation is determined (step S22). When it is determined that there is no end operation (step S22: N), the process returns to step S10.
[0165]
On the other hand, when it is determined that a given end operation has been performed (step S22: Y), a series of processing ends (end).
[0166]
As described above, according to the first embodiment, the rotation angle around the y-axis of the screen of the display unit in the stereoscopic image for enabling the stereoscopic viewing by the left-right parallax like the parallax barrier method or the lenticular method. Accordingly, the left-eye strip image and the right-eye strip image are switched and displayed, so that the movable range of the viewer's viewpoint capable of stereoscopic viewing can be expanded.
[0167]
4). Second embodiment
In the first embodiment, by changing the strip image for the left eye and the strip image for the right eye displayed in each strip aggregate image display area according to the rotation angle around the y axis of the screen, the viewer's Although the viewpoint movable range has been expanded, the present invention is not limited to this. In the second embodiment, the left-eye strip image and the right-eye strip image displayed in each strip aggregate image display area are shifted in the left-right direction according to the rotation angle around the y-axis of the screen. The movable range of the viewpoint is expanded.
[0168]
FIG. 14 is an explanatory diagram for explaining the operation of the strip image display position changing unit of the image generating apparatus according to the second embodiment.
[0169]
As described above, the screen 260 of the display unit of the image generation apparatus according to the second embodiment has the first to Nth strip aggregate image display areas along the x axis. The m-th (1 ≦ m ≦ N, m is a natural number) strip set image display area is a left-eye strip image display area L. _m And right eye strip image display area R _m including. Left eye strip image display area L _m The left eye strip image IL _m Is displayed. Right eye strip image display area R _m The right eye strip image IR _m Is displayed.
[0170]
Here, when the rotation angle acquired by the angle acquisition unit exceeds a given threshold value in the first rotation direction, the strip image display position changing unit performs the left-eye strip image and the right-eye strip in each strip aggregate image. Shift the image. For example, in the case of the m-th strip aggregate image display area, the left-eye strip image display area L of the m-th strip aggregate image display area. _m The strip image IR for the right eye in the strip aggregate image display area _m , Right eye strip image display area R _m Left eye image IL of the (m−1) th strip aggregate image display area adjacent to _m-1 Is displayed.
[0171]
On the other hand, when the rotation angle acquired by the angle acquisition unit exceeds a given threshold value in the second rotation direction opposite to the first rotation direction, the strip image display position changing unit causes the left eye in each strip aggregate image. Shift the strip image for right eye and the strip image for right eye. For example, in the case of the m-th strip aggregate image display area, the left-eye strip image display area L of the m-th strip aggregate image display area. _m Right eye image IR of the (m + 1) th strip aggregate image display area adjacent to _{m + 1} , Right eye strip image display area R _m The left eye image IL in the strip aggregate image display area _m Is displayed.
[0172]
In this way, by displaying on the screen 260 a strip collection image obtained by shifting the strip image for the left eye and the strip image for the right eye that constitute the strip collection image in the left-right direction according to the acquired rotation angle, Discontinuity can be eliminated and the range of movement of the viewer's viewpoint can be expanded. In addition, since each strip image need only be shifted in the left-right direction in each strip aggregate image display region, an increase in processing load associated with the generation of the stereoscopic image can be suppressed to a slight one.
[0173]
The image generation apparatus according to the second embodiment can also be applied to a game device as in the first embodiment. Since the configuration and operation are the same as those of the first embodiment shown in FIGS. 8 to 11, the illustration and description thereof will be omitted.
[0174]
The second embodiment differs from the first embodiment in the operation of the strip image display position changing unit.
[0175]
A detailed example of the processing of the second embodiment including the operation of the strip image display position changing unit according to the second embodiment will be described with reference to FIGS.
[0176]
FIG. 15 illustrates an example of a stereoscopic image generation process according to the rotation angle θy about the y-axis in the second embodiment.
[0177]
The processing unit 100 extracts the rotational angular velocity ωy about the y axis detected by the angular velocity detection unit 198, and performs an integration operation in the angle calculation unit 130 to obtain the rotational angle θy about the y axis (step S30).
[0178]
Next, the acquired value of the rotation angle θy around the y-axis is “− (θ ₁ + Θ ₂ ) / 2 ”or not (step S31).
[0179]
The value of the rotation angle θy is “− (θ ₁ + Θ ₂ ) / 2 ”(step S31: Y), the strip image display position changing unit changes the right-eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i-1 To the right eye strip image display area R _i The left eye strip image IL _i-1 The left eye strip image display area L _i Is displayed (step S32).
[0180]
As a result, the left eye image is displayed in SL in FIG. 12, the right eye image is displayed in SR, the right eye image is observed in the viewer's right eye, and the left eye image is observed in the left eye. Stereoscopic viewing with a stereoscopic image having correct right-and-left parallax is possible.
[0181]
Further, the value of the rotation angle θy is “− (θ ₁ + Θ ₂ ) / 2 ”(step S31: N), the obtained value of the rotation angle θy around the y-axis is“ −θ ”. ₁ It is determined whether it is smaller than "/ 2" (step S33).
[0182]
The value of the rotation angle θy is “−θ ₁ When it is determined that it is smaller than “/ 2” (step S33: Y), the strip image display position changing unit changes the left-eye strip image IL of the stereoscopic image generated by the stereoscopic image generation unit. _i-1 To the right eye strip image display area R _i In addition, right eye strip image IR _i The left eye strip image display area L _i (Step S34).
[0183]
In this way, in each strip aggregate image display area, by shifting the strip image for the left eye and the strip image for the right eye one by one, the image for the right eye is displayed in SL, and the image for the left eye is displayed in SR. An image for the right eye is observed in the right eye of the viewer and an image for the left eye is observed in the left eye, and there is no discontinuity in the stereoscopic view observed while moving from the front position. The movable range can be expanded.
[0184]
The value of the rotation angle θy is “−θ ₁ / 2 ”is not determined to be smaller (step S33: N), the acquired value of the rotation angle θy around the y-axis is“ θ ₁ / 2 "or less (step S35).
[0185]
The value of the rotation angle θy is “θ ₁ / 2 "or less (step S35: Y), the strip image display position changing unit changes the right-eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _i To the right eye strip image display area R _i The left eye strip image IL _i The left eye strip image display area L _i (Step S36).
[0186]
The value of the rotation angle θy is “θ ₁ / 2 ”or less (step S35: N), the acquired value of the rotation angle θy about the y-axis is“ (θ ₁ + Θ ₂ ) / 2 "or less (step S37).
[0187]
The value of the rotation angle θy is “(θ ₁ + Θ ₂ ) / 2 ”or less (step S37: Y), the strip image display position change unit changes the left eye strip image IL of the stereoscopic image generated by the stereoscopic image generation unit. _i To the right eye strip image display area R _i In addition, right eye strip image IR _{i + 1} The left eye strip image display area L _i Is displayed (step S38).
[0188]
The value of the rotation angle θy is “(θ ₁ + Θ ₂ ) / 2 ”or less (step S37: N), the strip image display position change unit changes the right eye strip image IR of the stereoscopic image generated by the stereoscopic image generation unit. _{i + 1} To the right eye strip image display area R _i The left eye strip image IL _{i + 1} The left eye strip image display area L _i Is displayed (step S39).
[0189]
Then, as set in step S32, step S34, step S36, step S38, and step S39, each strip image of the stereoscopic image generated in the stereoscopic image generation unit is converted into the strip image display area L for the left eye. _i And right eye strip image display area R _i Is displayed (step S40), and is output to the LCD of the display unit 190 (step S41).
[0190]
Subsequently, the presence / absence of a given end operation is determined (step S42). When it is determined that there is no end operation (step S42: N), the process returns to step S30.
[0191]
On the other hand, when it is determined that a given end operation has been performed (step S42: Y), a series of processing ends (end).
[0192]
In addition, the strip image display area L for the left eye described above ₁ , L _N , Right eye strip image display area R ₁ , R _N Among them, when there is no strip image to be shifted, the strip image for the left eye and the strip image for the right eye may be displayed as they are, or the strip image prepared in advance may be displayed.
[0193]
As described above, according to the second embodiment, in a stereoscopic image for enabling stereoscopic viewing by left-right parallax as in the parallax barrier method or the lenticular method, the rotation angle around the y axis of the screen of the display unit Accordingly, the left eye strip image and the right eye strip image are displayed one by one or two at a time, so that the movable range of the viewer's viewpoint capable of stereoscopic viewing can be expanded.
[0194]
5. Third embodiment
In the first and second embodiments, by changing the positions of the left eye strip image and the right eye strip image displayed in each strip aggregate image display area according to the rotation angle around the y axis of the screen, Although the movable range of the viewer's viewpoint is enlarged, the present invention is not limited to this. In the third embodiment, the left-eye strip image or the right-eye strip image displayed in each strip aggregate image display area is further moved leftward or rightward according to the rotation angle around the y-axis of the screen. By changing to a strip image from the selected viewpoint, the movable range of the viewpoint of the viewer is expanded.
[0195]
For example, in FIG. 12, when the viewer's viewpoint is near the front (rotation angle θy = 0), the left eye E _L And right eye E _R The left-eye image IL and the right-eye image IR are observed, but the value of the rotation angle θy is θy ₁ In this case, the right-eye image IR is switched to the SR, and the right-eye image IRR viewed from the right direction to the SL is switched to the SL so that correct stereoscopic vision can be obtained. .
[0196]
In this case, the right-eye image IRR may be an image prepared in advance or created by setting the virtual camera in the object space at a position offset further to the right side than the right-eye image IR. May be.
[0197]
When the viewer's viewpoint changes in the opposite direction, the same is performed for the left-eye image IL.
[0198]
FIG. 16 is an explanatory diagram for explaining the operation of the strip image display position changing unit of the image generating apparatus according to the third embodiment.
[0199]
As described above, the screen 270 of the display unit of the image generation apparatus according to the third embodiment has the first to Nth strip aggregate image display areas along the x-axis. The m-th (1 ≦ m ≦ N, m is a natural number) strip set image display area is a left-eye strip image display area L. _m And right eye strip image display area R _m including. Left eye strip image display area L _m The left eye strip image IL _m Is displayed. Right eye strip image display area R _m The right eye strip image IR _m Is displayed.
[0200]
Here, when the rotation angle acquired by the angle acquisition unit exceeds a given threshold value in the first rotation direction, the strip image display position changing unit performs the left-eye strip image and the right-eye strip in each strip aggregate image. A strip image when the viewpoint is further moved is displayed on one of the images. For example, in the case of the m-th strip aggregate image display area, the left-eye strip image display area L of the m-th strip aggregate image display area. _m The strip image IL for the left eye in the strip aggregate image display area as it is _m Is a strip image display area R for the right eye _m Includes a left-eye strip image ILL obtained by further dividing the left-eye image ILL with the viewpoint moved leftward. _m Is displayed. Thereby, the image ILL is observed in the left eye of the viewer and the image IL is observed in the right eye, so that the discontinuity of stereoscopic vision is eliminated.
[0201]
Similarly, when the rotation angle acquired by the angle acquisition unit exceeds a given threshold value in the second rotation direction opposite to the first rotation direction, the strip image display position changing unit moves the left of each strip set image. A strip image when the viewpoint is further moved is displayed on one of the eye strip image and the right eye strip image. For example, in the case of the m-th strip aggregate image display area, the left-eye strip image display area L of the m-th strip aggregate image display area. _m The right-eye strip image IRR obtained by dividing the right-eye image IRR with the viewpoint further moved to the right. _m Is a strip image display area R for the right eye _m The strip image IR for the right eye in the strip image display area is directly displayed. _m Is displayed.
[0202]
In this way, a strip aggregate image that has been changed to a strip image whose viewpoint has been further moved to one of the strip image for the left eye and the strip image for the right eye that constitute the strip aggregate image according to the acquired rotation angle is displayed on the screen. By displaying on 270, the discontinuity of stereoscopic vision can be eliminated, and the movable range of the viewer's viewpoint can be expanded.
[0203]
The image generation device according to the third embodiment can also be applied to a game device as in the first and second embodiments. Since the configuration and operation are the same as those of the first embodiment shown in FIGS. 8 to 11, the illustration and description thereof will be omitted.
[0204]
The third embodiment differs from the first and second embodiments in the operation of the strip image display position changing unit.
[0205]
A detailed example of the processing of the second embodiment including the operation of the strip image display position changing unit in the third embodiment will be described with reference to flowcharts with reference to FIGS.
[0206]
FIG. 17 shows an example of a stereoscopic image generation process according to the rotation angle θy about the y axis in the third embodiment.
[0207]
The processing unit 100 extracts the rotational angular velocity ωy about the y axis detected by the angular velocity detection unit 198, and performs an integration calculation in the angle calculation unit 130 to obtain the rotational angle θy about the y axis (step S50).
[0208]
Next, the acquired value of the rotation angle θy around the y-axis is “− (θ ₁ + Θ ₂ ) / 2 ”or not (step S51).
[0209]
The value of the rotation angle θy is “− (θ ₁ + Θ ₂ ) / 2 ”(step S51: Y), the strip image display position changing unit further shifts the stereoscopic image generated by the stereoscopic image generation unit to the left eye. Left eye strip image ILL obtained by dividing left eye image ILL from a virtual camera _i To the right eye strip image display area R _i Similarly, strip image ILL for the left eye _i The left eye strip image display area L _i (Step S52).
[0210]
As a result, ILL is displayed on SL in FIG. 12 and observed from the left eye, ILL is displayed on SR and observed from the right eye, and there is no parallax in the left-right direction, and stereoscopic viewing is not possible. However, there is an advantage that discontinuity caused by moving the viewpoint of the viewer can be eliminated.
[0211]
Further, the value of the rotation angle θy is “− (θ ₁ + Θ ₂ ) / 2 ”(step S51: N), the obtained value of the rotation angle θy about the y-axis is“ −θ. ₁ / 2 "is determined (step S53).
[0212]
The value of the rotation angle θy is “−θ ₁ When it is determined that it is smaller than “/ 2” (step S53: Y), the strip image display position changing unit further moves the left-eye virtual image generated by the stereoscopic image generation unit to the left. Left eye strip image ILL obtained by dividing left eye image ILL from the camera _i To the right eye strip image display area R _i Left eye strip image IL obtained by dividing left eye image IL _i The left eye strip image display area L _i (Step S54).
[0213]
In this way, the left eye image ILL is displayed in SR, and the left eye image IL is displayed in SL, using the left eye image ILL from the left eye virtual camera whose viewpoint is further moved in the left direction. The As a result, IL is observed in the right eye of the viewer who sees the SL, and ILL is observed in the left eye of the viewer who sees the SR. The continuity does not occur, and the movable range of the viewer's viewpoint can be expanded.
[0214]
The value of the rotation angle θy is “−θ ₁ / 2 ”is not determined to be smaller (step S53: N), the acquired value of the rotation angle θy around the y-axis is“ θ ₁ / 2 "or less (step S55).
[0215]
The value of the rotation angle θy is “θ ₁ / 2 ”or less (step S55: Y), the strip image display position changing unit obtains the right-eye image IR by dividing the stereoscopic image generated by the stereoscopic image generation unit. Right eye strip image IR _i To the right eye strip image display area R _i Left eye strip image IL obtained by dividing left eye image IL _i The left eye strip image display area L _i (Step S56).
[0216]
The value of the rotation angle θy is “θ ₁ / 2 ”or less (step S55: N), the acquired value of the rotation angle θy about the y-axis is“ (θ ₁ + Θ ₂ ) / 2 "or less (step S57).
[0217]
The value of the rotation angle θy is “(θ ₁ + Θ ₂ ) / 2 ”or less (step S57: Y), the strip image display position changing unit divides the right-eye image IR for the stereoscopic image generated by the stereoscopic image generation unit. Obtained right eye strip image IR _i To the right eye strip image display area R _i The right eye strip image IRR obtained by dividing the right eye image IRR from the right eye virtual camera further moved in the right direction. _i The left eye strip image display area L _i (Step S58).
[0218]
The value of the rotation angle θy is “(θ ₁ + Θ ₂ ) / 2 ”or less (step S57: N), the strip image display position changing unit moves the stereoscopic image generated by the stereoscopic image generation unit further to the right. Right eye strip image IRR obtained by dividing the right eye image IRR from the eye virtual camera _i To the right eye strip image display area R _i Similarly, strip image IRR for the right eye _i The left eye strip image display area L _i (Step S59).
[0219]
Then, as set in step S52, step S54, step S56, step S58, and step S59, each strip image of the stereoscopic image generated in the stereoscopic image generation unit is displayed in the strip image display area L for the left eye. _i And right eye strip image display area R _i Is generated (step S60), and is output to the LCD of the display unit 190 (step S61).
[0220]
Subsequently, it is determined whether there is a given end operation (step S62). When it is determined that there is no end operation (step S62: N), the process returns to step S50.
[0221]
On the other hand, when it is determined that a given end operation has been performed (step S62: Y), a series of processing ends (end).
[0222]
In addition, the strip image display area L for the left eye described above ₁ , L _N , Right eye strip image display area R ₁ , R _N Among them, when there is no strip image to be shifted, the strip image for the left eye and the strip image for the right eye may be displayed as they are, or the strip image prepared in advance may be displayed.
[0223]
As described above, according to the third embodiment, in a stereoscopic image for enabling stereoscopic viewing by left-right parallax like the parallax barrier method or the lenticular method, the rotation angle around the y axis of the screen of the display unit In response to this, at least one of the left-eye strip image and the right-eye strip image is changed to a strip image whose viewpoint is further moved, so that the range of movement of the viewer's viewpoint capable of stereoscopic viewing is expanded. can do. In addition, since these images are generated by setting the viewpoint of the virtual camera, it is possible to easily generate images that are temporally and spatially continuous.
[0224]
In the third embodiment, the left-eye virtual camera C for generating the left-eye image L and the right-eye image R in the object space. _L And right-eye virtual camera C _R Is set according to the rotation angle θy around the y-axis, and the left-eye image ILL and the right-eye image IRR are generated each time. However, the present invention is not limited to this. For example, a left-eye image ILL and a right-eye image IRR may be prepared in advance, and the displayed image may be switched according to the rotation angle θy. In this case, the processing load due to image generation can be greatly reduced.
[0225]
In the first to third embodiments, the left-eye image and the right-eye image in the object space are generated by setting the virtual camera, so that many types of images can be displayed for each pixel as in the past. There is no need to prepare, and the display resolution is not deteriorated. In addition, since it is only necessary to generate two images of the left eye image and the right eye image within the display period of the frame image due to the afterimage effect of the viewer's eyes, real-time image generation processing becomes possible, for example, It becomes easy to display a stereoscopic image of a moving image generated by graphic processing in a three-dimensional object space. Note that the stereoscopic image to be displayed need not be a three-dimensional image in the object space, and may be a pseudo two-dimensional image imitating a three-dimensional image. In any case, the processing cost necessary for generating the display image can be greatly reduced.
[0226]
All of the means of the present invention may be executed by hardware alone, or may be executed only by a program stored in an information storage medium or a program distributed via a communication interface. Alternatively, it may be executed by both hardware and a program.
[0227]
The present invention is not limited to that described in the above embodiment, and various modifications can be made.
[0228]
In the first to third embodiments, the three-dimensional image in the object space is generated. However, the present invention is not limited to this. A pseudo two-dimensional image imitating a three-dimensional image as a left-eye image and a right-eye image, and a plurality of images prepared in advance may be switched without performing real-time processing.
[0229]
Furthermore, although the parallax barrier method and the lenticular method have been described as examples of the display unit in the first to third embodiments, the display unit is not limited by the stereoscopic image display method, Any method can be used as long as it can display a stereoscopic view by left-right parallax formed by the right-eye image.
[0230]
In the first to third embodiments, the game apparatus has been described as the image generation apparatus, but the present invention is not limited to this. For example, the present invention can be similarly applied to a mobile phone or a PDA.
[Brief description of the drawings]
FIGS. 1A and 1B are explanatory diagrams illustrating an example of a stereoscopic image.
FIG. 2 is an explanatory diagram for explaining a case where a display unit performs stereoscopic display by a parallax barrier method.
FIG. 3 is an explanatory diagram for explaining a relationship between a strip image for the left eye and a strip image for the right eye and a stereoscopic image.
FIG. 4 is an explanatory diagram for explaining a case where a display unit performs stereoscopic display by a lenticular lens method.
FIG. 5 is a schematic diagram for explaining a movable range of a viewer when performing stereoscopic display by a lenticular lens method.
FIG. 6 is a configuration diagram showing an outline of a principle configuration of an image generation apparatus to which the present invention is applied.
FIG. 7 is an explanatory diagram for explaining an operation of a strip image display position changing unit of the image generating apparatus according to the first embodiment.
FIG. 8 is an external front view of a game device to which the image generation device according to the first embodiment is applied.
FIG. 9 is a block diagram illustrating an example of functional blocks of the game device according to the first embodiment.
FIG. 10 is an explanatory diagram showing a change in a rotational angular velocity ωy detected by a gyro sensor with low detection accuracy and a rotational angle θy generated thereby.
FIG. 11 is an explanatory diagram showing a rotation angular velocity ωy detected by a gyro sensor with low detection accuracy and a change in the rotation angle θy calculated by the angle calculation unit in the first embodiment based on the rotation angular velocity ωy.
FIG. 12 is an explanatory diagram illustrating a relationship between a stereoscopic image including a left-eye image and a right-eye image displayed on the screen of the display unit and a viewer's viewpoint.
FIG. 13 is a flowchart illustrating an example of a stereoscopic image generation process according to a rotation angle θy about the y-axis in the first embodiment.
FIG. 14 is an explanatory diagram for explaining an operation of a strip image display position changing unit of the image generation apparatus according to the second embodiment.
FIG. 15 is a flowchart illustrating an example of a stereoscopic image generation process according to a rotation angle θy about the y-axis in the second embodiment.
FIG. 16 is an explanatory diagram for explaining an operation of a strip image display position changing unit of the image generating apparatus according to the third embodiment.
FIG. 17 is a flowchart illustrating an example of a stereoscopic image generation process according to a rotation angle θy about the y-axis in the third embodiment.
[Explanation of symbols]
10, 30, 50, 76, 84, 250, 260, 270 screen
12 Intersection
32 Parallax Barrier
34, 54 Left eye strip image display area
36, 56 Right eye strip image display area
38, 58 Strip set image display area
40 Left eye image
40 ₁ ~ 40 _N Left eye strip image
42 Right-eye image
42 ₁ ~ 42 _N Right eye strip image
44 Stereoscopic images
46 ₁ ~ 46 _N First to Nth strip collection images
52 Lenticular Lens
60 Image generation device
62 Image generator
64 angle acquisition unit
66, 190 Display
68 Left original image generator
70 Right original image generator
72 Stereoscopic image generator
74 Strip image display position change section
80 game devices
82 Case
86 Left control section
88 Right control section
100 processor
110 Game processor
120 Image generator
122 Geometry processing unit
124 Drawing part
126 stereoscopic image processing unit
130 Angle calculator
160 Operation unit
170 Main memory
180 Information storage medium
192 sound output section
194 Portable information storage device
196 Communication Department
198 Angular velocity detector
C _L Virtual camera for left eye
CL _m convex lens
C _R Right-eye virtual camera
E _L left eye
E _R Right eye
IL, ILL Left eye image
IL ₁ ~ IL _N Left eye strip image
IR, IRR Right eye image
IR ₁ ~ IR _N Right eye strip image
L ₁ ~ L _N Left eye strip image display area
R ₁ ~ R _N Right eye strip image display area
θy, θy1 Rotation angle
ωy Rotational angular velocity

Claims

A three-dimensional image in which a left-eye strip image and a right-eye strip image obtained by dividing a left-eye image and a right-eye image into strips in the vertical direction of the screen are arranged in the left-right direction of the screen. Display means for displaying a visual image, an operation unit that can be operated by the player's hand while the player holds the housing with the hand, and the first axis when the vertical direction of the screen is the first axis A portable image generating device comprising an angular velocity detecting means for detecting a rotational angular velocity of the surroundings ,
An angle acquisition unit that acquires a rotation angle of the screen around the first axis based on the rotation angular velocity detected by the angular velocity detection unit ;
Image change means for changing the strip aggregate image according to the acquired rotation angle,
The image changing means includes
An image generating apparatus, wherein the strip image for the left eye and the strip image for the right eye of each strip aggregate image are exchanged.

The left-eye image and the right-eye image are divided into strips in the vertical direction of the screen, respectively. Display means for displaying a plurality of stereoscopic images arranged in a direction, an operation unit that can be operated by the player's hand while the player holds the casing with the hand, and the vertical direction of the screen as the first axis A portable image generation device comprising angular velocity detection means for detecting a rotational angular velocity about the first axis in some cases ,
An angle acquisition unit that acquires a rotation angle of the screen around the first axis based on the rotation angular velocity detected by the angular velocity detection unit ;
Image change means for changing at least one of the first to Nth strip aggregate images according to the acquired rotation angle,
The image changing means includes
In the mth (1 <m <N, m is a natural number) strip set image,
According to the acquired rotation angle, at least one of the left-eye strip image and the right-eye strip image is changed to the left-eye strip image or the right-eye strip image of the adjacent strip collection image. An image generating device.

The left-eye image and the right-eye image are divided into strips in the vertical direction of the screen, respectively. Display means for displaying a plurality of stereoscopic images arranged in a direction, an operation unit that can be operated by the player's hand while the player holds the casing with the hand, and the vertical direction of the screen as the first axis A portable image generation device comprising angular velocity detection means for detecting a rotational angular velocity about the first axis in some cases,
An angle acquisition unit that acquires a rotation angle of the screen around the first axis based on the rotation angular velocity detected by the angular velocity detection unit;
Image change means for changing at least one of the first to Nth strip aggregate images according to the acquired rotation angle,
The image changing means includes
In the mth (1 <m <N, m is a natural number) strip set image,
According to the acquired rotation angle, at least one of the left-eye strip image and the right-eye strip image is changed to a strip image from a viewpoint moved based on the rotation direction of the rotation angle. Image generation device.

In claim 3,
The strip image from the viewpoint is an image prepared in advance.

In claim 3,
Virtual camera setting means for setting viewpoints of the left-eye and right-eye virtual cameras in the object space according to the rotation angle acquired by the angle acquisition means;
Image generating means for generating a left eye strip image and a right eye strip image from the viewpoint of the left eye and right eye virtual cameras set in the object space;
The strip image from the viewpoint is an image generated by the image generation means.

In any one of Claims 1 thru | or 5,
The display means includes
Including a parallax barrier having strip-shaped gaps at corresponding positions of each strip aggregate image displayed on the screen,
From the gap between the parallax barriers, the stereoscopic image is displayed so that the viewer's right eye can see the strip image for the right eye of each strip set image and the viewer's left eye can see the strip image for the left eye of each strip set image. An image generation apparatus characterized in that an image is displayed.

In any one of Claims 1 thru | or 5,
The display means includes
Corresponding to each strip aggregate image displayed on the screen, including a lenticular lens arranged so that the focal plane is matched,
Through the lenticular lens, the stereoscopic image is displayed so that the viewer's right eye can see the strip image for the right eye of each strip set image and the viewer's left eye can see the strip image for the left eye of each strip set image. An image generation apparatus characterized in that an image is displayed.

In any one of Claims 1 thru | or 7 ,
An image generating apparatus comprising: means for causing the acquired rotation angle to approach a given value as time elapses.

A three-dimensional image in which a left-eye strip image and a right-eye strip image obtained by dividing a left-eye image and a right-eye image into strips in the vertical direction of the screen are arranged in the left-right direction of the screen. Display means for displaying a visual image, an operation unit that can be operated by the player's hand while the player holds the housing with the hand, and the first axis when the vertical direction of the screen is the first axis A program for a portable image generation device comprising an angular velocity detection means for detecting a rotational angular velocity of a rotation ,
An angle acquisition unit that acquires a rotation angle of the screen around the first axis based on the rotation angular velocity detected by the angular velocity detection unit ;
According to the obtained rotation angle, and an image changing means for changing the strip set image cause the computer to function of the image generation apparatus,
The image changing means includes
A program characterized in that the strip image for the left eye and the strip image for the right eye of each strip aggregate image are exchanged.

The left-eye image and the right-eye image are divided into strips in the vertical direction of the screen, respectively, and the first to Nth strip aggregate images that are paired with the left-eye strip image and the right-eye strip image are the left and right sides of the screen. Display means for displaying a plurality of stereoscopic images arranged in a direction, an operation unit that can be operated by the player's hand while the player holds the casing with the hand, and the vertical direction of the screen as the first axis A program for a portable image generating device comprising angular velocity detecting means for detecting a rotational angular velocity about the first axis in a case ,
An angle acquisition unit that acquires a rotation angle of the screen around the first axis based on the rotation angular velocity detected by the angular velocity detection unit ;
According to the obtained rotation angle, to function at least first through computer of the N said image generating apparatus and an image changing means for changing the one of the strip set image,
The image changing means includes
In the mth (1 <m <N, m is a natural number) strip set image,
According to the acquired rotation angle, at least one of the left eye strip image and the right eye strip image is changed to a left eye strip image or a right eye strip image of an adjacent strip aggregate image. Program to do.

The left-eye image and the right-eye image are divided into strips in the vertical direction of the screen, respectively. Display means for displaying a plurality of stereoscopic images arranged in a direction, an operation unit that can be operated by the player's hand while the player holds the casing with the hand, and the vertical direction of the screen as the first axis A program for a portable image generating device comprising angular velocity detecting means for detecting a rotational angular velocity about the first axis in the case,
An angle acquisition unit that acquires a rotation angle of the screen around the first axis based on the rotation angular velocity detected by the angular velocity detection unit;
According to the acquired rotation angle, the computer of the image generation device functions as an image changing unit that changes at least one of the first to Nth strip aggregate images,
The image changing means includes
In the mth (1 <m <N, m is a natural number) strip set image,
According to the acquired rotation angle, at least one of the left-eye strip image and the right-eye strip image is changed to a strip image from a viewpoint moved based on the rotation direction of the rotation angle. program.

In claim 11 ,
The strip image from the viewpoint is an image prepared in advance.

In claim 11 ,
Virtual camera setting means for setting viewpoints of the left-eye and right-eye virtual cameras in the object space according to the rotation angle acquired by the angle acquisition means;
Function computer image generating means and to further the image generation apparatus for generating a set for the left eye strip image and the right-eye strip images of a virtual camera and a viewpoint for the left eye and the right eye in the object space Let
The strip image from the viewpoint is an image generated by the image generation means.

In any of claims 9 to 13 ,
A program for causing a computer of the image generating apparatus to further function as means for bringing the acquired rotation angle closer to a given value as time passes.

A computer- readable information storage medium,
Information storage medium characterized by storing one of the programs of claims 9 to 14.