[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP4393496B2 - 立体映像表示装置 - Google Patents

立体映像表示装置 Download PDF

Info

Publication number
JP4393496B2
JP4393496B2 JP2006260831A JP2006260831A JP4393496B2 JP 4393496 B2 JP4393496 B2 JP 4393496B2 JP 2006260831 A JP2006260831 A JP 2006260831A JP 2006260831 A JP2006260831 A JP 2006260831A JP 4393496 B2 JP4393496 B2 JP 4393496B2
Authority
JP
Japan
Prior art keywords
pixels
image display
display unit
light beam
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2006260831A
Other languages
English (en)
Other versions
JP2008083195A (ja
Inventor
首 達 夫 最
島 理恵子 福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2006260831A priority Critical patent/JP4393496B2/ja
Priority to US11/902,095 priority patent/US20080074490A1/en
Publication of JP2008083195A publication Critical patent/JP2008083195A/ja
Application granted granted Critical
Publication of JP4393496B2 publication Critical patent/JP4393496B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/302Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays
    • H04N13/305Image reproducers for viewing without the aid of special glasses, i.e. using autostereoscopic displays using lenticular lenses, e.g. arrangements of cylindrical lenses
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/27Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving lenticular arrays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/349Multi-view displays for displaying three or more geometrical viewpoints without viewer tracking
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/26Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type
    • G02B30/30Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes of the autostereoscopic type involving parallax barriers

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Stereoscopic And Panoramic Photography (AREA)

Description

本発明は、立体映像表示装置に関する。
動画表示が可能な立体視画像表示装置、所謂3次元ディスプレイには、種々の方式が知られている。近年、特にフラットパネルタイプで、且つ専用の眼鏡等を必要としない方式の要望が高くなっている。直視型或いは投射型の液晶表示装置やプラズマ表示装置などのような画素位置が固定されている表示パネル(要素画像表示部)の直前に表示パネルからの光線を制御して観察者に向ける光線制御素子を設置する方式が比較的容易に実現できる方式として知られている。
光線制御素子は、一般的にはパララクスバリア或いは視差バリアとも称せられ、光線制御素子上の同一位置でも角度により異なる画像が見えるように光線を制御している。具体的には、左右視差(水平視差)のみを与える場合には、スリット或いはレンチキュラーシート(シリンドリカルレンズアレイ)が用いられ、上下視差(垂直視差)も含める場合には、ピンホールアレイ或いはレンズアレイが用いられる。視差バリアを用いる方式にも、さらに2眼式、多眼式、超多眼式(多眼式の超多眼条件)、インテグラルフォトグラフィー(以下、IPとも云う)に分類される。これらの基本的な原理は、100年程度前に発明され立体写真に用いられてきたものと実質上同一である。インテグラルフォトグラフィーは、インテグラルイメージング、インテグラルビデオグラフィなどとも呼ばれる場合がある。
IP方式でも多眼方式でも、通常は視距離が有限であるため、その視距離における透視投影画像が実際に見えるように表示画像を作成する。水平視差のみで垂直視差のないIP方式(1次元IP方式)では、視差バリアの水平方向ピッチが要素画像表示部のサブ画素の水平方向ピッチの整数倍である場合は平行光線の組があるため(以下、平行光線1次元IPとも云う)、垂直方向がある一定視距離の透視投影であり水平方向が平行投影である画像を画素列ごとに分割し表示面に表示される画像形式である視差合成画像に合成することにより、正しい投影の立体像が得られる。具体的な方法は、非特許文献1に開示されている。多眼方式では、単純な透視投影による画像を分割配置することにより、正しい投影の立体像が得られる。
なお、垂直方向と水平方向で投影方法あるいは投影中心距離を異ならせるような撮像装置は、特に平行投影の場合に被写体と同サイズのカメラあるいはレンズが必要となるため、実現が困難である。したがって、撮像により平行投影データを得るためには、透視投影の撮像データから変換する方法が現実的であり、EPI(エピポーラ面)を用いた補間による方法である光線空間法などが知られている。
平行光線1次元IP方式は、非特許文献1に開示されているように、2眼方式や多眼方式に比べ、視域が広く運動視差が連続的であり、自然で見やすいというメリットがある。
2眼方式や多眼方式は最も単純な立体画像表示であるため画像フォーマットが単純で、各視点画像はすべて同一サイズであり、2眼方式なら2枚、9眼方式なら9枚の視差成分画像を画素列毎に分割して、要素画像表示部に表示される画像形式である視差合成画像に合成すればよい。平行光線1次元IP方式では、同一解像度相当の多眼方式に比較し、視差成分画像の枚数が多く、各視差成分画像のサイズ(使用する水平範囲)も視差方向により異なる。コンピュータグラフィクス(CG)の場合、画像処理速度はカメラ数にも依存する。また、実写の場合、実カメラ数が多いと撮像装置コストが高くなる。実カメラ数を減らし視点間補間カメラ数を増やす場合にも処理負荷が高くなる。
SID04 Digest 1438 (2004)
上述のように、従来の平行光線1次元IP方式の立体映像表示装置にあっては、必要視点数が多いことによる処理速度低下に問題がある。
この発明は、上記事情を考慮してなされたものであり、その目的は、1次元IP方式において、画質を損なうことなく処理速度の低下を抑制できる立体映像表示装置および表示方法を提供することにある。
本発明の第1の態様による立体映像表示装置は、
表示面内に画素がマトリクス状に配列された要素画像表示部と、要素画像表示部に対向して設置され略垂直方向に直線状に延びる光学的開口部が略水平方向に周期的に並ぶ光線制御素子と、を備え、前記要素画像表示部の高さをH、画素の総列数を2m、nを整数とした場合、光線制御素子の水平ピッチが画素の水平ピッチのn×(m−1)/m倍より短く、かつn列毎の画素からの光線群が収束する光線制御素子面からの距離L’が、3H〜6Hの範囲にある標準視距離Lより長く、標準視距離Lに相当する透視投影であるn+2視点以上の多視点画像が要素画像表示部の各要素画像に分割配置されることを特徴とする。
また、本発明の第2の態様による立体映像表示装置は、表示面内に画素がマトリクス状に配列された要素画像表示部と、要素画像表示部に対向して設置され略垂直方向に直線状に延びる光学的開口部が略水平方向に周期的に並ぶ光線制御素子と、を備え、前記要素画像表示部の高さをH、画素の総列数を2m、nを整数とした場合、光線制御素子の水平ピッチが画素の水平ピッチのn×(m−1)/m倍より短く、かつn列毎の画素からの光線群が収束する光線制御素子面からの距離L’が、3H〜6Hの範囲にある標準視距離Lより長く、垂直方向が前記標準視距離Lに相当する透視投影であり、水平方向が前記距離L’に相当する透視投影であるn視点の多視点画像が要素画像表示部の各要素画像に分割配置されることを特徴とする。
また、本発明の第3の態様による立体映像表示装置は、表示面内に画素がマトリクス状に配列された要素画像表示部と、前記要素画像表示部に対向して設置され略垂直方向に直線状に延びる光学的開口部が略水平方向に周期的に並ぶ光線制御素子と、を備え、前記要素画像表示部の高さをH、前記画素の総列数を2m、nを整数とした場合、前記光線制御素子の水平ピッチが前記画素の水平ピッチのn×(m−1)/m倍より短く、かつn列毎の前記画素からの光線群が収束する前記光線制御素子面からの距離L’が6Hより長いことを特徴とする。
本発明によれば、1次元IP方式において、画質を損なうことなく処理速度の低下を抑制することができる。
以下、図面を参照して、この発明の実施形態に係る立体映像表示装置を詳細に説明する。なお本明細書において「画素」とは、要素画像表示部の表示面の1フレームで独立に輝度を制御できる最小単位を示しており、通常の直視透過型液晶パネルでは赤(R)、緑(G)、青(B)のサブ画素に相当する。
図1は、この発明の一実施形態による立体映像表示装置の水平断面および観察位置を表す概念図である。図1においては、視差数(n)は12である。立体映像表示装置は、表示面内に画素335がマトリクス状に配列された要素画像表示部331と、要素画像表示部331に対向して設置され略垂直方向に直線状に延びるシリンドリカルレンズが略水平方向に周期的に並ぶレンチキュラー板(光線制御素子)332とを備えている。
厳密な平行光線1次元IP方式の立体映像表示装置では、画面両端におけるレンズの位置は332aに示されており、レンズ水平ピッチは画素幅の12倍である。n列毎の画素からの光線群は平行光線であるため、収束する距離は無限遠である。これに対し、本実施形態の立体映像表示装置においては、レンズ332の水平ピッチはほぼ12画素分であるがそれよりわずかに短く、画面両端において2画素分ずれた位置にレンズ端がある。すなわち、視差数をn、画素の総列数を2mとした場合、光線制御素子332の水平ピッチが画素の水平ピッチのn×(m−2)/m倍である。n列毎の画素からの光線群が収束する距離は、図中のL’である。要素画像表示部331の高さをHとした場合、視距離Lが標準的なディスプレイと同様に3H〜6Hであるとすれば(例えば、CCIR 勧告500−2参照)、L’はLより大きい。n列毎の画素からの光線群がLにおいて収束する場合は多眼方式であり、画面両端におけるレンズ位置(レンズ水平ピッチの上限)は332bとなる。すなわち、多眼方式では、本実施形態の立体映像表示装置より短いレンズピッチである。なお、視距離は光線制御素子面を基準とするが、厳密には光線制御素子のレンズ主平面336である。ただし視距離に比べると、光線制御素子面とレンズ主平面の位置の違いは無視できるほど小さく、同じとみなしてよい。
ここで、平行光線1次元IP方式の必要カメラ数について図2乃至図4を用いて説明する。図2乃至図4は、それぞれ本実施形態の立体映像表示装置、厳密な平行光線1次元IPの立体映像表示装置(比較例)、多眼方式の立体映像表示装置(比較例)を、表示面、視域381および光線を示す平面図で表した図である。厳密平行光線1次元IP方式→本実施形態→多眼方式の順で画素ピッチに対するレンズピッチが短くなり、n画素置きの画素列からの光線群が収束していく。斜線部381は視域であり、実線はn画素置きの画素列からの光線群すなわち1カメラに対応する光線群である。平行光線群に近い光線群の場合は、カメラとの対応がつくようにカメラ付近からカメラに収束するように描かれている。カメラ429のうち、黒い四角で表される「必要カメラ」は、対応する光線が一部でも視域に含まれるカメラである。白い四角で表される「削減カメラ」は、対応する光線が視域に含まれないカメラである。
一般に、平行光線1次元IP方式の必要カメラ数は、最端要素画像において対応レンズからはみだしている画素数が、視域の片側で増えるカメラ数となることから、その2倍(両側分)を視差数に加えた数となる。ただし、最端要素画像が視差数より1多い画素列数となっている要素画像で、画面から1画素以上はみ出している場合は、はみだした画素数−1が片側で増えるカメラ数である。なお、要素画像の配置は、画面中心を基準とし、左右対称である。画素幅を単位とした要素画像平均ピッチをPeとし、INT(a)をaを超えない整数(この場合a≧0に限定される)を表す関数とすると、必要カメラ数は
INT(INT(m/Pe)×(Pe−n)+0.5)×2+n
となる。レンズ主平面と画素の間の空気換算距離をg(図1に示す)とすると、要素画像平均ピッチ(画素幅単位)は
Pe=n(L+g)/L
である。なお、レンズ方向が斜めに傾いたレンチキュラー板の場合、画素数は実効値(例えば傾き角tan−1(1/4)の16視差であれば2mは実画素数の4/3倍)として計算できる。ただし視差数は整数に限定している。
上記式からわかるように、カメラ数は対称性により2個ずつ増減する。カメラ数が少なくとも2個減るためには、Peがわずかに変わることによりINT(m/Pe)×(Pe−n)が1以上減少すればよい。INT(m/Pe)は、レンズ数の半数であり、これはPeが0.1%〜0.3%程度変化しても変わらないとみなせることから、結局Peのわずかな変化によりINT(m/Pe)×Peが1以上減少すればよいことになる。しかし、これは画面中心から画素数単位で測ったレンズ端位置に相当する。したがって、レンズ端位置が1画素以上画面中心方向にシフトするようにレンズピッチが短くなれば、カメラ数は2以上減ることになる。これはすなわちレンズの水平ピッチが画素の水平ピッチのn×(m−1)/m倍より小さいことに相当する。
このようにレンズピッチを短くしてカメラ数を減少させていくと、図4に示す多眼の場合が最もカメラ数が少なくなる。しかし多眼では視距離Lの位置343付近で光線分布が均一でないためモアレが発生しやすく運動視差の連続性も損なわれるなどの問題が発生し、平行光線1次元IP方式の立体映像の特徴が失われる。したがって、多眼の場合のレンズピッチによるレンズ端332bより、本実施形態のレンズ端332は外側となり、n列毎の画素からの光線群が収束する光線制御素子面からの距離が多眼の場合の最も大きい値6Hよりさらに長くなる。すなわち標準的な視距離において多眼のような特性を示す立体像になることはない。
図2のような本実施形態の立体映像表示装置の場合、図3のような厳密な平行光線1次元IP方式の場合と同様な水平方向が平行投影の画像を各視差成分画像(カメラ画像)として用いると、立体像に歪が発生する。この歪は、飛び出し部分が拡大され奥行き部分が縮小されるような、立体感が強調される歪とは逆で、立体感を低減させるものであり、好ましくない。したがって、各視差成分画像(カメラ画像)は、3H〜6Hの視距離に相当する透視投影の画像を用いればよく、これにより立体感が強調される歪が程よく入ることになる。CGにおいても実写においても、単純な透視投影の画像が使用できるため、処理負荷がかからず、好都合である。
図5は、本実施形態の立体映像表示装置の場合においても、歪のない立体像を得たい場合の画像作成・表示方法を説明する図である。垂直方向が3H〜6Hの視距離Lに相当する透視投影(カメラ位置429に相当)であり、水平方向がn列毎の画素からの光線群が収束する距離L’に相当する透視投影(カメラ位置430に相当)であるn視点の多視点画像を、多眼方式の場合と同様に各要素画像に分割配置すればよい。この場合はカメラ数が多眼方式と同数にまで低減されるが、垂直方向と水平方向で投影方法を変える必要があり、CGの場合は投影処理における対応またはモデル変形が必要となり、実写の場合はEPI利用の補間処理などが必要となる。
図6は、本実施形態の具体例を、厳密な平行光線1次元IP方式(図7、比較例)、多眼方式(図8、比較例)と比較して説明する水平断面図である。図9(a)は対応する表である。12視差の場合、平行光線1次元IP方式(図7)では、画面両端のレンズに対応する視差番号(カメラ番号)の最大範囲は−9〜9(0は除く)であり、18カメラが必要となっている。図6では、本実施形態の立体映像表示装置により、図9(a)の表中のレンズピッチ比0.9992までレンズピッチを短くした場合であり、画面両端のレンズに対応する視差番号(カメラ番号)の最大範囲は−7〜7(0は除く)であり、14カメラまで減少している。図8の多眼の場合は、カメラ数は12であり、図9(a)において、レンズピッチ比0.9988に相当する。
図9(b)は、本実施形態におけるレンズ傾き角tan−1(1/4)の16視差の立体映像表示装置におけるカメラ数低減の例を示す表である。視距離を3Hあるいはそれ以下の近距離に設定した場合、平行光線1次元IP方式においては特にカメラ数が増加し、この例では視差数の倍以上の36カメラが必要となっている。レンズピッチを短くしていくことにより、カメラ数が減少するが、多眼の場合とのほぼ中間の26カメラ程度になるようにレンズピッチを設定すると、カメラ数低減効果が十分であり、多眼の特性に近くなる悪影響も抑制できるため、望ましいといえる。
実際の処理速度向上、例えば動画のフレームレートの違いを体感するためには、20%以上のフレームレート差が必要とみなせることから、カメラ数が20%以上減るレンズピッチに設定することが望ましい。また、プラスチック製のレンチキュラー板を用いる場合、温度変化(熱膨張)によるピッチ変動も考慮し、標準的な使用温度で本実施形態の範囲とし、想定使用温度の下限近傍で多眼のレンズピッチ以上とすることが望ましい。
光線制御素子の光学的開口は、垂直でなく斜めやジグザグや階段形状でもよく、また表示装置の画素配列がデルタ配列であってもよい。その場合においても、本実施形態のようなレンズピッチ設定により、カメラ数の低減が可能であり、本実施形態のような適切な投影方法を用いることにより立体像の歪も抑制される。
次に、IP方式の視差画像配置を用いた立体映像表示について図10乃至図23を用いて説明する。この図10乃至図23に示す立体映像の表示は、図1乃至図9を参照して説明した表示装置および表示方法と組み合わせて実現される。ここでは、図1乃至図9とは異なる18視差(n=18)の場合の実施形態の説明図となっている。
図10(a)は、光線制御素子としてのレンチキュラーシート334の斜視図であり、図10(b)は、光線制御素子としてのスリット333の斜視図である。
図11は、立体映像表示装置の全体を概略的に示す斜視図である。必要に応じ拡散シート301が平面画像表示部331とレンチキュラー板(光線制御素子)332の間に設けられている。想定視距離上の視点343から見ると、水平方向の視角341および垂直方向の視角342の範囲に立体映像が観察されるが、視差は水平方向のみである。
図12(a)、(b)、(c)は、図11に示した立体映像表示装置の表示部を基準にして垂直面内及び水平面内における光線再生範囲を概略的に示す展開図であり、図12(a)に平面画像表示部331、視差バリア332の正面図、図12(b)に立体映像表示装置の画像配置を示す平面図、図12(c)に立体映像表示装置の側面図を示す。立体映像表示装置は、液晶表示素子などの平面画像表示部(要素画像表示部)331及び光学的開口を有する光線制御素子332を備えている。図10(a)、(b)に示すような垂直方向に光学的開口が直線状に伸び水平方向に周期的に配列される形状のレンチュキュラーシート334或いはスリット333で構成され、投射型の場合は曲面鏡アレイなどで構成される。ここでは、要素画像表示部331の画素数は、正方形となる最小単位の画素群で数えた場合の一例として横方向(水平方向)が1920であり、縦方向(垂直方向)が1200であり、各最小単位の画素群は、赤(R)、緑(G)、青(B)の画素を含んでいるものとする。
図12(a)、(b)、(c)において、視差バリア332と視距離面343との間の視距離L、視差バリアピッチPs、視差バリア332(厳密にはその主平面)と要素画像表示部331との間のギャップ(視差バリアギャップ)dが定められれば、要素画像のピッチPeが視距離面343上の視点からアパーチャ中心を表示素子上に投影した間隔により決定される。符号346は、視点位置と各アパーチャ中心とを結ぶ線を示し、視域幅Wは表示部331の表示面上で要素画像同士が重なり合わないという条件から決定される。
1次元IP方式においては、この直線346は、表示部の表示面上では各画素の中心を通るとは限らない。これに対し、多眼方式では、視点位置と各アパーチャの中心とを結ぶ線は、画素中心を通り、光線軌跡に一致している。アパーチャの水平ピッチPsが画素ピッチPpの整数倍の場合(厳密な平行光線1次元IP)では、要素画像のピッチPeは、画素ピッチPpの整数倍から大きめにずれた端数を伴っている。アパーチャの水平ピッチPsが画素ピッチPpの整数倍でない場合(例えば本発明の構成)でも、一般的に1次元IPでは、要素画像のピッチPeは、画素ピッチPpの整数倍からずれた端数を伴うこととなる。これに対し多眼では要素画像のピッチPeは画素ピッチPpの整数倍となる。
図14(a)、14(b)は、本発明の一実施形態による1次元IP方式の視差画像と立体画像の構成方法を示している。表示される物体(被写体)421は、実際に立体映像表示装置の光線制御素子が置かれる面と同じ位置にある投影面422に投影される。
図14(a)においては通常の透視投影になるように、投影面422と平行で正面(上下方向の中央)にありかつ視距離面内にある投影中心線423上の一点(カメラ位置)に向かう投影線425に沿って投影される。この投影法により、投影面上に、透視投影された被写体の像424が作成される。カメラごとに操作を繰り返し、標準視距離Lに相当する透視投影であるn+2視点以上の多視点画像が得られる。なお、通常の透視投影しか使えないときに、立体像の歪を抑制する必要性が高い場合は、CGモデルを変形させた上でこの投影法を用いればよい。z方向に反比例して、飛び出し領域のx方向を縮小、奥行き領域のx方向を拡大する変形方法となる。
図14(b)においては垂直方向と水平方向で距離の異なる透視投影になるように、投影面と平行で正面(上下方向の中央)にありかつ視距離面内にある垂直方向投影中心線423および投影面と平行で垂直方向に延びかつ視距離面より遠くにある水平方向投影中心線423aに向かう投影線425に沿って投影される。投影線は、垂直方向は垂直方向投影中心線423において交わり、水平方向は水平方向投影中心線423aにおいて交わる。この投影法により、投影面上に、特殊な透視投影された被写体の像424が作成される。カメラごとに操作を繰り返し、垂直方向が前記標準視距離Lに相当する透視投影であり、水平方向が前記距離L’に相当する透視投影であるn視点の多視点画像が得られる。
図15に示すように、投影面上に透視投影された一方向分の画像(視差成分画像)は、垂直方向に画素1列ごとに分割され、要素画像表示部の表示面に、光線制御素子の光学的開口ピッチの間隔(一定数の画素列間隔)をおいて分割配置される。この際にRGBの画素は縦方向に並べ替えられる。以上の操作を他の投影方向(カメラ)についてもそれぞれ繰り返し、表示面の視差合成画像全体が完成する。投影方向は、視距離により数10方向が必要である。視距離700mmで厳密な平行光線1次元IPの場合、要素画像幅は18.05サブ画素幅であるが、本発明によりレンズピッチを縮小し、要素画像幅を18.036サブ画素幅とした。この場合、図14(a)の方法であればカメラ数は34から30に減少し、図14(b)の方法であればカメラ数は18である。投影された画像(視差成分画像)は、図14(a)の方法の場合、それぞれ必要な範囲の列のみ作成すればよく、必要な範囲は、図13に示されている。各投影方向は視差番号(カメラ番号)に対応するが、各方向は等角度ではなく、視距離面上で等間隔になるようにする。すなわちカメラを投影中心線上で等間隔に平行移動(向きは一定)して撮影することに相当する。図23は、立体映像表示方法における撮像の概略を示している。等間隔に水平方向に並べられたカメラ429は投影面422に対し撮像されるように調整される。
図16は、立体映像表示装置の一部分の構成を概略的に示す斜視図である。液晶パネルなどの平面状の要素画像表示部の表示面の前面に、光線制御素子として光学開口が垂直方向に延びるシリンドリカルレンズからなるレンチキュラーシート334が配置されている。なお光学開口は斜めや階段状であってもよい。表示面には、縦横比が3:1の画素34が、横方向および縦方向にそれぞれ直線状にマトリクス状に並び、各画素は同一行および列内で横方向に赤、緑、青が交互に並ぶように配列されている。この色配列は一般にモザイク配列と呼ばれる。
図17は、画素配列の平面図の例を示している。−9から9までの数字は、視差番号を表しており、隣接視差番号は隣接列に割当てられている。画素行の縦周期は、画素の横周期Ppの3倍である。図17に示される表示画面では、18列6行の画素34で1実効画素43(この1実効画素43は、図16において黒枠で示されている)あるいは18列3行の画素で1実効画素が構成される。このような表示部の構造では、水平方向に18視差を与える立体映像表示が可能となる。この表示構造では、多眼式の場合は18眼となり、要素画像ピッチが18画素ピッチであり、かつ光線制御素子の横ピッチが18画素ピッチより小さくなる。
IP方式の場合は、例えば18画素ピッチが視差バリアピッチPsに等しく平行光線の組ができるような設計においては18画素幅よりわずかに大きい間隔(例えば18.05)で要素画像境界が生じることから、実効画素の幅は、表示面内の位置により18列分或いは19列分となる。すなわち、要素画像ピッチの平均値が18画素幅より大きく、かつ光線制御素子の横ピッチが18画素幅である。本発明においては、平行光線1次元IPと多眼との中間である18.036に設定するため、再生される光線は厳密な平行光線ではないが、一部の実効画素の幅は19列となる。実効画素の幅が19列分の場合の例を図18に示す。なお、図14(b)の方法であれば、すべて図17のような18列周期構造として扱う。
図19或いは図20は、立体映像表示装置の表示部の水平断面を概略的に示したものである。ここに示すようにスリット333又はレンチキュラーシート334のレンチキュラーレンズの水平方向のピッチPs(周期)は、整数画素幅に対し0.1%程度小さく定められている。即ち、各スリット332間の中心を通る中心軸351又は隣接するレンチキュラーレンズの境界を通る基準軸352は、画面中央部においてはほぼ画素境界を通るが、図1や図6に示すように、画面の左右端に近づくにつれ徐々にずれていく。中心軸351或いは基準軸352間に相当する領域には、ほぼ整数個の画素が配置され、中心軸351或いは基準軸352の水平方向のピッチPs(周期)は、一定に定められている。ここに示す例では、このピッチPsは、18画素幅に対し0.1%程度小さい値に定められている。要素画像表示部の表示面331と視差バリア332、334との間のギャップd(空気換算ギャップd’は図1のgに相当)は、ガラス基板或いはレンズ材質の屈折率を考慮して実効的に約2mmに定められている。なお、符号343は視距離面を示し、符号363は視差成分画像の番号を示す。
図21は、本発明の一実施形態(図14(a)の方法)によるIP方式における立体映像表示装置の要素画像表示部の表示面内における画像の配置方法を、表示部を正面から見た概念図として示している。要素画像表示部の表示面は、各アパーチャ(光線制御素子の開口部)に対応する要素画像370に分けられ、要素画像は、IP方式においてそれぞれ18列又は19列の画素列から構成されている。視差割り当て可能な画素列の合計数は5760列、アパーチャ数は320(図21において、符号364で示す領域に記述されるアパーチャ番号の範囲は、#−160〜#−1、#1〜#160)であり、アパーチャピッチPsは、18画素幅とほぼ等しいが、0.1%程度短い。各画素列365には、対応する視差番号(この例では、視差番号−15〜−1、1〜15の30方向分)が符号363で示す領域に項目として示されている。アパーチャ番号#1の要素画像は、視差番号−9〜−1、1〜9の18視差の列からなり、アパーチャ番号#−159の要素画像は、視差番号−15〜−1、1〜3の18視差の列からなる。要素画像幅が18画素列の幅よりわずかに大きいため、要素画像境界を最も近い画素列境界に合わせる(通常のA−D変換方法)とすると、アパーチャに対する画素列数は、大部分のアパーチャにおいて18列であるが、19列になっているアパーチャも出てくる(図17および図18)。19列になるアパーチャ番号を境に、アパーチャ内の視差番号範囲が1つずつシフトされている。
図13において、各方向の視差画像の配置が開始・終了されるレンズ番号(表中3D画素番号)が示されている。この表には、対応する要素画像表示部の画素(通常の液晶パネルにおけるサブ画素)の列番号も示されている。
図22は、本発明の一実施形態(図14(b)の方法)によるIP方式における立体映像表示装置の要素画像表示部の表示面内における画像の配置方法を、表示部を正面から見た概念図として示している。要素画像表示部の表示面は、各アパーチャ(光線制御素子の開口部)に対応する要素画像370に分けられ、要素画像は、IP方式においてそれぞれ18列の画素列から構成されている。視差割り当て可能な画素列の合計数は5760列、アパーチャ数は320(図22において、符号364で示す領域に記述されるアパーチャ番号の範囲は、#−160〜#−1、#1〜#160)であり、アパーチャピッチPsは、18画素幅とほぼ等しいが、0.1%程度短い。各画素列365には、対応する視差番号(この例では、視差番号−9〜−1、1〜9の18方向分)が符号363で示す領域に項目として示されている。すべてのアパーチャ番号#1の要素画像は、視差番号−9〜−1、1〜9の18視差の列からなる。
以上のように、本発明の一実施形態によれば、1次元IP方式において、必要カメラ数が数台から10台程度(数割)低減し、処理負荷が数割軽減する。特に必要画素数限定レンダリングが不可能な3D−CGソフトウェアの場合や視距離が近い場合に効果が大きい。厳密な平行光線でなくなることによる副作用である歪は、通常の透視投影画像をそのまま使う場合にはかえって歪が軽減される。
尚、この発明は、上記実施形態そのままに限定されるものでなく、実施段階では、その要旨を逸脱しない範囲で構成要素を変形して具体化できる。
また、上記実施形態に開示されている複数の構成要素の適宜な組合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素からいくつかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合わせてもよい。
この発明の一実施形態による1次元IP方式の立体映像表示装置および表示方法を示す水平断面図である。 この発明の一実施形態による1次元IP方式の立体映像表示装置および表示方法を示す平面図である。 この発明の比較例による厳密な平行光線1次元IP方式の立体映像表示装置および表示方法を示す平面図である。 この発明の比較例による多眼方式の立体映像表示装置および表示方法を示す平面図である。 この発明の一実施形態による1次元IP方式の立体映像表示装置および表示方法を示す平面図である。 この発明の一実施形態による1次元IP方式の立体映像表示装置および表示方法を示す水平断面図である。 この発明の比較例による厳密な平行光線1次元IP方式の立体映像表示装置および表示方法を示す水平断面図である。 この発明の比較例による多眼方式の立体映像表示装置および表示方法を示す水平断面図である。 この発明の一実施形態によるカメラ数低減を説明する表である。 この発明の一実施形態にかかる光線制御素子を概略的に示す斜視図である。 この発明の一実施形態による立体映像表示に使用される立体映像表示装置の概略を示す斜視図である。 この発明の一実施形態による立体映像表示に使用される立体映像表示装置における要素画像ピッチPeと視差バリアピッチPsとギャップdと視距離Lと視域幅Wの関係を示す模式図である。 この発明の一実施形態による立体映像表示装置および表示方法における各視差成分画像のデータ範囲と視差合成画像内の配置位置を示す表である。 この発明の一実施形態による各視差成分画像の投影方法を示す模式図である。 この発明の一実施形態による画像構成方法を示す模式図である。 この発明の一実施形態による立体映像表示に使用される立体映像表示装置の画素配列を概略的に示す斜視図である。 この発明の一実施形態による立体映像表示に使用される立体映像表示装置の画素配列および視差画像配置を概略的に示す正面図である。 この発明の一実施形態による立体映像表示に使用される立体映像表示装置の画素配列および視差画像配置を概略的に示す正面図である。 この発明の一実施形態にかかる1次元IP方式の画素と要素画像と視差バリアの位置関係を示す模式図である。 この発明の一実施形態にかかる1次元IP方式の画素と要素画像とレンチキュラー板の位置関係を示す模式図である。 この発明の一実施形態にかかる1次元IP方式の立体映像表示装置の画像配置方法を示す模式図である。 この発明の一実施形態にかかる1次元IP方式の立体映像表示装置の画像配置方法を示す模式図である。 この発明の一実施形態による立体映像表示方法におけるカメラ配置を示す平面図である。
符号の説明
34 画素
35 ブラックマトリクス
43 立体映像表示時の実効画素
301 拡散シート
331 要素画像表示部
332 視差バリア
333 スリット
334 レンチキュラー板
335 画素
336 レンズ主平面
341 水平方向の視角
342 垂直方向の視角
343 視距離面
346 視点とアパーチャ中心を結ぶ線
363 視差成分画像の番号
364 アパーチャの番号
365 表示装置の表示面上の画素列
370 要素画像
381 視域
421 表示される物体(被写体)
422 投影面
423 投影中心線
424 投影面上に投影された被写体
425 投影線
429 カメラ
430 カメラ

Claims (3)

  1. 表示面内に画素がマトリクス状に配列された要素画像表示部と、前記要素画像表示部に対向して設置され略垂直方向に直線状に延びる光学的開口部が略水平方向に周期的に並ぶ光線制御素子と、を備え、
    前記要素画像表示部の高さをH、前記画素の総列数を2m、nを整数とした場合、前記光線制御素子の水平ピッチが前記画素の水平ピッチのn×(m−1)/m倍より短く、
    かつn列毎の前記画素からの光線群が収束する前記光線制御素子面からの距離L’が、3H〜6Hの範囲にある標準視距離Lより長く、
    前記標準視距離Lに相当する透視投影であるn+2視点以上の多視点画像が前記要素画像表示部の各要素画像に分割配置されることを特徴とする立体映像表示装置。
  2. 表示面内に画素がマトリクス状に配列された要素画像表示部と、前記要素画像表示部に対向して設置され略垂直方向に直線状に延びる光学的開口部が略水平方向に周期的に並ぶ光線制御素子と、を備え、
    前記要素画像表示部の高さをH、前記画素の総列数を2m、nを整数とした場合、前記光線制御素子の水平ピッチが前記画素の水平ピッチのn×(m−1)/m倍より短く、
    かつn列毎の前記画素からの光線群が収束する前記光線制御素子面からの距離L’が、3H〜6Hの範囲にある標準視距離Lより長く、
    垂直方向が前記標準視距離Lに相当する透視投影であり、水平方向が前記距離L’に相当する透視投影であるn視点の多視点画像が前記要素画像表示部の各要素画像に分割配置されることを特徴とする立体映像表示装置。
  3. 表示面内に画素がマトリクス状に配列された要素画像表示部と、前記要素画像表示部に対向して設置され略垂直方向に直線状に延びる光学的開口部が略水平方向に周期的に並ぶ光線制御素子と、を備え、
    前記要素画像表示部の高さをH、前記画素の総列数を2m、nを整数とした場合、前記光線制御素子の水平ピッチが前記画素の水平ピッチのn×(m−1)/m倍より短く、
    かつn列毎の前記画素からの光線群が収束する前記光線制御素子面からの距離L’が6Hより長いことを特徴とする立体映像表示装置。
JP2006260831A 2006-09-26 2006-09-26 立体映像表示装置 Expired - Fee Related JP4393496B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2006260831A JP4393496B2 (ja) 2006-09-26 2006-09-26 立体映像表示装置
US11/902,095 US20080074490A1 (en) 2006-09-26 2007-09-19 Stereoscopic image display apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006260831A JP4393496B2 (ja) 2006-09-26 2006-09-26 立体映像表示装置

Publications (2)

Publication Number Publication Date
JP2008083195A JP2008083195A (ja) 2008-04-10
JP4393496B2 true JP4393496B2 (ja) 2010-01-06

Family

ID=39224476

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006260831A Expired - Fee Related JP4393496B2 (ja) 2006-09-26 2006-09-26 立体映像表示装置

Country Status (2)

Country Link
US (1) US20080074490A1 (ja)
JP (1) JP4393496B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5009847B2 (ja) * 2008-03-28 2012-08-22 富士フイルム株式会社 立体画像生成装置および方法並びにプログラム
JP6099892B2 (ja) * 2012-07-09 2017-03-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 映像表示装置
CN103354616A (zh) * 2013-07-05 2013-10-16 南京大学 在平面显示器上实现立体显示的方法和系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7425951B2 (en) * 2002-12-27 2008-09-16 Kabushiki Kaisha Toshiba Three-dimensional image display apparatus, method of distributing elemental images to the display apparatus, and method of displaying three-dimensional image on the display apparatus
JP3966830B2 (ja) * 2003-03-28 2007-08-29 株式会社東芝 立体表示装置
KR101012788B1 (ko) * 2003-10-16 2011-02-08 삼성전자주식회사 액정 표시 장치 및 그 구동 방법
JP3944188B2 (ja) * 2004-05-21 2007-07-11 株式会社東芝 立体画像表示方法、立体画像撮像方法及び立体画像表示装置

Also Published As

Publication number Publication date
US20080074490A1 (en) 2008-03-27
JP2008083195A (ja) 2008-04-10

Similar Documents

Publication Publication Date Title
JP4714116B2 (ja) 立体映像表示装置および立体映像表示方法
JP4714115B2 (ja) 立体映像表示装置および立体映像表示方法
JP3966830B2 (ja) 立体表示装置
US20080225113A1 (en) Three-dimensional image display device, method for displaying three-dimensional image, and structure of three-dimensional image data
JP4202991B2 (ja) 立体画像用データの記録方法及び表示再生方法
US7787008B2 (en) Three-dimensional image display device
US8040370B2 (en) Stereoscopic image display apparatus having stereoscopic pixel with approximately square shape and stereoscopic image display method
TWI446007B (zh) Three - dimensional image display device and three - dimensional image display method
JP5772688B2 (ja) 裸眼立体ディスプレイ装置
JP2009080144A (ja) 立体映像表示装置および立体映像表示方法
US20050083400A1 (en) Three-dimensional image display device, three-dimensional image display method and three-dimensional display image data generating method
JP6598362B2 (ja) 立体画像表示装置
JP2008107764A (ja) 表示装置、画像処理方法並びに電子機器
US20120098827A1 (en) Three-dimensional image display apparatus
JP4393496B2 (ja) 立体映像表示装置
JP2020012990A (ja) 表示装置および表示方法
JP5424342B2 (ja) 立体画像表示装置
JP4119409B2 (ja) 三次元映像表示装置及び三次元映像表示方法並びに三次元表示用映像データ生成方法
JP7445627B2 (ja) 立体表示装置
Nago et al. SMV256: super multiview display with 256 viewpoints using multiple projections of lenticular displays

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080327

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080812

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081014

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090915

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091013

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121023

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131023

Year of fee payment: 4

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313115

Free format text: JAPANESE INTERMEDIATE CODE: R313121

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees