JP7515229B2 - 映像表示システム、映像表示方法、及び、プログラム - Google Patents
映像表示システム、映像表示方法、及び、プログラム Download PDFInfo
- Publication number
- JP7515229B2 JP7515229B2 JP2022189945A JP2022189945A JP7515229B2 JP 7515229 B2 JP7515229 B2 JP 7515229B2 JP 2022189945 A JP2022189945 A JP 2022189945A JP 2022189945 A JP2022189945 A JP 2022189945A JP 7515229 B2 JP7515229 B2 JP 7515229B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- unit
- display
- correction
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 69
- PWPJGUXAGUPAHP-UHFFFAOYSA-N lufenuron Chemical compound C1=C(Cl)C(OC(F)(F)C(C(F)(F)F)F)=CC(Cl)=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F PWPJGUXAGUPAHP-UHFFFAOYSA-N 0.000 title 1
- 238000012937 correction Methods 0.000 claims description 421
- 230000008859 change Effects 0.000 claims description 56
- 230000008569 process Effects 0.000 claims description 51
- 238000012545 processing Methods 0.000 description 38
- 230000015572 biosynthetic process Effects 0.000 description 27
- 230000015654 memory Effects 0.000 description 27
- 238000003786 synthesis reaction Methods 0.000 description 23
- 239000004973 liquid crystal related substance Substances 0.000 description 20
- 238000010586 diagram Methods 0.000 description 17
- 230000003287 optical effect Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 6
- 230000004044 response Effects 0.000 description 6
- 206010034719 Personality change Diseases 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000002194 synthesizing effect Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 238000005192 partition Methods 0.000 description 2
- 230000007480 spreading Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000003190 augmentative effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3191—Testing thereof
- H04N9/3194—Testing thereof including sensor feedback
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/14—Display of multiple viewports
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/23—Optical features of instruments using reflectors
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
- B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
- B60K35/23—Head-up displays [HUD]
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/011—Head-up displays characterised by optical features comprising device for correcting geometrical aberrations, distortion
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2340/00—Aspects of display data processing
- G09G2340/04—Changes in size, position or resolution of an image
- G09G2340/0464—Positioning
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Optics & Photonics (AREA)
- Computer Hardware Design (AREA)
- Automation & Control Theory (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Chemical & Material Sciences (AREA)
- Geometry (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Instrument Panels (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Mechanical Optical Scanning Systems (AREA)
Description
は、前記表示部の出力光により、前記画像に対応する虚像を対象空間に投影する。前記本体部は、前記表示部及び前記投影部が設けられる。前記映像表示方法は、画像形成処理を含む。前記画像形成処理は、前記表示部に表示される前記画像を形成する。前記画像形成処理は、第1補正処理と、第2補正処理と、を含む。前記第1補正処理は、前記画像に歪み補正を行う。前記第2補正処理は、前記本体部の姿勢変化を表す姿勢信号に基づいて、前記表示部での前記画像の表示位置を補正する。前記画像形成処理は、前記第2補正処理によって補正された前記画像に前記第1補正処理での前記歪み補正を行い、又は、前記第1補正処理によって歪み補正された前記画像の前記表示部での表示位置を前記第2補正処理によって補正する。前記画像は、複数の画像領域を有する。前記複数の画像領域は、第1領域と、第2領域と、を有する。前記第1領域は、前記第2補正処理によって補正される。前記第2領域は、前記第2補正処理によって補正されない。前記第2領域に表示される画像に対応する虚像は、前記対象空間の下部に表示される。前記第1領域の下端は、前記第2領域の上端よりも上方に位置している。
(1)概要
本実施形態に係る映像表示システム10は、図1及び図2に示すように、例えば、移動体本体としての自動車100に用いられるヘッドアップディスプレイ(HUD:Head-Up Display)である。本実施形態では、映像表示システム10と、映像表示システム10が設けられた自動車100(移動体本体)と、を含む全体を移動体とする。
映像表示システム10は、図1に示すように、本体部1と、画像表示部2と、投影部3とを備えている。本体部1は、例えば、筐体にて構成されている。本体部1内には、画像表示部2及び投影部3が設けられている。本体部1は、自動車100のダッシュボード102内に固定される。本体部1は、筐体でなく、例えば、フレーム又は板材等であってもよい。
上記の実施形態1では、表示ずれ補正(すなわち表示部20での画像700の表示位置の補正)の後に歪み補正(すなわち画像700の歪み補正)が行われたが、本実施形態2では、歪み補正の後に表示ずれ補正が行われる。以下、本実施形態2について、上記の実施形態1と同じ部分は同一参照符号を付して説明を省略し、実施形態1と異なる部分を中心に説明する。
上記の実施形態1及び2は、本開示の様々な実施形態の一つに過ぎない。上記の実施形態1及び2は、本開示の目的を達成できれば、設計等に応じて種々の変更が可能である。さらに、上記の実施形態1及び2に係る態様は、単体の映像表示システムで具現化されることに限らない。例えば、映像表示システム10を備える移動体、映像表示システム10を用いた映像表示方法で、上記の実施形態1及び2に係る態様が具現化されてもよい。また、上記の映像表示方法をコンピュータに実行させるためのプログラム、このプログラムを記憶した記憶媒体等で、上記の実施形態1及び2に係る態様が具現化されてもよい。以下に説明する変形例は、適宜組み合わせて適用可能である。
上記の実施形態1では、画像合成部214は、表示ずれ補正部213と歪み補正部215との間に配置されたが、図13に示すように、歪み補正部215と表示部20との間に配置されてもよい。この場合は、描画処理部212と画像合成部214との間に、歪み補正部230が追加される。歪み補正部230は、歪み補正部215と同様に構成されている。すなわち、描画処理部212から出力された第2画像702は、歪み補正部215で歪み補正されて、画像合成部214に出力される。画像合成部214は、歪み補正部215から出力された第1画像701と、歪み補正部215から出力された第2画像702とを画像合成した画像700を形成する。そして、画像合成部214は、形成した画像700を表示部20に出力する。
上記の実施形態1では、表示ずれ補正部213が、第1画像701の表示位置を補正するときの補正量H1は、本体部1の姿勢変化の変化量(ピッチ角)α1の大きさに対して、非線形であってもよい。この場合は、補正量H1は、図14に示すように、変化量α1の大きさに応じて変化する。例えば、変化量α1が所定値未満のとき(すなわち変化量α1が比較的小さいとき)は、補正量H1を比較的小さく又はゼロにし、変化量α1が所定値以上のときは、補正量H1を変化量α1に比例させてもよい。これにより、自動車100のアイドリング時のように本体部1の姿勢変化の変化量α1が比較的小さいときは、表示ずれ補正を行わず、本体部1の姿勢変化の変化量α1がある程度大きいときだけ、表示ずれ補正を行うことができる。これにより、自動車100のアイドリング時の小さな振動に対しては、虚像300の表示位置を補正しないようにできる。なお、補正量H1を変化量α1に対して、常に線形に変化させてもよい。
上記の実施形態1では、歪み補正部215のバッファメモリ218は、表示ずれ補正部213のバッファメモリ217とは別のバッファメモリであるが、1つのバッファメモリを各バッファメモリ218,217として用いてもよい。
上記の実施形態1では、本体部1の姿勢変化は、本体部1のピッチ方向の変化であったが、本体部1のヨー方向の変化でもよい。この場合は、読出開始位置P1は、本体部1のヨー角に応じて左右に変動される。この場合、表示ずれ補正部213は、画像700の表示位置を、表示画面25の左右方向に補正する。そして、歪み補正部215は、歪み補正パラメータU11~U44を、表示画面25の各区画領域25sにおいて、画像700の表示位置の補正量に基づいて左右方向にずれた区画領域25sに対応させ直す。また、本体部1の姿勢変化は、ロール方向の変化でもよい。この場合は、読出開始位置P1に対して、ロール角に応じて回転させるように画像700が読み出される。この場合、表示ずれ補正部213は、画像700の表示位置を、表示画面25において所定位置(読出開始位置P1)を中心に回転するように補正する。そして、歪み補正部215は、歪み補正パラメータU11~U44を、表示画面25の各区画領域25sにおいて、画像700の表示位置の補正量に基づいて所定位置を中心に回転する方向にずれた区画領域25sに対応させ直す。なお、ヨー方向とは、本体部1(すなわち自動車100)の上下方向の軸線周りの方向であり、ヨー角とは、ヨー方向の回転角である。ロール方向とは、本体部1の前後方向の軸線周りの角度であり、ロール角とは、ロール方向の回転角である。
上記の実施形態1では、投影部3は、少なくとも光学素子を有していればよく、第1ミラー31及び第2ミラー32の2つのミラーを有することは必須でなく、ミラーを1つのみ、又は3つ以上有していてもよい。さらに、投影部3は、例えばレンズ等、ミラー以外の光学部品を有していてもよい。
上記の実施形態1では、映像表示システム10は、自動車100の進行方向の前方に設定された対象空間400に虚像300を投影する構成に限らず、例えば、自動車100の進行方向の側方、後方、又は上方等に虚像300を投影してもよい。
上記の実施形態1では、映像表示システム10は、自動車100に用いられるヘッドアップディスプレイに限らず、例えば、二輪車、電車、航空機、建設機械、及び船舶等、自動車100以外の移動体本体にも適用可能である。さらに、映像表示システム10は、移動体に限らず、例えば、アミューズメント施設で用いられてもよい。また、映像表示システム10は、ヘッドマウントディスプレイ(HMD:Head Mounted Display)等のウェアラブル端末、医療設備、又は据置型の装置として用いられてもよい。また、映像表示システム10は、例えば、電子ビューファインダ等として、デジタルカメラ等の機器に組み込まれて使用されてもよい。
上記の実施形態1では、描画処理部212、歪み補正部215、表示ずれ補正部213及び表示制御部203は、互いに異なるCPU及びメモリで構成されている。しかし、1つのCPU及び1つのメモリを、描画処理部212、歪み補正部215、表示ずれ補正部213及び表示制御部203で共用してもよい。また、1つのCPU及び1つのメモリを、描画処理部212、歪み補正部215、表示ずれ補正部213及び表示制御部203のうちの何れか3つ又は2つで共有してもよい。
上記の実施形態1では、表示部20は、液晶パネル201を備えた構成であったが、このような構成に限定されない。この変形例9では、表示部20Aは、図15に示すように、表示部20Aの表示画面25の背面からレーザ光を走査して画像700を形成するように構成される。
上記の実施形態1では、画像700を第1画像701と第2画像702とに分けて作成し、第1画像701及び第2画像702を画像合成して形成するが、このように限定されない。例えば、第1画像701と第2画像702とに分けずに、画像700を形成し、画像700のうち、第1画像701に対応する範囲だけに表示ずれ補正を行ってもよい。
第1の態様に係る映像表示システム(10)は、表示部(20)と、投影部(3)と、本体部(1)と、を備える。表示部(20)は、画像(700)を表示する。投影部(3)は、表示部(20)の出力光により、画像(700)に対応する虚像(300)を対象空間(400)に投影する。本体部(1)は、表示部(20)及び投影部(3)が設けられる。画像形成部(21)は、表示部(20)に表示される画像(700)を形成する。画像形成部(21)は、第1補正部(215)と、第2補正部(213)と、を備える。第1補正部(215)は、画像(700)の歪みを補正する第1補正処理を実行する。第2補正部(213)は、本体部(1)の姿勢変化を表す姿勢信号に基づいて、表示部(20)での画像(700)の表示位置を補正する第1補正処理を実行する。表示部(20)の表示画面(25)は、複数の区画領域(25s)を有する。画像(700)は、複数の画像領域(700s)を有する。表示画面(25)の区画領域(25s)には、虚像300の歪みを補正する歪み補正パラメータ(U11~U44)が対応している。第1補正部(215)は、表示画面(25)における複数の画像領域(700s)の各々について、画像領域(700s)が表示される区画領域(25s)に対応する歪み補正パラメータ(U11~U44)に基づいて、画像領域(700s)に歪み補正を行う。
10 映像表示システム
20,20A 表示部
25 表示画面
25s 区画領域(第1区画領域)
100 移動体本体
101 ウインドシールド(反射部材)
105s 区画領域(第2区画領域)
213 表示ずれ補正部(第2補正部)
215 歪み補正部(第1補正部)
216 ジャイロセンサ(センサ)
300 虚像
400 対象空間
700 画像
700s 画像領域
705 第1領域
706 第2領域
α1 変化量
H1 補正量
U11~U44 歪み補正パラメータ
Claims (15)
- 移動体本体に設けられる映像表示システムであって、
画像を表示する表示部と、
前記表示部の出力光により、前記画像に対応する虚像を対象空間に投影する投影部と、
前記表示部及び前記投影部が設けられる本体部と、
前記表示部に表示される前記画像を形成する画像形成部と、を備え、
前記画像形成部は、
前記画像に歪み補正を行う第1補正部と、
前記本体部の姿勢変化を表す姿勢信号に基づいて、前記表示部での前記画像の表示位置を補正する第2補正部と、を備え、
前記画像形成部は、前記第2補正部によって補正された前記画像に前記第1補正部が前記歪み補正を行い、又は、前記第1補正部によって歪み補正された前記画像の前記表示部での表示位置を前記第2補正部が補正し、
前記画像は、複数の画像領域を有し、
前記複数の画像領域は、
前記第2補正部によって補正される第1領域と、
前記第2補正部によって補正されない第2領域と、を有し、
前記第2領域に表示される画像に対応する虚像は、前記対象空間の下部に表示され、
前記第1領域の下端は、前記第2領域の上端よりも上方に位置している
映像表示システム。 - 前記第1領域は、前記移動体本体の進行方向を示す第1虚像に対応する第1対応画像が表示される画像領域である
請求項1に記載の映像表示システム。 - 前記第1虚像は、ユーザから見た前記移動体本体の前方の実景における特定の位置に重畳して表示される虚像である
請求項2に記載の映像表示システム。 - 前記第2領域は、前記移動体本体の前方直近の交差点までの距離、又は、前記移動体本体の現在の車速を示す第2虚像に対応する第2対応画像が表示される画像領域である
請求項1~3のいずれか1項に記載の映像表示システム。 - 前記第2領域は、前記第1領域の下方に位置している
請求項1~4のいずれか1項に記載の映像表示システム。 - 前記第2補正部は、前記移動体本体の走行中における前記本体部の姿勢変化を表す姿勢信号に基づいて、前記画像の前記表示位置を補正する
請求項1~5のいずれか1項に記載の映像表示システム。 - 前記表示部の表示画面は、複数の区画領域を有し、
前記表示画面の前記複数の区画領域の各々には、前記虚像の歪みを補正する歪み補正パラメータが対応しており、
前記第1補正部は、前記画像における前記複数の画像領域の各々について、画像領域が表示される区画領域に対応する前記歪み補正パラメータに基づいて、前記画像領域に前記歪み補正を行う
請求項1~6のいずれか1項に記載の映像表示システム。 - 前記表示部の前記出力光は、反射部材の投影領域に投影され、前記投影領域で反射されて前記対象空間に前記虚像を結像し、
前記表示画面の前記複数の区画領域を複数の第1区画領域とし、
前記投影領域は、複数の第2区画領域を有し、
前記投影領域の前記複数の第2区画領域は、前記表示画面の前記複数の第1区画領域に一対一に対応し、
前記表示画面の前記複数の第1区画領域の各々において、第1区画領域に対応した前記歪み補正パラメータは、前記第1区画領域に対応する第2区画領域に対応し、
前記第1補正部は、前記複数の第1区画領域の各々において、前記歪み補正パラメータを用いて、対応する前記第2区画領域で前記出力光が反射するときに生じる歪みを補正する
請求項7に記載の映像表示システム。 - 前記第1補正部は、前記第2補正部によって補正された前記画像に前記歪み補正を行う
請求項1~8のいずれか1項に記載の映像表示システム。 - 前記第2補正部は、前記第1補正部によって歪み補正された前記画像の前記表示部での前記表示位置を補正し、
前記第1補正部は、前記第2補正部が前記画像の前記表示位置を補正するときの補正量を予測し、前記歪み補正パラメータを、前記表示画面において、予測した前記補正量の分ずれた位置にある前記区画領域に対応させ直し、対応させ直した前記歪み補正パラメータに基づいて、前記画像の前記画像領域の歪み補正を行う
請求項7又は8に記載の映像表示システム。 - 前記姿勢信号は、前記本体部の姿勢変化を検出するジャイロセンサの出力信号である
請求項1~10のいずれか1項に記載の映像表示システム。 - 前記第2補正部が前記画像の前記表示位置を補正したときの補正量は、前記本体部の姿勢変化の変化量に対して非線形である
請求項1~11のいずれか1項に記載の映像表示システム。 - 前記姿勢信号を出力するセンサを更に備える
請求項1~12のいずれか1項に記載の映像表示システム。 - 画像を表示する表示部と、
前記表示部の出力光により、前記画像に対応する虚像を対象空間に投影する投影部と、
前記表示部及び前記投影部が設けられる本体部と、を備えた映像表示システムを用いた映像表示方法であって、
前記表示部に表示される前記画像を形成する画像形成処理を含み、
前記画像形成処理は、
前記画像に歪み補正を行う第1補正処理と、
前記本体部の姿勢変化を表す姿勢信号に基づいて、前記表示部での前記画像の表示位
置を補正する第2補正処理と、を含み、
前記画像形成処理は、前記第2補正処理によって補正された前記画像に前記第1補正処理での前記歪み補正を行い、又は、前記第1補正処理によって歪み補正された前記画像の前記表示部での表示位置を前記第2補正処理によって補正し、
前記画像は、複数の画像領域を有し、
前記複数の画像領域は、
前記第2補正処理によって補正される第1領域と、
前記第2補正処理によって補正されない第2領域と、を有し、
前記第2領域に表示される画像に対応する虚像は、前記対象空間の下部に表示され、
前記第1領域の下端は、前記第2領域の上端よりも上方に位置している
映像表示方法。 - コンピュータに、
請求項14に記載の映像表示方法を実行させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022189945A JP7515229B2 (ja) | 2018-03-30 | 2022-11-29 | 映像表示システム、映像表示方法、及び、プログラム |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018069740A JP7194906B2 (ja) | 2018-03-30 | 2018-03-30 | 映像表示システム、映像表示方法、プログラム、及び映像表示システムを備える移動体 |
JP2022189945A JP7515229B2 (ja) | 2018-03-30 | 2022-11-29 | 映像表示システム、映像表示方法、及び、プログラム |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018069740A Division JP7194906B2 (ja) | 2018-03-30 | 2018-03-30 | 映像表示システム、映像表示方法、プログラム、及び映像表示システムを備える移動体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2023029340A JP2023029340A (ja) | 2023-03-03 |
JP7515229B2 true JP7515229B2 (ja) | 2024-07-12 |
Family
ID=68060019
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018069740A Active JP7194906B2 (ja) | 2018-03-30 | 2018-03-30 | 映像表示システム、映像表示方法、プログラム、及び映像表示システムを備える移動体 |
JP2022189945A Active JP7515229B2 (ja) | 2018-03-30 | 2022-11-29 | 映像表示システム、映像表示方法、及び、プログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018069740A Active JP7194906B2 (ja) | 2018-03-30 | 2018-03-30 | 映像表示システム、映像表示方法、プログラム、及び映像表示システムを備える移動体 |
Country Status (5)
Country | Link |
---|---|
US (2) | US11514559B2 (ja) |
JP (2) | JP7194906B2 (ja) |
CN (1) | CN111954902B (ja) |
DE (1) | DE112019001736T5 (ja) |
WO (1) | WO2019189308A1 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11373527B2 (en) * | 2019-03-25 | 2022-06-28 | Micron Technology, Inc. | Driver assistance for non-autonomous vehicle in an autonomous environment |
DE112019006964T5 (de) * | 2019-04-11 | 2021-11-18 | Mitsubishi Electric Corporation | Anzeigesteuerungsvorrichtung und Anzeigesteuerungsverfahren |
WO2020241094A1 (ja) * | 2019-05-31 | 2020-12-03 | パナソニックIpマネジメント株式会社 | 表示システム |
CN111076742A (zh) * | 2019-12-17 | 2020-04-28 | 百度国际科技(深圳)有限公司 | 一种ar导航的显示方法、装置、电子设备及存储介质 |
EP3848781B1 (en) | 2019-12-31 | 2023-05-10 | Seiko Epson Corporation | Circuit device, electronic apparatus, and mobile body |
CN113129224B (zh) | 2019-12-31 | 2023-11-28 | 精工爱普生株式会社 | 显示系统、电子设备、移动体和显示方法 |
JP7314848B2 (ja) * | 2020-03-25 | 2023-07-26 | トヨタ自動車株式会社 | 表示制御装置、画像補正方法及びプログラム |
JP7407368B2 (ja) * | 2020-03-30 | 2024-01-04 | パナソニックIpマネジメント株式会社 | 表示装置 |
JP7409497B2 (ja) * | 2020-05-15 | 2024-01-09 | 日本電信電話株式会社 | 位置合わせ支援装置、位置合わせ支援方法およびプログラム |
JPWO2021251115A1 (ja) | 2020-06-08 | 2021-12-16 | ||
JP2022056649A (ja) * | 2020-09-30 | 2022-04-11 | セイコーエプソン株式会社 | 回路装置、表示システム及び画像処理方法 |
JP2022184350A (ja) * | 2021-06-01 | 2022-12-13 | マツダ株式会社 | ヘッドアップディスプレイ装置 |
JP2023065760A (ja) * | 2021-10-28 | 2023-05-15 | セイコーエプソン株式会社 | 回路装置及びヘッドアップディスプレイ装置 |
CN116572837A (zh) * | 2023-04-27 | 2023-08-11 | 江苏泽景汽车电子股份有限公司 | 一种信息显示控制方法及装置、电子设备、存储介质 |
CN117589081A (zh) * | 2023-08-29 | 2024-02-23 | 哈尔滨工业大学 | 一种原位共焦显微三维形貌畸变矫正方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101166247A (zh) | 2006-10-17 | 2008-04-23 | 精工爱普生株式会社 | 呈现射在非平面表面上的图像的方法和装置 |
JP2009251687A (ja) | 2008-04-01 | 2009-10-29 | Panasonic Corp | 映像表示装置 |
JP2009250827A (ja) | 2008-04-08 | 2009-10-29 | Panasonic Corp | ナビゲーション装置、方法及びプログラム |
JP2011117842A (ja) | 2009-12-03 | 2011-06-16 | Aisin Aw Co Ltd | 車両用走行案内装置、車両用走行案内方法及びコンピュータプログラム |
WO2015060193A1 (ja) | 2013-10-22 | 2015-04-30 | 日本精機株式会社 | 車両情報投影システム及び投影装置 |
WO2015064371A1 (ja) | 2013-10-31 | 2015-05-07 | 日本精機株式会社 | 車両情報投影システム及び投影装置 |
JP2015101311A (ja) | 2013-11-28 | 2015-06-04 | 日本精機株式会社 | 車両情報投影システム |
WO2016190135A1 (ja) | 2015-05-28 | 2016-12-01 | 日本精機株式会社 | 車両用表示システム |
JP2017013590A (ja) | 2015-06-30 | 2017-01-19 | 日本精機株式会社 | ヘッドアップディスプレイ装置 |
JP2017016455A (ja) | 2015-07-02 | 2017-01-19 | アルパイン株式会社 | 画像補正装置および画像補正方法 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004177920A (ja) * | 2002-08-09 | 2004-06-24 | Olympus Corp | 投影観察装置 |
EP2395766B1 (en) * | 2010-06-14 | 2016-03-23 | Nintendo Co., Ltd. | Storage medium having stored therein stereoscopic image display program, stereoscopic image display device, stereoscopic image display system, and stereoscopic image display method |
JP6036209B2 (ja) | 2012-11-19 | 2016-11-30 | セイコーエプソン株式会社 | 虚像表示装置 |
JP2014178982A (ja) * | 2013-03-15 | 2014-09-25 | Sony Corp | 画像表示装置及び画像表示方法、記憶媒体、並びに画像表示システム |
JP2014199385A (ja) | 2013-03-15 | 2014-10-23 | 日本精機株式会社 | 表示装置及びその表示方法 |
JP6278769B2 (ja) * | 2014-03-19 | 2018-02-14 | 矢崎総業株式会社 | 車両用表示装置 |
WO2016047087A1 (ja) * | 2014-09-24 | 2016-03-31 | パナソニックIpマネジメント株式会社 | 車載用電子ミラー |
JP2015053734A (ja) | 2014-12-05 | 2015-03-19 | セイコーエプソン株式会社 | プロジェクター、画像投写システムおよび画像投写方法 |
US10040394B2 (en) * | 2015-06-17 | 2018-08-07 | Geo Semiconductor Inc. | Vehicle vision system |
US20170169612A1 (en) | 2015-12-15 | 2017-06-15 | N.S. International, LTD | Augmented reality alignment system and method |
KR101785027B1 (ko) * | 2016-01-14 | 2017-11-06 | 주식회사 라온텍 | 화면 왜곡 보정이 가능한 디스플레이 장치 및 이를 이용한 화면 왜곡 보정 방법 |
JP6617725B2 (ja) * | 2017-01-30 | 2019-12-11 | トヨタ自動車株式会社 | 車両用情報表示システム及び車両用情報表示方法 |
JP6601441B2 (ja) * | 2017-02-28 | 2019-11-06 | 株式会社デンソー | 表示制御装置及び表示制御方法 |
WO2018193708A1 (ja) * | 2017-04-19 | 2018-10-25 | マクセル株式会社 | ヘッドアップディスプレイ装置およびその表示制御方法 |
JP7135339B2 (ja) * | 2018-02-28 | 2022-09-13 | 株式会社デンソー | 車両に搭載される撮像システム、対象物識別装置、および対象物識別方法 |
-
2018
- 2018-03-30 JP JP2018069740A patent/JP7194906B2/ja active Active
-
2019
- 2019-03-27 DE DE112019001736.5T patent/DE112019001736T5/de active Pending
- 2019-03-27 CN CN201980023791.0A patent/CN111954902B/zh active Active
- 2019-03-27 WO PCT/JP2019/013091 patent/WO2019189308A1/ja active Application Filing
-
2020
- 2020-09-24 US US17/030,621 patent/US11514559B2/en active Active
-
2022
- 2022-11-25 US US17/994,158 patent/US11983856B2/en active Active
- 2022-11-29 JP JP2022189945A patent/JP7515229B2/ja active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101166247A (zh) | 2006-10-17 | 2008-04-23 | 精工爱普生株式会社 | 呈现射在非平面表面上的图像的方法和装置 |
JP2008108251A (ja) | 2006-10-17 | 2008-05-08 | Seiko Epson Corp | 表示方法およびシステム |
JP2009251687A (ja) | 2008-04-01 | 2009-10-29 | Panasonic Corp | 映像表示装置 |
JP2009250827A (ja) | 2008-04-08 | 2009-10-29 | Panasonic Corp | ナビゲーション装置、方法及びプログラム |
JP2011117842A (ja) | 2009-12-03 | 2011-06-16 | Aisin Aw Co Ltd | 車両用走行案内装置、車両用走行案内方法及びコンピュータプログラム |
WO2015060193A1 (ja) | 2013-10-22 | 2015-04-30 | 日本精機株式会社 | 車両情報投影システム及び投影装置 |
CN105682973A (zh) | 2013-10-22 | 2016-06-15 | 日本精机株式会社 | 车辆信息投影系统和投影装置 |
WO2015064371A1 (ja) | 2013-10-31 | 2015-05-07 | 日本精機株式会社 | 車両情報投影システム及び投影装置 |
JP2015101311A (ja) | 2013-11-28 | 2015-06-04 | 日本精機株式会社 | 車両情報投影システム |
WO2016190135A1 (ja) | 2015-05-28 | 2016-12-01 | 日本精機株式会社 | 車両用表示システム |
JP2017013590A (ja) | 2015-06-30 | 2017-01-19 | 日本精機株式会社 | ヘッドアップディスプレイ装置 |
JP2017016455A (ja) | 2015-07-02 | 2017-01-19 | アルパイン株式会社 | 画像補正装置および画像補正方法 |
Also Published As
Publication number | Publication date |
---|---|
JP7194906B2 (ja) | 2022-12-23 |
JP2023029340A (ja) | 2023-03-03 |
US20230086164A1 (en) | 2023-03-23 |
WO2019189308A1 (ja) | 2019-10-03 |
DE112019001736T5 (de) | 2020-12-24 |
JP2019179214A (ja) | 2019-10-17 |
US11983856B2 (en) | 2024-05-14 |
CN111954902A (zh) | 2020-11-17 |
CN111954902B (zh) | 2023-05-02 |
US20210019867A1 (en) | 2021-01-21 |
US11514559B2 (en) | 2022-11-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7515229B2 (ja) | 映像表示システム、映像表示方法、及び、プログラム | |
US10754154B2 (en) | Display device and moving body having display device | |
US11315528B2 (en) | Image display system, image display method, movable object including the image display system, and non-transitory computer-readable medium | |
EP3330117B1 (en) | Vehicle display device | |
WO2016136573A1 (ja) | 車両用表示装置 | |
WO2018088362A1 (ja) | ヘッドアップディスプレイ | |
JP6866875B2 (ja) | 表示制御装置、及び表示制御プログラム | |
CA2821601A1 (en) | Environment image display apparatus for transport machine | |
JP2018103697A (ja) | 車両用表示装置 | |
JP2019164318A (ja) | 映像表示システム、映像表示方法、プログラム、及び映像表示システムを備える移動体 | |
CN110816409A (zh) | 显示装置、显示控制方法及存储介质 | |
JP6874769B2 (ja) | 車両用表示装置 | |
JP7354846B2 (ja) | ヘッドアップディスプレイ装置 | |
JP7145509B2 (ja) | 映像表示システム、映像表示方法、プログラム、及び、移動体 | |
JPWO2020090187A1 (ja) | 虚像表示装置、およびヘッドアップディスプレイ装置 | |
JPWO2018199244A1 (ja) | 表示システム | |
JP5756741B2 (ja) | 車両用画像表示装置 | |
WO2020089332A1 (en) | Augmented reality head-up display and vehicle | |
WO2023074288A1 (ja) | 車両用表示装置 | |
WO2018037887A1 (ja) | 車両用表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221129 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230926 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231127 |
|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20240219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20240219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240319 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240520 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240604 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240628 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7515229 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |