[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2006341641A - 映像表示装置及び映像表示方法 - Google Patents

映像表示装置及び映像表示方法 Download PDF

Info

Publication number
JP2006341641A
JP2006341641A JP2005166865A JP2005166865A JP2006341641A JP 2006341641 A JP2006341641 A JP 2006341641A JP 2005166865 A JP2005166865 A JP 2005166865A JP 2005166865 A JP2005166865 A JP 2005166865A JP 2006341641 A JP2006341641 A JP 2006341641A
Authority
JP
Japan
Prior art keywords
obstacle
display
vehicle
video
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005166865A
Other languages
English (en)
Other versions
JP2006341641A5 (ja
Inventor
Satoshi Chinomi
聡 知野見
Teruhisa Takano
照久 高野
Ken Oizumi
大泉　　謙
Hiroyoshi Yanagi
柳　　拓良
Tsutomu Kawano
勉 川野
Hidenori Seguchi
秀則 瀬口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2005166865A priority Critical patent/JP2006341641A/ja
Priority to US11/447,435 priority patent/US7592928B2/en
Priority to EP06252939A priority patent/EP1731366A1/en
Priority to CN200610083571.1A priority patent/CN1878299B/zh
Priority to CN200910005577.0A priority patent/CN101489117B/zh
Publication of JP2006341641A publication Critical patent/JP2006341641A/ja
Publication of JP2006341641A5 publication Critical patent/JP2006341641A5/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038—Image mosaicing, e.g. composing plane images from plane sub-images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/102—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9314—Parking operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

【課題】 俯瞰映像を表示させる場合であっても、当該俯瞰映像における障害物との相対位置と、実際の障害物との相対位置との相違を同一画面上で確認させる。
【解決手段】 車両周囲の異なる方向を撮像方向とした複数のカメラから取得した、画像変換が行われていない複数の直接映像１１０を用いて、車両周囲の状況を運転者に提示するために、映像処理部により、複数の直接映像１１０を取得し、当該複数の直接映像１１０を用いて車両周囲を一覧させる俯瞰映像１００を作成し、障害物検知部によって自車両に近接する障害物を検知した時に、制御部によって、俯瞰映像１００と、障害物の自車両に対する方向を撮像した直接映像１１０とを同時に表示させる。
【選択図】 図４

Description

本発明は、例えば車両を駐車させるに際して、車両周囲の状況を運転者に把握させる映像を表示する映像表示装置及び映像表示方法に関する。
従来より、車両周囲に設置された複数のカメラ映像を処理して、運転者に提供する技術が、下記の特許文献１などで知られている。この特許文献１に記載された車両周辺画像処理装置は、一又は複数のカメラ映像をある基準面に対して座標変換することで仮想視点位置から撮像したような画像に変換し、当該画像にＣＧ技術で予め作成しておいた自車両ＣＧ画像を重畳させることで上空から自車両を撮影したような映像（以下、俯瞰映像）を提供している。このような俯瞰映像を作成するに際して、基準面としては地面が用いられることが多い。この俯瞰映像は、地面上の白線や縁石などと自車両との位置関係が客観的に表現されるため、駐車枠にあわせて駐車する場合や縁石に幅寄せをするようなシーンにおいて有効な映像である。
このような俯瞰映像を作成することにより、特許文献１に記載された車両周辺画像処理装置では、段落番号００５０以降に記載されているように、俯瞰映像ではない原画像と俯瞰映像とを表示させて、運転者に車両周囲を把握させていた。
特開２００４−２５４２１９号公報（図７参照）
しかしながら、上述した特許文献１に記載された技術を用いて俯瞰映像を合成する場合、基準面上に存在する物体に関しては理論上完全に位置関係を保持して映像変換することが可能であるが、基準面より高い位置や低い位置にある立体物については自車両ＣＧ画像と車両周囲障害物との位置関係の相違が現れる場合があるという問題点がある。
例えば、ＳＵＶ型車両などのバンパ位置の高い車両では、実際にバンパの存在する位置よりも遠い位置の俯瞰映像上にバンパが表現されることがある。このように実際の自車両位置と他車両位置との相違が俯瞰映像上で現れると、俯瞰映像上で確認できる自車両の予測軌跡と実際の走行軌跡とが合致しなくなる可能性がある。
そこで、本発明は、上述した実情に鑑みて提案されたものであり、俯瞰映像を表示させた場合であっても、当該俯瞰映像における障害物との相対位置と、実際の障害物との相対位置との相違を同一画面上で確認させることができる映像表示装置及び映像表示方法を提供することを目的とする。
本発明では、車両周囲の異なる方向を撮像方向とした複数のカメラから取得した、画像変換が行われていない複数の直接映像を用いて、車両周囲の状況を運転者に提示するために、映像処理手段により、複数の直接映像を取得し、当該複数の直接映像を用いて車両周囲を一覧させる俯瞰映像を作成し、障害物検知手段によって自車両に近接する障害物を検知した時に、表示手段によって、映像処理手段で作成された俯瞰映像と、障害物検知手段によって検知された障害物の自車両に対する方向を撮像した直接映像とを同時に表示させることによって、上述の課題を解決する。
本発明によれば、自車両に近接する障害物を検知した時に、俯瞰映像と、障害物の自車両に対する方向を撮像した直接映像とを同時に表示させるので、俯瞰映像における障害物との相対位置と、実際の障害物との相対位置との相違を同一画面上で確認させることができる。
以下、本発明の実施の形態について図面を参照して説明する。
本発明は、例えば図１に示すように構成された運転支援装置に適用される。この運転支援装置は、運転者に車両周囲の状況を自車両上空から見たような俯瞰映像と、位置関係確認に使うための情報として、車体各部に搭載されたカメラ映像に対して画像処理していない映像（以下、直接映像と呼ぶ。）と同一画面上で同時に表示する映像表示装置の機能を持ち、運転者が必要としている映像を提示して運転操作を支援するものである。
［運転支援装置の構成］
この運転支援装置は、図１に示すように、自車両の車体に搭載された複数のカメラからなる撮像部１と、自車両の車室内に設けられて表示画面が運転者から視認可能な位置に設置された表示部２とを備える。また、この運転支援装置は、撮像部１で撮像された複数のカメラ映像を用いた映像表示を統括的に制御する制御部３に、映像処理部４と、障害物検知部５と、車両信号取得部６と、操作部７とが接続されている。
撮像部１は、図２に示すように、自車両１０の前部に設けられた前方カメラ１Ｆと、自車両１０の後部に設けられた後方カメラ１Ｂと、自車両１０に右側方の右ドアミラーに設けられた右側方カメラ１Ｒと、自車両１０の左側方の左ドアミラーに設けられた左側方カメラ１Ｌとから構成されている。これら前方カメラ１Ｆ、後方カメラ１Ｂ、右側方カメラ１Ｒ、左側方カメラ１Ｌは、所謂広角カメラであり、１８０度の画角で光学的に設計されている。このような撮像部１は、後方カメラ１Ｂによって自車両１０の後方撮像領域１１Ｂの状況を含むカメラ映像である直接映像を撮像し（図３（ａ））、左側方カメラ１Ｌによって自車両１０の左側方撮像領域１１Ｌの状況を含む左側方直接映像を撮像し（図３（ｂ））、前方カメラ１Ｆによって自車両１０の前方撮像領域１１Ｆの状況を含む前方直接映像を撮像し（図３（ｃ））、右側方カメラ１Ｒによって自車両１０の右側方撮像領域１１Ｒの状況を含む右側方直接映像を撮像する（図３（ｄ））。
これらの前方カメラ１Ｆ、後方カメラ１Ｂ、右側方カメラ１Ｒ、左側方カメラ１Ｌで同タイミングで撮像された前方直接映像、後方直接映像、右側方直接映像、左側方直接映像を取得することにより、運転支援装置は、車両周囲の映像のすべてを取得することできる。
表示部２は、撮像部１で撮像されて映像処理がなされた表示用の映像を入力とし、運転者の操作、障害物検知部５での障害物検知状況などに応じて、車両周囲の全体を一覧させる俯瞰映像及び車両周囲の状況の一部を含む直接映像を同時に表示させる。
障害物検知部５は、車両周囲に存在する障害物の有無及び自車両１０に対する相対位置（自車両１０に対する方向、距離）を検知する。この障害物検知部５は、例えば、超音波センサ又は赤外線センサを使用して障害物を検知するものや、撮像部１で取得した直接映像を入力して画像解析等によって障害物を検知するものが挙げられる。この障害物検知部５は、自車両１０に対する障害物の有無及び相対位置を含む障害物検知情報を制御部３に出力する。
車両信号取得部６は、自車両１０の状態を表す情報として、車速、車両進行方向等の車速信号を取得して、制御部３に出力する。また、操作部７は、例えばシフトレバー等が挙げられ、当該シフトレバーの操作状態を表すシフトポジション情報を制御部３に出力する。
映像処理部４は、撮像部１で撮像された複数の直接映像を取得して、所定の映像処理を施すことによって、車両周囲の一覧して把握させる俯瞰映像を作成する。映像処理部４は、入力した複数の直接映像と出力する俯瞰映像との画素配置対応関係を記録した変換テーブルを予め記憶している。映像処理部４は、撮像部１から複数の直接映像を入力すると、各直接映像を所定の入力メモリに格納する。格納された各直接映像は、映像処理部４により、変換テーブルに従って画素単位で読み出されて出力メモリに格納される。これにより、出力メモリには、前方直接映像、後方直接映像、右側方直接映像、左側方直接映像から、それぞれ必要な画像領域が切り出されてなる俯瞰映像を展開することができる。そして、映像処理部４は、変換テーブルに従って俯瞰映像の作成を完了すると、当該俯瞰映像を制御部３に出力する。
この映像処理部４で作成された俯瞰映像１００は、図４の左側部に示すように、４種の直接映像の仮想視点位置を車両上空で一点に集めたものとなり、何れかの直接映像１１０と同時に表示される。このような俯瞰映像１００は、運転者にとって、自車両１０を上空から見下ろしたような形で車両周囲を把握させることができる。
図４によれば、俯瞰映像１００は、自車両ＣＧ映像１０１を画像中心に配置し、当該自車両ＣＧ映像１０１の周囲に、視点変換した左側方俯瞰映像１０２Ｌ、右側方俯瞰映像１０２Ｒ、前方俯瞰映像１０２Ｆ、後方俯瞰映像１０２Ｂを配置して構成する。また、俯瞰映像１００は、前方俯瞰映像１０２Ｆと左側方俯瞰映像１０２Ｌ及び右側方俯瞰映像１０２Ｒとの間にマスク線１０４を配置すると共に、後方俯瞰映像１０２Ｂと左側方俯瞰映像１０２Ｌ及び右側方俯瞰映像１０２Ｒとの間にマスク線１０４を配置して構成されている。
このように映像のつなぎ目にマスク線１０４を設けることで、各種の俯瞰映像１０２を複数の領域に分割して、つなぎ目であることを運転者に把握させる構成になっている。なお、俯瞰映像の分割方法は、図４に示したパターン以外であっても、さらに細分化しても良く、３分割程度であって良い。
また、この図４によれば、俯瞰映像１００と並列して、後方撮像領域１１Ｂの状況である直接映像１１０を同時に表示させている。この直接映像１１０は、車両信号取得部６が取得するシフトポジション情報や車速信号に応じて、前方撮像領域１１Ｆ、左側方撮像領域１１Ｌ、右側方撮像領域１１Ｒ、後方撮像領域１１Ｂの何れかの状況を示す映像となる。
制御部３は、障害物検知部５からの障害物検知情報から、自車両１０と障害物との接近が予測される場合には、位置関係の確認に使うための情報に視線を引く（注意を向ける）ことができるように映像や音などで運転者に通知する制御を行う。また、制御部３は、車両信号取得部６からの車速信号や、操作部７からのシフトポジション情報から、現在の車両の状態を取得して、当該状態に応じて映像や音で運転者に各種情報を放置しても良い。
具体的には、制御部３は、障害物検知情報から車両周辺に障害物が存在することを検知した場合には、俯瞰映像１００と共に、障害物を含む直接映像１１０を同時に表示させる。また、制御部３は、車速信号やシフトポジション情報から、障害物が検知された方向を撮像領域とする直接映像を表示させる。
［映像表示例］
つぎに、上述したように、俯瞰映像１００と直接映像１１０とが同時に表示可能な運転支援装置による表示例について説明する。
「第１表示例」
例えば自車両１０の左後側方にパイロンのような障害物が有る場合、制御部３は、図５の第１表示例に示すように、映像処理部４で作成された俯瞰映像１００と、後方カメラ１Ｂで撮像された後方の直接映像１１０とを組み合わせた画像を表示部２に表示させる。ここで、制御部３は、障害物検知部５で障害物検知情報が生成されているか否かに拘わらず、車両信号取得部６で取得した車速、操作部７からのシフトポジション情報から、俯瞰映像１００及び後方直接映像を表示させる。
このような状況において、俯瞰映像１００及び直接映像１１０には、左側方俯瞰映像１０２Ｌ、右側方俯瞰映像１０２Ｒ、後方俯瞰映像１０２Ｂに駐車枠表示１０３が現れ、自車両ＣＧ映像１０１の左後側方であって、障害物検知情報によって伝達された自車両１０と相対位置に合致した表示位置に障害物表示１２１を表示させている。
このように、俯瞰映像１００と車両後方を含む直接映像１１０とを表示させた場合、俯瞰映像１００に映る障害物と、直接映像１１０に映る障害物との見え方が異なる。これは、俯瞰映像１００では撮像部１で撮影した映像を俯瞰映像１００に変換する処理を行っているからであり、俯瞰映像１００において基準となる面では、正しい相対位置関係が再現されるが、基準となる面より高いところや低いところにある障害物は、実際の相対位置が再現されない。
したがって、図示はされていないが、図５の俯瞰映像１００におけるパイロンは立体物であるためにゆがんだ形として再現される。具体的には、パイロンの先端部分は、実際の自車両１０との相対位置よりも遠くに見えるように俯瞰映像１００上で現れる。車両に取り付けられた撮像部１のカメラに近いほど遠くに見えるため、バンパ位置の高いＳＵＶ型等の車両では、俯瞰映像１００上ではバンパが実際よりも遠くに見えてしまう。このように、実際の自車両位置と他車両位置との相違が現れてしまう。
したがって、運転支援装置は、図５に示すように、直接映像１１０として、車両後方を映し出したリアビューを表示している。これにより、運転支援装置は、直接映像１１０が俯瞰映像１００と比較して立体物に対する映像の歪みを少なく自然に表現できることを利用して、実際に近い形で障害物表示１２１を表示できる。
また、この制御部３は、障害物検知部５からの障害物検知情報として、自車両１０とパイロンとの相対位置を取得した場合、パイロンと自車両１０との相対位置を認識して障害物として認知できる。この場合、制御部３は、図６に示すように、俯瞰映像１００上に、障害物を検出した方向における自車両１０部位付近を覆い隠すような障害物警報表示１３１を表示する。この障害物警報表示１３１は、図６においては矩形状であって強調色を使用して表示させているが、自車両１０と障害物（パイロン）との間の距離感が俯瞰変換によってゆがんでいるため、位置関係の確認を誤る可能性があるためである。
なお、障害物警報表示１３１の形状としては、丸型やＬ字型など各種表示形態であっても良い。また、障害物警報表示１３１の大きさとしては、自車両１０から障害物までの距離に応じて変更してもよく、自車両１０との距離に応じて点滅させても良い。
俯瞰映像１００と並列する直接映像１１０は、図６に示すように、障害物表示１２１を覆うように障害物警報表示１３２を表示させる。この障害物警報表示１３２は、障害物表示１２１を強調するように、丸い線の形態で表示がなされる。この障害物警報表示１３２は、四角や三角などで障害物表示１２１を囲んでもよいし、アイコンなどで直接映像１１０の障害物表示１２１部分を強調して表示してもよく、更には、俯瞰映像１００よりも直接映像１１０に対して視線を向けるように障害物警報表示１３２を点滅又は強調色を変えても良い。これにより、運転者は、俯瞰映像１００よりも直接映像１１０を参照して自車両１０と障害物との接触判断ができ、俯瞰映像１００における立体物の歪みによって判断を誤ることが抑制可能となる。
なお、本例では、俯瞰映像１００と直接映像１１０とを並べて表示させているが、俯瞰映像１００と直接映像１１０とを単独で表示させて、表示させる映像が俯瞰映像１００である場合には俯瞰映像１００と共に障害物警報表示１３１を表示させ、表示させる映像が直接映像１１０である場合には俯瞰映像１００と共に障害物警報表示１３２を表示させても良い。
更に、障害物警報表示１３１、障害物警報表示１３２の形状は、上述したものの他に、撮像部１で撮像した直接映像から映像処理部４によって障害物の種類を画像認識して、当該障害物の種類に対応した仮想表示としても良い。例えば、画像認識の結果から、予め用意した人や動物、他車両等の形状を模擬したアイコンを障害物警報表示１３１、障害物警報表示１３２として表示したり、画像認識で障害物の概略形状を検知して、予め容易しておいた基本図形（四角形、三角形、丸など）を組み合わせて合成して表示しても良い。
また、俯瞰映像１００内に、障害物警報の形状を四角形として、内部に覆い隠した部分に直接画像１１０を表示させてもよい。
更に、障害物警報表示１３１，障害物警報表示１３２としては、撮像部１で撮像した直接映像から映像処理部４によって障害物の形状、色を画像認識して、当該障害物の形状、色に対応した仮想表示としても良い。例えば、画像認識の結果から人物が検出された場合には、当該人物の形状として長方形であって、衣服の色を模擬した仮想パターンを障害物警報表示１３１、障害物警報表示１３２として表示したり、ブロックなどの小物体であれば小物体の形状として正方形であって、表面の色を模擬した仮想パターンを障害物警報表示１３１、障害物警報表示１３２として表示しても良い。
更に、障害物警報表示１３１，障害物警報表示１３２は、自車両１０と障害物との位置関係の誤認識が予想される自車両１０部位を完全に隠すのではなく、枠のみで囲ったり、黄色や赤などの半透明な強調色で覆うようにしても良い。これにより、俯瞰映像１００中の画像を部分的にでも完全に隠すことなく利用して、運転者に把握させることができる。
「第２表示例」
つぎに、俯瞰映像１００及び直接映像１１０の第２表示例について説明する。
この第２表示例は、障害物検知情報から自車両１０周辺に障害物を検知する前に、図７に示すように、俯瞰映像１００の表示サイズよりも直接映像１１０’の表示サイズを小さくする。これにより、障害物を検知していない期間においては、直接映像１１０よりも、俯瞰映像１００に注意を向けさせて視認させる。
また、第２表示例においては、俯瞰映像１００及び直接映像１１０’に、自車両１０と車両周囲との位置関係を把握させるためのガイドライン表示１４１を表示させる。これらのガイドライン表示１４１は、自車両ＣＧ映像１０１から進行方向に伸びる車両幅を示す線でも良く、又は、車両信号取得部６で検出したステアリングの操舵角に応じて変化する予想進路軌跡線であってもよい。また、この第２表示例においては、俯瞰映像１００のガイドライン表示１４１と直接映像１１０’のガイドライン表示１４１の一方のみを表示させても良く、両方に同時に表示させても良い。
このような俯瞰映像１００及び直接映像１１０’を表示させている時に、制御部３は、障害物検知情報によって障害物を検知すると、図７に示した表示状態から、図８に示すように、俯瞰映像１００’の表示サイズを小さくし、直接映像１１０の表示サイズを大きくする。これにより、俯瞰映像１００’の表示サイズを、直接映像１１０の表示サイズよりも小さく変更させて、障害物検知時には、俯瞰映像１００’よりも直接映像１１０に注意を向けさせて視認させる。
また、この障害物検知時には、図８の直接映像１１０内の点線で示すように、障害物から遠いガイドライン表示１４１Ｂは点滅させずに、障害物検知側のガイドライン表示１４１Ａを点滅させる。これにより、直接映像１１０内において障害物が出現している位置を運転者に把握させる。また、ガイドライン表示１４１Ａを点滅させる場合のみならず、障害物非検知側のガイドライン表示１４１Ｂと比較して、障害物検知側のガイドライン表示１４１Ａを強調色としてもよく、太さを太くしても良く、更には、ガイドライン表示１４１Ａを流れるような動きを有するアニメーションで表現することで運転者の視線を向けるようにしても良い。更にまた、ガイドライン表示１４１を、車両信号取得部６で検知したステアリングの操舵角に応じた予想進路軌跡として表示させる場合であっても、同様に、障害物検知側のガイドライン表示１４１Ａについて注意を向けさせるような表示形態としても良い。
また、制御部３は、障害物非検知時において俯瞰映像１００内に表示させていたガイドライン表示１４１Ａを障害物検知と同時に消去させることで、立体物に対する位置関係の判断の誤りを回避することができる。
なお、上述の図７，図８を用いてした第２表示例の説明では、障害物を検知した時に俯瞰映像１００の表示サイズを小さくして、直接映像１１０の表示サイズを大きくすることと、直接映像１１０中のガイドライン表示１４１Ａの障害物側を点滅等させることとを同時に行うことを示したが、運転者の注意を向けることができれば、表示サイズの変更とガイドライン表示１４１Ａの表示形態の変更とをそれぞれ別個に行っても良く、障害物検知時に俯瞰映像１００のガイドライン表示１４１Ａを消去させずに点滅させても良い。
「第３表示例」
つぎに、俯瞰映像１００及び直接映像１１０の第３表示例について説明する。
この第３表示例は、障害物検知情報から自車両１０周辺に障害物を検知する前に、図７と同様に俯瞰映像１００の表示サイズよりも直接映像１１０の表示サイズを小さくし、障害物検知時には、図９に示すように、直接映像１１０の表示サイズを変更させずに、直接映像１１０’の背景となる背景色可変領域１５１の色を変化させることによって、運転者の注意を向けて視線を向けるものである。
これにより、背景色可変領域１５１の背景色を強調色とすることにより、更に確実に運転者の注意を向けることができる。
また、上述した第１表示例、第２表示例、第３表示例では、表示部２の表示内容を変更することによって障害物の検知を運転者に把握させていたが、表示内容の変更と同時に、音声や音により運転者に直接映像１１０を見るように促すことができる。
［実施形態の効果］
以上詳細に説明したように、本発明を適用した運転支援装置によれば、障害物を検知した時に、俯瞰映像１００と、検知された障害物の自車両に対する方向を撮像した直接映像１１０とを同時に表示させるので、俯瞰映像１００を表示させた場合であっても、当該俯瞰映像１００における障害物との相対位置と、実際の障害物との相対位置との相違を同一画面上で確認させることができる。
例えば、実際の自車両１０と他車両１６０との位置関係が図１０（ａ）に示すようになっており、自車両１０が直進後退する予測進路軌跡１６１を引くと、自車両の予想進路軌跡１６１内に実際の自車両１０が存在する可能性がある。これに対し、俯瞰映像１００を作成する時の映像ゆがみによって、図１０（ｂ）に示すように、自車両１０と他車両１６０との位置関係が実際位置１６０’よりもずれ、予測進路軌跡１６１を引いた場合には、自車両の予想進路軌跡１６１内に実際の自車両１０が存在しないため位置関係を誤認識する可能性がある。これに対し、運転支援装置では、障害物検知時には、俯瞰映像１００のみならず、直接映像１１０も同時に表示させることができるので、直接映像１１０によって実際に近い自車両１０と障害物との距離感を把握させることができる。
また、この運転支援装置によれば、障害物を検知した時に、俯瞰映像１００内に、当該障害物の接近している自車両部分を強調する障害物表示１２１を行うので、当該障害物表示１２１を含む俯瞰映像１００を参照させるのみで、自車両１０に対する障害物の存在方向を把握させることができる。
更に、この運転支援装置によれば、俯瞰映像１００の障害物表示１２１として、障害物の接近している自車両部分を覆い隠すような表示とするので、当該障害物の接近している状況を直接映像１１０で確認させることができる。
更にまた、この運転支援装置によれば、俯瞰映像１００の障害物表示１２１として、障害物の接近している自車両部分を覆い隠す部分に、当該障害物の自車両に対する方向を撮像した直接映像１１０を表示させるので、当該障害物表示１２１の表示から、直接映像１１０を視認して障害物を把握させることができる。
更にまた、この運転支援装置によれば、俯瞰映像１００において障害物の接近している自車両部分を覆い隠す部分に、障害物の種類を示す仮想的な表示を行うので、自車両１０に対する障害物の方向のみならず、障害物の種類も把握させることができる。
更にまた、この運転支援装置によれば、俯瞰映像１００において障害物の接近している自車両部分を覆い隠す部分に、障害物の形状及び色を示す仮想パターンの表示を行うので、自車両１０に対する障害物の方向のみならず、障害物の形状や色も把握させることができる。
更にまた、この運転支援装置によれば、障害物を検知した時に、俯瞰映像１００内の、自車両と車両周囲との位置関係を把握させるためのガイドライン表示１４１の表示形態を変化させるので、障害物の存在を確実に運転者に把握させることができる。
更にまた、この運転支援装置によれば、俯瞰映像１００内に自車両と車両周囲との位置関係を把握させるためのガイドライン表示１４１を行っている時に、障害物を検知した場合、他のガイドライン表示よりも障害物に近いガイドライン表示１４１を消去させるので、障害物の存在を確実に運転者に把握させることができる。
更にまた、この運転支援装置によれば、障害物を検知した時に、直接映像１１０内に、当該障害物が接近している部分を強調する障害物警報表示１３１を行うので、障害物の存在を確実に運転者に把握させることができる。
更にまた、この運転支援装置によれば、直接映像１１０の障害物警報表示１３１として、障害物が接近している部分を線で囲う表示を行うので、更に確実に障害物の存在を運転者に把握させることができる。
更にまた、この運転支援装置によれば、障害物を検知した時に、直接映像１１０内の、自車両と車両周囲との位置関係を把握させるためのガイドライン表示１４１の表示形態を変化させるので、障害物の存在を確実に運転者に把握させることができる。
更にまた、この運転支援装置によれば、直接映像１１０内に自車両と車両周囲との位置関係を把握させるためのガイドライン表示１４１を行っている時に、障害物を検知した場合、他のガイドライン表示１４１よりも障害物に近いガイドライン表示１４１を点滅させるので、障害物の存在を確実に運転者に把握させることができる。
更にまた、この運転支援装置によれば、直接映像１１０内に自車両と車両周囲との位置関係を把握させるためのガイドライン表示１４１を行っている時に、障害物を検知した場合、他のガイドライン表示よりも障害物に近いガイドライン表示表示の色を変化させるので、障害物の存在を確実に運転者に把握させることができる。
更にまた、この運転支援装置によれば、障害物を検知していない時には、直接映像１１０の表示サイズよりも俯瞰映像１００の表示サイズを大きくして俯瞰映像１００によって自車両１０に対する駐車枠などの方向を把握させ、障害物を検知した時には、俯瞰映像１００の表示サイズよりも直接映像１１０の表示サイズを大きくして、自車両１０に対する障害物との相対位置を把握させることができる。
更にまた、この運転支援装置によれば、障害物を検知した場合に、直接映像１１０の背景色を変化させるので、俯瞰映像１００よりも直接映像１１０により確実に視線を向かせることができる。
なお、上述の実施の形態は本発明の一例である。このため、本発明は、上述の実施形態に限定されることはなく、この実施の形態以外であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることは勿論である。
本発明を適用した運転支援装置の構成を示すブロック図である。 本発明を適用した運転支援装置を構成する撮像部の構成を示す上面図である。 本発明を適用した運転支援装置を構成する撮像部を構成するカメラの撮像領域に着いて説明するための図であり、（ａ）は後方の撮像領域、（ｂ）は左側方の撮像領域、（ｃ）は前方の撮像領域、（ｄ）は右側方の撮像領域である。 本発明を適用した運転支援装置の表示部に、俯瞰映像と直接映像とを並べて表示させた表示例を示す図である。 本発明を適用した運転支援装置の表示部に、障害物表示を含む俯瞰映像と直接映像とを並べて表示させた表示例を示す図である。 本発明を適用した運転支援装置の表示部に、障害物警報表示を含む俯瞰映像と直接映像とを並べて表示させた表示例を示す図である。 本発明を適用した運転支援装置の表示部に、ガイドライン表示を含む俯瞰映像と直接映像とを並べて表示させた表示例を示す図である。 本発明を適用した運転支援装置の表示部に、表示状態を変化させたガイドライン表示を含む俯瞰映像と直接映像とを並べて表示させた表示例を示す図である。 本発明を適用した運転支援装置の表示部に、背景色を変化させた俯瞰映像と直接映像とを並べて表示させた表示例を示す図である。 本発明を適用した運転支援装置の効果を説明するための図であり、（ａ）は実際の自車両と他車両との位置関係であり、（ｂ）は俯瞰映像で把握される自車両と他車両との位置関係である。
符号の説明
１ 撮像部
２ 表示部
３ 制御部
４ 映像処理部
５ 障害物検知部
６ 車両信号取得部
７ 操作部
１００ 俯瞰映像
１１０ 直接映像
１２１ 障害物表示
１３１，１３２ 障害物警報表示
１４１ ガイドライン表示
１５１ 背景色可変領域

Claims (16)

  1. 車両周囲の異なる方向を撮像方向とした複数のカメラから取得した、画像変換が行われていない複数の直接映像を用いて、車両周囲の状況を運転者に提示する映像表示装置において、
    前記複数の直接映像を取得し、当該複数の直接映像を用いて車両周囲を一覧させる俯瞰映像を作成する映像処理手段と、
    自車両に近接する障害物を検知する障害物検知手段と、
    前記障害物検知手段によって障害物を検知した時に、前記映像処理手段で作成された俯瞰映像と、前記障害物検知手段によって検知された障害物の自車両に対する方向を撮像した直接映像とを同時に表示させる表示手段と
    を備えることを特徴とする映像表示装置。
  2. 前記表示手段は、前記障害物検知手段によって障害物を検知した時に、前記俯瞰映像内に、当該障害物の接近している自車両部分を強調する障害物警報表示を行うことを特徴とする請求項１に記載の映像表示装置。
  3. 前記障害物警報表示は、障害物の接近している自車両部分を覆い隠す表示であることを特徴とする請求項２に記載の映像表示装置。
  4. 前記障害物の接近している自車両部分を覆い隠す部分に、当該障害物の自車両に対する方向を撮像した直接映像を表示させることを特徴とする請求項３に記載の映像表示装置。
  5. 前記障害物検知手段は、前記自車両に近接する障害物の種類を特定し、
    前記表示手段は、前記障害物の接近している自車両部分を覆い隠す部分に、前記障害物検知手段によって特定された障害物の種類を示す仮想的な表示を行うことを特徴とする請求項３に記載の映像表示装置。
  6. 前記障害物検知手段は、前記自車両に近接する障害物の形状及び色を特定し、
    前記表示手段は、前記障害物の接近している自車両部分を覆い隠す部分に、前記障害物検知手段によって特定された障害物の形状及び色を示す仮想パターンの表示を行うことを特徴とする請求項３に記載の映像表示装置。
  7. 前記表示手段は、前記障害物検知手段によって障害物を検知した時に、前記俯瞰映像内の、自車両と車両周囲との位置関係を把握させるためのガイドライン表示の表示形態を変化させることを特徴とする請求項２に記載の映像表示装置。
  8. 前記表示手段は、前記俯瞰映像内に自車両と車両周囲との位置関係を把握させるためのガイドライン表示を行っている時に、前記障害物検知手段によって障害物を検知した場合、他のガイドライン表示よりも障害物に近いガイドライン表示を消去させることを特徴とする請求項７に記載の映像表示装置。
  9. 前記表示手段は、前記障害物検知手段によって障害物を検知した時に、前記直接映像内に、当該障害物が接近している部分を強調する障害物警報表示を行うことを特徴とする請求項１に記載の映像表示装置。
  10. 前記障害物警報表示は、障害物が接近している部分を線で囲う表示であることを特徴とする請求項９に記載の映像表示装置。
  11. 前記表示手段は、前記障害物検知手段によって障害物を検知した時に、前記直接映像内の、自車両と車両周囲との位置関係を把握させるためのガイドライン表示の表示形態を変化させることを特徴とする請求項９に記載の映像表示装置。
  12. 前記表示手段は、前記直接映像内に自車両と車両周囲との位置関係を把握させるためのガイドライン表示を行っている時に、前記障害物検知手段によって障害物を検知した場合、他のガイドライン表示よりも障害物に近いガイドライン表示を点滅させることを特徴とする請求項９に記載の映像表示装置。
  13. 前記表示手段は、前記直接映像内に自車両と車両周囲との位置関係を把握させるためのガイドライン表示を行っている時に、前記障害物検知手段によって障害物を検知した場合、他のガイドライン表示よりも障害物に近いガイドライン表示の色を変化させることを特徴とする請求項９に記載の映像表示装置。
  14. 前記表示手段は、前記障害物検知手段によって障害物を検知していない時には、前記直接映像の表示サイズよりも前記俯瞰映像の表示サイズを大きくし、前記障害物検知手段によって障害物を検知した時には、前記俯瞰映像の表示サイズよりも前記直接映像の表示サイズを大きくすることを特徴とする請求項１に記載の映像表示装置。
  15. 前記表示手段は、前記障害物検知手段によって障害物を検知した場合に、前記直接映像又は前記俯瞰映像の背景色を変化させることを特徴とする請求項１に記載の映像表示装置。
  16. 車両周囲の異なる方向を撮像方向とした複数のカメラから取得した、画像変換が行われていない複数の直接映像を用いて、車両周囲の状況を運転者に提示する映像表示方法において、
    前記複数の直接映像を取得して、当該複数の直接映像を用いて車両周囲を一覧させる俯瞰映像を作成し、
    自車両に近接する障害物を検知した時に、前記作成された俯瞰映像と、前記検知された障害物の自車両に対する方向を撮像した直接映像とを同時に表示させること
    を備えることを特徴とする映像表示方法。
JP2005166865A 2005-06-07 2005-06-07 映像表示装置及び映像表示方法 Pending JP2006341641A (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2005166865A JP2006341641A (ja) 2005-06-07 2005-06-07 映像表示装置及び映像表示方法
US11/447,435 US7592928B2 (en) 2005-06-07 2006-06-06 Image display device and method
EP06252939A EP1731366A1 (en) 2005-06-07 2006-06-07 Apparatus and method for displaying images
CN200610083571.1A CN1878299B (zh) 2005-06-07 2006-06-07 图像显示装置和方法
CN200910005577.0A CN101489117B (zh) 2005-06-07 2006-06-07 图像显示装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005166865A JP2006341641A (ja) 2005-06-07 2005-06-07 映像表示装置及び映像表示方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2011168131A Division JP5408198B2 (ja) 2011-08-01 2011-08-01 映像表示装置及び映像表示方法

Publications (2)

Publication Number Publication Date
JP2006341641A true JP2006341641A (ja) 2006-12-21
JP2006341641A5 JP2006341641A5 (ja) 2010-11-04

Family

ID=36954106

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005166865A Pending JP2006341641A (ja) 2005-06-07 2005-06-07 映像表示装置及び映像表示方法

Country Status (4)

Country Link
US (1) US7592928B2 (ja)
EP (1) EP1731366A1 (ja)
JP (1) JP2006341641A (ja)
CN (2) CN1878299B (ja)

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008174075A (ja) * 2007-01-18 2008-07-31 Xanavi Informatics Corp 車両周辺監視装置、その表示方法
JP2008174076A (ja) * 2007-01-18 2008-07-31 Xanavi Informatics Corp 車両周辺監視装置、その表示方法
WO2009044654A1 (ja) * 2007-10-01 2009-04-09 Nissan Motor Co., Ltd. 駐車支援装置及び駐車支援方法
JP2009093332A (ja) * 2007-10-05 2009-04-30 Nissan Motor Co Ltd 車両周辺画像処理装置及び車両周辺状況提示方法
JP2009184523A (ja) * 2008-02-06 2009-08-20 Denso Corp 駐車支援装置
WO2009119337A1 (ja) * 2008-03-27 2009-10-01 三洋電機株式会社 画像処理装置、画像処理プログラム、画像処理システム及び画像処理方法
JP2011002884A (ja) * 2009-06-16 2011-01-06 Nissan Motor Co Ltd 車両用画像表示装置及び俯瞰画像の表示方法
JP2011015549A (ja) * 2009-07-02 2011-01-20 Toyota Motor Corp 駐車支援システムおよび駐車支援システムの制御方法
JP2011217460A (ja) * 2010-03-31 2011-10-27 Aisin Aw Co Ltd 車両用充電支援装置、車両用充電支援方法、コンピュータプログラム
JP2012134586A (ja) * 2010-12-20 2012-07-12 Nissan Motor Co Ltd 車両周辺監視装置
JP2012526707A (ja) * 2009-05-11 2012-11-01 ロベルト ボッシュ ゲーエムベーハー 車両の駐車に使用するためのカメラシステム
JP2012216991A (ja) * 2011-03-31 2012-11-08 Fujitsu Ten Ltd 画像表示システム
WO2012169361A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置
WO2012169362A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置
WO2012169352A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置
JP2014033469A (ja) * 2013-11-01 2014-02-20 Aisin Seiki Co Ltd 車両周辺監視装置
JP2014161087A (ja) * 2014-04-17 2014-09-04 Komatsu Ltd 作業車両用周辺監視システム及び作業車両
JP2014183497A (ja) * 2013-03-19 2014-09-29 Sumitomo Heavy Ind Ltd 作業機械用周辺監視装置
US8855850B2 (en) 2007-10-01 2014-10-07 Nissan Motor Co., Ltd. Parking assistant and parking assisting method
JP2014222877A (ja) * 2014-06-04 2014-11-27 株式会社小松製作所 作業車両の周辺監視装置
US9308863B2 (en) 2010-03-26 2016-04-12 Aisin Seiki Kabushiki Kaisha Vehicle peripheral observation device
WO2016088151A1 (ja) * 2014-12-01 2016-06-09 日産自動車株式会社 車載用表示装置、車両及び表示方法
US9457719B2 (en) 2012-09-21 2016-10-04 Komatsu Ltd. Work vehicle periphery monitoring system and work vehicle
JP6068710B1 (ja) * 2016-05-30 2017-01-25 株式会社ネクスコ・エンジニアリング北海道 俯瞰画像調整装置および俯瞰画像調整プログラム
JP2017201789A (ja) * 2017-06-02 2017-11-09 富士通テン株式会社 画像処理装置、表示装置、携帯用表示装置、画像処理方法、表示装置の表示方法、携帯用表示装置の表示方法及びプログラム
JP2018050277A (ja) * 2016-09-20 2018-03-29 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
WO2018055873A1 (ja) * 2016-09-20 2018-03-29 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
JP2018050180A (ja) * 2016-09-21 2018-03-29 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
JP2019071677A (ja) * 2019-01-28 2019-05-09 住友重機械工業株式会社 ショベル
US10587801B2 (en) 2016-09-20 2020-03-10 JVC Kenwood Corporation Bird's-eye view video generation device, bird'S-eye view video generation system, bird's-eye view video generation method, and non-transitory storage medium
JP2020188474A (ja) * 2019-01-28 2020-11-19 住友重機械工業株式会社 ショベル

Families Citing this family (178)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2891934B1 (fr) * 2005-10-12 2008-01-18 Valeo Electronique Sys Liaison Dispositif de traitement de donnees video pour un vehicule automobile
JP4742953B2 (ja) * 2006-03-31 2011-08-10 株式会社デンソー 画像処理装置，画像表示システムおよびプログラム
JP4899826B2 (ja) * 2006-11-28 2012-03-21 アイシン・エィ・ダブリュ株式会社 駐車支援方法及び駐車支援装置
JP4893945B2 (ja) * 2007-02-06 2012-03-07 株式会社デンソー 車両周辺監視装置
JP2008219063A (ja) * 2007-02-28 2008-09-18 Sanyo Electric Co Ltd 車両周辺監視装置及び方法
JP4458138B2 (ja) * 2007-09-18 2010-04-28 株式会社デンソー 車両周辺監視装置
JP5120880B2 (ja) 2007-10-15 2013-01-16 アルパイン株式会社 画像処理装置及び画像処理方法
JP2009101718A (ja) * 2007-10-19 2009-05-14 Toyota Industries Corp 映像表示装置及び映像表示方法
JP5053043B2 (ja) * 2007-11-09 2012-10-17 アルパイン株式会社 車両周辺画像生成装置および車両周辺画像の歪み補正方法
JP5057936B2 (ja) * 2007-11-09 2012-10-24 アルパイン株式会社 鳥瞰画像生成装置および方法
CN201145741Y (zh) * 2007-11-28 2008-11-05 严伟文 2.4g无线屏幕显示语言提示倒车指示器
TW200925023A (en) * 2007-12-07 2009-06-16 Altek Corp Method of displaying shot image on car reverse video system
JP4900232B2 (ja) * 2007-12-26 2012-03-21 日産自動車株式会社 車両用駐車支援装置および映像表示方法
JP5108605B2 (ja) * 2008-04-23 2012-12-26 三洋電機株式会社 運転支援システム及び車両
GB2459889B (en) * 2008-05-08 2010-02-24 Shih-Hsiung Li Vehicle auxiliary device
WO2009141846A1 (ja) * 2008-05-19 2009-11-26 パナソニック株式会社 車両周囲監視装置および車両周囲監視方法
JP2009292339A (ja) * 2008-06-05 2009-12-17 Aisin Seiki Co Ltd 駐車支援装置
JP4661917B2 (ja) * 2008-07-25 2011-03-30 日産自動車株式会社 駐車支援装置および駐車支援方法
US8340870B2 (en) * 2008-09-16 2012-12-25 Honda Motor Co., Ltd. Vehicle maneuver assistance device
JP5112998B2 (ja) * 2008-09-16 2013-01-09 本田技研工業株式会社 車両周囲監視装置
JP5420216B2 (ja) * 2008-09-16 2014-02-19 本田技研工業株式会社 車両周囲監視装置
EP2179892A1 (de) 2008-10-24 2010-04-28 Magna Electronics Europe GmbH & Co. KG Verfahren zum automatischen Kalibrieren einer virtuellen Kamera
EP2181892B1 (de) * 2008-10-28 2011-12-14 Volkswagen AG Parkassistenzsystem und Verfahren zum Betreiben eines Parkassistenzsystems für ein Kraftfahrzeug
US8305444B2 (en) * 2008-11-14 2012-11-06 Toyota Motor Engineering & Manufacturing North America, Inc. Integrated visual display system
KR100966288B1 (ko) * 2009-01-06 2010-06-28 주식회사 이미지넥스트 주변 영상 생성 방법 및 장치
US9126525B2 (en) 2009-02-27 2015-09-08 Magna Electronics Inc. Alert system for vehicle
JP5344227B2 (ja) * 2009-03-25 2013-11-20 アイシン精機株式会社 車両用周辺監視装置
US8376595B2 (en) 2009-05-15 2013-02-19 Magna Electronics, Inc. Automatic headlamp control
WO2011001642A1 (ja) * 2009-06-29 2011-01-06 パナソニック株式会社 車載用映像表示装置
US20110001819A1 (en) * 2009-07-02 2011-01-06 Sanyo Electric Co., Ltd. Image Processing Apparatus
JP5108840B2 (ja) * 2009-07-29 2012-12-26 クラリオン株式会社 車両用周辺監視装置および車両用周辺画像表示方法
US20110106448A1 (en) * 2009-10-29 2011-05-05 Delphi Technologies, Inc. Database System and Method of Obtaining and Communicating Data
JP2011135253A (ja) * 2009-12-24 2011-07-07 Fujitsu Ten Ltd 画像処理装置、画像処理システム、および、画像処理方法
TWI392366B (zh) 2009-12-31 2013-04-01 Ind Tech Res Inst 全周鳥瞰影像距離介面產生方法與系統
EP2360054B1 (en) * 2010-01-26 2015-03-18 Delphi Technologies, Inc. A parking guidance system
JP5501452B2 (ja) * 2010-05-19 2014-05-21 三菱電機株式会社 車両後方監視装置
CN102259618B (zh) * 2010-05-25 2015-04-22 德尔福(中国)科技研发中心有限公司 一种车辆后向超声波与摄像头融合的告警处理方法
RU2533645C2 (ru) * 2010-05-27 2014-11-20 Сергей Анатольевич Королев Интеллектуальная транспортная система и способ её использования
CN102939223B (zh) * 2010-06-11 2015-08-05 日产自动车株式会社 停车辅助装置以及停车辅助方法
WO2011158285A1 (ja) * 2010-06-15 2011-12-22 三菱電機株式会社 車両周辺監視装置
US9321400B2 (en) * 2010-06-15 2016-04-26 Aisin Seiki Kabushiki Kaisha Drive assist device
US8665116B2 (en) 2010-07-18 2014-03-04 Ford Global Technologies Parking assist overlay with variable brightness intensity
JP5251947B2 (ja) * 2010-09-17 2013-07-31 日産自動車株式会社 車両用画像表示装置
DE102010042026B4 (de) * 2010-10-06 2020-11-26 Robert Bosch Gmbh Verfahren zum Erzeugen eines Abbildes mindestens eines Objekts in einer Umgebung eines Fahrzeugs
WO2012061567A1 (en) 2010-11-04 2012-05-10 Magna Electronics Inc. Vehicular camera system with reduced number of pins and conduits
DE102010051206A1 (de) * 2010-11-12 2012-05-16 Valeo Schalter Und Sensoren Gmbh Verfahren zum Erzeugen eines Bilds einer Fahrzeugumgebung und Abbildungsvorrichtung
WO2012068331A1 (en) 2010-11-19 2012-05-24 Magna Electronics Inc. Lane keeping system and lane centering system
DE102010052304A1 (de) 2010-11-23 2012-05-24 Valeo Schalter Und Sensoren Gmbh Verfahren und Vorrichtung zum Unterstützen eines Fahrers eines Kraftfahrzeugs beim Ausparken aus einer Parklücke und Kraftfahrzeug
JP5519479B2 (ja) * 2010-11-29 2014-06-11 パナソニック株式会社 運転支援表示装置
US20130321614A1 (en) * 2010-12-02 2013-12-05 An-Sheng Liu Driving safety device
US9264672B2 (en) 2010-12-22 2016-02-16 Magna Mirrors Of America, Inc. Vision display system for vehicle
WO2012116043A1 (en) 2011-02-25 2012-08-30 Magna Electronics Inc. Vehicular camera with aligned housing members and electrical connection between aligned housing members
US9194943B2 (en) 2011-04-12 2015-11-24 Magna Electronics Inc. Step filter for estimating distance in a time-of-flight ranging system
GB2490131B (en) * 2011-04-19 2016-10-12 Acard Tech Corp A vehicular around-view driving monitor and recorder
CN103460264B (zh) * 2011-04-20 2018-03-06 丰田自动车株式会社 车辆用周边警戒装置
WO2012145819A1 (en) 2011-04-25 2012-11-01 Magna International Inc. Image processing method for detecting objects using relative motion
JP2012244600A (ja) 2011-05-24 2012-12-10 Fujitsu Ten Ltd 画像表示システム、画像処理装置、及び、画像表示方法
JP5858650B2 (ja) * 2011-06-08 2016-02-10 富士通テン株式会社 画像生成装置、画像表示システム、及び、画像生成方法
EP2720458A4 (en) * 2011-06-09 2015-02-25 Aisin Seiki IMAGING DEVICE
CN103609101A (zh) * 2011-06-16 2014-02-26 爱信精机株式会社 车辆周边监视装置
GB2494414A (en) * 2011-09-06 2013-03-13 Land Rover Uk Ltd Terrain visualisation for vehicle using combined colour camera and time of flight (ToF) camera images for augmented display
WO2013043661A1 (en) 2011-09-21 2013-03-28 Magna Electronics, Inc. Vehicle vision system using image data transmission and power supply via a coaxial cable
WO2013048994A1 (en) 2011-09-26 2013-04-04 Magna Electronics, Inc. Vehicle camera image quality improvement in poor visibility conditions by contrast amplification
US9264673B2 (en) 2011-11-20 2016-02-16 Magna Electronics, Inc. Vehicle vision system with enhanced functionality
US10071687B2 (en) 2011-11-28 2018-09-11 Magna Electronics Inc. Vision system for vehicle
WO2013086249A2 (en) * 2011-12-09 2013-06-13 Magna Electronics, Inc. Vehicle vision system with customized display
JP5938222B2 (ja) * 2012-02-07 2016-06-22 日立建機株式会社 運搬車両の周囲監視装置
US8694224B2 (en) 2012-03-01 2014-04-08 Magna Electronics Inc. Vehicle yaw rate correction
US9565342B2 (en) 2012-03-06 2017-02-07 Magna Electronics Inc. Vehicle camera with tolerance compensating connector
US10609335B2 (en) 2012-03-23 2020-03-31 Magna Electronics Inc. Vehicle vision system with accelerated object confirmation
WO2013158592A2 (en) 2012-04-16 2013-10-24 Magna Electronics, Inc. Vehicle vision system with reduced image color data processing by use of dithering
US10089537B2 (en) 2012-05-18 2018-10-02 Magna Electronics Inc. Vehicle vision system with front and rear camera integration
US9340227B2 (en) 2012-08-14 2016-05-17 Magna Electronics Inc. Vehicle lane keep assist system
DE102013217430A1 (de) 2012-09-04 2014-03-06 Magna Electronics, Inc. Fahrerassistenzsystem für ein Kraftfahrzeug
JP6014442B2 (ja) * 2012-09-27 2016-10-25 富士通テン株式会社 画像生成装置、画像表示システム、および、画像生成方法
KR101417399B1 (ko) * 2012-11-09 2014-07-08 현대자동차주식회사 차량의 주차 위치 표시 장치 및 방법
US9743002B2 (en) 2012-11-19 2017-08-22 Magna Electronics Inc. Vehicle vision system with enhanced display functions
US9307640B2 (en) 2012-11-19 2016-04-05 Magna Electronics Inc. PCB pad for imager of vehicle vision system
US9090234B2 (en) 2012-11-19 2015-07-28 Magna Electronics Inc. Braking control system for vehicle
JP5915770B2 (ja) * 2012-11-27 2016-05-11 日産自動車株式会社 車両用加速抑制装置及び車両用加速抑制方法
US10025994B2 (en) 2012-12-04 2018-07-17 Magna Electronics Inc. Vehicle vision system utilizing corner detection
US9481301B2 (en) 2012-12-05 2016-11-01 Magna Electronics Inc. Vehicle vision system utilizing camera synchronization
CN103879352A (zh) * 2012-12-22 2014-06-25 鸿富锦精密工业（深圳）有限公司 汽车泊车辅助系统及方法
CN103879353A (zh) * 2012-12-22 2014-06-25 鸿富锦精密工业（深圳）有限公司 泊车辅助系统及方法
CN103895573A (zh) * 2012-12-27 2014-07-02 鸿富锦精密工业（深圳）有限公司 汽车泊车辅助系统及方法
US20140218529A1 (en) 2013-02-04 2014-08-07 Magna Electronics Inc. Vehicle data recording system
US9092986B2 (en) 2013-02-04 2015-07-28 Magna Electronics Inc. Vehicular vision system
US10057544B2 (en) 2013-03-04 2018-08-21 Magna Electronics Inc. Vehicle vision system camera with integrated physical layer components
US20150077560A1 (en) * 2013-03-22 2015-03-19 GM Global Technology Operations LLC Front curb viewing system based upon dual cameras
US10027930B2 (en) 2013-03-29 2018-07-17 Magna Electronics Inc. Spectral filtering for vehicular driver assistance systems
US9327693B2 (en) 2013-04-10 2016-05-03 Magna Electronics Inc. Rear collision avoidance system for vehicle
US10232797B2 (en) 2013-04-29 2019-03-19 Magna Electronics Inc. Rear vision system for vehicle with dual purpose signal lines
US10567705B2 (en) 2013-06-10 2020-02-18 Magna Electronics Inc. Coaxial cable with bidirectional data transmission
US9260095B2 (en) 2013-06-19 2016-02-16 Magna Electronics Inc. Vehicle vision system with collision mitigation
US20140375476A1 (en) 2013-06-24 2014-12-25 Magna Electronics Inc. Vehicle alert system
US10326969B2 (en) 2013-08-12 2019-06-18 Magna Electronics Inc. Vehicle vision system with reduction of temporal noise in images
US9619716B2 (en) 2013-08-12 2017-04-11 Magna Electronics Inc. Vehicle vision system with image classification
US9881220B2 (en) 2013-10-25 2018-01-30 Magna Electronics Inc. Vehicle vision system utilizing communication system
US9499139B2 (en) 2013-12-05 2016-11-22 Magna Electronics Inc. Vehicle monitoring system
US9988047B2 (en) 2013-12-12 2018-06-05 Magna Electronics Inc. Vehicle control system with traffic driving control
US10017114B2 (en) 2014-02-19 2018-07-10 Magna Electronics Inc. Vehicle vision system with display
US9688199B2 (en) 2014-03-04 2017-06-27 Magna Electronics Inc. Vehicle alert system utilizing communication system
US9623878B2 (en) 2014-04-02 2017-04-18 Magna Electronics Inc. Personalized driver assistance system for vehicle
US9487235B2 (en) 2014-04-10 2016-11-08 Magna Electronics Inc. Vehicle control system with adaptive wheel angle correction
JP6228538B2 (ja) * 2014-04-25 2017-11-08 株式会社小松製作所 周辺監視システム、作業車両、及び周辺監視方法
DE102014107235A1 (de) * 2014-05-22 2015-11-26 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Verfahren zur Darstellung einer Fahrzeugumgebung auf einer Anzeigevorrichtung; eine Anzeigevorrichtung; ein System aus einer Mehrzahl an Bilderfassungseinheiten und einer Anzeigevorrichtung; ein Computerprogramm
US9971947B2 (en) 2014-07-31 2018-05-15 Magna Electronics Inc. Vehicle vision system with camera power control
US9729636B2 (en) 2014-08-01 2017-08-08 Magna Electronics Inc. Smart road system for vehicles
US10931934B2 (en) * 2014-09-02 2021-02-23 FLIR Belgium BVBA Watercraft thermal monitoring systems and methods
US9925980B2 (en) 2014-09-17 2018-03-27 Magna Electronics Inc. Vehicle collision avoidance system with enhanced pedestrian avoidance
DE102014014662A1 (de) 2014-09-19 2016-03-24 Mekra Lang North America, Llc Anzeigeeinrichtung für Fahrzeuge, insbesondere Nutzfahrzeuge
US10356337B2 (en) 2014-10-07 2019-07-16 Magna Electronics Inc. Vehicle vision system with gray level transition sensitive pixels
US9725040B2 (en) 2014-10-28 2017-08-08 Nissan North America, Inc. Vehicle object detection system
US9880253B2 (en) 2014-10-28 2018-01-30 Nissan North America, Inc. Vehicle object monitoring system
US9834141B2 (en) 2014-10-28 2017-12-05 Nissan North America, Inc. Vehicle object detection system
US9740945B2 (en) 2015-01-14 2017-08-22 Magna Electronics Inc. Driver assistance system for vehicle
US10032369B2 (en) 2015-01-15 2018-07-24 Magna Electronics Inc. Vehicle vision system with traffic monitoring and alert
US9764744B2 (en) 2015-02-25 2017-09-19 Magna Electronics Inc. Vehicle yaw rate estimation system
US10286855B2 (en) 2015-03-23 2019-05-14 Magna Electronics Inc. Vehicle vision system with video compression
US10298818B2 (en) 2015-03-23 2019-05-21 Magna Electronics Inc. Vehicle camera with enhanced imager and PCB assembly
US10819943B2 (en) 2015-05-07 2020-10-27 Magna Electronics Inc. Vehicle vision system with incident recording function
JP6595219B2 (ja) * 2015-06-08 2019-10-23 株式会社デンソーテン 物体報知装置および物体報知方法
US10486599B2 (en) 2015-07-17 2019-11-26 Magna Mirrors Of America, Inc. Rearview vision system for vehicle
US10875403B2 (en) 2015-10-27 2020-12-29 Magna Electronics Inc. Vehicle vision system with enhanced night vision
US10144419B2 (en) 2015-11-23 2018-12-04 Magna Electronics Inc. Vehicle dynamic control system for emergency handling
JP6477444B2 (ja) * 2015-11-25 2019-03-06 株式会社デンソー 表示制御装置及び表示制御プログラム
US11027654B2 (en) 2015-12-04 2021-06-08 Magna Electronics Inc. Vehicle vision system with compressed video transfer via DSRC link
JP6745456B2 (ja) * 2015-12-08 2020-08-26 パナソニックＩｐマネジメント株式会社 駐車支援装置、駐車支援方法及び駐車支援プログラム
US11285878B2 (en) 2015-12-17 2022-03-29 Magna Electronics Inc. Vehicle vision system with camera line power filter
US10132971B2 (en) 2016-03-04 2018-11-20 Magna Electronics Inc. Vehicle camera with multiple spectral filters
US10055651B2 (en) 2016-03-08 2018-08-21 Magna Electronics Inc. Vehicle vision system with enhanced lane tracking
US10007854B2 (en) * 2016-07-07 2018-06-26 Ants Technology (Hk) Limited Computer vision based driver assistance devices, systems, methods and associated computer executable code
US11528413B2 (en) * 2016-08-22 2022-12-13 Sony Corporation Image processing apparatus and image processing method to generate and display an image based on a vehicle movement
US10380439B2 (en) 2016-09-06 2019-08-13 Magna Electronics Inc. Vehicle sensing system for detecting turn signal indicators
EP3293717B1 (en) * 2016-09-08 2021-11-10 KNORR-BREMSE Systeme für Nutzfahrzeuge GmbH An electronically controlled braking system
WO2018045577A1 (zh) 2016-09-09 2018-03-15 深圳市大疆创新科技有限公司 显示无人飞行器的障碍检测的方法和系统
JP6572862B2 (ja) 2016-10-14 2019-09-11 株式会社デンソー 表示制御装置
US10594934B2 (en) * 2016-11-17 2020-03-17 Bendix Commercial Vehicle Systems Llc Vehicle display
US10607094B2 (en) 2017-02-06 2020-03-31 Magna Electronics Inc. Vehicle vision system with traffic sign recognition
EP3584120B1 (en) * 2017-02-17 2021-04-14 Sumitomo Heavy Industries, Ltd. Work machine surroundings monitoring system
CN108460815B (zh) * 2017-02-22 2022-06-17 腾讯科技（深圳）有限公司 地图道路要素编辑方法和装置
EP3389026A1 (en) * 2017-04-12 2018-10-17 Volvo Car Corporation Apparatus and method for road vehicle driver assistance
CN107024821A (zh) * 2017-05-18 2017-08-08 深圳市沃特沃德股份有限公司 一种照明装置捕获信息的方法及照明装置
US10549853B2 (en) * 2017-05-26 2020-02-04 The Boeing Company Apparatus, system, and method for determining an object's location in image video data
US10789682B2 (en) 2017-06-16 2020-09-29 The Boeing Company Apparatus, system, and method for enhancing an image
US10933798B2 (en) 2017-09-22 2021-03-02 Magna Electronics Inc. Vehicle lighting control system with fog detection
US10583779B2 (en) 2017-10-02 2020-03-10 Magna Electronics Inc. Parking assist system using backup camera
JP7201315B2 (ja) * 2017-11-08 2023-01-10 トヨタ自動車株式会社 電子ミラー装置
US10682966B2 (en) 2017-11-16 2020-06-16 Magna Electronics Inc. Vehicle light/display control system using camera
US11417107B2 (en) 2018-02-19 2022-08-16 Magna Electronics Inc. Stationary vision system at vehicle roadway
CN110246359A (zh) * 2018-03-08 2019-09-17 比亚迪股份有限公司 用于定位车辆所在停车位的方法、车辆及系统
JP7113348B2 (ja) * 2018-03-15 2022-08-05 パナソニックＩｐマネジメント株式会社 車両周辺表示システム、表示制御装置およびコンピュータプログラム
CN109298554A (zh) * 2018-03-22 2019-02-01 苏州故善得电子科技有限公司 一种检测液晶屏的异物的新方法
CN109298553A (zh) * 2018-03-22 2019-02-01 苏州故善得电子科技有限公司 一种检测液晶屏的外观异物的方法
JP7006460B2 (ja) * 2018-04-02 2022-01-24 株式会社Ｊｖｃケンウッド 車両用表示制御装置、車両用表示システム、車両用表示制御方法、およびプログラム
WO2019239725A1 (ja) * 2018-06-14 2019-12-19 日立オートモティブシステムズ株式会社 車両制御装置
KR20200005282A (ko) 2018-07-06 2020-01-15 현대모비스 주식회사 미러리스 자동차의 측방 영상 처리 장치 및 방법
US11683911B2 (en) 2018-10-26 2023-06-20 Magna Electronics Inc. Vehicular sensing device with cooling feature
JP6557843B1 (ja) * 2018-12-05 2019-08-14 パナソニックＩｐマネジメント株式会社 車両の制御装置、制御システム、及び制御プログラム
JP7163418B2 (ja) * 2019-01-31 2022-10-31 三菱電機株式会社 運転支援装置
US11609304B2 (en) 2019-02-07 2023-03-21 Magna Electronics Inc. Vehicular front camera testing system
US11535158B2 (en) 2019-03-28 2022-12-27 Magna Electronics Inc. Vehicular camera with automatic lens defogging feature
EP3722522B1 (en) 2019-04-11 2024-03-27 Mitsubishi Logisnext Co., Ltd. Control device, control method, and program
US11135883B2 (en) 2019-05-13 2021-10-05 Magna Electronics Inc. Vehicular sensing system with ultrasonic sensor at trailer hitch
JP7354649B2 (ja) 2019-07-26 2023-10-03 株式会社アイシン 周辺監視装置
DE102019123778A1 (de) * 2019-09-05 2021-03-11 Valeo Schalter Und Sensoren Gmbh Darstellen einer Fahrzeugumgebung zum Bewegen des Fahrzeugs zu einer Zielposition
US11814816B2 (en) * 2019-09-11 2023-11-14 Deere & Company Mobile work machine with object detection and machine path visualization
US11755028B2 (en) 2019-09-11 2023-09-12 Deere & Company Mobile work machine with object detection using vision recognition
US10981507B1 (en) 2019-11-07 2021-04-20 Focused Technology Solutions, Inc. Interactive safety system for vehicles
US11472416B2 (en) 2020-04-30 2022-10-18 Deere & Company Multi-dimensional mobile machine path visualization and control system
US11750905B2 (en) 2020-08-14 2023-09-05 Magna Electronics Inc. Vehicular camera with inductive lens heater
JP7572812B2 (ja) * 2020-08-21 2024-10-24 株式会社小松製作所 作業機械の障害物報知システムおよび作業機械の障害物報知方法
US11801795B2 (en) 2020-09-18 2023-10-31 Magna Electronics Inc. Vehicular camera with lens heater with connectors
US11749105B2 (en) 2020-10-01 2023-09-05 Magna Electronics Inc. Vehicular communication system with turn signal identification
US11721113B2 (en) 2020-10-09 2023-08-08 Magna Electronics Inc. Vehicular driving assist system with lane detection using rear camera
US11968639B2 (en) 2020-11-11 2024-04-23 Magna Electronics Inc. Vehicular control system with synchronized communication between control units
GB2609482A (en) * 2021-08-05 2023-02-08 Continental Automotive Gmbh Method and system for creating a virtual lane for a vehicle
US12115918B2 (en) 2022-01-31 2024-10-15 Magna Mirrors Of America, Inc. Vehicular trailering assist system with auxiliary side trailer cameras

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07223488A (ja) * 1994-02-14 1995-08-22 Mitsubishi Motors Corp 車両用周囲情報表示装置
JP2000177512A (ja) * 1998-12-11 2000-06-27 Fujitsu Ten Ltd 車両の駐車支援装置
JP2001006097A (ja) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd 車両の運転支援装置
JP2001191877A (ja) * 1999-10-27 2001-07-17 Fujitsu Ten Ltd 車両の運転支援装置およびステアリング角検出装置
JP2001334899A (ja) * 2000-05-30 2001-12-04 Aisin Seiki Co Ltd 駐車補助装置
JP2002019556A (ja) * 2000-07-04 2002-01-23 Matsushita Electric Ind Co Ltd 監視システム
JP2002316602A (ja) * 2001-04-24 2002-10-29 Matsushita Electric Ind Co Ltd 車載カメラの撮像画像表示方法及びその装置
JP2003189293A (ja) * 2001-09-07 2003-07-04 Matsushita Electric Ind Co Ltd 車両周囲状況表示装置および映像提示システム
JP2003252151A (ja) * 2002-03-06 2003-09-10 Auto Network Gijutsu Kenkyusho:Kk 駐車支援システム
JP2004104478A (ja) * 2002-09-10 2004-04-02 Auto Network Gijutsu Kenkyusho:Kk 駐車アシスト装置及び駐車アシスト方法
JP2004254219A (ja) * 2003-02-21 2004-09-09 Denso Corp 車両周辺画像処理装置及びプログラム並びに記録媒体
JP2004297405A (ja) * 2003-03-26 2004-10-21 Sumitomo Electric Ind Ltd 撮像装置、撮像システム及び撮像方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5670935A (en) 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
EP1179958B1 (en) 1999-04-16 2012-08-08 Panasonic Corporation Image processing device and monitoring system
US6483429B1 (en) * 1999-10-21 2002-11-19 Matsushita Electric Industrial Co., Ltd. Parking assistance system
JP2001339716A (ja) 2000-05-25 2001-12-07 Matsushita Electric Ind Co Ltd 車両周辺監視装置及び方法
JP3645196B2 (ja) 2001-02-09 2005-05-11 松下電器産業株式会社 画像合成装置
JP3483143B2 (ja) 2001-04-09 2004-01-06 松下電器産業株式会社 運転支援装置
JP3695377B2 (ja) 2001-10-01 2005-09-14 日産自動車株式会社 画像合成装置および画像合成方法
JP3855814B2 (ja) 2002-03-22 2006-12-13 日産自動車株式会社 車両用画像処理装置
JP3928509B2 (ja) 2002-07-16 2007-06-13 日産自動車株式会社 画像合成装置および画像合成方法
JP2004064441A (ja) 2002-07-29 2004-02-26 Sumitomo Electric Ind Ltd 車載画像処理装置及び周囲モニタシステム
US20050031169A1 (en) * 2003-08-09 2005-02-10 Alan Shulman Birds eye view virtual imaging for real time composited wide field of view
DE10347168A1 (de) * 2003-10-06 2005-04-21 Valeo Schalter & Sensoren Gmbh Manövrierhilfe für Kraftfahrzeuge

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07223488A (ja) * 1994-02-14 1995-08-22 Mitsubishi Motors Corp 車両用周囲情報表示装置
JP2000177512A (ja) * 1998-12-11 2000-06-27 Fujitsu Ten Ltd 車両の駐車支援装置
JP2001006097A (ja) * 1999-06-25 2001-01-12 Fujitsu Ten Ltd 車両の運転支援装置
JP2001191877A (ja) * 1999-10-27 2001-07-17 Fujitsu Ten Ltd 車両の運転支援装置およびステアリング角検出装置
JP2001334899A (ja) * 2000-05-30 2001-12-04 Aisin Seiki Co Ltd 駐車補助装置
JP2002019556A (ja) * 2000-07-04 2002-01-23 Matsushita Electric Ind Co Ltd 監視システム
JP2002316602A (ja) * 2001-04-24 2002-10-29 Matsushita Electric Ind Co Ltd 車載カメラの撮像画像表示方法及びその装置
JP2003189293A (ja) * 2001-09-07 2003-07-04 Matsushita Electric Ind Co Ltd 車両周囲状況表示装置および映像提示システム
JP2003252151A (ja) * 2002-03-06 2003-09-10 Auto Network Gijutsu Kenkyusho:Kk 駐車支援システム
JP2004104478A (ja) * 2002-09-10 2004-04-02 Auto Network Gijutsu Kenkyusho:Kk 駐車アシスト装置及び駐車アシスト方法
JP2004254219A (ja) * 2003-02-21 2004-09-09 Denso Corp 車両周辺画像処理装置及びプログラム並びに記録媒体
JP2004297405A (ja) * 2003-03-26 2004-10-21 Sumitomo Electric Ind Ltd 撮像装置、撮像システム及び撮像方法

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008174076A (ja) * 2007-01-18 2008-07-31 Xanavi Informatics Corp 車両周辺監視装置、その表示方法
JP2008174075A (ja) * 2007-01-18 2008-07-31 Xanavi Informatics Corp 車両周辺監視装置、その表示方法
WO2009044654A1 (ja) * 2007-10-01 2009-04-09 Nissan Motor Co., Ltd. 駐車支援装置及び駐車支援方法
JP2009101984A (ja) * 2007-10-01 2009-05-14 Nissan Motor Co Ltd 駐車支援装置及び方法
US8988250B2 (en) 2007-10-01 2015-03-24 Nissan Motor Co., Ltd. Parking assistant and parking assisting method
US8855850B2 (en) 2007-10-01 2014-10-07 Nissan Motor Co., Ltd. Parking assistant and parking assisting method
JP2009093332A (ja) * 2007-10-05 2009-04-30 Nissan Motor Co Ltd 車両周辺画像処理装置及び車両周辺状況提示方法
JP2009184523A (ja) * 2008-02-06 2009-08-20 Denso Corp 駐車支援装置
WO2009119337A1 (ja) * 2008-03-27 2009-10-01 三洋電機株式会社 画像処理装置、画像処理プログラム、画像処理システム及び画像処理方法
JP2009239754A (ja) * 2008-03-27 2009-10-15 Sanyo Electric Co Ltd 画像処理装置、画像処理プログラム、画像処理システム及び画像処理方法
JP2012526707A (ja) * 2009-05-11 2012-11-01 ロベルト ボッシュ ゲーエムベーハー 車両の駐車に使用するためのカメラシステム
JP2011002884A (ja) * 2009-06-16 2011-01-06 Nissan Motor Co Ltd 車両用画像表示装置及び俯瞰画像の表示方法
JP2011015549A (ja) * 2009-07-02 2011-01-20 Toyota Motor Corp 駐車支援システムおよび駐車支援システムの制御方法
US10479275B2 (en) 2010-03-26 2019-11-19 Aisin Seiki Kabushiki Kaisha Vehicle peripheral observation device
CN105774656A (zh) * 2010-03-26 2016-07-20 爱信精机株式会社 车辆周边监视装置
US9919650B2 (en) 2010-03-26 2018-03-20 Aisin Seiki Kabushiki Kaisha Vehicle peripheral observation device
US9308863B2 (en) 2010-03-26 2016-04-12 Aisin Seiki Kabushiki Kaisha Vehicle peripheral observation device
JP2011217460A (ja) * 2010-03-31 2011-10-27 Aisin Aw Co Ltd 車両用充電支援装置、車両用充電支援方法、コンピュータプログラム
JP2012134586A (ja) * 2010-12-20 2012-07-12 Nissan Motor Co Ltd 車両周辺監視装置
JP2012216991A (ja) * 2011-03-31 2012-11-08 Fujitsu Ten Ltd 画像表示システム
JP2012256113A (ja) * 2011-06-07 2012-12-27 Komatsu Ltd 作業車両の周辺監視装置
US10321097B2 (en) 2011-06-07 2019-06-11 Komatsu Ltd. Perimeter monitoring device for work vehicle
JP2014180046A (ja) * 2011-06-07 2014-09-25 Komatsu Ltd 作業車両の周辺監視装置
CN103098112A (zh) * 2011-06-07 2013-05-08 株式会社小松制作所 作业车辆的周边监视装置
JP2012254660A (ja) * 2011-06-07 2012-12-27 Komatsu Ltd 作業車両の周辺監視装置
US9956915B2 (en) 2011-06-07 2018-05-01 Komatsu Ltd. Dump truck periphery monitoring apparatus
US9597997B2 (en) 2011-06-07 2017-03-21 Komatsu Ltd. Work vehicle periphery monitoring apparatus
WO2012169352A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置
WO2012169362A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置
WO2012169361A1 (ja) * 2011-06-07 2012-12-13 株式会社小松製作所 作業車両の周辺監視装置
CN103098112B (zh) * 2011-06-07 2016-10-12 株式会社小松制作所 作业车辆的周边监视装置
US9497422B2 (en) 2011-06-07 2016-11-15 Komatsu Ltd. Perimeter monitoring device for work vehicle
US9457719B2 (en) 2012-09-21 2016-10-04 Komatsu Ltd. Work vehicle periphery monitoring system and work vehicle
JP2014183497A (ja) * 2013-03-19 2014-09-29 Sumitomo Heavy Ind Ltd 作業機械用周辺監視装置
JP2014033469A (ja) * 2013-11-01 2014-02-20 Aisin Seiki Co Ltd 車両周辺監視装置
JP2014161087A (ja) * 2014-04-17 2014-09-04 Komatsu Ltd 作業車両用周辺監視システム及び作業車両
JP2014222877A (ja) * 2014-06-04 2014-11-27 株式会社小松製作所 作業車両の周辺監視装置
WO2016088151A1 (ja) * 2014-12-01 2016-06-09 日産自動車株式会社 車載用表示装置、車両及び表示方法
JP6068710B1 (ja) * 2016-05-30 2017-01-25 株式会社ネクスコ・エンジニアリング北海道 俯瞰画像調整装置および俯瞰画像調整プログラム
JP2017216489A (ja) * 2016-05-30 2017-12-07 株式会社ネクスコ・エンジニアリング北海道 俯瞰画像調整装置および俯瞰画像調整プログラム
JP2020182220A (ja) * 2016-09-20 2020-11-05 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成方法およびプログラム
WO2018055873A1 (ja) * 2016-09-20 2018-03-29 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
JP2018050277A (ja) * 2016-09-20 2018-03-29 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
US10587801B2 (en) 2016-09-20 2020-03-10 JVC Kenwood Corporation Bird's-eye view video generation device, bird'S-eye view video generation system, bird's-eye view video generation method, and non-transitory storage medium
JP7196881B2 (ja) 2016-09-20 2022-12-27 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置および俯瞰映像生成方法
JP2018050180A (ja) * 2016-09-21 2018-03-29 株式会社Ｊｖｃケンウッド 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
JP2017201789A (ja) * 2017-06-02 2017-11-09 富士通テン株式会社 画像処理装置、表示装置、携帯用表示装置、画像処理方法、表示装置の表示方法、携帯用表示装置の表示方法及びプログラム
JP2019071677A (ja) * 2019-01-28 2019-05-09 住友重機械工業株式会社 ショベル
JP2020188474A (ja) * 2019-01-28 2020-11-19 住友重機械工業株式会社 ショベル
JP7454461B2 (ja) 2019-01-28 2024-03-22 住友重機械工業株式会社 ショベル

Also Published As

Publication number Publication date
CN1878299A (zh) 2006-12-13
CN101489117A (zh) 2009-07-22
CN1878299B (zh) 2010-06-23
US20060274147A1 (en) 2006-12-07
US7592928B2 (en) 2009-09-22
CN101489117B (zh) 2015-04-29
EP1731366A1 (en) 2006-12-13

Similar Documents

Publication Publication Date Title
JP5408198B2 (ja) 映像表示装置及び映像表示方法
JP2006341641A (ja) 映像表示装置及び映像表示方法
US8044781B2 (en) System and method for displaying a 3D vehicle surrounding with adjustable point of view including a distance sensor
JP4956915B2 (ja) 映像表示装置及び映像表示方法
CN104210424B (zh) 增强的前方路缘观察系统
JP6014442B2 (ja) 画像生成装置、画像表示システム、および、画像生成方法
JP4907883B2 (ja) 車両周辺画像表示装置および車両周辺画像表示方法
CN103770706B (zh) 动态后视镜显示特征
WO2011043006A1 (ja) 制御装置および車両周囲監視装置
US11750768B2 (en) Display control apparatus
CN111201558B (zh) 用于示出车辆的周围环境的方法
CN104859538A (zh) 车辆图像显示系统中基于视觉的物体感测和突出显示
KR101097063B1 (ko) 사각 지대 표시 장치 및 방법
EP2631696B1 (en) Image generator
JP2005001570A (ja) 駐車支援装置
JP5516998B2 (ja) 画像生成装置
JP2006341641A5 (ja)
WO2012091476A2 (ko) 사각 지대 표시 장치 및 방법
JP2004114977A (ja) 移動体周辺監視装置
JP4192680B2 (ja) 移動体周辺監視装置
CN111891119A (zh) 一种自动泊车控制方法及系统
KR20210120398A (ko) 차량에 탑재된 CMS 사이드 디스플레이(Camera Monitoring System Side Display)를 이용하여 영상을 디스플레이하는 전자 장치 및 그 동작 방법
JP2011155651A (ja) 車両周辺画像表示装置および車両周辺画像表示方法
KR101295618B1 (ko) 사각 지대 표시 장치 및 방법
KR20180094717A (ko) Avm을 이용한 운전 지원 장치 및 시스템

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080325

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100921

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20101207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101215

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20101217

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110214

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110517