JP5829980B2 - 路側物検出装置 - Google Patents
路側物検出装置 Download PDFInfo
- Publication number
- JP5829980B2 JP5829980B2 JP2012138141A JP2012138141A JP5829980B2 JP 5829980 B2 JP5829980 B2 JP 5829980B2 JP 2012138141 A JP2012138141 A JP 2012138141A JP 2012138141 A JP2012138141 A JP 2012138141A JP 5829980 B2 JP5829980 B2 JP 5829980B2
- Authority
- JP
- Japan
- Prior art keywords
- roadside object
- search range
- line
- edge
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 119
- 230000008859 change Effects 0.000 claims description 11
- 238000013213 extrapolation Methods 0.000 claims description 5
- 238000000034 method Methods 0.000 description 31
- 238000010586 diagram Methods 0.000 description 26
- 238000004364 calculation method Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 238000012937 correction Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000000605 extraction Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000007423 decrease Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012886 linear function Methods 0.000 description 3
- 239000004575 stone Substances 0.000 description 3
- 241000282326 Felis catus Species 0.000 description 2
- 230000004075 alteration Effects 0.000 description 2
- 238000007476 Maximum Likelihood Methods 0.000 description 1
- 230000001154 acute effect Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000009472 formulation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000001915 proofreading effect Effects 0.000 description 1
- 238000012887 quadratic function Methods 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2552/00—Input parameters relating to infrastructure
- B60W2552/25—Road altitude
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
- G06T2207/10021—Stereoscopic video; Stereoscopic image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
- G06T2207/20061—Hough transform
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30256—Lane; Road marking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30261—Obstacle
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Geometry (AREA)
- Signal Processing (AREA)
- Traffic Control Systems (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Mechanical Engineering (AREA)
Description
図2は、路側物検出装置100を含む運転支援システム500の概略構成図の一例を示す。運転支援システム500は、CAN(Controller Area Network)バスなどの車載LANを介して互いに接続された路側物検出装置100、運転支援ECU(Electronic Control Unit)200及び作動デバイス300を有している。
図3は、カメラコンピュータ13の機能ブロック図の一例を示す。カメラコンピュータ13は、ステレオ画像取得部21、歪補正・平行化部22、エッジ抽出部23、視差検出部24、路面検出部25、路面構造推定部26、段差判定部27、走路パラメータ推定部28、探索範囲設定部29、及び、エッジ線分検出部30を有する。
ステレオ画像取得部21は、右カメラ11が周期的に撮影した画像及び左カメラ12が周期的に撮影した画像の画像データをそれぞれ取得し、バッファなどに記憶する。
歪補正・平行化部22は、予め取得してあるカメラの外部パラメータ、及び、内部パラメータを用いて左右の画像の歪みを補正し、平行化する。内部パラメータは、例えば右カメラ11と左カメラ12それぞれのレンズの歪みや歪曲収差、撮像素子の歪み、焦点距離などをいう。レンズの歪みは、例えば、レンズの設計値に基づき生成された補正変換テーブルを参照して、画像データを補正することで低減される。歪曲収差は半径方向の歪曲収差のモデルを用いたパラメータ推定に基づき画像データを補正することで低減される。
視差を検出する際には、画素Plに画素Prが対応することを探索する。2つの画像が平行化されていることが分かっているので、路側物検出装置100は、水平方向と平行にのみ画像データを探索すればよい。
a>bの場合 SP=(a−b)/2(a−b)
a≦bの場合 SP=−(b−c)/2(b−c)
視差算出部27は、整数視差とサブピクセル視差SPの和を注目画素の視差に決定する。このように画素単位で視差が求められると、画素単位で画素に映っている物までの距離を算出することができる。
路面検出部25は、視差画像から路面の構造を推定する。このため、まず、画像から路面の領域だけを推定する。なお、路面の領域とは、縁石や歩道帯縁などの歩行者が走行する領域と、車両が走行する車道を区別することなく、立体物がない平坦な領域であれば路面の領域とする。
路面構造推定部26は、車両に対し近傍領域のみの視差情報を用いて路面構造の推定を行う。近傍領域のみの画像データを用いることで、誤差が含まれやすい遠方の視差情報を用いることなく路面構造を推定できる。近傍領域とは、視差情報の精度に信頼性がある領域であり、ステレオカメラの品質や設計に依存する。また、日中と夜間の違い、又は、晴天と雨天の違い等により視差情報の精度が影響される場合、ある車両に搭載された同一のステレオカメラであっても、近傍領域が一定とはならない場合がある。したがって、近傍領域は視差情報の精度が閾値以上のある領域(画像のy座標の下端から所定画素数)に対し、条件が悪化した場合を考慮して所定のマージンを設けた領域(つまり、視差情報の精度が閾値以上のある領域よりもやや狭い領域)である。また、照度センサなどにより日中か夜間かを検出し、また、レインセンサなどにより天候を検出して、近傍領域を可変に設定してもよい。こうすることで、視差情報の精度に影響を与える状況に応じて、最大限、遠方までの視差情報を利用することができる。
D=(f×B)/(Δd)
fはレンズの焦点距離、Bは基線長、Δdは視差(画素数×撮像素子の画素ピッチ)である。
X=xD/f
Y=−yD/f
X、Yが分かればDが分かっているのでZを求めることができる。これにより路面のY座標が得られるので、Z軸方向の路面の構造を定式化することができる。
Y=a×Z2+b×Z+c …(1)
距離DをZに、距離Dから求めたYを式(1)に代入し、最小二乗法などを用いることで、a、b、cを決定することができる。なお、回帰的に係数を求めることができれば、最小二乗法の他、ニュートン法、ガウスニュートン法などを用いてもよい。
段差判定部27は、路面(縁石、歩道帯縁と車道の区別がされていない)から段差を検出する。ここまでの処理により路面と推定された領域の画素では、距離D、高さY、及び、横位置Xが求められている。また、路面構造が求められている。
走路パラメータ推定部28は、道路モデルを設定し道路モデルの係数を決定することで走路の走路パラメータを推定する。道路はクロソイド曲線やBスプラインモデルに基づき設計されることが多い。縁石や歩道帯縁は道路に沿って配置されるので、特徴点も道路モデルに沿って検出されていると予想できる。
X=X0+θ×Z+0.5×c×Z2 …(2)
x0は、Z=ゼロにおいて、XZ平面の原点から特徴点までの距離である。θは、右カメラ11又は左カメラ12の光軸と縁石又は歩道帯縁とのなす角(車両のヨー角)である。θは正面方向に対し右向きを正とする。cは道路の曲率である。cはXZ平面の定義から左カーブで負、右カーブで正となる。式(2)によれば、x0を起点に、ヨー角によるずれを補正し(車両が右向きのヨーを有する場合、白線は左方向に傾斜して撮影されるのでその分を補正する)、曲率cをzの二乗で作用させている。
探索範囲設定部29は、係数が決定された道路モデルを用いてエッジの探索範囲を設定する。エッジの探索範囲とは、遠方領域の縁石や歩道帯縁のエッジを探索するための画像処理範囲である。
エッジ線分検出部30は、探索範囲からエッジ線分を検出する。すでにエッジ抽出部がエッジを抽出しているので、探索範囲のエッジは検出されている。これらのエッジには、近傍領域の特徴部と連続したエッジが含まれているので、エッジ線分検出部30は近傍領域の特徴部と連続したエッジ線分を検出する。
図16はテンプレートマッチングの処理手順を説明するフローチャート図の一例であり、図17はテンプレートマッチングを説明する図の一例である。
白線検出部33は、右カメラ11又は左カメラ12が撮影した画像から白線を検出する。ステレオカメラの場合、どちらか一方のカメラの画像から白線を検出してもよく、右カメラ11と左カメラ12の画像の共通領域から白線を検出してもよい。
図21は、探索範囲設定部29による探索範囲の設定を説明する図の一例である。縁石よりも車道側に白線が標示されている。縁石又は歩道帯縁はこの白線よりも歩道側にあるはずである。
エッジ線分検出部30は、探索範囲からエッジ線分を検出し、そのエッジ線分と白線を比較して縁石や歩道帯縁の特徴点のエッジ線分を絞り込む。
・白線との平行度が閾値以上
・白線との距離が所定範囲内
平行度を求めるため、白線に一次関数を適用して最小二乗法などで関数化する。エッジ線分は直線なので、エッジ線分と白線の傾きを比較することで平行度を特定できる。また、白線との距離は、エッジ線分上の任意の点から引いたエッジ線分に垂直な線が白線と交わる点を求め、エッジ線分上の点との2点間の距離として求めることができる。
先行車検出部34は予め用意されているテンプレートを用いて、画像中の先行車両を検出する。また、オプティカルフローを利用してもよい。例えば、画素値の変化が連続的ないくつかのグループにグループ分けして、路面に対しゼロより大きい速度で移動し、自車両の前方にあるグループは先行車両であると推定する。また、先行車をミリ波などのレーダ装置で検出してもよいが、先行車の横位置の検出精度は画像から求めた場合の方が高いことが多い。
図25は、探索範囲設定部29による探索範囲の設定を説明する図の一例である。先行車が走行しているが、縁石又は歩道帯縁は先行車よりも歩道側にあるはずである。
12 左カメラ
13 カメラコンピュータ
21 ステレオ画像取得部
22 歪補正・平行化部
23 エッジ抽出部
24 視差算出部
25 路面検出部
26 路面構造推定部
27 段差判定部
28 走路パラメータ推定部
29 探索範囲設定部
30 エッジ線分検出部
32 テンプレートマッチング部
33 白線検出部
34 先行車検出部
100 白線検出装置
Claims (6)
- 複数の撮影画像を用いて路側物を検出する路側物検出装置であって、
複数の前記撮影画像を解析して、自車両からの距離が閾値未満の近傍領域における撮影対象の高さ情報を検出する高さ情報検出手段と、
前記近傍領域の高さ情報から路側物により生じる路面の高さの変化を検出する高さ変化検出手段と、
前記高さの変化が検出された位置を前記路側物の特徴点に決定し、前記特徴点を道路モデルに従って自車両からの距離が前記閾値以上の遠方領域に外挿する特徴点外挿手段と、
前記特徴点外挿手段が前記特徴点を外挿して得られる仮想線に基づいて前記路側物の探索範囲を設定し、前記探索範囲から前記遠方領域の前記路側物を検出する路側物検出手段と、を有し、
前記路側物検出手段は、前記近傍領域の前記路側物を含むテンプレート画像を切り出し、前記テンプレート画像により前記探索範囲にテンプレートマッチングを施すことで、前記遠方領域の前記路側物を検出することを特徴とする路側物検出装置。 - 前記路側物検出手段は、
前記仮想線を、該仮想線に対し対称又は非対称になるように所定の距離だけ平行移動することで前記路側物の前記探索範囲を設定する探索範囲設定手段と、
前記探索範囲のエッジを検出し、前記エッジから1つ以上の線分を生成し、前記線分の数及び長さの少なくともいずれかに基づき前記遠方領域にある前記路側物の前記特徴点から生成された前記線分を特定する線分特定手段と、を有する、
ことを特徴とする請求項1記載の路側物検出装置。 - 複数の前記撮影画像の少なくとも1つから、自車両が走行する車線を区分する車線区分標示を検出する車線区分標示検出手段を有し、
前記路側物検出手段は、
前記仮想線を、前記仮想線と進行方向に対し左側の車線区分標示との間で前記仮想線から離間する方向に平行移動すると共に、前記方向と反対方向に前記仮想線を該仮想線から離間する方向に所定の距離だけ平行移動することで前記路側物の前記探索範囲を設定する探索範囲設定手段と、
前記探索範囲のエッジを検出し、前記エッジから1つ以上の線分を生成し、前記線分の数及び長さの少なくともいずれかに基づき前記遠方領域にある前記路側物の前記特徴点から生成された前記線分を特定する線分特定手段と、を有する、
ことを特徴とする請求項1記載の路側物検出装置。 - 少なくとも先行車両の横位置と共に該先行車両を検出する先行車両検出手段を有し、
前記路側物検出手段は、
前記仮想線を、前記仮想線と前記先行車両との間で前記仮想線から離間する方向に平行移動すると共に、前記方向と反対方向に前記仮想線を該仮想線から離間する方向に所定の距離だけ平行移動することで前記路側物の前記探索範囲を設定する探索範囲設定手段と、
前記探索範囲のエッジを検出し、前記エッジから1つ以上の線分を生成し、前記線分の数及び長さの少なくともいずれかに基づき前記遠方領域にある前記路側物の前記特徴点から生成された前記線分を特定する線分特定手段と、を有する、
ことを特徴とする請求項1記載の路側物検出装置。 - 前記路側物検出手段は、前記探索範囲のうち自車両に近い領域からテンプレートマッチングを行い、前記近傍領域の前記テンプレート画像により前記遠方領域の前記路側物を検出した場合、検出した前記路側物を含む領域を新たな前記テンプレート画像に設定し、前記探索範囲のうち次に自車両に近い領域からテンプレートマッチングを行う、ことを特徴とする請求項1に記載の路側物検出装置。
- 前記線分特定手段は、前記遠方領域にある前記路側物の前記特徴点から生成された前記線分が2本の場合は歩道帯縁があると推定し、3本の場合は縁石があると推定する、
ことを特徴とする請求項2、3、4いずれか1項記載の路側物検出装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012138141A JP5829980B2 (ja) | 2012-06-19 | 2012-06-19 | 路側物検出装置 |
CN201280073243.7A CN104520894A (zh) | 2012-06-19 | 2012-10-26 | 路旁物检测装置 |
EP12879593.7A EP2863358A4 (en) | 2012-06-19 | 2012-10-26 | DEVICE FOR DETECTING OBJECTS AT THE ROAD BORDER |
US14/402,197 US9676330B2 (en) | 2012-06-19 | 2012-10-26 | Roadside object detection apparatus |
PCT/JP2012/077808 WO2013190719A1 (ja) | 2012-06-19 | 2012-10-26 | 路側物検出装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012138141A JP5829980B2 (ja) | 2012-06-19 | 2012-06-19 | 路側物検出装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014002608A JP2014002608A (ja) | 2014-01-09 |
JP5829980B2 true JP5829980B2 (ja) | 2015-12-09 |
Family
ID=49768336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012138141A Active JP5829980B2 (ja) | 2012-06-19 | 2012-06-19 | 路側物検出装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US9676330B2 (ja) |
EP (1) | EP2863358A4 (ja) |
JP (1) | JP5829980B2 (ja) |
CN (1) | CN104520894A (ja) |
WO (1) | WO2013190719A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11145063B2 (en) | 2017-09-19 | 2021-10-12 | Subaru Corporation | Image processing apparatus |
Families Citing this family (59)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012131474A1 (en) * | 2011-03-29 | 2012-10-04 | Jura Trade, Limited | Method and apparatus for generating and authenticating security documents |
DE102012112104A1 (de) * | 2012-12-11 | 2014-06-12 | Conti Temic Microelectronic Gmbh | Verfahren und vorrichtung zur befahrbarkeitsanalyse |
DE102014210411A1 (de) * | 2013-09-06 | 2015-03-12 | Robert Bosch Gmbh | Verfahren und Steuer- und Erfassungseinrichtung zum Plausibilisieren einer Falschfahrt eines Kraftfahrzeugs |
JP5874756B2 (ja) * | 2014-02-07 | 2016-03-02 | トヨタ自動車株式会社 | 区画線検出システム及び区画線検出方法 |
JP2015179368A (ja) * | 2014-03-19 | 2015-10-08 | 株式会社日本自動車部品総合研究所 | 走行区画線認識装置及び走行区画線認識プログラム |
US9443163B2 (en) * | 2014-05-14 | 2016-09-13 | Mobileye Vision Technologies Ltd. | Systems and methods for curb detection and pedestrian hazard assessment |
JP6412934B2 (ja) * | 2014-05-28 | 2018-10-24 | 京セラ株式会社 | 物体検出装置、物体検出装置を設置した車両およびプログラム |
KR102159355B1 (ko) * | 2014-06-13 | 2020-09-23 | 현대모비스 주식회사 | 차량자동제어방법 및 차량자동제어장치 |
JP6046666B2 (ja) * | 2014-06-24 | 2016-12-21 | トヨタ自動車株式会社 | 走路境界推定装置及び走路境界推定方法 |
JP6295859B2 (ja) * | 2014-07-08 | 2018-03-20 | 株式会社デンソー | 車載システム、情報処理装置、及びプログラム |
JP6357050B2 (ja) * | 2014-08-19 | 2018-07-11 | 日野自動車株式会社 | 運転支援システム |
DE102014014662A1 (de) * | 2014-09-19 | 2016-03-24 | Mekra Lang North America, Llc | Anzeigeeinrichtung für Fahrzeuge, insbesondere Nutzfahrzeuge |
KR20160054825A (ko) * | 2014-11-07 | 2016-05-17 | 현대모비스 주식회사 | 주행 가능 공간 판단 장치 및 방법 |
JP6548893B2 (ja) * | 2014-11-18 | 2019-07-24 | 日立オートモティブシステムズ株式会社 | 走行路認識装置及びそれを用いた走行支援システム |
KR102384175B1 (ko) * | 2015-07-29 | 2022-04-08 | 주식회사 만도모빌리티솔루션즈 | 차량의 카메라 장치 |
MX370052B (es) * | 2015-08-04 | 2019-11-29 | Nissan Motor | Dispositivo de deteccion de escalon y metodo de deteccion de escalon. |
JP6477340B2 (ja) * | 2015-08-04 | 2019-03-06 | 日産自動車株式会社 | 道路境界検出装置、自己位置推定装置及び道路境界検出方法 |
CA2994645C (en) | 2015-08-04 | 2019-05-07 | Nissan Motor Co., Ltd. | Step detection device and step detection method |
JP6462544B2 (ja) * | 2015-09-17 | 2019-01-30 | 株式会社東芝 | 推定装置、方法及びプログラム |
JP6618767B2 (ja) * | 2015-10-27 | 2019-12-11 | 株式会社デンソーテン | 画像処理装置および画像処理方法 |
KR101755870B1 (ko) * | 2015-10-28 | 2017-07-19 | 현대자동차주식회사 | 차선의 오인식 정보를 보정하는 방법 |
DE102016201304A1 (de) * | 2016-01-28 | 2017-08-03 | Robert Bosch Gmbh | Vorrichtung und Verfahren zum Erfassen eines Randsteins in einer Umgebung eines Fahrzeugs sowie System zur Randsteinkontrolle für ein Fahrzeug |
EP3416132B1 (en) | 2016-02-08 | 2021-06-16 | Ricoh Company, Ltd. | Image processing device, object recognition device, device control system, and image processing method and program |
JP6544257B2 (ja) * | 2016-02-09 | 2019-07-17 | 株式会社リコー | 情報処理システム、情報処理方法及び情報処理プログラム |
JP6662449B2 (ja) * | 2016-03-09 | 2020-03-11 | 株式会社ニコン | 検出装置、検出システム、検出方法、及び検出プログラム |
EP3217374A1 (en) * | 2016-03-10 | 2017-09-13 | Volvo Car Corporation | Method and system for estimating a boundary of a road technical field |
JP6723079B2 (ja) | 2016-06-08 | 2020-07-15 | 日立オートモティブシステムズ株式会社 | 物体距離検出装置 |
RU2742222C2 (ru) * | 2016-07-12 | 2021-02-03 | Ниссан Мотор Ко., Лтд. | Способ управления движением транспортного средства и устройство управления движением транспортного средства |
US10558222B2 (en) * | 2016-07-21 | 2020-02-11 | Mobileye Vision Technologies Ltd. | Navigating a vehicle using a crowdsourced sparse map |
CN109643367B (zh) * | 2016-07-21 | 2023-08-08 | 御眼视觉技术有限公司 | 用于自主车辆导航的众包和分发稀疏地图以及车道测量的方法、系统和可读介质 |
US9990728B2 (en) * | 2016-09-09 | 2018-06-05 | Adobe Systems Incorporated | Planar region guided 3D geometry estimation from a single image |
JP6794243B2 (ja) * | 2016-12-19 | 2020-12-02 | 日立オートモティブシステムズ株式会社 | 物体検出装置 |
JP6740116B2 (ja) * | 2016-12-23 | 2020-08-12 | 株式会社Zmp | 移動車両 |
US11273830B2 (en) * | 2017-06-15 | 2022-03-15 | Hitachi Astemo, Ltd. | Vehicle control device |
WO2019031137A1 (ja) | 2017-08-07 | 2019-02-14 | 日立オートモティブシステムズ株式会社 | 路側物検出装置、路側物検出方法及び路側物検出システム |
JP6960827B2 (ja) * | 2017-11-08 | 2021-11-05 | フォルシアクラリオン・エレクトロニクス株式会社 | 路面領域検出装置 |
JP6923472B2 (ja) * | 2018-03-23 | 2021-08-18 | ヤンマーパワーテクノロジー株式会社 | 障害物検知システム |
US20200049513A1 (en) * | 2018-08-10 | 2020-02-13 | Delphi Technologies, Llc | Positioning system |
JP7134780B2 (ja) * | 2018-08-13 | 2022-09-12 | 日立Astemo株式会社 | ステレオカメラ装置 |
EP3620332B1 (en) * | 2018-09-05 | 2021-03-10 | Volvo Car Corporation | Driver assistance system and method for vehicle flank safety |
EP3859273B1 (en) * | 2018-09-30 | 2023-09-06 | Great Wall Motor Company Limited | Method for constructing driving coordinate system, and application thereof |
US10735716B2 (en) * | 2018-12-04 | 2020-08-04 | Ford Global Technologies, Llc | Vehicle sensor calibration |
US10915762B1 (en) | 2018-12-07 | 2021-02-09 | Waymo Llc | Sidewalk detection for pedestrian behavior modeling |
JP7203586B2 (ja) * | 2018-12-14 | 2023-01-13 | 株式会社デンソーテン | 画像処理装置および画像処理方法 |
CN109815879B (zh) * | 2019-01-18 | 2021-05-07 | 北京地平线机器人技术研发有限公司 | 目标检测方法、装置和电子设备 |
US11370329B2 (en) * | 2019-02-27 | 2022-06-28 | Toyota Jidosha Kabushiki Kaisha | Control apparatus of vehicle seat |
US11238604B1 (en) * | 2019-03-05 | 2022-02-01 | Apple Inc. | Densifying sparse depth maps |
JP7167834B2 (ja) * | 2019-04-24 | 2022-11-09 | 中西金属工業株式会社 | 障害物・段差検知システム、及び移動体の注意喚起システム |
JP7156218B2 (ja) * | 2019-09-06 | 2022-10-19 | トヨタ自動車株式会社 | 運転支援装置 |
KR102255924B1 (ko) * | 2019-09-27 | 2021-05-25 | 주식회사 서울로보틱스 | 레인을 검출하는 차량 및 방법 |
CN110654381B (zh) | 2019-10-09 | 2021-08-31 | 北京百度网讯科技有限公司 | 用于控制车辆的方法和装置 |
JP2021103132A (ja) * | 2019-12-25 | 2021-07-15 | 株式会社ジェイテクト | 位置関係検出システム |
JP7380196B2 (ja) * | 2019-12-25 | 2023-11-15 | 株式会社ジェイテクト | 位置関係検出装置 |
JP7225149B2 (ja) * | 2020-02-25 | 2023-02-20 | 日立Astemo株式会社 | 処理装置 |
JP7482054B2 (ja) * | 2020-02-27 | 2024-05-13 | フォルシアクラリオン・エレクトロニクス株式会社 | 画像処理装置及び画像処理方法 |
US11634124B2 (en) * | 2020-08-26 | 2023-04-25 | Carvi Inc. | Method of recognizing median strip and predicting risk of collision through analysis of image |
US11741718B2 (en) * | 2021-05-18 | 2023-08-29 | Hitachi Astemo, Ltd. | Light interference detection during vehicle navigation |
JP7568579B2 (ja) | 2021-05-21 | 2024-10-16 | 株式会社Soken | 縁石検出装置 |
JP7356690B1 (ja) * | 2023-05-31 | 2023-10-05 | 株式会社レグラス | 作業車両の走行制御装置 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07271978A (ja) | 1994-03-29 | 1995-10-20 | Toshiba Corp | 画像処理装置 |
JP3866328B2 (ja) * | 1996-06-06 | 2007-01-10 | 富士重工業株式会社 | 車両周辺立体物認識装置 |
JPH10307627A (ja) * | 1997-05-07 | 1998-11-17 | Fuji Heavy Ind Ltd | 自律走行作業車の作業境界検出装置及び倣い走行制御装置 |
JPH1114376A (ja) | 1997-06-20 | 1999-01-22 | Nissan Motor Co Ltd | 車両用走行路検出装置 |
JP3920535B2 (ja) * | 2000-06-12 | 2007-05-30 | 株式会社日立製作所 | 車両検出方法及び車両検出装置 |
JP2002189075A (ja) * | 2000-12-20 | 2002-07-05 | Fujitsu Ten Ltd | 道路上方静止物検知方法 |
JP4635746B2 (ja) | 2005-07-05 | 2011-02-23 | 株式会社豊田中央研究所 | 画像認識装置 |
JP4835201B2 (ja) * | 2006-02-27 | 2011-12-14 | トヨタ自動車株式会社 | 立体形状検出装置 |
JP4801821B2 (ja) * | 2007-09-21 | 2011-10-26 | 本田技研工業株式会社 | 道路形状推定装置 |
JP4775391B2 (ja) * | 2008-03-18 | 2011-09-21 | 株式会社デンソー | 障害物検出装置 |
US8605947B2 (en) * | 2008-04-24 | 2013-12-10 | GM Global Technology Operations LLC | Method for detecting a clear path of travel for a vehicle enhanced by object detection |
US8803966B2 (en) * | 2008-04-24 | 2014-08-12 | GM Global Technology Operations LLC | Clear path detection using an example-based approach |
US8751154B2 (en) * | 2008-04-24 | 2014-06-10 | GM Global Technology Operations LLC | Enhanced clear path detection in the presence of traffic infrastructure indicator |
JP2010020476A (ja) * | 2008-07-09 | 2010-01-28 | Nissan Motor Co Ltd | 物体検出装置及び物体検出方法 |
JP5074365B2 (ja) * | 2008-11-28 | 2012-11-14 | 日立オートモティブシステムズ株式会社 | カメラ装置 |
JP5441549B2 (ja) | 2009-07-29 | 2014-03-12 | 日立オートモティブシステムズ株式会社 | 道路形状認識装置 |
JP5475138B2 (ja) * | 2010-09-08 | 2014-04-16 | トヨタ自動車株式会社 | 移動物予測装置、仮想可動物予測装置、プログラム、移動物予測方法、及び仮想可動物予測方法 |
US8791806B2 (en) * | 2011-11-28 | 2014-07-29 | Trimble Navigation Limited | Real-time detection of hazardous driving |
JP2013142972A (ja) | 2012-01-10 | 2013-07-22 | Toyota Motor Corp | 走行路認識装置 |
JP2013161190A (ja) | 2012-02-02 | 2013-08-19 | Toyota Motor Corp | 物体認識装置 |
-
2012
- 2012-06-19 JP JP2012138141A patent/JP5829980B2/ja active Active
- 2012-10-26 US US14/402,197 patent/US9676330B2/en active Active
- 2012-10-26 CN CN201280073243.7A patent/CN104520894A/zh active Pending
- 2012-10-26 WO PCT/JP2012/077808 patent/WO2013190719A1/ja active Application Filing
- 2012-10-26 EP EP12879593.7A patent/EP2863358A4/en not_active Withdrawn
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11145063B2 (en) | 2017-09-19 | 2021-10-12 | Subaru Corporation | Image processing apparatus |
Also Published As
Publication number | Publication date |
---|---|
EP2863358A4 (en) | 2016-07-06 |
WO2013190719A1 (ja) | 2013-12-27 |
EP2863358A1 (en) | 2015-04-22 |
US9676330B2 (en) | 2017-06-13 |
JP2014002608A (ja) | 2014-01-09 |
US20150165972A1 (en) | 2015-06-18 |
CN104520894A (zh) | 2015-04-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5829980B2 (ja) | 路側物検出装置 | |
JP5880703B2 (ja) | 車線区分標示検出装置、運転支援システム | |
JP3862015B2 (ja) | 車載用レーダ装置 | |
US10755116B2 (en) | Image processing apparatus, imaging apparatus, and device control system | |
JP4676373B2 (ja) | 周辺認識装置、周辺認識方法、プログラム | |
EP2767927B1 (en) | Road surface information detection apparatus, vehicle device control system employing road surface information detection apparatus, and carrier medium of road surface information detection program | |
JP4930046B2 (ja) | 路面判別方法および路面判別装置 | |
RU2636120C2 (ru) | Устройство обнаружения трехмерных объектов | |
JP5561064B2 (ja) | 車両用対象物認識装置 | |
EP1403615B1 (en) | Apparatus and method for processing stereoscopic images | |
CN104899554A (zh) | 一种基于单目视觉的车辆测距方法 | |
WO2017159056A1 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP2017054296A (ja) | 走行支援装置及び走行支援方法 | |
JP2013250907A (ja) | 視差算出装置、視差算出方法及び視差算出用プログラム | |
JP6753134B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及び画像処理プログラム | |
KR20180092765A (ko) | 탑뷰 영상을 이용한 차선인식 장치 및 방법 | |
JP2007264712A (ja) | 車線検出装置 | |
JP6733302B2 (ja) | 画像処理装置、撮像装置、移動体機器制御システム、画像処理方法、及びプログラム | |
JP2015148887A (ja) | 画像処理装置、物体認識装置、移動体機器制御システム及び物体認識用プログラム | |
JP2013161190A (ja) | 物体認識装置 | |
KR102629639B1 (ko) | 차량용 듀얼 카메라 장착 위치 결정 장치 및 방법 | |
JP2020126304A (ja) | 車外物体検出装置 | |
KR102681321B1 (ko) | 듀얼 카메라를 이용하여 거리를 계산하는 고속도로 주행지원 시스템의 성능 평가 장치와 그 방법 | |
JP7486556B2 (ja) | 区画線認識装置 | |
KR102588013B1 (ko) | 듀얼 카메라를 이용하여 거리를 계산하는 적응형 크루즈 컨트롤 시스템의 성능 평가 장치와 그 제어 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20150714 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150914 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151006 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151023 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5829980 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |