JP6673181B2 - 駐車支援装置およびその制御部 - Google Patents
駐車支援装置およびその制御部 Download PDFInfo
- Publication number
- JP6673181B2 JP6673181B2 JP2016245728A JP2016245728A JP6673181B2 JP 6673181 B2 JP6673181 B2 JP 6673181B2 JP 2016245728 A JP2016245728 A JP 2016245728A JP 2016245728 A JP2016245728 A JP 2016245728A JP 6673181 B2 JP6673181 B2 JP 6673181B2
- Authority
- JP
- Japan
- Prior art keywords
- parking
- vehicle
- mode
- positional relationship
- likelihood
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003384 imaging method Methods 0.000 claims description 25
- 238000005259 measurement Methods 0.000 claims description 21
- 238000001514 detection method Methods 0.000 claims description 20
- 238000000034 method Methods 0.000 description 30
- 230000004913 activation Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000005192 partition Methods 0.000 description 3
- 238000005299 abrasion Methods 0.000 description 2
- 238000002485 combustion reaction Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 239000013013 elastic material Substances 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 238000004148 unit process Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/586—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/25—Fusion techniques
- G06F18/253—Fusion techniques of extracted features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
- G06V10/806—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level of extracted features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Mechanical Engineering (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Traffic Control Systems (AREA)
Description
請求項1に記載の駐車支援装置は、
前記車両の周囲の画像に対応する画像情報を取得するように設けられた、撮像部(22)と、
前記撮像部により取得された前記画像情報を処理することで、前記画像中の特徴形状を認識するように設けられた、画像処理部(S46、S47)と、
前記駐車スペースの周囲に存在する障害物と前記車両との位置関係に対応する位置関係情報を取得するように設けられた、障害物検知部(S42、S43)と、
前記画像処理部により認識された前記特徴形状と、前記障害物検知部により取得された前記位置関係情報とに基づいて、前記駐車スペースへの前記車両の駐車態様を、並列駐車及び縦列駐車を含む複数の態様候補のうちから選択するように設けられた、駐車態様選択部(S575、S580、S585)と、
を備え、
前記駐車態様選択部は、前記障害物検知部により取得された前記位置関係情報に基づく前記態様候補の尤度と、前記特徴形状としての、白線、駐車車両のタイヤ、前記駐車車両のナンバープレートのうちの少なくともいずれか一つの認識結果に基づく前記態様候補の尤度とを統合することで、複数の前記態様候補の各々における最終的な尤度を算出し、算出した複数の前記態様候補の各々における前記最終的な尤度を比較することで、前記駐車態様を複数の前記態様候補のうちから選択するように構成されている。
請求項3に記載の、駐車支援装置の制御部(26)は、
前記車両の周囲の画像に対応する画像情報を取得するように設けられた撮像部(22)により取得された前記画像情報を処理することで、前記画像中の特徴形状を認識するように設けられた、画像処理部(S46、S47)と、
前記駐車スペースの周囲に存在する障害物と前記車両との位置関係に対応する位置関係情報を取得するように設けられた、障害物検知部(S42、S43)と、
前記画像処理部により認識された前記特徴形状と、前記障害物検知部により取得された前記位置関係情報とに基づいて、前記駐車スペースへの前記車両の駐車態様を、並列駐車及び縦列駐車を含む複数の態様候補のうちから選択するように設けられた、駐車態様選択部(S575、S580、S585)と、
を備え、
前記駐車態様選択部は、前記障害物検知部により取得された前記位置関係情報に基づく前記態様候補の尤度と、前記特徴形状としての、白線、駐車車両のタイヤ、前記駐車車両のナンバープレートのうちの少なくともいずれか一つの認識結果に基づく前記態様候補の尤度とを統合することで、複数の前記態様候補の各々における最終的な尤度を算出し、算出した複数の前記態様候補の各々における前記最終的な尤度を比較することで、前記駐車態様を複数の前記態様候補のうちから選択するように構成されている。
図1を参照すると、車両10は、いわゆる四輪自動車であって、平面視にて略矩形状の車体11を備えている。以下、車両中心線Lと直交し、車両10の車幅を規定する方向を、「車幅方向」と称する。車幅方向は、図1における左右方向となる。また、車両中心線Lと平行な方向における一方(図1における上方向)を「前方向」と称し、他方(図1における下方向)を「後方向」と称する。車両10及び車体11における前方向側を「前側」と称し、反対側を「後側」と称する。また、車両10及び車体11の、図1における右側を単に「右側」と称し、図1における左側を単に「左側」と称する。
以下、図2及び図3を用いて、駐車支援装置20における動作の概要について説明する。各図中、(i)は、駐車場PLに白線WL及び車止めCSが設けられている場合を示す。また、(ii)は、駐車場PL内の駐車スペースPSの周囲に、壁状立体物WAを含む検知障害物DOが存在する場合を示す。さらに、(iii)は、駐車スペースPSの周囲の駐車車両PVにて、ナンバープレートNP等の特徴形状が認識可能な場合を示す。
以下、本実施形態の構成による動作の具体例について、フローチャートを用いて説明する。明細書中の以下の説明、及び図示したフローチャートにおいて、「ステップ」を単に「S」と略記する。また、明細書中の以下の説明において、制御部26のCPUを、単に「CPU」と略称する。制御部26の不揮発性RAM等についても同様である。
本発明は上記実施形態に限定されるものではなく、上記実施形態に対しては適宜変更が可能である。以下、代表的な変形例について説明する。以下の変形例の説明においては、上記実施形態と異なる部分についてのみ説明する。また、上記実施形態と変形例とにおいて、互いに同一又は均等である部分には、同一符号が付されている。したがって、以下の変形例の説明において、上記実施形態と同一の符号を有する構成要素に関しては、技術的矛盾又は特段の追加説明なき限り、上記実施形態における説明が適宜援用され得る。
11 車体
20 駐車支援装置
21 測距センサ
22 撮像部
26 制御部
DO 検知障害物
PS 駐車スペース
WS 探査波
WR 受信波
Claims (4)
- 車両(10)に搭載されることで当該車両の駐車スペース(PS)への駐車を支援するように構成された、駐車支援装置(20)であって、
前記車両の周囲の画像に対応する画像情報を取得するように設けられた、撮像部(22)と、
前記撮像部により取得された前記画像情報を処理することで、前記画像中の特徴形状を認識するように設けられた、画像処理部(S46、S47)と、
前記駐車スペースの周囲に存在する障害物と前記車両との位置関係に対応する位置関係情報を取得するように設けられた、障害物検知部(S42、S43)と、
前記画像処理部により認識された前記特徴形状と、前記障害物検知部により取得された前記位置関係情報とに基づいて、前記駐車スペースへの前記車両の駐車態様を、並列駐車及び縦列駐車を含む複数の態様候補のうちから選択するように設けられた、駐車態様選択部(S575、S580、S585)と、
を備え、
前記駐車態様選択部は、前記障害物検知部により取得された前記位置関係情報に基づく前記態様候補の尤度と、前記特徴形状としての、白線、駐車車両のタイヤ、前記駐車車両のナンバープレートのうちの少なくともいずれか一つの認識結果に基づく前記態様候補の尤度とを統合することで、複数の前記態様候補の各々における最終的な尤度を算出し、算出した複数の前記態様候補の各々における前記最終的な尤度を比較することで、前記駐車態様を複数の前記態様候補のうちから選択するように構成された、駐車支援装置。 - 探査波を前記車両の外側に向けて発信するとともに、前記障害物による前記探査波の反射波を含み前記車両と前記障害物との距離に応じた強度を有する受信波を受信するように設けられた、測距センサ(21)をさらに備え、
前記障害物検知部は、前記測距センサによる前記受信波の受信結果に基づいて、前記位置関係情報を取得するように設けられた、
請求項1に記載の駐車支援装置。 - 車両(10)に搭載されることで当該車両の駐車スペース(PS)への駐車を支援するように構成された駐車支援装置(20)の制御部(26)であって、
前記車両の周囲の画像に対応する画像情報を取得するように設けられた撮像部(22)により取得された前記画像情報を処理することで、前記画像中の特徴形状を認識するように設けられた、画像処理部(S46、S47)と、
前記駐車スペースの周囲に存在する障害物と前記車両との位置関係に対応する位置関係情報を取得するように設けられた、障害物検知部(S42、S43)と、
前記画像処理部により認識された前記特徴形状と、前記障害物検知部により取得された前記位置関係情報とに基づいて、前記駐車スペースへの前記車両の駐車態様を、並列駐車及び縦列駐車を含む複数の態様候補のうちから選択するように設けられた、駐車態様選択部(S575、S580、S585)と、
を備え、
前記駐車態様選択部は、前記障害物検知部により取得された前記位置関係情報に基づく前記態様候補の尤度と、前記特徴形状としての、白線、駐車車両のタイヤ、前記駐車車両のナンバープレートのうちの少なくともいずれか一つの認識結果に基づく前記態様候補の尤度とを統合することで、複数の前記態様候補の各々における最終的な尤度を算出し、算出した複数の前記態様候補の各々における前記最終的な尤度を比較することで、前記駐車態様を複数の前記態様候補のうちから選択するように構成された、駐車支援装置の制御部。 - 前記障害物検知部は、探査波を前記車両の外側に向けて発信するとともに前記障害物による前記探査波の反射波を含み前記車両と前記障害物との距離に応じた強度を有する受信波を受信するように設けられた測距センサ(21)による前記受信波の受信結果に基づいて、前記位置関係情報を取得するように設けられた、
請求項3に記載の駐車支援装置の制御部。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016245728A JP6673181B2 (ja) | 2016-12-19 | 2016-12-19 | 駐車支援装置およびその制御部 |
PCT/JP2017/040494 WO2018116686A1 (ja) | 2016-12-19 | 2017-11-09 | 駐車支援装置 |
DE112017006366.3T DE112017006366T5 (de) | 2016-12-19 | 2017-11-09 | Parkunterstützungsvorrichtung |
US16/442,799 US10885356B2 (en) | 2016-12-19 | 2019-06-17 | Parking assisting apparatus and control unit |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016245728A JP6673181B2 (ja) | 2016-12-19 | 2016-12-19 | 駐車支援装置およびその制御部 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2018099935A JP2018099935A (ja) | 2018-06-28 |
JP2018099935A5 JP2018099935A5 (ja) | 2019-03-07 |
JP6673181B2 true JP6673181B2 (ja) | 2020-03-25 |
Family
ID=62627290
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016245728A Active JP6673181B2 (ja) | 2016-12-19 | 2016-12-19 | 駐車支援装置およびその制御部 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10885356B2 (ja) |
JP (1) | JP6673181B2 (ja) |
DE (1) | DE112017006366T5 (ja) |
WO (1) | WO2018116686A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7221669B2 (ja) * | 2018-12-04 | 2023-02-14 | 株式会社デンソー | 駐車支援装置 |
WO2020153317A1 (ja) | 2019-01-23 | 2020-07-30 | ソニーセミコンダクタソリューションズ株式会社 | 車載カメラ |
CN111845716B (zh) * | 2019-04-26 | 2024-04-05 | 现代摩比斯株式会社 | 停车辅助装置和方法、及车辆 |
KR20210008259A (ko) * | 2019-07-12 | 2021-01-21 | 현대자동차주식회사 | 주차 제어 장치, 그를 포함한 시스템 및 그 방법 |
DE102019216363A1 (de) * | 2019-10-24 | 2021-04-29 | Robert Bosch Gmbh | Verfahren zum Bereitstellen eines Signals zur Ansteuerung eines zumindest teilautomatisierten Fahrzeugs |
JP7467202B2 (ja) * | 2020-03-31 | 2024-04-15 | 本田技研工業株式会社 | 駐車支援システム |
JP2023048457A (ja) * | 2021-09-28 | 2023-04-07 | トヨタ自動車株式会社 | 駐車支援装置 |
GB2617838B (en) * | 2022-04-19 | 2024-04-10 | Aptiv Tech Ltd | Method of determining parking area layout |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS63191987A (ja) * | 1987-02-04 | 1988-08-09 | Daihatsu Motor Co Ltd | 車庫入れ・縦列駐車ガイド装置 |
JP3804161B2 (ja) * | 1997-03-25 | 2006-08-02 | 日産自動車株式会社 | 自動駐車装置および駐車誘導装置 |
JP2002243857A (ja) * | 2001-02-14 | 2002-08-28 | Nissan Motor Co Ltd | 周囲物体認識装置 |
JP4179285B2 (ja) * | 2005-01-12 | 2008-11-12 | トヨタ自動車株式会社 | 駐車支援装置 |
JP2007290433A (ja) | 2006-04-21 | 2007-11-08 | Denso Corp | 駐車支援システム |
JP4613881B2 (ja) | 2006-05-31 | 2011-01-19 | アイシン・エィ・ダブリュ株式会社 | 駐車案内装置 |
JP5126069B2 (ja) | 2006-12-28 | 2013-01-23 | 株式会社豊田自動織機 | 駐車支援装置、駐車支援装置部品、駐車支援方法、駐車支援プログラム、車両走行パラメータの算出方法及び算出プログラム、車両走行パラメータ算出装置並びに車両走行パラメータ算出装置部品 |
JP2010202018A (ja) | 2009-03-03 | 2010-09-16 | Alpine Electronics Inc | 運転支援装置、駐車向き提示方法、駐車向き提示プログラム |
JP5644200B2 (ja) * | 2010-06-16 | 2014-12-24 | 日産自動車株式会社 | 駐車支援システム |
JP2014031104A (ja) | 2012-08-03 | 2014-02-20 | Denso Corp | 駐車状態検出装置、図形コード配置方法、および駐車場 |
JP6473571B2 (ja) * | 2014-03-24 | 2019-02-20 | アルパイン株式会社 | Ttc計測装置およびttc計測プログラム |
JP2016101778A (ja) * | 2014-11-27 | 2016-06-02 | パナソニックIpマネジメント株式会社 | 駐車支援装置 |
KR102267562B1 (ko) * | 2015-04-16 | 2021-06-22 | 한국전자통신연구원 | 무인자동주차 기능 지원을 위한 장애물 및 주차구획 인식 장치 및 그 방법 |
-
2016
- 2016-12-19 JP JP2016245728A patent/JP6673181B2/ja active Active
-
2017
- 2017-11-09 DE DE112017006366.3T patent/DE112017006366T5/de active Pending
- 2017-11-09 WO PCT/JP2017/040494 patent/WO2018116686A1/ja active Application Filing
-
2019
- 2019-06-17 US US16/442,799 patent/US10885356B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20190303691A1 (en) | 2019-10-03 |
US10885356B2 (en) | 2021-01-05 |
DE112017006366T5 (de) | 2019-09-26 |
WO2018116686A1 (ja) | 2018-06-28 |
JP2018099935A (ja) | 2018-06-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6673181B2 (ja) | 駐車支援装置およびその制御部 | |
EP3867118B1 (en) | Lidar-based trailer tracking | |
CN108146503B (zh) | 车辆防撞 | |
WO2018198574A1 (ja) | 障害物検知装置 | |
US20180101720A1 (en) | Systems and methods for free space inference to break apart clustered objects in vehicle perception systems | |
US20150149076A1 (en) | Method for Determining a Course of a Traffic Lane for a Vehicle | |
US20200014898A1 (en) | Image processing apparatus, and image processing method | |
US11433886B2 (en) | System, vehicle and method for adapting a driving condition of a vehicle upon detecting an event in an environment of the vehicle | |
CN102673560A (zh) | 识别拐弯机动的方法和驾驶员辅助系统 | |
JP2019159427A (ja) | 車両制御装置、車両制御方法、およびプログラム | |
WO2019187716A1 (ja) | 駐車支援装置 | |
KR20170000569A (ko) | 차량의 충돌 감지 방법 | |
JP2018106479A (ja) | 駐車制御装置、プログラム、および記録媒体 | |
WO2019151156A1 (ja) | 物体検知装置および駐車支援装置 | |
EP3771620B1 (en) | Parking assistance device and control method of parking assistance device | |
JP6355161B2 (ja) | 車両用撮像装置 | |
JP6579144B2 (ja) | 障害物検知装置 | |
US20210370919A1 (en) | Information processing device and information processing method | |
JP2019096161A (ja) | 車両制御装置、車両制御方法、およびプログラム | |
US20230227027A1 (en) | Vehicle and control method thereof | |
CN110789519B (zh) | 交通工具停放位置的获取方法、装置、设备和存储介质 | |
KR20210138192A (ko) | 자동주차 장치의 제어방법 | |
US20230228592A1 (en) | System and Method for Updating High-Definition Maps for Autonomous Driving | |
CN115771505A (zh) | 用于运行具有挂车的牵引车的方法、设备和存储介质 | |
JP2022099705A (ja) | 走行支援方法および走行支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190118 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190118 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200217 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6673181 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |