[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2009205608A - Lane recognizing device, and program for recognizing vehicle and lane - Google Patents

Lane recognizing device, and program for recognizing vehicle and lane Download PDF

Info

Publication number
JP2009205608A
JP2009205608A JP2008049650A JP2008049650A JP2009205608A JP 2009205608 A JP2009205608 A JP 2009205608A JP 2008049650 A JP2008049650 A JP 2008049650A JP 2008049650 A JP2008049650 A JP 2008049650A JP 2009205608 A JP2009205608 A JP 2009205608A
Authority
JP
Japan
Prior art keywords
lane mark
determination value
lane
reliability
mark detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008049650A
Other languages
Japanese (ja)
Other versions
JP4978863B2 (en
Inventor
Tomoyoshi Aoki
友好 青木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2008049650A priority Critical patent/JP4978863B2/en
Publication of JP2009205608A publication Critical patent/JP2009205608A/en
Application granted granted Critical
Publication of JP4978863B2 publication Critical patent/JP4978863B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a lane recognizing device, and a program for recognizing a vehicle and lane capable of shortening a period in which recognition of a relative position of the vehicle and a lane mark is inhibited while securing reliability of lane mark detection. <P>SOLUTION: The lane recognizing device comprises a lane mark position recognizing means 13, and a reliability restoration determination value setting means 12. The lane mark position recognizing means 13 cancels recognition of the relative position when a first lane mark detection rate as an average detection rate of lane marks by a lane mark detection means 11 in a plurality of predetermined immediate cycles is not more than a reliability degradation determination value, and then, restarts the recognition of the relative position when the first lane mark detection rate reaches more than a reliability restoration determination value higher than the reliability degradation determination value. The reliability restoration determination value setting means 12 sets the reliability restoration determination value depending on a form of a change of a local detection rate of the lane mark by the lane mark detection means 11 in the plurality of the predetermined immediate cycles when the first lane mark detection rate drops to not more than the reliability degradation determination value. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、道路の車線を区分するレーンマークを検出して、車両とレーンマークとの相対位置を認識する車線認識装置、車両及び車線認識用プログラムに関する。   The present invention relates to a lane recognition device, a vehicle, and a lane recognition program for detecting a lane mark that divides a road lane and recognizing a relative position between the vehicle and the lane mark.

従来より、車両に搭載されたカメラにより所定周期毎に道路画像を取得して、各道路画像から検出されたレーンマークの画像部分の候補をある短時間分集め、各画像部分のカメラ座標を実空間座標に変換することによって、レーンマークと自車両との相対距離等を算出する技術が提案されている(例えば、非特許文献1参照)。
峯田憲一、鵜浦清純、池田哲夫,「レーンキープアシストシステムにおける白線認識システムの開発」,HONDA R&D Techical Review Vol.12 No.1,April 2000
Conventionally, road images are acquired at predetermined intervals by a camera mounted on a vehicle, and lane mark image portion candidates detected from each road image are collected for a short period of time, and the camera coordinates of each image portion are implemented. There has been proposed a technique for calculating a relative distance between a lane mark and the host vehicle by converting to spatial coordinates (for example, see Non-Patent Document 1).
Kenichi Kajita, Kiyozumi Kajiura, Tetsuo Ikeda, “Development of White Line Recognition System in Lane Keep Assist System”, HONDA R & D Technical Review Vol. 12 No. 1, April 2000

上述した従来の技術においては、連続する所定周期毎に取得された道路画像から検出されたレーンマークの画像部分の候補を、ある短時間分集めて実空間座標に変換することによって、レーンマークの実空間位置を認識している。そして、この場合に、レーンマークの実空間位置の認識の信頼性の尺度として、図6に示したように、直前の所定期間における平均的なレーンマークの検出率が一般的に採用されている。   In the above-described conventional technology, candidates for the image portion of the lane mark detected from the road images acquired at successive predetermined intervals are collected for a short period of time and converted into real space coordinates. Recognizes real space position. In this case, as shown in FIG. 6, an average lane mark detection rate in the immediately preceding predetermined period is generally employed as a measure of the reliability of recognition of the real space position of the lane mark. .

図6は、所定周期T10毎に実行されるレーンマーク検出処理の結果を、レーンマークが検出されたときを○で示し、レーンマークが検出されなかったときを×で示している。また、レーンマーク検出の信頼性が高いと判断して、レーンマークと車両との相対位置の認識を実行したときを○で示し、レーンマーク検出の信頼性が低いと判断して、レーンマークと車両との相対位置の認識を停止したときを×で示している。 6, the result of the lane mark detection processing is executed at predetermined cycle T 10, when the lane mark is detected shown in ○, and indicates when the lane mark is not detected in ×. Also, when the reliability of the lane mark detection is judged to be high and the relative position between the lane mark and the vehicle is recognized, a circle is shown, and the lane mark detection reliability is judged to be low. The case where the recognition of the relative position to the vehicle is stopped is indicated by x.

そして、レーンマーク検出の信頼性を、判断時点tp1の直前のn個分の周期の期間(t11〜tp1)において、レーンマークが検出された周期の個数がm以上であるときに、レーンマーク検出の信頼性が高いと判断して、レーンマークと車両との相対位置を認識している。 Then, the reliability of lane mark detection is determined when the number of periods in which lane marks are detected is equal to or greater than m in the period period (t 11 to t p1 ) for n periods immediately before the determination time point t p1 . It is determined that the reliability of lane mark detection is high, and the relative position between the lane mark and the vehicle is recognized.

この場合、レーンマークが検出されない状態(×が続いた状態、〜t14)から、レーンマークが検出される状態(×から○に移行、t15〜)に切り換わったときに、最低でもm×T10に相当する時間が経過するまでは、レーンマーク検出の信頼性が高くなったと判断されないため、レーンマークと車両との相対位置の認識を開始することができない。 In this case, when switching from a state where no lane mark is detected (a state where x continues, to t 14 ) to a state where a lane mark is detected (shift from x to ○, t 15 to), at least m Until the time corresponding to × T 10 has elapsed, it is not determined that the reliability of lane mark detection has increased, and therefore, recognition of the relative position between the lane mark and the vehicle cannot be started.

そのため、例えば車両が交差点を通過する場合や、インターチェンジでの分岐・合流地点を走行する場合のように、レーンマークが敷設されていない箇所を一時的に走行して、レーンマーク検出の信頼性の低下によりレーンマークと車両との相対位置の認識を停止したときに、その後、レーンマークが敷設された状態に復帰しても、レーンマーク検出の信頼性が高いと判断されるようになるまでにある程度の時間を要する。   Therefore, for example, when a vehicle passes through an intersection or travels at a branch / junction point at an interchange, the vehicle travels temporarily in a place where no lane mark is laid, and the reliability of lane mark detection is improved. When the recognition of the relative position between the lane mark and the vehicle is stopped due to the decrease, the lane mark detection is judged to be highly reliable even if the lane mark is restored to the laid state after that. It takes a certain amount of time.

その結果、レーンマークと車両との相対位置の認識結果に基いて、車線維持のためのステアリングのアシスト制御や、車線からの逸脱警報制御等を行うことができない期間が長くなるという不都合があった。   As a result, there is an inconvenience that the period during which the steering assist control for maintaining the lane or the deviation warning control from the lane cannot be performed is based on the recognition result of the relative position between the lane mark and the vehicle. .

本発明は上記背景を鑑みてなされたものであり、レーンマークと車両との相対位置の認識が禁止される期間を、レーンマーク検出の信頼性の高さを確保した上で短縮することができる車線認識装置、車両、及び車線認識用プログラムを提供することを目的とする。   The present invention has been made in view of the above background, and the period during which the recognition of the relative position between the lane mark and the vehicle is prohibited can be shortened while ensuring the high reliability of lane mark detection. An object is to provide a lane recognition device, a vehicle, and a lane recognition program.

本発明は上記目的を達成するためになされたものであり、本発明の車線認識装置は、車両に搭載されたカメラにより撮像される車両周囲の道路の画像から、道路の車線を区分するレーンマークを検出する処理を、所定周期毎に実行するレーンマーク検出手段と、前記レーンマーク検出手段によるレーンマークの検出結果に基いて、レーンマークと前記車両との相対位置を認識し、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの平均的な検出率である第1のレーンマーク検出率が、所定の信頼性低下判定値以下となったときに、前記相対位置の認識を中止し、その後、前記第1のレーンマーク検出率が該信頼性低下判定値よりも高い信頼性回復判定値以上となったときに、前記相対位置の認識を再開するレーンマーク位置認識手段と、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する信頼性回復判定値設定手段とを備えたことを特徴とする。   The present invention has been made to achieve the above object, and a lane recognition device according to the present invention is a lane mark for distinguishing road lanes from a road image around the vehicle imaged by a camera mounted on the vehicle. Lane mark detecting means for executing a process for detecting the lane mark and a relative position between the lane mark and the vehicle based on a lane mark detection result by the lane mark detecting means, When the first lane mark detection rate, which is the average detection rate of lane marks by the lane mark detection means in the predetermined period, is less than or equal to a predetermined reliability decrease determination value, the recognition of the relative position is stopped. After that, when the first lane mark detection rate becomes equal to or higher than the reliability recovery determination value higher than the reliability decrease determination value, the level at which the recognition of the relative position is resumed. Mark position recognizing means, and when the first lane mark detection rate is equal to or lower than the reliability decrease determination value, the lane mark local detection rate by the lane mark detection means in the plurality of immediately preceding predetermined periods And a reliability recovery determination value setting means for setting the reliability recovery determination value according to the change mode.

かかる本発明において、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときの、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様は、詳細は後述するが、その後のレーンマーク検出の信頼性の回復状況をある程度反映したものとなる。そこで、前記信頼性回復判定値設定手段は、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときの、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する。   In the present invention, when the first lane mark detection rate is equal to or lower than the reliability decrease determination value, the local detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before is determined. Although the details of the mode of change will be described later, it reflects to some extent the reliability recovery status of the subsequent lane mark detection. Accordingly, the reliability recovery determination value setting means is configured to use the lane mark detection means in the plurality of immediately preceding predetermined cycles when the first lane mark detection rate is equal to or lower than the reliability decrease determination value. The reliability recovery determination value is set in accordance with the manner in which the local detection rate changes.

そして、これにより、前記信頼性回復判定値を一定値とする場合に比べて、レーンマーク検出の信頼性の高さを確保した上で、前記レーンマーク位置認識手段によるレーンマークと車両との相対位置の認識が再開されるまでの期間を短縮することができる。   As a result, as compared with the case where the reliability recovery determination value is set to a constant value, the reliability of lane mark detection is ensured, and the relative lane mark by the lane mark position recognition unit is compared with the vehicle. A period until the position recognition is restarted can be shortened.

また、前記信頼性回復判定値設定手段は、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前半期間での前記レーンマーク検出手段によるレーンマークの検出率である第2のレーンマーク検出率が、後半期間での前記レーンマーク検出手段によるレーンマークの検出率である第3のレーンマーク検出率よりも所定レベル以上高いか否かを判断し、前記第2のレーンマーク検出率が前記第3のレーンマーク検出率よりも前記所定レベル以上高いときは、前記信頼性回復判定値を第1の信頼性回復判定値に設定し、前記第2のレーンマーク検出率が前記第3のレーンマーク検出率よりも前記所定レベル以上高くないときには、前記信頼性回復判定値を前記第1の信頼性回復判定値よりも高い第2の信頼性回復判定値に設定することを特徴とする。   The reliability recovery determination value setting means may detect the lane mark in the first half period of the plurality of the predetermined cycles immediately before when the first lane mark detection rate is equal to or lower than the reliability decrease determination value. Whether the second lane mark detection rate, which is the lane mark detection rate by the means, is higher than a predetermined level than the third lane mark detection rate, which is the lane mark detection rate by the lane mark detection means in the second half period. When the second lane mark detection rate is higher than the third lane mark detection rate by the predetermined level or more, the reliability recovery determination value is set to the first reliability recovery determination value. When the second lane mark detection rate is not higher than the predetermined level by the second lane mark detection rate, the reliability recovery determination value is referred to as the first reliability recovery determination value. And setting to a higher second reliability recovery determination value.

かかる本発明において、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前半期間での局所的な前記レーンマーク検出手段によるレーンマークの検出率である第2のレーンマーク検出率が、後半期間での局所的な前記レーンマーク検出手段によるレーンマークの検出率である第3のレーンマーク検出率よりも所定レベル以上高いときは、レーンマークの局所的な検出率が急激に低下しているため、レーンマークが急に途切れた状況にあると想定することができる。   In the present invention, when the first lane mark detection rate becomes equal to or lower than the reliability decrease determination value, the lane mark by the local lane mark detection means in the first half period of the plurality of the predetermined periods immediately before is determined. When the second lane mark detection rate that is the detection rate of the second lane mark is higher than the third lane mark detection rate that is the detection rate of the lane mark by the local lane mark detection means in the second half period, by a predetermined level or more, Since the local detection rate of the lane mark is rapidly decreasing, it can be assumed that the lane mark is suddenly interrupted.

そして、このように、レーンマークが急に途切れるのは、レーンマークが敷設されていない箇所(交差点、インターチェンジでの分岐・合流箇所等)を一時的に走行している場合である可能性が高く、この場合には、このような箇所を通過した後、レーンマークが敷設された道路を走行する状況に速やかに復帰すると予想される。そこで、この場合には、前記信頼性回復判定値設定手段により、前記信頼性回復判定値を低い方の前記第1の信頼性回復判定値に設定することによって、レーンマークが検出される状況となったときに、速やかに前記レーンマーク位置認識手段によるレーンマークと車両の相対位置の認識を再開することができる。   In this way, the lane mark is suddenly interrupted when there is a high possibility that the lane mark is temporarily traveling in a place where the lane mark is not laid (intersection, intersection / intersection, etc.). In this case, after passing through such a place, it is expected that the vehicle will promptly return to the situation where it travels on the road where the lane mark is laid. Therefore, in this case, a lane mark is detected by setting the reliability recovery determination value to the lower first reliability recovery determination value by the reliability recovery determination value setting means. When this happens, the recognition of the relative position between the lane mark and the vehicle by the lane mark position recognizing means can be resumed promptly.

そして、このように前記信頼性回復判定値を低く設定しても、交差点の通過等により、レーンマークが敷設された道路を走行する状況が継続して、前記レーンマーク検出手段によるレーンマーク検出の信頼性が高くなると想定されるため、レーンマーク検出の信頼性の高さを確保することが除できる。   Even if the reliability recovery judgment value is set to a low value in this way, the situation of traveling on the road where the lane mark is laid continues due to the passage of an intersection, etc., and the lane mark detection means detects the lane mark. Since the reliability is assumed to be high, it can be excluded to ensure the high reliability of lane mark detection.

一方、前記第2のレーンマーク検出率が前記第3のレーンマーク検出率よりも前記所定レベル以上高くないときには、レーンマークが掠れているときのように、レーンマークが検出し難い状況が継続していると想定することができる。   On the other hand, when the second lane mark detection rate is not higher than the predetermined level by more than the third lane mark detection rate, a situation in which the lane mark is difficult to detect continues as when the lane mark is blurred. Can be assumed.

そして、このようにレーンマークが掠れてレーンマークが検出し難くなった状況は、例えば、レーンマークの補修が終了した区間に至るまで継続すると予想される。そのため、この場合には、前記信頼性回復判定値設定手段により、前記信頼性回復判定値を高い方の前記第2の信頼性回復判定値に設定することによって、レーンマーク検出の信頼性が低い状況で前記レーンマーク位置認識手段によるレーンマークと車両との相対位置の認識が再開されることを防止して、該相対位置の認識の信頼性を維持することができる。   The situation in which the lane mark is in such a manner that it is difficult to detect the lane mark is expected to continue, for example, until the lane mark repair is completed. Therefore, in this case, the reliability of the lane mark detection is low by setting the reliability recovery determination value to the higher second reliability recovery determination value by the reliability recovery determination value setting means. In this situation, the recognition of the relative position between the lane mark and the vehicle by the lane mark position recognition unit can be prevented from being resumed, and the reliability of the recognition of the relative position can be maintained.

また、前記信頼性回復判定値設定手段は、前記信頼性回復判定値を前記第1の信頼性回復判定値に設定した後、所定時間内に前記第1のレーンマーク検出率が前記第1の信頼性回復判定値以上とならなかったときには、前記信頼性回復判定値を前記第2の信頼性回復判定値に設定することを特徴とする。   The reliability recovery determination value setting means sets the first lane mark detection rate within the predetermined time after setting the reliability recovery determination value to the first reliability recovery determination value. The reliability recovery determination value is set to the second reliability recovery determination value when the reliability recovery determination value is not greater than or equal to.

かかる本発明において、前記信頼性回復判定値設定手段により前記信頼性回復判定値を前記第1の信頼性回復判定値に設定した後、所定時間内に前記第1のレーンマーク検出率が前記第1の信頼性回復判定値以上とならなかったときには、前記レーンマーク検出手段によるレーンマークの検出がし難い状況が継続していると想定することができる。そこで、この場合は、前記信頼性回復判定値設定手段により、前記信頼性回復判定値を前記第1の信頼性回復判定値よりも高い前記第2の信頼性回復判定値に設定することによって、レーンマーク検出の信頼性が低い状況で前記レーンマーク位置認識手段によるレーンマークと車両との相対位置の認識が再開されることを防止して、該相対位置の認識の信頼性を維持することができる。   In the present invention, after the reliability recovery determination value is set to the first reliability recovery determination value by the reliability recovery determination value setting means, the first lane mark detection rate is set to the first reliability within a predetermined time. When the reliability recovery judgment value of 1 or more is not reached, it can be assumed that the situation where it is difficult to detect the lane mark by the lane mark detection means continues. Therefore, in this case, by setting the reliability recovery determination value to the second reliability recovery determination value higher than the first reliability recovery determination value by the reliability recovery determination value setting means, It is possible to prevent the recognition of the relative position between the lane mark and the vehicle by the lane mark position recognition unit in a situation where the reliability of the lane mark detection is low, and maintain the reliability of the recognition of the relative position. it can.

次に、本発明の車両は、カメラと、前記カメラにより撮像される自車両の周囲の道路の画像から、道路の車線を区分するレーンマークを検出する処理を、所定周期毎に実行するレーンマーク検出手段と、前記レーンマーク検出手段によるレーンマークの検出結果に基いて、レーンマークと自車両との相対位置を認識し、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの平均的な検出率である第1のレーンマーク検出率が、所定の信頼性低下判定値以下となったときに、前記相対位置の認識を中止し、その後、前記第1のレーンマーク検出率が該信頼性低下判定値よりも高い信頼性回復判定値以上となったときに、前記相対位置の認識を再開するレーンマーク位置認識手段と、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する信頼性回復判定値設定手段とを備えたことを特徴とする。   Next, the vehicle according to the present invention executes a process for detecting a lane mark that divides a road lane from a camera and an image of a road around the host vehicle captured by the camera at predetermined intervals. Based on the detection result of the lane mark by the detection means and the lane mark detection means, the relative position between the lane mark and the host vehicle is recognized, and the average of the lane marks by the lane mark detection means in a plurality of immediately preceding predetermined periods When the first lane mark detection rate, which is a typical detection rate, falls below a predetermined reliability decrease determination value, the recognition of the relative position is stopped, and then the first lane mark detection rate is Lane mark position recognition means for recognizing the relative position when the reliability recovery determination value is higher than the reliability decrease determination value, and the first lane mark detection rate When the reliability drop determination value is equal to or lower than the reliability decrease determination value, the reliability recovery determination value is set according to a mode of a change in the local detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before. And a reliability recovery judgment value setting means for setting.

かかる本発明によれば、上述した本発明の車線認識装置と同様に、前記信頼性回復判定値設定手段は、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときの、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する。   According to the present invention, similarly to the lane recognition device of the present invention described above, the reliability recovery determination value setting means is configured such that when the first lane mark detection rate is equal to or lower than the reliability decrease determination value. The reliability recovery determination value is set in accordance with the change in the local detection rate of the lane mark by the lane mark detection means in the plurality of immediately preceding predetermined cycles.

そして、これにより、前記信頼性回復判定値を一定値とする場合に比べて、レーンマーク検出の信頼性の高さを確保した上で、前記レーンマーク位置認識手段によるレーンマークと車両との相対位置の認識が再開されるまでの期間を短縮することができる。   As a result, as compared with the case where the reliability recovery determination value is set to a constant value, the reliability of lane mark detection is ensured, and the relative lane mark by the lane mark position recognition unit is compared with the vehicle. A period until the position recognition is restarted can be shortened.

また、本発明の車線認識用プログラムは、車両に搭載されたカメラの撮像画像のデータにアクセスする手段を有するコンピュータを、前記カメラにより撮像される車両の周囲の道路の画像から、道路の車線を区分するレーンマークを検出する処理を、所定周期毎に実行するレーンマーク検出手段と、前記レーンマーク検出手段によるレーンマークの検出結果に基いて、レーンマークと前記車両との相対位置を認識し、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの平均的な検出率である第1のレーンマーク検出率が、所定の信頼性低下判定値以下となったときに、前記相対位置の認識を中止し、その後、前記第1のレーンマーク検出率が該信頼性低下判定値よりも高い信頼性回復判定値以上となったときに、前記相対位置の認識を再開するレーンマーク位置認識手段と、前記コンピュータを、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する信頼性回復判定値設定手段として機能させることを特徴とする。   Further, the lane recognition program of the present invention uses a computer having means for accessing data of a captured image of a camera mounted on a vehicle to determine a lane of the road from an image of a road around the vehicle captured by the camera. A process for detecting the lane mark to be classified is executed at predetermined intervals, and based on the detection result of the lane mark by the lane mark detection means, the relative position between the lane mark and the vehicle is recognized, When the first lane mark detection rate, which is the average detection rate of the lane mark by the lane mark detection unit in the plurality of immediately preceding predetermined cycles, is less than or equal to a predetermined reliability decrease determination value, the relative position When the first lane mark detection rate becomes equal to or higher than the reliability recovery determination value higher than the reliability decrease determination value Lane mark position recognizing means for recognizing the relative position, and the computer, when the first lane mark detection rate is equal to or lower than the reliability decrease determination value, in a plurality of immediately preceding predetermined cycles. The lane mark detection unit functions as a reliability recovery determination value setting unit that sets the reliability recovery determination value in accordance with a change in the local detection rate of the lane mark.

かかる本発明の車線認識用プログラムを前記コンピュータに実行させることによって、上述した本発明の車線認識装置及び車両における前記レーンマーク検出手段と、前記レーンマーク位置認識と、前記信頼性回復判定値設定手段を構成することができる。   By causing the computer to execute the lane recognition program of the present invention, the lane recognition device of the present invention and the lane mark detection means, the lane mark position recognition, and the reliability recovery determination value setting means of the vehicle described above. Can be configured.

本発明の実施の形態の一例について、図1〜図5を参照して説明する。図1を参照して、車線認識装置10は、車両1(本発明の車両)に搭載して使用され、車両1の前方を撮像するカメラ2により撮像される道路の画像から、走行車線を区分するために道路に敷設されたレーンマークを検出して、レーンマークと車両1との相対位置を認識するものである。   An example of an embodiment of the present invention will be described with reference to FIGS. Referring to FIG. 1, a lane recognition device 10 is used by being mounted on a vehicle 1 (vehicle of the present invention), and classifies a traveling lane from a road image captured by a camera 2 that images the front of the vehicle 1. For this purpose, the lane mark laid on the road is detected and the relative position between the lane mark and the vehicle 1 is recognized.

また、車線認識装置10により認識されたレーンマークと車両1との相対位置のデータは、車両1のECU(Electronic Control Unit)20に出力される。ECU20は、レーンマークと車両1との相対位置に基いて、車両1が走行車線内に維持されるように、ステアリングをアシスト駆動する車線維持制御と、車両1が走行車線から逸脱しそうな状況となったときに、警報(図示しないスピーカからの音声出力等による)を行なう車線逸脱警報制御とを実行する。   Further, data on the relative position between the lane mark recognized by the lane recognition device 10 and the vehicle 1 is output to an ECU (Electronic Control Unit) 20 of the vehicle 1. Based on the relative position between the lane mark and the vehicle 1, the ECU 20 performs lane maintenance control for assisting driving of the steering so that the vehicle 1 is maintained in the traveling lane, and a situation in which the vehicle 1 is likely to deviate from the traveling lane. When this happens, lane departure warning control is performed to give a warning (by voice output from a speaker (not shown), etc.).

次に、図2を参照して、車線認識装置10は、カメラ2により撮像された車両前方の道路の画像から、レーンマーク(白線、黄線、キャッツアイ、Botts Dots等)を検出するレーンマーク検出手段11と、レーンマーク検出手段11によるレーンマーク検出の信頼性が回復したことを判定するための信頼性回復判定値を設定する信頼性回復判定値設定手段12と、レーンマーク検出手段11によるレーンマーク検出の信頼性を判断し、レーンマーク検出の信頼性が高いときにレーンマークと車両との相対位置を認識するレーンマーク位置認識手段13と、レーンマーク検出手段11によるレーンマーク検出の有無を示すデータを格納するリングバッファ14とを備えている。   Next, referring to FIG. 2, the lane recognition device 10 detects a lane mark (white line, yellow line, cat's eye, Bots Dots, etc.) from the road image ahead of the vehicle imaged by the camera 2. By detection means 11, reliability recovery determination value setting means 12 for setting a reliability recovery determination value for determining that the reliability of lane mark detection by lane mark detection means 11 has been recovered, and lane mark detection means 11 Lane mark position recognition means 13 for determining the reliability of lane mark detection and recognizing the relative position between the lane mark and the vehicle when the lane mark detection reliability is high, and whether or not the lane mark detection means 11 detects lane mark detection And a ring buffer 14 for storing data indicating.

車線認識装置10は、マイクロコンピュータ(本発明のコンピュータに相当する)等により構成された電子ユニットであり、該マイクロコンピュータに本発明の車線認識用プログラムを実行させることによって、該マイクロコンピュータが、レーンマーク検出手段11と、信頼性回復判定値設定12と、レーンマーク位置認識手段13として機能する。   The lane recognition device 10 is an electronic unit configured by a microcomputer (corresponding to the computer of the present invention) or the like, and by causing the microcomputer to execute the lane recognition program of the present invention, the microcomputer It functions as mark detection means 11, reliability recovery determination value setting 12, and lane mark position recognition means 13.

レーンマーク検出手段11は、車線認識装置10の制御周期(本発明の所定周期に相当する)毎にカメラ2により車両前方を撮像して道路の画像を取得し、該画像から抽出したエッジ点に対するハフ変換等の直線抽出処理を行ってレーンマークの画像部分を検出する処理を実行する。そして、図5(a)に示したように、直前のn個分の制御周期におけるレーンマークの検出結果(レーンマーク有り/レーンマーク無し)が、サイズn(本実施形態ではn=30)のリングバッファ14に順次格納される。   The lane mark detection means 11 captures the front of the vehicle with the camera 2 at every control period (corresponding to a predetermined period of the present invention) of the lane recognition device 10 to acquire a road image, and the edge point extracted from the image is detected. A straight line extraction process such as a Hough transform is performed to detect a lane mark image portion. As shown in FIG. 5A, the lane mark detection result (with lane mark / without lane mark) in the immediately preceding n control cycles has a size n (n = 30 in this embodiment). The data is sequentially stored in the ring buffer 14.

また、レーンマーク位置認識手段13は、レーンマーク検出手段11により検出されたレーンマークの画像部分のカメラ座標を実空間座標に変換して、実空間上の車両1とレーンマークとの相対位置を認識する。   The lane mark position recognizing unit 13 converts the camera coordinates of the image portion of the lane mark detected by the lane mark detecting unit 11 into real space coordinates, and determines the relative position between the vehicle 1 and the lane mark in the real space. recognize.

さらに、レーンマーク位置認識手段13は、レーンマーク位置検出手段11によるレーンマーク検出の信頼性を判断する。そして、レーンマーク検出の信頼性が高いと判断したときにのみ、レーンマーク位置検出手段11によるレーンマークの検出結果に基く車両1とレーンマークとの相対位置を認識し、レーンマーク検出の信頼性が低いと判断したときには、レーンマーク位置検出手段11によるレーンマークの検出結果に基く車両1とレーンマークとの相対位置の認識を停止する。   Further, the lane mark position recognition unit 13 determines the reliability of lane mark detection by the lane mark position detection unit 11. Only when it is determined that the reliability of the lane mark detection is high, the relative position between the vehicle 1 and the lane mark based on the detection result of the lane mark by the lane mark position detection means 11 is recognized, and the reliability of the lane mark detection. When it is determined that the lane mark is low, the recognition of the relative position between the vehicle 1 and the lane mark based on the lane mark detection result by the lane mark position detection unit 11 is stopped.

以下、図3〜図4に示したフローチャートに従って、レーンマーク位置認識手段13によるレーンマーク検出の信頼性の判断と、この判断結果に基く、車両1とレーンマークとの相対位置認識の実行と停止の切換えの処理、及び信頼性回復判定値設定手段12による信頼性回復判定値の設定処理について説明する。図3〜図4に示したフローチャートによる処理は、車線認識装置10の制御周期毎に繰り返し実行される。   Hereinafter, according to the flowcharts shown in FIGS. 3 to 4, the determination of the reliability of the lane mark detection by the lane mark position recognition means 13, and the execution and stop of the relative position recognition of the vehicle 1 and the lane mark based on the determination result. Switching processing and reliability recovery determination value setting processing by the reliability recovery determination value setting means 12 will be described. The processes according to the flowcharts shown in FIGS. 3 to 4 are repeatedly executed every control cycle of the lane recognition device 10.

図3のSTEP1で、レーンマーク検出手段11によるレーンマークの検出結果(レーンマーク検出有り/レーンマーク検出無し)を示すデータが、リングバッファ14に格納される。続くSTEP2〜STEP5はレーンマーク位置認識手段13による処理であり、レーンマーク位置認識手段13は、STEP2で、リングバッファ14に格納されたデータから、以下の式(1)により直前のn個分の制御周期における平均的なレーンマーク検出率Rt(本発明の第1のレーンマーク検出率に相当する)を算出する。   In STEP 1 of FIG. 3, data indicating the lane mark detection result (with lane mark detection / without lane mark detection) by the lane mark detection unit 11 is stored in the ring buffer 14. Subsequent STEP2 to STEP5 are processes by the lane mark position recognizing means 13, and the lane mark position recognizing means 13 is the data corresponding to the last n pieces of data from the data stored in the ring buffer 14 in STEP2 according to the following equation (1). An average lane mark detection rate Rt (corresponding to the first lane mark detection rate of the present invention) in the control cycle is calculated.

Figure 2009205608
Figure 2009205608

但し、Rt:直前のn個分の制御周期における平均的なレーンマーク検出率、n:リングバッファのサイズ(本実施の形態では30)、m:レーンマーク検出有りを示すデータの格納個数。   Where Rt: average lane mark detection rate in the last n control cycles, n: ring buffer size (30 in this embodiment), m: number of data stored indicating lane mark detection.

続くSTEP3で、レーンマーク位置認識手段13は、前回の制御周期におけるレーンマーク検出の信頼性の判断がOKであったか否かを判断する。そして、前回の制御周期における信頼性の判断がOKであったときはSTEP4に進み、レーンマーク位置認識手段13は、レーンマーク検出率Rtが信頼性低下判定値Th2(本実施の形態では50%に設定される)よりも高いか否かを判断する。   In subsequent STEP 3, the lane mark position recognizing means 13 determines whether or not the determination of the reliability of the lane mark detection in the previous control cycle is OK. When the reliability determination in the previous control cycle is OK, the process proceeds to STEP 4 where the lane mark position recognition unit 13 determines that the lane mark detection rate Rt has a reliability decrease determination value Th2 (50% in this embodiment). It is determined whether or not it is higher.

レーンマーク検出率が信頼性低下判定値Th2よりも高かったときはSTEP5に進み、レーンマーク位置認識手段13は、信頼性OKを通知するデータをECU20に出力する。また、レーンマーク位置認識手段13は、レーンマーク検出手段11によるレーンマークの画像部分の検出結果に基いて、実空間上の車両1とレーンマークとの相対位置を認識し、該相対位置のデータをECU20に出力する。   When the lane mark detection rate is higher than the reliability decrease determination value Th2, the process proceeds to STEP5, and the lane mark position recognizing means 13 outputs data for notifying the reliability OK to the ECU 20. The lane mark position recognizing unit 13 recognizes the relative position between the vehicle 1 and the lane mark in the real space based on the detection result of the image portion of the lane mark by the lane mark detecting unit 11, and the relative position data. Is output to the ECU 20.

そして、車線認識装置10から信頼OKを通知するデータと、車両1とレーンマークとの相対位置のデータとを受信したECU20は、上述した車線維持制御と車線逸脱警報制御を実行する。   And ECU20 which received the data which notify reliability OK from the lane recognition apparatus 10, and the data of the relative position of the vehicle 1 and a lane mark performs lane maintenance control and lane departure warning control which were mentioned above.

一方、STEP4でレーンマーク検出率Rtが信頼性低下判定値Th2以下であったときには、図4のSTEP30に進む。図4のSTEP30〜STEP32及びSTEP40は、信頼性回復判定値設定手段12による処理である。   On the other hand, when the lane mark detection rate Rt is equal to or lower than the reliability decrease determination value Th2 in STEP 4, the process proceeds to STEP 30 in FIG. STEP 30 to STEP 32 and STEP 40 in FIG. 4 are processes by the reliability recovery determination value setting means 12.

信頼性回復判定値設定手段12は、STEP30で、図5(b)に示したように、以下の式(2)により、リングバッファ14の前半期間(過去側のn/2個の格納データ分)における局所的なレーンマーク検出率Rf(本発明の第2のレーンマーク検出率に相当する)を求めると共に、以下の式(3)により、リングバッファ14の後半期間(現在側のn/2個の格納データ分)における局所的なレーンマーク検出率Rb(本発明の第3のレーンマーク検出率に相当する)を求める。   As shown in FIG. 5B, the reliability recovery determination value setting unit 12 determines the first half period of the ring buffer 14 (the amount of n / 2 pieces of stored data on the past side) according to the following equation (2). ) For the local lane mark detection rate Rf (corresponding to the second lane mark detection rate of the present invention), and the second half period (n / 2 on the current side) of the ring buffer 14 by the following equation (3): Local lane mark detection rate Rb (corresponding to the third lane mark detection rate of the present invention) in the stored data).

Figure 2009205608
Figure 2009205608

但し、Rf:リングバッファ14の前半期間における局所的なレーンマーク検出率、n2:リングバッファのサイズn(本実施の形態では30)の1/2、m2:リングバッファ14の前半期間(過去側のn/2個の格納データ分)におけるレーンマーク検出有りを示すデータの格納個数。   Rf: local lane mark detection rate in the first half period of the ring buffer 14, n2: half of the ring buffer size n (30 in this embodiment), m2: first half period of the ring buffer 14 (past side) The number of stored data indicating the presence of lane mark detection in (n / 2 stored data).

Figure 2009205608
Figure 2009205608

但し、Rb:リングバッファ14の後半期間における局所的なレーンマーク検出率、n1:リングバッファのサイズn(本実施の形態では30)の1/2、m1:リングバッファ14の後半期間(現在側のn/2個の格納データ分)におけるレーンマーク検出有りを示すデータの格納個数。   However, Rb: local lane mark detection rate in the latter half period of the ring buffer 14, n1: half of the ring buffer size n (30 in this embodiment), m1: the latter half period of the ring buffer 14 (current side) The number of stored data indicating the presence of lane mark detection in (n / 2 stored data).

そして、レーンマーク位置認識手段13は、リングバッファ14の後半部分におけるレーンマーク検出率Rbが10%よりも低く、且つ、リングバッファ14の前半部分におけるレーンマーク検出率Rfが90%よりも高いか否かを判断する。なお、この判断における90%と10%との差が、本発明の所定レベルに相当する。   The lane mark position recognizing means 13 determines whether the lane mark detection rate Rb in the second half of the ring buffer 14 is lower than 10% and the lane mark detection rate Rf in the first half of the ring buffer 14 is higher than 90%. Judge whether or not. The difference between 90% and 10% in this determination corresponds to the predetermined level of the present invention.

ここで、リングバッファ14の後半部分におけるレーンマーク検出率Rbが10%よりも低く、且つ、リングバッファ14の前半部分におけるレーンマーク検出率Rfが90%よりも高くなっているときは、レーンマークが検出し易い状態から検出し難い状態に急激に切り換わったと想定することができる。   Here, when the lane mark detection rate Rb in the second half of the ring buffer 14 is lower than 10% and the lane mark detection rate Rf in the first half of the ring buffer 14 is higher than 90%, the lane mark Can be assumed to have suddenly switched from a state that is easy to detect to a state that is difficult to detect.

そして、このように、レーンマークが検出し易い状態から検出し難い状態に急激に切り換わるのは、例えば、車両1が交差点やインターチェンジでの分岐箇所・合流箇所のように、レーンマークが敷設されていない箇所に差し掛かった場合である。そして、この場合には、レーンマークが敷設されていない箇所を走行するのはごく短時間であり、レーンマークが敷設された車線内を走行する状態に速やかに復帰すると想定される。   In this way, the lane mark is laid down, for example, at the intersection or intersection at the intersection or interchange where the lane mark suddenly switches from the state where it is easy to detect to the state where it is difficult to detect. This is a case where a point that has not been reached is reached. In this case, it is assumed that it is a very short time to travel in a place where no lane mark is laid, and it is assumed that the vehicle quickly returns to a state where it travels in the lane where the lane mark is laid.

そのため、この場合にはSTEP31に進み、信頼性回復判定値設定手段12は、信頼性回復判定値Th1を60%(本発明の第1の信頼性回復判定値に相当する)に設定する。そして、これにより、後述するレーンマーク検出の信頼性回復の判断において、信頼性OKとなり易い状態にしている。   Therefore, in this case, the process proceeds to STEP 31, and the reliability recovery determination value setting means 12 sets the reliability recovery determination value Th1 to 60% (corresponding to the first reliability recovery determination value of the present invention). As a result, in the determination of the reliability recovery of the lane mark detection described later, a state in which the reliability is likely to be achieved is obtained.

ここで、図5(a)を参照して、レーンマーク検出手段11によりレーンマークが検出されていない状態が継続してから、レーンマークが検出される状態に切り換わったときに、信頼性回復判定値Th1が80%に設定されていたときには、レーンマークが検出される状態に切り換わってから、最短でも制御周期24個分(24/30×100=80%)の時間が経過した時に、レーンマーク検出率Rtが信頼性回復判定値Th1以上となる。   Here, referring to FIG. 5A, reliability is restored when the lane mark detection unit 11 continues to be in a state where no lane mark is detected and then switches to a state in which the lane mark is detected. When the determination value Th1 is set to 80%, when the time of at least 24 control cycles (24/30 × 100 = 80%) has elapsed since switching to the state where the lane mark is detected, The lane mark detection rate Rt is equal to or higher than the reliability recovery determination value Th1.

それに対して、信頼性回復判定値Th1が60%に設定されていたときには、レーンマークが検出される状態に切り換わってから、最短で制御周期18個分(18/30×100=60%)の時間が経過したときに、レーンマーク検出率Rtが信頼性回復判定値Th1以上となる。   On the other hand, when the reliability recovery judgment value Th1 is set to 60%, after switching to the state in which the lane mark is detected, 18 control cycles at the shortest (18/30 × 100 = 60%) When the time elapses, the lane mark detection rate Rt becomes equal to or higher than the reliability recovery determination value Th1.

そのため、信頼性回復判定値Th1を60%に設定することにより、レーンマーク検出の信頼性が回復するまでに要する時間が、制御周期6個分の時間だけ短縮することを期待することができる。   Therefore, by setting the reliability recovery determination value Th1 to 60%, it can be expected that the time required for recovering the reliability of lane mark detection is shortened by the time corresponding to 6 control cycles.

そして、続くSTEP32で、レーンマーク位置認識手段13は、信頼性回復判定値
Th1を60%に設定する期間を制限するためのタイマ(このタイマの設定時間は、本発明の所定時間に相当する)をスタートさせ、STEP33でECU20に信頼性NGを通知するデータを出力する。この場合には、レーンマーク位置認識手段13は、レーンマーク検出手段11によるレーンマークの検出結果に基く、車両1とレーンマークの相対位置の認識処理は実行しない。
In subsequent STEP 32, the lane mark position recognizing means 13 is a timer for limiting the period for setting the reliability recovery judgment value Th1 to 60% (the set time of this timer corresponds to the predetermined time of the present invention). In step 33, data for notifying the ECU 20 of reliability NG is output. In this case, the lane mark position recognizing unit 13 does not execute the process of recognizing the relative position between the vehicle 1 and the lane mark based on the detection result of the lane mark by the lane mark detecting unit 11.

一方、STEP30で、リングバッファ14の後半期間での局所的なレーンマーク検出率Rbが10%よりも低く、且つ、リングバッファ14の前半期間での局所的なレーンマーク検出率Rfが90%よりも高いという条件を満たしていないときには、STEP40に分岐する。   On the other hand, in STEP 30, the local lane mark detection rate Rb in the second half period of the ring buffer 14 is lower than 10%, and the local lane mark detection rate Rf in the first half period of the ring buffer 14 is higher than 90%. If the condition that the value is too high is not satisfied, the process branches to STEP40.

ここで、リングバッファ14の後半期間でのレーンマーク検出率Rbが10%よりも低く、且つリングバッファ14の前半期間でのレーンマーク検出率Rfが90%よりも高いという条件を満たしていないときには、リングバッファ14の前半期間でのレーンマーク検出率Rfと後半期間でのレーンマーク検出率Rbとの差が小さく、全体的にレーンマークの検出率が低下した状態に移行したと想定することができる。   Here, when the condition that the lane mark detection rate Rb in the second half period of the ring buffer 14 is lower than 10% and the lane mark detection rate Rf in the first half period of the ring buffer 14 is higher than 90% is not satisfied. It can be assumed that the difference between the lane mark detection rate Rf in the first half period of the ring buffer 14 and the lane mark detection rate Rb in the second half period is small, and that the lane mark detection rate has been lowered overall. it can.

そして、このように、レーンマーク検出率が全体的に低下するのは、レーンマークが掠れている場合等が考えられ、この場合には、レーンマークの検出率が低い状態が、レーンマークの補修が終了してレーンマークが掠れていない区間に至るまで継続すると想定される。   In this way, the lane mark detection rate may decrease as a whole when the lane mark is worn. In this case, the lane mark detection rate is low when the lane mark detection rate is low. It is assumed that it will continue until it ends and reaches the section where the lane mark is not drawn.

そのため、この場合にはSTEP40に分岐し、信頼性回復判定値設定手段12は、信頼性回復判定値Th1を80%(本発明の第2の信頼性回復判定値に相当する)に設定する。そして、これにより、後述するレーンマーク検出の信頼性回復の判断において、信頼性OKとなり難い状態にしてSTEP33に進む。   Therefore, in this case, the process branches to STEP 40, and the reliability recovery determination value setting means 12 sets the reliability recovery determination value Th1 to 80% (corresponding to the second reliability recovery determination value of the present invention). As a result, in the determination of the reliability recovery of the lane mark detection described later, the process proceeds to STEP 33 in a state where it is difficult to achieve reliability OK.

このようにSTEP33で信頼性NGを出力した場合、次の制御周期では、図3のSTEP3でSTEP10に分岐する。STEP10〜STEP12及びSTEP20〜STEP22は、レーンマーク検出手段11によるレーンマーク検出の信頼性が回復したか否かを判断するための処理である。   Thus, when reliability NG is output at STEP33, in the next control cycle, it branches to STEP10 at STEP3 of FIG. STEP 10 to STEP 12 and STEP 20 to STEP 22 are processes for determining whether or not the reliability of lane mark detection by the lane mark detection means 11 has been recovered.

レーンマーク位置認識手段13は、STEP10で、上記式(1)により算出した直前のリングバッファ14の格納データによる平均的なレーンマーク検出率Rtが、信頼性回復判定値Th1よりも高くなっているか否かを判断する。そして、レーンマーク検出率Rtが信頼性回復判定値Th1よりも高いときはSTEP11に進み、レーンマーク位置認識手段13は、信頼性回復判定値Th1を80%に設定する。   In step 10, the lane mark position recognizing unit 13 determines whether the average lane mark detection rate Rt based on the data stored in the ring buffer 14 immediately before calculated by the above equation (1) is higher than the reliability recovery determination value Th1. Judge whether or not. When the lane mark detection rate Rt is higher than the reliability recovery determination value Th1, the process proceeds to STEP11, and the lane mark position recognition unit 13 sets the reliability recovery determination value Th1 to 80%.

これにより、信頼性回復判定値Th1が60%に設定されていたときには、信頼性回復判定値Th1が通常値である80%に戻される。そして、続くSTEP12で、レーンマーク位置認識手段13は、信頼性OKを通知するデータをECU20に出力する。また、レーンマーク検出手段11によるレーンマークの画像意部分の検出結果に基いて、実空間上の車両1とレーンマークとの相対位置を認識し、該相対位置のデータをECU20に出力する。   As a result, when the reliability recovery determination value Th1 is set to 60%, the reliability recovery determination value Th1 is returned to the normal value of 80%. In subsequent STEP 12, the lane mark position recognizing unit 13 outputs data indicating the reliability OK to the ECU 20. Further, the relative position between the vehicle 1 and the lane mark in the real space is recognized based on the detection result of the lane mark image portion by the lane mark detection means 11, and data of the relative position is output to the ECU 20.

一方、STEP10でレーンマーク検出率Rtが信頼性回復判定値Th1以下であったときはSTEP20に分岐し、レーンマーク位置認識手段13は、上述した図4のSTEP32でタイマをスタートさせていたときに、該タイマがタイムアップしているか否かを判断する。   On the other hand, if the lane mark detection rate Rt is less than or equal to the reliability recovery judgment value Th1 in STEP 10, the process branches to STEP 20, and the lane mark position recognizing means 13 starts when the timer is started in STEP 32 of FIG. , It is determined whether or not the timer is up.

そして、タイマがタイムアップしているときはSTEP21に進む。STEP21は、信頼性回復判定値設定手段12による処理であり、信頼性回復判定値設定手段12は、信頼性回復判定値Th1を通常値である80%とする。これにより、信頼性回復判定値Th1を60%に設定した後、タイマがタイムアップするまでに、レーンマーク検出率Rtが信頼性回復判定値Th1よりも高くならなかったときに、信頼性回復判定値Th1が標準値である80%に戻る。   When the timer is up, the process proceeds to STEP 21. STEP 21 is a process performed by the reliability recovery determination value setting means 12, and the reliability recovery determination value setting means 12 sets the reliability recovery determination value Th1 to 80%, which is a normal value. Thereby, after the reliability recovery determination value Th1 is set to 60%, the reliability recovery determination is made when the lane mark detection rate Rt does not become higher than the reliability recovery determination value Th1 until the timer expires. The value Th1 returns to the standard value of 80%.

そのため、信頼性判定値Th1を低く(60%)に設定した後、レーンマーク検出の信頼性が向上しない状況が続いたときに、信頼性回復判定値Th1が通常値に戻される(60%→80%)。そして、これにより、レーンマーク検出の信頼性が低い状態で、レーンマーク位置認識手段13による車両1とレーンマークとの相対位置の認識処理が再開されることを防止して、車両1とレーンマークとの相対位置認識の信頼性を高く維持することができる。   Therefore, after the reliability determination value Th1 is set low (60%), the reliability recovery determination value Th1 is returned to the normal value (60% →) when the situation where the reliability of lane mark detection does not improve continues. 80%). This prevents the lane mark position recognizing means 13 from restarting the recognition process of the relative position between the vehicle 1 and the lane mark in a state where the reliability of the lane mark detection is low. The reliability of the relative position recognition can be maintained high.

なお、本実施の形態では、図5(b)に示したように、リングバッファ14の前半期間における局所的なレーンマーク検出率Rfと、後半期間における局所的なレーンマーク検出率Rbとに基いて、信頼性回復判定値Th1を設定したが、リングバッファ14に格納された直前の所定期間における各制御周期でのレーンマーク検出の有り/無しの結果に基いて、レーンマークの局所的な検出率の変化の態様に応じて信頼性回復判定値Th1を設定することにより、本発明の効果を得ることができる。   In this embodiment, as shown in FIG. 5B, the local lane mark detection rate Rf in the first half period of the ring buffer 14 and the local lane mark detection rate Rb in the second half period are used. Although the reliability recovery judgment value Th1 is set, the local detection of the lane mark is performed based on the result of the presence / absence of the lane mark detection in each control cycle in the predetermined period immediately before being stored in the ring buffer 14. The effect of the present invention can be obtained by setting the reliability recovery judgment value Th1 according to the mode of change of the rate.

例えば、リングバッファ14の連続する3個のバッファ毎に局所的なレーンマーク検出率を算出し、局所的なレーンマーク検出率が急激に低下する変化の態様が検知されたときに、信頼性回復判定値Th1を通常値よりも低く設定するようにしてもよい。   For example, the local lane mark detection rate is calculated for every three consecutive buffers of the ring buffer 14, and the reliability is restored when a mode of change in which the local lane mark detection rate rapidly decreases is detected. The determination value Th1 may be set lower than the normal value.

また、本実施の形態では、信頼性回復判定値Th1を通常値(80%)よりも低い値(60%)に設定する時間をタイマにより制限したが、かかる制限を行なわない場合であっても、本発明の効果を得ることができる。   In this embodiment, the time for setting the reliability recovery determination value Th1 to a value (60%) lower than the normal value (80%) is limited by the timer. The effects of the present invention can be obtained.

本発明の車線認識装置の車両への搭載態様を示した説明図。Explanatory drawing which showed the mounting aspect to the vehicle of the lane recognition apparatus of this invention. 図1に示した車線認識装置の構成図。The block diagram of the lane recognition apparatus shown in FIG. レーンマーク検出の信頼性判断と、信頼性判断の結果に基く車両とレーンマークとの相対位置認識の実行と停止の切換えの処理のフローチャート。The flowchart of the process of the reliability judgment of lane mark detection, and the switching of execution and stop of relative position recognition between the vehicle and the lane mark based on the result of the reliability judgment. 信頼性回復判定値の設定処理のフローチャート。10 is a flowchart of reliability recovery determination value setting processing. リングバッファ及び局所的なレーンマーク検出率の説明図。Explanatory drawing of a ring buffer and a local lane mark detection rate. レーンマーク検出の信頼性判断の説明図。Explanatory drawing of the reliability judgment of a lane mark detection.

符号の説明Explanation of symbols

1…車両、2…カメラ、10…車線認識装置、11…レーンマーク検出手段、12…信頼性回復判定値設定手段、13…レーンマーク位置認識手段、14…リングバッファ、20…ECU   DESCRIPTION OF SYMBOLS 1 ... Vehicle, 2 ... Camera, 10 ... Lane recognition device, 11 ... Lane mark detection means, 12 ... Reliability recovery judgment value setting means, 13 ... Lane mark position recognition means, 14 ... Ring buffer, 20 ... ECU

Claims (5)

車両に搭載されたカメラにより撮像される車両周囲の道路の画像から、道路の車線を区分するレーンマークを検出する処理を、所定周期毎に実行するレーンマーク検出手段と、
前記レーンマーク検出手段によるレーンマークの検出結果に基いて、レーンマークと前記車両との相対位置を認識し、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの平均的な検出率である第1のレーンマーク検出率が、所定の信頼性低下判定値以下となったときに、前記相対位置の認識を中止し、その後、前記第1のレーンマーク検出率が該信頼性低下判定値よりも高い信頼性回復判定値以上となったときに、前記相対位置の認識を再開するレーンマーク位置認識手段と、
前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する信頼性回復判定値設定手段とを備えたことを特徴とする車線認識装置。
Lane mark detection means for executing a process for detecting a lane mark that divides a road lane from a road image around the vehicle imaged by a camera mounted on the vehicle at predetermined intervals;
Based on the detection result of the lane mark by the lane mark detection unit, the relative position between the lane mark and the vehicle is recognized, and the average detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before is determined. When the first lane mark detection rate is equal to or lower than a predetermined reliability decrease determination value, the recognition of the relative position is stopped, and then the first lane mark detection rate is determined as the reliability decrease determination. Lane mark position recognition means for resuming the recognition of the relative position when the reliability recovery determination value is higher than the value,
When the first lane mark detection rate becomes equal to or lower than the reliability decrease determination value, according to the aspect of the change in the local detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before A lane recognition device comprising: a reliability recovery determination value setting means for setting the reliability recovery determination value.
請求項1記載の車線認識装置において、
前記信頼性回復判定値設定手段は、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前半期間での前記レーンマーク検出手段によるレーンマークの検出率である第2のレーンマーク検出率が、後半期間での前記レーンマーク検出手段によるレーンマークの検出率である第3のレーンマーク検出率よりも所定レベル以上高いか否かを判断し、
前記第2のレーンマーク検出率が前記第3のレーンマーク検出率よりも前記所定レベル以上高いときは、前記信頼性回復判定値を第1の信頼性回復判定値に設定し、前記第2のレーンマーク検出率が前記第3のレーンマーク検出率よりも前記所定レベル以上高くないときには、前記信頼性回復判定値を前記第1の信頼性回復判定値よりも高い第2の信頼性回復判定値に設定することを特徴とする車線認識装置。
The lane recognition device according to claim 1,
When the first lane mark detection rate is equal to or lower than the reliability decrease determination value, the reliability recovery determination value setting unit is configured to perform the lane mark detection unit in the first half period of the plurality of the predetermined cycles immediately before. Whether or not the second lane mark detection rate, which is the lane mark detection rate, is higher than a predetermined level than the third lane mark detection rate, which is the lane mark detection rate by the lane mark detection means in the second half period. Judgment
When the second lane mark detection rate is higher than the third lane mark detection rate by the predetermined level or more, the reliability recovery determination value is set to a first reliability recovery determination value, and the second lane mark detection rate is When the lane mark detection rate is not higher than the predetermined level by more than the third lane mark detection rate, the reliability recovery determination value is set to a second reliability recovery determination value higher than the first reliability recovery determination value. A lane recognition device characterized by being set to:
請求項1又は請求項2記載の車線認識装置において、
前記信頼性回復判定値設定手段は、前記信頼性回復判定値を前記第1の信頼性回復判定値に設定した後、所定時間内に前記第1のレーンマーク検出率が前記第1の信頼性回復判定値以上とならなかったときには、前記信頼性回復判定値を前記第2の信頼性回復判定値に設定することを特徴とする車線認識装置。
In the lane recognition device according to claim 1 or 2,
The reliability recovery determination value setting means sets the first reliability recovery determination value to the first reliability recovery determination value, and then sets the first lane mark detection rate within the predetermined time. The lane recognition device according to claim 1, wherein when the recovery determination value is not greater than or equal to the recovery determination value, the reliability recovery determination value is set to the second reliability recovery determination value.
カメラと、
前記カメラにより撮像される自車両の周囲の道路の画像から、道路の車線を区分するレーンマークを検出する処理を、所定周期毎に実行するレーンマーク検出手段と、
前記レーンマーク検出手段によるレーンマークの検出結果に基いて、レーンマークと自車両との相対位置を認識し、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの平均的な検出率である第1のレーンマーク検出率が、所定の信頼性低下判定値以下となったときに、前記相対位置の認識を中止し、その後、前記第1のレーンマーク検出率が該信頼性低下判定値よりも高い信頼性回復判定値以上となったときに、前記相対位置の認識を再開するレーンマーク位置認識手段と、
前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する信頼性回復判定値設定手段とを備えたことを特徴とする車両。
A camera,
Lane mark detection means for executing processing for detecting a lane mark that divides the lane of the road from a road image around the host vehicle captured by the camera at predetermined intervals;
Based on the detection result of the lane mark by the lane mark detection unit, the relative position between the lane mark and the host vehicle is recognized, and the average detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before is determined. When the first lane mark detection rate is equal to or lower than a predetermined reliability decrease determination value, the recognition of the relative position is stopped, and then the first lane mark detection rate is determined as the reliability decrease determination. Lane mark position recognition means for resuming the recognition of the relative position when the reliability recovery determination value is higher than the value,
When the first lane mark detection rate becomes equal to or lower than the reliability decrease determination value, according to the aspect of the change in the local detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before And a reliability recovery determination value setting means for setting the reliability recovery determination value.
車両に搭載されたカメラの撮像画像のデータにアクセスする手段を有するコンピュータを、
前記カメラにより撮像される車両の周囲の道路の画像から、道路の車線を区分するレーンマークを検出する処理を、所定周期毎に実行するレーンマーク検出手段と、
前記レーンマーク検出手段によるレーンマークの検出結果に基いて、レーンマークと前記車両との相対位置を認識し、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの平均的な検出率である第1のレーンマーク検出率が、所定の信頼性低下判定値以下となったときに、前記相対位置の認識を中止し、その後、前記第1のレーンマーク検出率が該信頼性低下判定値よりも高い信頼性回復判定値以上となったときに、前記相対位置の認識を再開するレーンマーク位置認識手段と、
前記コンピュータを、前記第1のレーンマーク検出率が前記信頼性低下判定値以下となったときに、直前の複数の前記所定周期における前記レーンマーク検出手段によるレーンマークの局所的な検出率の変化の態様に応じて、前記信頼性回復判定値を設定する信頼性回復判定値設定手段として機能させることを特徴とする車線認識用プログラム。
A computer having means for accessing data of a captured image of a camera mounted on a vehicle;
Lane mark detection means for executing processing for detecting a lane mark that divides a road lane from a road image around the vehicle imaged by the camera at predetermined intervals;
Based on the detection result of the lane mark by the lane mark detection unit, the relative position between the lane mark and the vehicle is recognized, and the average detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before is determined. When the first lane mark detection rate is equal to or lower than a predetermined reliability decrease determination value, the recognition of the relative position is stopped, and then the first lane mark detection rate is determined as the reliability decrease determination. Lane mark position recognition means for resuming the recognition of the relative position when the reliability recovery determination value is higher than the value,
When the computer detects that the first lane mark detection rate is equal to or lower than the reliability decrease determination value, a change in the local detection rate of the lane mark by the lane mark detection unit in the plurality of predetermined periods immediately before the first lane mark detection rate A lane recognition program that functions as a reliability recovery determination value setting means for setting the reliability recovery determination value according to the aspect.
JP2008049650A 2008-02-29 2008-02-29 Lane recognition device, vehicle and lane recognition program Expired - Fee Related JP4978863B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008049650A JP4978863B2 (en) 2008-02-29 2008-02-29 Lane recognition device, vehicle and lane recognition program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008049650A JP4978863B2 (en) 2008-02-29 2008-02-29 Lane recognition device, vehicle and lane recognition program

Publications (2)

Publication Number Publication Date
JP2009205608A true JP2009205608A (en) 2009-09-10
JP4978863B2 JP4978863B2 (en) 2012-07-18

Family

ID=41147764

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008049650A Expired - Fee Related JP4978863B2 (en) 2008-02-29 2008-02-29 Lane recognition device, vehicle and lane recognition program

Country Status (1)

Country Link
JP (1) JP4978863B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018087817A1 (en) * 2016-11-08 2018-05-17 三菱電機株式会社 Object detection device and object detection method
JP2019028715A (en) * 2017-07-31 2019-02-21 アルパイン株式会社 Lane mark detection system

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001039327A (en) * 1999-08-02 2001-02-13 Nissan Motor Co Ltd Lane follow-up system
JP2003044863A (en) * 2001-07-30 2003-02-14 Nissan Motor Co Ltd Device for recognizing partition line
JP2003072578A (en) * 2001-09-04 2003-03-12 Honda Motor Co Ltd Vehicle running control device
JP2004268845A (en) * 2003-03-11 2004-09-30 Nissan Motor Co Ltd Lane deviation alarm device
JP2005182407A (en) * 2003-12-18 2005-07-07 Nissan Motor Co Ltd Traffic lane deviation prevention device
JP2005346383A (en) * 2004-06-02 2005-12-15 Toyota Motor Corp Boundary line detecting device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001039327A (en) * 1999-08-02 2001-02-13 Nissan Motor Co Ltd Lane follow-up system
JP2003044863A (en) * 2001-07-30 2003-02-14 Nissan Motor Co Ltd Device for recognizing partition line
JP2003072578A (en) * 2001-09-04 2003-03-12 Honda Motor Co Ltd Vehicle running control device
JP2004268845A (en) * 2003-03-11 2004-09-30 Nissan Motor Co Ltd Lane deviation alarm device
JP2005182407A (en) * 2003-12-18 2005-07-07 Nissan Motor Co Ltd Traffic lane deviation prevention device
JP2005346383A (en) * 2004-06-02 2005-12-15 Toyota Motor Corp Boundary line detecting device

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018087817A1 (en) * 2016-11-08 2018-05-17 三菱電機株式会社 Object detection device and object detection method
JPWO2018087817A1 (en) * 2016-11-08 2019-03-07 三菱電機株式会社 Object detection apparatus and object detection method
JP2019028715A (en) * 2017-07-31 2019-02-21 アルパイン株式会社 Lane mark detection system

Also Published As

Publication number Publication date
JP4978863B2 (en) 2012-07-18

Similar Documents

Publication Publication Date Title
JP5594246B2 (en) Lane recognition device
JP4092308B2 (en) Boundary line detection device
JP6096723B2 (en) Traveling lane marking recognition device and traveling lane marking recognition program
JP4962581B2 (en) Lane marking detector
US10127460B2 (en) Lane boundary line information acquiring device
JP5768666B2 (en) Vehicle travel support device and boundary line recognition device
JP2005346382A (en) Boundary line detecting device
JP6328369B2 (en) In-vehicle control device
US9594965B2 (en) Lane boundary lane recognition device and computer-readable storage medium storing program for recognizing lane boundary lines on roadway
JP5986949B2 (en) Boundary line recognition device
US9542607B2 (en) Lane boundary line recognition device and computer-readable storage medium storing program of recognizing lane boundary lines on roadway
JP4744537B2 (en) Driving lane detector
JP5884635B2 (en) Driving environment detection device, driving environment detection program, and light control device
JP2010211701A (en) Lane recognition device
JP5067358B2 (en) Traveling lane detection device and traveling lane detection program
JP2012146135A (en) Boundary detector and boundary detection program
JP2013161202A (en) Vehicle periphery monitoring device
JP4978863B2 (en) Lane recognition device, vehicle and lane recognition program
JP4762830B2 (en) Perimeter monitoring system
JP5957315B2 (en) In-vehicle lane recognition system
JP2020042323A (en) Driving support device, driving support system, and driving support method
JP2007066003A (en) Stop-line detection device
JP6315580B2 (en) Vehicle start support device and start notification method
JP2015210729A (en) Travel path recognition device
JP6250120B1 (en) Lane maintenance support device and lane maintenance support method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101125

TRDD Decision of grant or rejection written
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120314

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120321

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120406

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150427

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees