[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP5172887B2 - 車両の周辺監視装置 - Google Patents

車両の周辺監視装置 Download PDF

Info

Publication number
JP5172887B2
JP5172887B2 JP2010087672A JP2010087672A JP5172887B2 JP 5172887 B2 JP5172887 B2 JP 5172887B2 JP 2010087672 A JP2010087672 A JP 2010087672A JP 2010087672 A JP2010087672 A JP 2010087672A JP 5172887 B2 JP5172887 B2 JP 5172887B2
Authority
JP
Japan
Prior art keywords
value
image
vehicle
region
threshold
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010087672A
Other languages
English (en)
Other versions
JP2011221630A (ja
Inventor
昌樹 根來
敏文 鈴木
裕次 横地
敦央 江口
守道 西垣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2010087672A priority Critical patent/JP5172887B2/ja
Publication of JP2011221630A publication Critical patent/JP2011221630A/ja
Application granted granted Critical
Publication of JP5172887B2 publication Critical patent/JP5172887B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、車両の周辺を監視するための装置に関し、より具体的には、車両の周辺を監視するための装置において、車両周辺の移動物体の検出感度を向上させることに関する。
特許文献1は、歩行者検出装置を開示する。この歩行者検出装置は、レーザレーダと赤外線カメラを併用し、レーザレーダから得られる歩行者候補の検出情報を基に赤外線画像中の歩行者を検出する。
特許文献2は、車載用レーダ装置を開示する。この装置では、センサの中心軸の向きを補正するために、撮影画像を複数の領域に分割し、領域毎に検出した線分から消失点および方向ベクトルを求めている。
特開2003−302470号公報 特許第3862015号公報
赤外線カメラで撮像した場合、得られるグレースケール画像において、移動物体は静止物体よりも輝度が低く、すなわち暗くなる傾向がある。これは、赤外線カメラの撮像素子が熱時定数を持つため、物体の赤外線カメラに対する移動速度が大きいほど、赤外線カメラの検知信号(輝度信号)のレスポンス(立ち上がり)が静止物体よりも移動物体の方が遅くなるためである。
したがって、赤外線カメラ等で車両周辺の移動物体を検出する場合、この輝度の低下を考慮した上で検出処理をおこなうことが望まれる。
しかし、特許文献1、2に記載の発明においては、この輝度低下による影響を考慮して、歩行者等を検知することをおこなってはいない。
そこで、本発明は、赤外線カメラ等の撮像手段により取得された画像、例えばグレースケール画像における移動物体の輝度低下による影響を画像処理に反映させて、車両周辺の移動物体の検出精度を向上させることを目的とする。
本発明は、車両の周辺監視装置を提供する。その周辺監視装置は、車両の周辺の物体の位置および速度ベクトルを検出する物体検出手段と、車両の周辺の画像を取得する撮像手段と、撮像手段により取得されたグレースケール画像を多値化する多値化手段と、物体位置検出手段が特定した物体の位置に対応する取得されたグレースケール画像に、当該物体の位置の各々に対応する所定サイズの領域を設定する領域設定手段と、領域毎に、対応する物体の速度ベクトルの大きさに応じて、対応するグレースケール画像を多値化する際のしきい値を設定する多値化しきい値設定手段と、多値化手段により対応する多値化しきい値を用いて多値化された画像に基づいて、所定の対象物の有無を判定する判定手段と、を備える。
本発明によれば、グレースケール画像に設定した領域毎に、物体検出手段により検出された対応する物体の速度ベクトルの大きさに応じて、多値化しきい値を設定するので、当該画像からの対象物、特に移動物体の抽出精度を向上させることができる。その結果、車両の周辺の対象物を確実に抽出して速やかに運転者に知らせることが可能となる。
本発明の一形態によると、車両の周辺監視装置が提供される。その周辺監視装置は、車両の周辺の画像を取得する撮像手段と、撮像手段により取得されたグレースケール画像を多値化する多値化手段と、取得されたグレースケール画像を複数の領域に区分して、車両の速度に応じて、領域毎の速度ベクトルを算出する手段と、領域毎の速度ベクトルの大きさに応じて、対応するグレースケール画像を多値化する際のしきい値を設定する多値化しきい値設定手段と、多値化手段により対応する多値化しきい値を用いて多値化された画像に基づいて、所定の対象物の有無を判定する判定手段と、を備える。
本発明の一形態によれば、グレースケール画像の領域毎に算出した速度ベクトルの大きさに応じて、対応するグレースケール画像を多値化する際のしきい値を設定するので、当該画像からの対象物、特に移動物体の抽出精度を向上させることができる。
本発明の一形態によると、多値化しきい値設定手段は、速度ベクトルの大きさが大きくなるほど多値化しきい値を小さくする。
本発明の一形態によれば、車両周辺の移動物体の移動速度が速くなっても確実に取得画像から移動物体を抽出することが可能となる。
本発明の一形態によると、所定時間内での車両の挙動によって生ずる取得画像の変化量を推定する手段をさらに備え、多値化しきい値設定手段は、その変化量に基づき速度ベクトルを調整する。
本発明の一形態によれば、車両の挙動をも反映させて速度ベクトルの算出および多値化しきい値の設定をおこなうので、取得該画像からの対象物、特に移動物体の抽出精度をさらに向上させることが可能となる。
本発明の一形態によると、物体検出手段はレーダを含み、領域設定手段はレーダが検出した物体の速度ベクトルに応じて対応する領域の設定位置を移動させる。
本発明の一形態によると、物体検出手段はレーダを含み、領域設定手段は、当該レーダに対する撮像手段の検出信号の遅延量に応じて領域を設定する。
本発明の一形態によれば、レーダに対して赤外線カメラの移動物体検出時の検出信号(輝度信号)のレスポンス(立ち上がり)が遅れることを反映させてグレースケール画像上の領域の位置を設定することができるので、取得該画像から対象物、特に移動物体の抽出をより確実におこなうことが可能となる。
車両の周辺監視装置の構成を示すブロック図である。 画像処理ユニットにおける処理フローを示す図である。 2値化しきい値設定の処理フローを示す図である。 2値化しきい値設定の処理フローの他の例を示す図である。 画像上での速度ベクトルの算出を説明するための図である。 画像処理ユニットにおける処理フローを示す図である。 画像の領域毎の速度ベクトルの様子を示す図である。 2値化画像での位置ずれ補正を説明するための図である。
図面を参照しながら本発明の実施の形態を説明する。図1は、この発明の一実施形態に従う、車両の周辺監視装置の構成を示すブロック図である。周辺監視装置は、車両に搭載され、レーザレーダ10と、赤外線カメラ12と、赤外線カメラ12によって撮像された画像データに基づいて車両周辺の物体を検出するための画像処理ユニット14と、その検出結果に基づいて音または音声で警報を発生するスピーカ16と、赤外線カメラ12の撮像を介して得られた画像を表示すると共に、運転者に車両周辺の対象物を認識させるための表示を行う表示装置18とを備える。なお、ナビゲーション装置を備える車両においては、スピーカ16および表示装置18として、ナビゲーション装置が備える該当機能を利用してもよい。
図1の画像処理ユニット14は、その構成(機能)としてブロック141〜148で示される機能を有する。すなわち、画像処理ユニット14は、レーザレーダ10からの信号を受けて車両の周辺の物体の位置および速度ベクトルを検出する物体検出手段141と、赤外線カメラ12が撮影した車両の周辺の画像をグレースケール画像として取得する画像取得手段142と、取得されたグレースケール画像を多値化する多値化手段143と、物体検出手段141が検出した物体の位置に対応するグレースケール画像に、該物体の位置の各々に対応する所定サイズの領域を設定する領域設定手段144と、領域毎に、対応する物体の速度ベクトルの大きさに応じて、対応するグレースケール画像を多値化する際のしきい値を設定する多値化しきい値設定手段145と、取得されたグレースケール画像を複数の領域に区分して、車両の速度に応じて、領域毎の速度ベクトルを算出する手段146と、所定時間内での車両の挙動(車速、ヨーレート等)によって生ずる取得画像の変化量を推定する手段147と、多値化手段により対応する多値化しきい値を用いて多値化された画像に基づき所定の対象物の有無を判定する判定手段148として機能する。
なお、本明細書において使用する「物体の速度ベクトル」は、特記しない限り物体の速度ベクトルを画像平面に射影して得られる画像上の物体の速度ベクトルを意味し、全編にわたってこの意味において使用している。
各ブロックの機能は、画像処理ユニット14が有するコンピュータ(CPU)によって実現される。なお、画像処理ユニット14の構成は、ナビゲーション装置の中に組み込んでもよい。
画像処理ユニット14は、ハードウエア構成として、例えば、入力アナログ信号をデジタル信号に変換するA/D変換回路、デジタル化した画像信号を記憶する画像メモリ、各種演算処理を行う中央演算処理装置(CPU)、CPUが演算に際してデータを記憶するのに使用するRAM(ランダムアクセスメモリ)、CPUが実行するプログラムおよび用いるデータ(テーブル、マップを含む)を記憶するROM(リードオンリーメモリ)、スピーカ16に対する駆動信号および表示装置18に対する表示信号などを出力する出力回路を備えている。レーザレーダ10と赤外線カメラ12の出力信号は、デジタル信号に変換されてCPUに入力されるよう構成される。
図2は、画像処理ユニット14によって実行される処理フローである。この処理フローは、画像処理ユニット14のCPUがメモリに格納している処理プログラムを呼び出して、所定の時間間隔で実行される。なお、以下の説明では、取得したグレースケール画像を多値化の例として、2値化して白黒画像を得る場合を例にとり説明している。3値以上の多値化をする場合は、設定するしきい値の数は増えるが、基本的に2値化の場合と同様な処理をすることにより多値化画像を得ることができる。また、図2のフローでは、検知対象として歩行者を検知する場合について説明しているが、歩行者に限られず、他の動物、車両等の移動物体を検知する場合にも適用できることは言うまでもない。
ステップS10において、レーザレーダ10からの信号を受けて車両の周辺の物体の位置、大きさ(領域)、および速度ベクトルを検出(特定)する。その検出には従来からの任意の方法を用いることができるが、例えば、以下のようにおこなう。
レーザレーダ10としてスキャン式レーザレーダを使用して、その検出点群の幅から物体、例えば歩行者候補の位置および大きさ(領域)を特定する。具体的には、スキャン式レーザレーダでは、各方向にスキャンするビームの物体からの反射光を受光することにより、検出点として各方向における物体までの距離を測定する。レーザレーダの位置を原点としてY軸をレーダの正面方向とする2次元座標系にこれらの検出点の位置をプロットして検出点の集合を得る。これらの検出点の集合から、各検出点の相互の間隔が所定値以下のものを検出点群としてグループ化し、グループ化した検出点群のうち、広がり幅が所定値以下のものを歩行者候補とみなしてその位置と大きさ(領域)を特定する。
特定された大きさ(領域)において、基準点を定めその基準点を始点とするベクトルとして、特定された歩行者候補の動き(単位時間当たりの移動量)を表すことにより、その領域における、すなわち対応する歩行者候補についての速度ベクトル得ることができる。なお、基準点は領域の重心、消失点など任意の規則により決めることができる。
ステップS11において、赤外線カメラ12の出力信号(すなわち、撮像画像のデータ)を入力として受け取り、これをA/D変換して、画像メモリに格納する。格納される画像データは、輝度情報を含んだグレースケール(白黒の濃淡)画像である。対象の温度が高い部分ほど高輝度となる赤外線カメラでは、高輝度部分の明暗値が高い画像データとなり、その温度が低く(低輝度に)なるにつれて明暗値が低い画像データとなる。
ステップS12において、取得されたグレースケール画像に領域設定をする。具体的には、ステップS10で得られた各領域(位置、大きさ)に対応する領域をグレースケール画像上に設定する。
ステップS13において、グレースケール画像の設定した領域毎に2値化するためのしきい値を設定する処理フロー(ルーチン)を実行する。
図3は、2値化しきい値設定の処理フロー(ルーチン)を示す図である。最初にステップS131またはステップS132を選択する。この2つのステップは任意に選択できる。ステップS131(A)では、移動体毎に対応するグレースケール画像の領域上にレーザレーダ10で検出した速度ベクトルを投影する。
図5は、この投影を説明するための図である。符号20で示されるレーザレーダ10のスキャン領域において、図のように4つの移動体が検出されたとする。各移動体は大きさ(領域)と速度ベクトルを有している。この4つの移動体について、速度ベクトルをグレースケール画像23上に投影すると、各領域について画像上の速度ベクトルが得られる。例えば、矢印Aで示されるように、移動体(領域)21の速度ベクトル22は、画像上の領域24の速度ベクトル25として投影される。他の移動体についても同様である。このように、レーザレーダで検出された速度ベクトルをそのまま利用せずに画像上に投影させた速度ベクトルを利用するのは、画像上での移動量が残像に影響するので、画像上に投影した後のベクトル(移動量)を利用する方がよりその残像の影響を反映させることができて効果的であるからである。
図3に戻って、ステップS132(B)が選択された場合は、ステップS131(A)の投影に代わって、画像上の領域毎に速度ベクトル(図5の画像23内の速度ベクトル25に相当するもの)を、オプティカルフロー、テンプレートマッチング、あるいは位相限定相関法などの従来からの方法により求める。その際、領域毎に一つの速度ベクトル(移動量)をテンプレートマッチング等により求めても良く、あるいは画素毎のオプティカルフローを算出して移動体(領域)毎に代表値(平均値等)を算出してもよい。なお、このステップS132(B)は、既に画像上の領域毎に物体(移動体)候補が対応付けられている場合に実行されるステップであり、何らその対応が付いていない場合は、ステップS131(A)が実行される。
次に、ステップS133において、図2のステップS10において検出した物体が移動体であるか否かを判定する。この判定は、ステップS131またはS132において得られた画像の領域毎の速度(移動)ベクトル(大きさ、変化等)に基づきおこなう。この判定がNoの場合、ステップS136に進み、静止物に対応して予め決められた所定のしきい値Thsを選択する。所定のしきい値Thsは、予め画像処理ユニット14のメモリに格納されている。なお、各領域の背景画像の輝度に応じてしきい値を変えられるように、輝度の大きさに対応した複数のしきい値を設けておき、その中から選択できるようにしてもよい。
ステップS133で移動体である(Yes)と判定された場合、次のステップS134において、領域毎の速度ベクトルの大きさL、すなわち各移動体の移動量Lを算出する。ステップS135において、速度ベクトルの大きさ(移動量)Lに対応した2値化しきい値を算出する。2値化しきい値Thの算出は例えば以下のようにおこなう。
速度ベクトルの大きさ(移動量)Lに応じて2値化しきい値の変化量ΔThを予め決めておき、下記の式(1)で示すように、静止物に対する2値化しきい値Thsからその変化量ΔThを減算して、2値化しきい値Thmを求める。式(1)で減算するのは、移動体の速度が大きくなるほど輝度が低下するので、2値化しきい値を小さくして、その移動体の2値化後の画像上での検出(特定)精度を上げるためである。

Thm = Ths−ΔTh (1)
あるいは、下記の式(2)で示すように、速度ベクトルの大きさ(移動量)Lに応じて小さくなる係数α(<1)を予め決めておき、静止物に対する2値化しきい値Thsにその係数α(<1)を乗算して、2値化しきい値Thmを求めてもよい。

Thm = α×Ths (2)
領域毎に対応する2値化しきい値(Ths、Thm)を取得した後、図2のステップS14において、そのしきい値を用いてそれぞれ対応するグレースケール画像を2値化する。具体的には、しきい値より明るい領域を「1」(白)とし、暗い領域を「0」(黒)とする処理を行う。この2値化処理により、たとえば歩行者のような、所定の温度より高い対象物が、白領域として抽出される。
ステップS15において、2値化後の白黒画像から対象物を照合する。最初に、予めメモリに保管している除外対象物の特徴を有するか否かを調べる。除外対象物とは、例えば発熱体ではあるが明らかに形状等が異なる物体(4足動物、ボイラー、車両等)を意味する。除外対象物に該当しない場合、歩行者の特徴に該当するか否かを調べる。歩行者の特徴には、例えば歩行者の頭部の特徴として丸みを帯びた白部が存在し、その下に胴体、脚部の部分に相当する細長い白部が繋がっていること等が含まれる。また、周知のパターンマッチングを利用し、予め保管してある歩行者を表す所定のパターンとの類似度を算出し、その類似度を歩行者であるか否かの判断材料としてもよい。さらに、歩行者の歩行速度はほぼ一定であることから、レーザレーダ10から得られる物体の移動速度(速度ベクトル)の情報を判断材料の1つとして用いてもよい。
ステップS16において、判定された対象物が歩行者か否かを判定する。その判定は、例えば、上述した歩行者の特徴に該当するか否か、パターンマッチングの類似度が高いか、移動速度が所定範囲内か等によりおこなう。歩行者に該当しない場合は処理を終了する。
歩行者であると判定された場合、ステップS17において、運転者の注意を喚起するために警報を発する。その際、歩行者が存在する方向に応じて警報の種類を変えると効果的である。例えば、スピーカ16から音声で「左前方歩行者注意」等の警報を発生することにより、運転者の注意を適切な方向に喚起することができる。画像として警告する場合は、グレースケール画像を表示装置18上に表示し、画像中の認識された歩行者に対して個別の強調表示(高輝度化、点滅、色表示等)を行うことにより、運転者の注意を促す。
図4は、2値化しきい値設定の処理フロー(ルーチン)の他の例を示す図である。図4では、図3のフローと違って、最初のステップS130において、図2のステップS10において検出した物体が移動体であるか否かを判定する。すなわち、図3のステップS133では、図2のステップS11で取得されたカメラ画像(グレースケール画像)上の速度(移動)ベクトルに基づき移動体の有無を判定しているが、図4のステップS130では、図2のステップS10で取得されたレーザレーダ情報(移動体候補の動き、速度ベクトル)に基づき移動体の有無を判定する。このステップS130では、例えば物体候補毎に得られた速度ベクトルの大きさが所定値以上であるときに移動体であると判定し、所定値よりも小さいときは移動体でないと判定する。
この判定がNoの場合、ステップS136に進み、静止物に対応して予め決められた所定のしきい値Thsを選択する。判定がYes(移動体である)と判定された場合、次のステップS131(A)またはステップS132(B)のいずれかのステップに進む。これらのステップを含めて以降のフローは上述した図3の対応するステップと同様であるので、ここではその説明を省略する。
図6は、画像処理ユニット14によって実行される他の処理フローの例である。この処理フローは、図2の処理フロー同様、画像処理ユニット14のCPUがメモリに格納している処理プログラムを呼び出して、所定の時間間隔で実行される。また、3値以上の多値化に適用できることも、図2の処理フローと同様である。
図6の処理フローでは、図2の処理フローと異なり、レーザレーダ10による物体検出を前提とせずに歩行者の検知をおこなう例である。ステップS20において、赤外線カメラ12の出力信号からグレースケール画像を取得する。ステップS21において、取得したグレースケール画像に領域を設定する。この領域設定は、検出物体の位置とは無関係におこなわれ、例えば図7に例示するように均等に分割された9個の領域が設定される。領域の数と大きさは、車両の速度、走行場所(周辺状態)等に応じて任意に設定される。
ステップS22において、自車両の車速を検出する。次に設定した画像上の領域毎の速度(移動)ベクトルを求めるために、次のステップS23(A)またはステップS24(B)のいずれかのステップに進む。この2つのステップは任意に選択できる。ステップS23(A)においては、画像上の領域毎に速度ベクトルを、車速に応じて変わる画像の経時変化からオプティカルフローを算出することにより得る。図7は領域毎に得られた速度ベクトルの模式図である。領域24毎に速度ベクトル25を得る。
ステップS24(B)が選択された場合は、最初にステップS24において、画像上の消失点を算出する。消失点の算出方法には従来の任意の方法を用いることができる。次に、ステップS25において、車速およびさらに取得したヨーレートから、画像上の消失点を基準(起点)とする移動ベクトルを作成する。この移動ベクトルは、自車両の挙動に応じて予測される移動量に相当する。この場合も、図7でイメージされるような領域毎の移動ベクトルを得ることができる。
次に、ステップS26において、2値化しきい値を新たに設定(算出)するか否かを判定する。この判定がNoの場合、ステップS27において、画像の領域毎に対応する速度(移動)ベクトルの大きさ(移動量)に応じて、領域内の背景部分の輝度を大きくする。具体的には背景の輝度のゲインを上げる。これは、自車両が移動している場合には、自車両との相対速度差が大きいほど輝度が落ち、また高輝度の物体ほどその輝度の低下が大きいので、全体特に背景の輝度(ゲイン)を移動量に応じて引き上げて、すなわちグレースケール画像上での明暗比(コントラスト)を確保して、2値化しきい値を変更(小さく)することなく2値化後の検出精度を上げるためにおこなう。
ステップS26において、2値化しきい値を新たに設定(算出)する場合は、ステップS28において、例えば図3(図4)を参照しながら説明した方法(ステップS132(B)の選択)により、画像の領域毎に2値化しきい値を設定する。なお、ステップS27の輝度調整をおこなった場合は、2値化しきい値は所定値、例えば、図3(図4)のステップS136で選択されるしきい値Thsを設定する。その後、ステップS29〜S32において、既に説明した図2のステップS14〜S17の場合と同様な方法により、2値化画像に基づき歩行者の有無を判定する。
最後に、図8を参照しながら赤外線カメラで取得された画像での位置ずれ補正について説明する。図8は、2値化後の画像において位置ずれ補正を説明するための図である。赤外線カメラでは、既に述べたように、移動体ではその輝度信号の立ち上がりが遅いので、実像よりも遅れて画像が取得される。具体的には、レーザでは実像の位置を捉えるので、図8の(a)に示すように、物体(歩行者)の静止時は、レーザで特定される領域(物標)35と対象カメラ画像36とは一致する。
しかし、物体(歩行者)の移動時には、図8(b)に示すように、レーザで特定される領域(物標)37に対して対象カメラ画像39が遅れてしまう。このため、レーザで特定される領域(物標)に対応するカメラ画像上の領域を検出領域とするシステムにおいて、領域のズレにより対象物を検出できない恐れがある。そこで、レーザで特定される領域(物標)から対象物のカメラ画像上での移動速度(ベクトル)を求めて、検出領域の設定位置を実像位置から遅れた分補正した位置に設定する(ずらす)。図8の例では、検出領域をPの位置(37)からP´の位置(38)までずらした設定(補正)をおこなう。
この補正を含む領域設定のやり方を、例えば図2、図6のフローにおける領域の設定において適用すること、すなわち設定した領域を後から速度(移動)ベクトルの大きさに応じて補正する(位置をずらす)、あるいは前回得た速度ベクトル(移動ベクトル)の大きさに基づき最初から所定の補正量だけ位置をずらして領域を設定することにより、対象物の検出(特定)精度をより向上させることが可能となる。
以上、本発明の実施の形態について説明したが、本発明はこのような実施形態に限定されることはなく、本発明の趣旨を逸脱しない範囲において改変して用いることができる。例えば、レーザレーダ10は、他の種類のレーダ(例えばミリ波レーダ等)であってもよく、また、赤外線カメラ12も赤外線以外の他の波長帯の光(例えば可視光)を利用するカメラ(CCDカメラ等)であってもよい。したがって、上述した説明では、赤外線カメラ12が撮影したグレースケール画像を対象としているが、これに限定されるものではない。
10 レーザレーダ、
12 赤外線カメラ、
14 画像処理ユニット、
16 スピーカ、
18 表示装置、
20 レーザスキャン範囲
21 移動体、
23 グレースケール画像

Claims (5)

  1. 車両に搭載され、該車両の周辺の物体の位置および速度ベクトルを検出する物体検出手段と、
    車両に搭載され、該車両の周辺の画像を、温度が高いほど高輝度となるグレースケール画像として取得する赤外線撮像手段と、
    前記赤外線撮像手段により取得されたグレースケール画像を多値化する多値化手段と、
    物体位置検出手段が検出した物体の位置に対応する前記取得されたグレースケール画像に、当該物体の位置の各々に対応する所定サイズの領域を設定する領域設定手段と、
    前記領域毎に、対応する物体の速度ベクトルの大きさに応じて、対応するグレースケール画像を多値化する際のしきい値の値を変化させる多値化しきい値設定手段と、
    前記多値化手段により対応する前記多値化しきい値を用いて多値化された画像に基づいて、所定の対象物の有無を判定する判定手段と、
    を備え、
    前記多値化しきい値設定手段は、前記速度ベクトルの大きさが大きくなるほど前記多値化しきい値を小さくする、車両の周辺監視装置。
  2. 車両に搭載され、該車両の周辺の画像を、温度が高いほど高輝度となるグレースケール画像として取得する赤外線撮像手段と、
    前記赤外線撮像手段により取得されたグレースケール画像を多値化する多値化手段と、
    前記取得されたグレースケール画像を複数の領域に区分して、前記車両の速度に応じて
    、当該領域毎の速度ベクトルを算出する手段と、
    前記領域毎の速度ベクトルの大きさに応じて、対応するグレースケール画像を多値化す
    る際のしきい値の値を変化させる多値化しきい値設定手段と、
    前記多値化手段により対応する前記多値化しきい値を用いて多値化された画像に基づいて、所定の対象物の有無を判定する判定手段と、
    を備え、
    前記多値化しきい値設定手段は、前記速度ベクトルの大きさが大きくなるほど前記多値化しきい値を小さくする、車両の周辺監視装置。
  3. 所定時間内での前記車両の挙動によって生ずる前記取得画像の変化量を推定する手段をさらに備え、
    前記多値化しきい値設定手段は、前記変化量に基づき前記速度ベクトルを調整する、請求項1または2に記載の周辺監視装置。
  4. 前記物体検出手段はレーダを含み、前記領域設定手段は、当該レーダが検出した前記物体の速度ベクトルに応じて対応する前記領域の設定位置を移動させる、請求項1に記載の周辺監視装置。
  5. 前記物体検出手段はレーダを含み、前記領域設定手段は、当該レーダに対する前記撮像手段の検出信号の遅延量に応じて前記領域を設定する、請求項1に記載の周辺監視装置。
JP2010087672A 2010-04-06 2010-04-06 車両の周辺監視装置 Expired - Fee Related JP5172887B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010087672A JP5172887B2 (ja) 2010-04-06 2010-04-06 車両の周辺監視装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010087672A JP5172887B2 (ja) 2010-04-06 2010-04-06 車両の周辺監視装置

Publications (2)

Publication Number Publication Date
JP2011221630A JP2011221630A (ja) 2011-11-04
JP5172887B2 true JP5172887B2 (ja) 2013-03-27

Family

ID=45038576

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010087672A Expired - Fee Related JP5172887B2 (ja) 2010-04-06 2010-04-06 車両の周辺監視装置

Country Status (1)

Country Link
JP (1) JP5172887B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2894617B1 (en) * 2012-09-03 2016-11-30 Toyota Jidosha Kabushiki Kaisha Collision determination device and collision determination method
JP6281376B2 (ja) * 2014-03-31 2018-02-21 株式会社デンソー 情報表示システム
JP2020201674A (ja) * 2019-06-07 2020-12-17 キヤノン株式会社 映像解析装置及びその制御方法及びプログラム
JP7380449B2 (ja) * 2020-06-30 2023-11-15 トヨタ自動車株式会社 判定装置及びプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0575987A (ja) * 1991-09-17 1993-03-26 Matsushita Electric Ind Co Ltd 動画像信号の動き領域の検出方法と高能率符号化装置
JPH0686264A (ja) * 1992-08-31 1994-03-25 Hitachi Ltd 可変速度画像符号化方式
JP3047658B2 (ja) * 1993-01-22 2000-05-29 松下電器産業株式会社 移動体検出における2値化しきい値決定方法
JPH09233478A (ja) * 1996-02-21 1997-09-05 Matsushita Electric Ind Co Ltd 画像符号化装置
JP4002365B2 (ja) * 1999-05-28 2007-10-31 セコム株式会社 複合型監視装置
JP2002098509A (ja) * 2000-09-22 2002-04-05 Mazda Motor Corp 車両検出装置
JP2005189109A (ja) * 2003-12-25 2005-07-14 Victor Co Of Japan Ltd 3次元画像処理装置
JP2007241898A (ja) * 2006-03-10 2007-09-20 Honda Motor Co Ltd 停止車両分別検出装置および車両の周辺監視装置
JP2008135856A (ja) * 2006-11-27 2008-06-12 Toyota Motor Corp 物体認識装置

Also Published As

Publication number Publication date
JP2011221630A (ja) 2011-11-04

Similar Documents

Publication Publication Date Title
JP4173901B2 (ja) 車両周辺監視装置
JP4203512B2 (ja) 車両周辺監視装置
JP5577398B2 (ja) 車両の周辺監視装置
JP4359710B2 (ja) 車両周辺監視装置、車両、車両周辺監視用プログラム、車両周辺監視方法
JP4173902B2 (ja) 車両周辺監視装置
JP4528283B2 (ja) 車両周辺監視装置
JP5809751B2 (ja) 対象物認識装置
WO2012004938A1 (ja) 車両の周辺監視装置
JP4937029B2 (ja) 物体検出装置及びプログラム
JP2010102572A (ja) 車両の周辺監視装置
JP5416026B2 (ja) 車両の周辺監視装置
JP4644273B2 (ja) 車両周辺監視装置
JP5172887B2 (ja) 車両の周辺監視装置
JP2010198166A (ja) 車両の周辺監視装置
JP5259647B2 (ja) 車両の周辺監視装置
JP2000306097A (ja) 道路領域判定装置
JP4765113B2 (ja) 車両周辺監視装置、車両、車両周辺監視用プログラム、車両周辺監視方法
JP5484118B2 (ja) 車両の周辺監視装置
JP2010093569A (ja) 車両周辺監視装置
JP4823753B2 (ja) 車両の周辺監視装置
JP5642785B2 (ja) 車両の周辺監視装置
JP6405765B2 (ja) 撮像装置及び判定方法
JP4922368B2 (ja) 車両周辺監視装置
JP2008040724A (ja) 画像処理装置、及び画像処理方法
JP5310162B2 (ja) 車両灯火判定装置

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120605

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120802

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121226

LAPS Cancellation because of no payment of annual fees