[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2020112542A - 表示システム、表示制御装置及び表示制御プログラム - Google Patents

表示システム、表示制御装置及び表示制御プログラム Download PDF

Info

Publication number
JP2020112542A
JP2020112542A JP2019178859A JP2019178859A JP2020112542A JP 2020112542 A JP2020112542 A JP 2020112542A JP 2019178859 A JP2019178859 A JP 2019178859A JP 2019178859 A JP2019178859 A JP 2019178859A JP 2020112542 A JP2020112542 A JP 2020112542A
Authority
JP
Japan
Prior art keywords
guidance
display
route
content
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019178859A
Other languages
English (en)
Other versions
JP7028228B2 (ja
JP2020112542A5 (ja
Inventor
智 堀畑
Satoshi Horihata
智 堀畑
一輝 小島
Kazuteru Kojima
一輝 小島
神谷 玲朗
Reiro Kamiya
玲朗 神谷
基宏 福本
Motohiro Fukumoto
基宏 福本
猛 羽藤
Takeshi Hado
羽藤  猛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to PCT/JP2019/050352 priority Critical patent/WO2020149109A1/ja
Publication of JP2020112542A publication Critical patent/JP2020112542A/ja
Publication of JP2020112542A5 publication Critical patent/JP2020112542A5/ja
Priority to US17/374,044 priority patent/US11982539B2/en
Application granted granted Critical
Publication of JP7028228B2 publication Critical patent/JP7028228B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3644Landmark guidance, e.g. using POIs or conspicuous other objects
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/365Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Navigation (AREA)
  • Instrument Panels (AREA)
  • Traffic Control Systems (AREA)

Abstract

【課題】連続案内のための重畳表示を認識し易くすることが可能な表示システム等の提供。【解決手段】表示システム110は、車両において用いられ、目的地までの経路案内を行うナビゲーション装置50と、HCU100とを備えている。HCU100は、表示制御装置として機能し、ナビゲーション装置50より取得する経路案内情報から、経路案内コンテンツをHUD装置20によって路面に重畳表示させる。ナビゲーション装置50は、複数の経路案内が連続する連続案内において、1つ目の経路案内と2つ目の経路案内とを共に開始する。一方、HCU100は、連続案内の場合に、1つ目の経路案内を行う右左折コンテンツを表示させ、右左折コンテンツを非表示とした後、2つ目の経路案内を行う案内コンテンツを表示させる。【選択図】図1

Description

この明細書による開示は、前景に重畳される表示を制御する表示制御の技術に関する。
例えば特許文献1には、目的地までの経路を案内する誘導表示を、フロントガラス越しに見えるドライバの前方視界に重畳する車両用表示装置が開示されている。この車両用表示装置は、車両の右左折を案内する交差点に所定の距離近づくと、経路情報に基づく誘導表示として、右左折の方向を示す矢印を道路に重畳表示する。
国際公開第2015/118859号
特許文献1のように、目的地までの経路案内を行う場合、誘導表示を要する複数の案内地点について、連続して存在する連続案内のシーンが発生し得る。このように連続案内を行うケースにおいて、1つ目の経路案内を行う案内表示と2つ目の経路案内を行う案内表示とを、共に分かり易く提示することは、特許文献1では、何ら想定されていなかった。
本開示は、連続案内のための重畳表示を認識し易くすることが可能な表示制御の技術の提供を目的とする。
上記目的を達成するため、開示された一つの態様は、車両(A)において用いられる表示システムであって、目的地までの経路案内を行うナビゲーション装置(50)と、ナビゲーション装置より取得する経路案内情報から、経路案内コンテンツ(CNTg)をヘッドアップディスプレイ(20)によって路面に重畳表示させる表示制御装置(100)と、を備え、ナビゲーション装置は、複数の経路案内が連続する連続案内であると判定した場合、1つ目の経路案内と2つ目の経路案内とを共に開始し、表示制御装置は、ナビゲーション装置より取得する経路案内情報が連続案内であると判定した場合に、1つ目の経路案内を行う第1案内コンテンツ(CNT1)を表示させ、第1案内コンテンツを非表示とした後、2つ目の経路案内を行う第2案内コンテンツ(CNT2)を表示させる表示システムとされる。
また開示された一つの態様は、ナビゲーション装置(50)を搭載する車両(A)において用いられ、ヘッドアップディスプレイ(20)による路面への重畳表示を制御する表示制御装置であって、目的地までの経路案内を行うナビゲーション装置より経路案内情報を取得する経路情報取得部(71)と、経路案内情報から生成する経路案内コンテンツ(CNTg)を、ヘッドアップディスプレイによって路面に重畳表示させる表示制御部(78)と、を備え、経路情報取得部は、ナビゲーション装置にて複数の経路案内が連続する連続案内であると判定された場合に、当該連続案内があることを示す経路案内情報を取得し、表示制御部は、連続案内を示す経路案内情報を経路情報取得部が取得した場合に、ナビゲーション装置が1つ目の経路案内と2つ目の経路案内とを共に開始する連続案内エリア(CGA)において、1つ目の経路案内を行う第1案内コンテンツ(CNT1)を表示させ、第1案内コンテンツを非表示とした後、2つ目の経路案内を行う第2案内コンテンツ(CNT2)を表示させる表示制御装置とされる。
また開示された一つの態様は、ナビゲーションディスプレイ(52)を搭載する車両(A)において用いられ、ヘッドアップディスプレイ(20)による路面への重畳表示を制御する表示制御プログラムであって、少なくとも一つの処理部(11)に、目的地までの経路案内に用いられる経路案内情報を取得し(S101)、経路案内情報に基づき、ナビゲーションディスプレイによって行われる経路案内が、複数の経路案内を連続して行う連続案内であるか否かを判定し(S102)、経路案内情報から生成する経路案内コンテンツ(CNTg)を、ヘッドアップディスプレイによって路面に重畳表示させ(S105)、連続案内を示す経路案内情報を取得した場合に、1つ目の経路案内と2つ目の経路案内とがナビゲーションディスプレイによって共に開始される連続案内エリア(CGA)において、1つ目の経路案内を行う第1案内コンテンツ(CNT1)を表示させ、第1案内コンテンツを非表示とした後、2つ目の経路案内を行う第2案内コンテンツ(CNT2)を表示させる、ことを含む処理を実行させる表示制御プログラムとされる。
これらの態様では、ナビゲーション装置又はナビゲーションディスプレイにて、1つ目の経路案内と2つ目の経路案内とが共に開始されるため、連続案内の全体像がユーザによって把握され得る。そのため、ヘッドアップディスプレイは、個々の経路案内に特化した情報提示を実施でき、具体的には、1つ目の経路案内を行う第1案内コンテンツを非表示とするまで、2つ目の経路案内を行う第2案内コンテンツの表示を待機させる。このように、第1案内コンテンツ及び第2案内コンテンツを順に表示させることで、ユーザにとって認識し易い連続案内の重畳表示が実現される。
尚、上記括弧内の参照番号は、後述する実施形態における具体的な構成との対応関係の一例を示すものにすぎず、技術的範囲を何ら制限するものではない。
本開示の一実施形態によるHCUを含む車載ネットワークの全体像を示す図である。 車両に搭載されるHUD装置の一例を示す図である。 HCUの概略的な構成の一例を示す図である。 表示生成部によるコンテンツの描画処理の詳細を示す図である。 右左折地点及び連続地点を連続して案内するシーンの一例を説明するための図である。 第1案内コンテンツの表示終了タイミングの1つの例を説明するための図である。 右左折地点を案内する第1案内コンテンツの1つの表示例を示す図である。 第2案内コンテンツの表示開始タイミングの1つの例を説明するための図である。 連続地点を案内する第2案内コンテンツの1つの表示例を示す図である。 HCUにて実施される案内表示処理の詳細を示すフローチャートである。 第2案内コンテンツの表示開始が適切でない場合の表示を比較例として示す図である。 接続道路の路側域に遮蔽物がない場合に、第2案内コンテンツの表示開始を早めることの効果を説明するための図である。 変形例1の第1案内コンテンツの表示終了タイミングを説明するための図である。 変形例2の第2案内コンテンツの表示開始タイミングを説明するための図である。 連続地点での右折シーンを説明するための図である。 変形例3の第2案内コンテンツの表示開始タイミングを説明するための図である。 変形例4の第2案内コンテンツの1つの表示例を示す図である。
本開示の一実施形態による表示制御装置の機能は、図1及び図2に示すHCU(Human Machine Interface Control Unit)100によって実現されている。HCU100は、車両Aにおいて用いられるHMI(Human Machine Interface)システム10を、ヘッドアップディスプレイ(Head Up Display,以下、「HUD」)装置20等と共に構成している。HMIシステム10には、操作デバイス26及びDSM(Driver Status Monitor)27等がさらに含まれている。HMIシステム10は、車両Aの乗員(例えばドライバ等)による操作を受け付ける入力インターフェース機能と、ドライバへ向けて情報を提示する出力インターフェース機能とを備えている。
HMIシステム10は、車両Aに搭載された車載ネットワーク1の通信バス99に、通信可能に接続されている。HMIシステム10は、車載ネットワーク1に設けられた複数のノードのうちの一つである。車載ネットワーク1の通信バス99には、例えば周辺監視センサ30、ロケータ40、ナビゲーション装置50、車両制御ECU(Electronic Control Unit)54、運転支援ECU57等がノードとして接続されている。通信バス99に接続されたこれらのノードは、相互に通信可能となっている。
尚、以下の説明における前後及び左右の各方向は、水平面上に静止させた車両Aを基準として規定される。具体的に、前後方向は、車両Aの長手方向に沿って規定される。また左右方向は、車両Aの幅方向に沿って規定される。
周辺監視センサ30は、車両Aの周辺環境を監視する自律センサである。周辺監視センサ30は、自車周囲の検出範囲から、歩行者、サイクリスト、人間以外の動物、及び他車両等の移動物体、さらに路上の落下物、ガードレール、縁石、走行区画線等の路面表示、及び道路脇の構造物等の静止物体、を検出可能である。周辺監視センサ30は、車両Aの周囲(特に前方範囲)の物体を検出した検出情報を、通信バス99を通じて、運転支援ECU57及びHCU100等に提供する。
周辺監視センサ30は、物体検出のための検出構成として、フロントカメラ31、ミリ波レーダ32及びライダ33を有している。フロントカメラ31は、車両Aの前方範囲を撮影した撮像データ、及び撮像データの解析結果の少なくとも一方を、検出情報として出力する。ミリ波レーダ32は、ミリ波又は準ミリ波を前方範囲へ向けて照射し、移動物体及び静止物体等で反射された反射波を受信する処理により、外部に出力される検出情報を生成する。ライダ33は、レーザ光を前方範囲へ向けて照射し、移動物体及び静止物体等で反射された反射光を受信する処理により、外部に出力される検出情報を生成する。
ロケータ40は、複数の取得情報を組み合わせる複合測位により、車両Aの高精度な位置情報等を生成する。ロケータ40は、例えば複数車線のうちで、車両Aが走行する車線を特定可能である。ロケータ40は、GNSS(Global Navigation Satellite System)受信器41、慣性センサ42、高精度地図データベース(以下、「DB」)43及びロケータECU44等によって構成されている。
GNSS受信器41は、複数の人工衛星(測位衛星)から送信された測位信号を受信する。GNSS受信器41は、GPS、GLONASS、Galileo、IRNSS、QZSS、Beidou等の衛星測位システムのうちで、少なくとも一つの衛星測位システムの各測位衛星から、測位信号を受信可能である。
慣性センサ42は、例えばジャイロセンサ及び加速度センサを備えている。高精度地図DB43は、不揮発性メモリを主体に構成されており、ナビゲーション装置50にて用いられるよりも高精度な地図データ(以下、「高精度地図データ」)を記憶している。高精度地図データには、区画線及び道路標示に関する情報、路側域にある構造物の3次元形状情報、並びに道路レーン数情報及び3次元形状情報等が含まれている。
ロケータECU44は、プロセッサ、RAM、記憶部、入出力インターフェース、及びこれらを接続するバス等を備えたマイクロコンピュータを主体に構成されている。ロケータECU44は、GNSS受信器41で受信する測位信号、慣性センサ42の計測結果、及び通信バス99に出力された車速情報等を組み合わせ、車両Aの自車位置及び進行方向等を逐次測位する。ロケータECU44は、測位結果に基づく車両A(自車)の位置情報及び方角情報を、通信バス99を通じて、ナビゲーション装置50及びHCU100等に提供する。加えてロケータECU44は、HCU100等からの要求に応じて、必要とされた高精度地図データが高精度地図DB43にあるか否かを判定する。要求された高精度地図データが高精度地図DB43にある場合、ロケータECU44は、該当する高精度地図データを高精度地図DB43から読み出し、要求元であるHCU100に提供する。
ナビゲーション装置50は、HMIシステム10と連携し、乗員によって設定された目的地までの経路案内を実施する車載装置である。ナビゲーション装置50は、HCU100等と共に、車両Aの表示システム110を構築している。ナビゲーション装置50は、ナビゲーション用の地図データベース(以下、「ナビ地図DB」)51、ナビゲーションディスプレイ52、及びナビゲーションECU53を有している。
ナビ地図DB51は、不揮発性メモリを主体に構成されており、高精度地図DB43よりも広範囲の地図データを網羅的に記憶している。ナビ地図DB51に格納されたナビ地図データには、道路についてのリンクデータ、ノードデータ、及び形状データ等が記載されている。
ナビゲーションディスプレイ52は、例えば液晶ディスプレイ及び有機ELディスプレイ等の画像表示器である。ナビゲーションディスプレイ52は、例えばインスツルメントパネル9の上面中央又はセンタークラスタ等に設置されている。ナビゲーションディスプレイ52の画面には、経路案内のための(以下、「経路案内画像」)が表示される。経路案内画像は、ナビ地図データに基づくマップ画像部、目的地及び経由地へのルートを示すルート画像部、目的地及び経由地等を示す地点画像部等によって構成されている。
ナビゲーションECU53は、プロセッサ、RAM、記憶部、入出力インターフェース、及びこれらを接続するバス等を備えたマイクロコンピュータを主体に構成されている。ナビゲーションECU53は、車両A(自車)の位置情報及び方角情報を、通信バス99を通じてロケータECU44より取得する。
ナビゲーションECU53は、通信バス99及びHCU100を通じて、操作デバイス26に入力された操作情報を取得し、ユーザ操作に基づく目的地を設定する。ナビゲーションECU53は、目的地までの複数経路を、例えば時間優先及び距離優先等の条件を満たすように探索する。探索された複数経路のうちの一つが選択されると、ナビゲーションECU53は、当該設定経路に基づく経路情報を、関連するナビ地図データと共に、通信バス99を通じて、HCU100に提供する。
ナビゲーションECU53は、交差点等のような分岐ポイント、設定経路の目的地、並びに一時停止等の警報ポイントが接近した場合、HMIシステム10へ向けた案内実施要求を出力する。HMIシステム10では、案内実施要求に基づき、ドライバへ向けた経路案内が、HUD装置20等によって実施される。以下の説明では、こうしたドライバへの経路案内が実施される設定経路上のポイントを、「経路案内ポイント」とする。
ナビゲーションECU53は、目的地までの経路を計算し、目的地までの経路案内情報を生成する。ナビゲーションECU53は、目的地までの経路案内について、自車の直近に存在する1つ目の経路案内ポイントから2つ目の経路案内ポイントまでのポイント間距離を把握する。ナビゲーションECU53は、ポイント間距離が所定の距離(「閾値距離」,例えば、150〜数百m程度)以下である場合、複数の経路案内が連続する連続案内であると判定する。この場合、ナビゲーションECU53は、ナビゲーションディスプレイ52によって行われる経路案内が、複数の経路案内を連続して行う連続案内である旨の通知(フラグ)を、経路案内情報に含ませて、HCU100に提供する。
ナビゲーションECU53は、直近の経路案内が連続案内であると判定した場合、1つ目の経路案内を行う表示と共に、2つ目の経路案内を行う表示を開始する。2つ目の経路案内の表示は、1つ目の経路案内の表示と実質同時に開始されてよく、又は1つ目の経路案内の表示から僅かに遅れて開始されてもよい。また、1つ目の経路案内の表示は、2つ目の経路案内の表示が消されるまで表示を継続されてもよく、又は2つ目の経路案内の表示よりも先に非表示とされてよい。尚、ナビゲーション装置50にて、1つ目の経路案内と2つ目の経路案内とが共に開始されるエリアを、連続案内エリアCGA(図5参照)とする。連続案内エリアCGAには、2つの経路案内ポイントと、これらを接続する接続道路Rc(図5参照)とが少なくとも含まれる。
車両制御ECU54は、車両Aの加減速制御及び操舵制御等を行う電子制御装置である。車両制御ECU54は、ドライバの運転操作を検出するセンサ群、例えば操舵角センサ55、アクセルポジションセンサ及びブレーキストロークセンサ等と接続されている。車両制御ECU54は、車両Aの走行に関連するアクチュエータ群、例えばEPS(Electric Power Steering)モータ、電子制御スロットル及びインジェクタ、並びにブレーキアクチュエータ等と接続されている。
車両制御ECU54は、センサ群による計測情報(例えば操舵角情報)を、通信バス99に出力すると共に、後述する運転操作情報を、通信バス99を通じて運転支援ECU57から取得する。車両制御ECU54は、センサ群による計測情報又は運転支援ECU57から取得する運転操作情報に基づき、アクチュエータ群の各作動、ひいては車両Aの挙動を制御する。
運転支援ECU57は、ドライバによる運転操作を支援する運転支援機能、及びドライバの運転操作を代行可能な自動運転機能の少なくとも一方を備えている。運転支援機能又は自動運転機能には、走行速度又は車間距離を制御するACC(Adaptive Cruise Control)機能、車線に合わせて操舵角を制御するLTC(Lane Trace Control)機能等が含まれている。運転支援機能には、車両Aを強制的に減速させるAEB(Autonomous Emergency Braking)機能等がさらに含まれていてもよい。
運転支援ECU57は、周辺監視センサ30から取得する検出情報に基づき、車両Aの周囲の走行環境を認識する。運転支援ECU57は、走行環境の認識結果に基づき、運転支援又は自動運転のための運転操作情報を生成する。運転支援ECU57は、生成した運転操作情報の車両制御ECU54への提供により、上述の加減速制御及び操舵制御を車両制御ECU54に実行させる。
運転支援ECU57は、走行環境認識のために実施した検出情報の解析結果を、解析済みの検出情報として、HCU100に提供可能である。一例として、運転支援ECU57は、フロントカメラ31の撮像データ等から抽出された情報、具体的には、走行中の道路の区画線(白線)及び道路端の相対位置情報を、HCU100に提供できる。加えて運転支援ECU57は、道路脇の路側域に設けられた構造物等の種別情報及び3次元形状情報等も、HCU100に提供できる。
次に、HMIシステム10に含まれる操作デバイス26、DSM27、HUD装置20及びHCU100の詳細を説明する。
操作デバイス26は、ドライバ等によるユーザ操作を受け付ける入力部である。操作デバイス26には、例えば運転支援機能及び自動運転機能等について、起動及び停止の切り替えを行うユーザ操作が入力される。具体的には、ステアリングホイールのスポーク部に設けられたステアスイッチ、ステアリングコラム部8に設けられた操作レバー、及びドライバの発話を検出する音声入力装置等が、操作デバイス26に含まれる。
DSM27は、近赤外光源及び近赤外カメラと、これらを制御する制御ユニットとを含む構成である。DSM27は、運転席のヘッドレスト部分に近赤外カメラを向けた姿勢にて、例えばステアリングコラム部8の上面又はインスツルメントパネル9の上面等に設置されている。DSM27は、近赤外光源によって近赤外光を照射されたドライバの頭部を、近赤外カメラによって撮影する。近赤外カメラによる撮像画像は、制御ユニットによって画像解析される。制御ユニットは、アイポイントEPの位置及び視線方向等の情報を撮像画像から抽出し、抽出した状態情報をHCU100へ向けて逐次出力する。
HUD装置20は、マルチインフォメーションディスプレイ及びナビゲーションディスプレイ52等と共に、複数の車載表示デバイスの一つとして、車両Aに搭載されている。HUD装置20は、虚像Viを用いた拡張現実(Augmented Reality,以下「AR」)表示により、車両Aに関連する種々の情報をドライバに提示する。HUD装置20は、通常の虚像Vi(以下、「非ARコンテンツ」)と、AR表示される虚像Vi(以下、「ARコンテンツ」)とを使い分け、ドライバへの情報提示を実施する。
非ARコンテンツは、ウィンドシールドWS等の車両構成に相対固定されているように表示される。一方で、ARコンテンツは、前景中の重畳対象に相対固定されているように、重畳対象を追って、ドライバの見た目上で移動可能である。ARコンテンツは、例えばドライバから見た奥行き方向に延伸した表示形状とされ、重畳対象の相対位置及び形状に合わせて、所定の周期で形状を更新され続ける。
HUD装置20は、HCU100と電気的に接続されており、HCU100によって生成された映像データを逐次取得する。HUD装置20は、ウィンドシールドWSの下方にて、インスツルメントパネル9内の収容空間に収容されている。HUD装置20は、虚像Viとして結像される光を、ウィンドシールドWSの投影範囲PAへ向けて投影する。ウィンドシールドWSに投影された光は、投影範囲PAにおいて運転席側へ反射され、ドライバによって知覚される。ドライバは、投影範囲PAを通して見える前景中の重畳対象に、虚像Viが重畳された表示を視認する。
HUD装置20は、プロジェクタ21及び拡大光学系22等によって構成されている。プロジェクタ21は、LCD(Liquid Crystal Display)パネル及びバックライトを有している。プロジェクタ21は、LCDパネルの表示面を拡大光学系22へ向けた姿勢にて、HUD装置20の筐体に固定されている。プロジェクタ21は、映像データの各フレーム画像をLCDパネルの表示面に表示し、当該表示面をバックライトによって透過照明することで、虚像Viとして結像される光を拡大光学系22へ向けて射出する。拡大光学系22は、合成樹脂又はガラス等からなる基材の表面にアルミニウム等の金属を蒸着させた凹面鏡を、少なくとも一つ含む構成である。拡大光学系22は、プロジェクタ21から射出された光を反射によって広げつつ、上方の投影範囲PAに投影する。
以上のHUD装置20には、画角VAが設定される。HUD装置20にて虚像Viを結像可能な空間中の仮想範囲を結像面ISとすると、画角VAは、ドライバのアイポイントEPと結像面ISの外縁とを結ぶ仮想線に基づき規定される視野角である。画角VAは、アイポイントEPから見て、ドライバが虚像Viを視認できる角度範囲となる。HUD装置20では、垂直方向における垂直画角(例えば4〜5°程度)よりも、水平方向における水平画角(10〜12°程度)の方が大きくされている。アイポイントEPから見たとき、結像面ISと重なる前方範囲が画角VA内の範囲となる。
HCU100は、HMIシステム10において、HUD装置20を含む複数の表示デバイスによる表示を統合的に制御する電子制御装置である。HCU100は、処理部11、RAM12、記憶部13、入出力インターフェース14、及びこれらを接続するバス等を備えたコンピュータを主体に構成されている。処理部11は、RAM12と結合された演算処理のためのハードウェアである。処理部11は、CPU(Central Processing Unit)及びGPU(Graphics Processing Unit)等の演算コアを少なくとも一つ含む構成である。処理部11は、FPGA(Field-Programmable Gate Array)及び他の専用機能を備えたIPコア等をさらに含む構成であってよい。RAM12は、映像生成のためのビデオRAMを含む構成であってよい。処理部11は、RAM12へのアクセスにより、後述する各機能部の機能を実現するための種々の処理を実行する。記憶部13は、不揮発性の記憶媒体を含む構成である。記憶部13には、処理部11によって実行される種々のプログラム(表示制御プログラム等)が格納されている。
図1〜図3に示すHCU100は、記憶部13に記憶されたプログラムを処理部11によって実行し、複数の機能部を備える。具体的に、HCU100には、視点位置特定部70、経路情報取得部71、位置情報取得部72、自車情報取得部73、外界情報取得部74、連続案内判定部75、路側物体判定部76、車両姿勢推定部77及び表示生成部78等の機能部が構築される。視点位置特定部70、経路情報取得部71、位置情報取得部72、自車情報取得部73及び外界情報取得部74は、通信バス99から情報を取得する機能部である。
視点位置特定部70は、DSM27から取得する状態情報に基づき、運転席に着座しているドライバのアイポイントEPの位置を特定する。視点位置特定部70は、アイポイントEPの位置を示す3次元の座標(以下、「アイポイント座標」)を生成し、生成したアイポイント座標を、表示生成部78に逐次提供する。
経路情報取得部71は、ナビゲーション装置50に目的地が設定されている場合に、目的地までの経路案内に関する経路案内情報と、経路案内に用いられるナビ地図データとを、ナビゲーションECU53から取得する。加えて経路情報取得部71は、案内ポイントへの接近に基づき、ナビゲーションECU53によって出力される案内実施要求を、経路案内情報及びナビ地図データ等と共に取得する。ナビゲーション装置50にて連続案内が実施される場合、経路情報取得部71は、連続案内があることを示す通知(以下、「連続案内通知」)を含んだ経路案内情報を取得する。
経路情報取得部71は、ナビ地図データと共に、又はナビ地図データに替えて、高精度地図データをロケータ40から取得する処理を実施できる。経路情報取得部71は、ナビゲーションECU53から取得した経路案内情報に基づき、関連する高精度地図データの提供をロケータECU44に要求する。こうして要求された高精度地図データが高精度地図DB43に格納されている場合、経路情報取得部71は、ロケータECU44から返信される高精度地図データを取得する。
位置情報取得部72は、車両Aの位置情報及び方角情報を、ロケータECU44から取得する。自車情報取得部73は、車両Aの走行状態を示す自車情報の一つとして、操舵角センサ55によって計測された最新の操舵角情報を、車両制御ECU54から取得する。加えて自車情報取得部73は、特にピッチ方向の車両姿勢に関連する姿勢情報を取得する。具体的に、自車情報取得部73は、ハイトセンサの出力に基づくハイト情報と、車両Aに発生する制動トルク及び駆動トルクを示すトルク情報とを、姿勢情報として取得する。
外界情報取得部74は、周辺監視センサ30及び運転支援ECU57の少なくとも一方から、車両Aの前方範囲についての検出情報を取得する。検出情報は、フロントカメラ31によって撮影された前方範囲の撮像データ等であってもよく、或いは周辺監視センサ30又は運転支援ECU57での走行環境認識によって得られた解析結果であってもよい。
検出情報が解析結果である場合、当該解析結果には、上述したような前方範囲における区画線又は道路端の相対位置を示す情報が含まれている。加えて解析結果としての検出情報は、前方範囲の道路脇に設けられた構造物であって、例えばドライバの側方視界を遮るような遮蔽物BO(図9参照)等についての種別情報及び3次元形状情報を少なくとも含んでいる。尚、遮蔽物BOは、例えばビル等の建築物や、路側域の敷地を取り囲む塀等である。
連続案内判定部75は、連続案内を実施するか否かを判定する。例えば連続案内は、車両A(自車)の右左折を案内する案内ポイント(以下、「右左折地点P1」,図5参照)と、当該右左折地点P1の次に案内を実施する案内ポイント(以下、「連続地点P2」,図5参照)とが連続する場合に実施される。連続案内判定部75は、経路情報取得部71にて取得される経路案内情報に、複数の案内ポイントの連続を示す連続案内通知が含まれているか否かを判定する。連続案内判定部75は、経路案内情報に連続案内通知がある場合、連続案内の実施を、表示生成部78に通知する。
連続案内判定部75は、連続案内通知を取得した場合、2つの案内ポイント間の距離を把握する。連続案内判定部75は、ポイント間距離が所定距離(例えば100m程度)よりも短いか否かを判定する。この所定距離は、連続地点P2の経路案内の内容把握に必要な時間が確保されるように規定される。連続案内判定部75は、上述の所定距離よりもポイント間距離が短い場合、2つの案内ポイントが非常に近接している旨の判定結果を表示生成部78に通知する。
ここで、右左折地点P1は、交差点等のように右折又は左折等の分岐が発生する案内ポイントに限定されてよい。一方、連続地点P2は、交差点等のような分岐ポイント、設定経路の目的地、並びに一時停止及び徐行等の注意喚起を行う警報ポイント等のいずれかであってよい。
加えて、3つ以上の案内ポイントが、互いに閾値距離未満の間隔で、設定経路上に連続していてもよい。この場合、最初の右左折地点P1と最後の連続地点P2とに挟まれた中間の連続地点P2は、右左折地点P1と同様に、交差点等のような分岐ポイントに限られる。例えば、複数回(4回)の分岐が連続発生する場合、ひと纏まりの経路案内情報には、複数(4つ)の案内ポイントの情報が含まれる。連続案内判定部75は、1つ目の案内ポイントを右左折地点P1とし、2〜4つ目の案内ポイントを便宜的に連続地点P2とする。
路側物体判定部76は、外界情報取得部74にて取得される検出情報に基づき、車両Aの走行する道路の路側域に、特定物体があるか否かを判定する。特定物体は、連続地点P2を案内する経路案内コンテンツCNTg(図9参照)の重畳対象として適切ではないとして、予め条件を設定された物体である。具体的に、路側物体判定部76は、上述したような路側域に設けられた遮蔽物BO(図9参照)を、特定物体として特定する。路側物体判定部76は、右左折地点P1(分岐ポイント)にて車両Aが右折又は左折を開始した後において、右左折地点P1から連続地点P2へ向かう道路(以下、「接続道路Rc」,図5参照)の路側域に、遮蔽物BOがあるか否かを判定する。接続道路Rcの路側域に遮蔽物BOがない場合、即ち、路側域が開けた状態である場合、路側物体判定部76は、遮蔽物BOがない旨の判定結果を表示生成部78に提供する。
車両姿勢推定部77は、右左折地点P1において旋回する車両Aの接続道路Rcに対する向きを、車両Aの走行方向として推定する。車両姿勢推定部77は、互いに異なる複数の取得情報を用いた複数の判定方法に基づき、車両Aの走行方向を推定可能である。車両姿勢推定部77は、車両Aの走行方向の推定結果を、少なくとも右左折地点P1を通過する前後の期間において、表示生成部78に逐次出力する。
車両姿勢推定部77は、1つ目の判定方法として、外界情報取得部74にて取得されるフロントカメラ31の検出情報に基づき、車両Aの走行方向を推定する。この検出情報は、フロントカメラ31の撮像データであってもよく、上述したような撮像データの解析結果であってもよい。車両姿勢推定部77は、検出情報に基づき、接続道路Rcにおける区画線又は道路端の相対位置を把握し、これらの延伸方向を基準として、車両Aの走行方向を推定する。
また車両姿勢推定部77は、2つ目の判定方法として、経路情報取得部71にて取得される地図データと、位置情報取得部72にて取得される方角情報とを用いて、車両Aの走行方向を判定する。地図データは、高精度地図データ及びナビ地図データのいずれであってもよい。車両姿勢推定部77は、接続道路Rcの区画線及び道路端の両方が撮像データから検出できない場合等に、地図データ及び方角情報を組み合わせた走行方向判定を実施する。
車両姿勢推定部77は、地図データに基づき、右左折地点P1へ向かう道路(以下、「第1道路R1」)及び接続道路Rcが、右左折地点P1にてなす交差角度θ1を算出する(図5参照)。加えて車両姿勢推定部77は、第1道路R1の延伸方向を基準として、方角情報に基づいて右左折地点P1における車両Aのヨー方向の姿勢変化角度を算定する。車両姿勢推定部77は、交差角度θ1及び姿勢変化角度基づき、車両Aの走行方向を推定する。
さらに車両姿勢推定部77は、3つ目の判定方法として、自車情報取得部73にて取得される操舵角情報を用いて、車両Aの走行方向を判定する。車両姿勢推定部77は、操舵角の減少に基づき、接続道路Rcの方向に車両Aが向いたことを推定する。車両姿勢推定部77は、例えば接続道路Rcの区画線及び道路端が検出困難であり、且つ、測位信号の受信環境が良好でない場合等に、操舵角情報を用いた走行方向の判定を実施する。
表示生成部78は、HUD装置20に逐次出力される映像データを生成する。表示生成部78は、コンテンツを選定する機能、選定したコンテンツを描画する機能、及び選定したコンテンツの表示期間を制御する機能等を有している。以下、コンテンツ選定機能及びコンテンツ描画機能の詳細を、図4に基づき、図1〜図3を参照しつつ説明する。
表示生成部78は、案内実施要求等の外部から取得する情報に基づき、HUD装置20によって表示させるコンテンツを選定する(S11参照)。表示生成部78は、表示対象とするARコンテンツ及び非ARコンテンツを、個別に選定可能である。表示生成部78は、ARコンテンツ及び非ARコンテンツの両方を虚像表示させる場合、ARコンテンツの元画像の描画処理(S21〜S24参照)と、非ARコンテンツの元画像の描画処理(S31参照)とを併行実施する。表示生成部78は、記憶部13に記憶されたパーツデータを組み合わせる等の画像処理により、選定した各コンテンツの元画像を準備する。
表示生成部78は、ARコンテンツの元画像の描画のため、3Dモデルを構築する(S21参照)。3Dモデルの構築には、外界情報取得部74にて取得される重畳対象(例えば路面等)の位置情報及び形状情報等が用いられる。表示生成部78は、構築した3Dモデルを、自車位置を基準とし、仮想空間に配置する(S22参照)。3Dモデルの配置には、車両姿勢推定部77にて推定された車両Aの走行方向を示す情報等が用いられる。
表示生成部78は、3Dモデルを配置した仮想空間に、仮想のカメラ位置及び仮想の拡大光学系22(又は結像面IS)の位置を設定する。表示生成部78は、視点変換処理により、仮想のカメラ位置から見た3Dモデルの形状を演算する(S23参照)。仮想空間における仮想のカメラ位置は、ドライバのアイポイントEPの位置に対応している。仮想のカメラ位置は、視点位置特定部70にて取得されるアイポイント座標に基づき補正される。さらに、仮想のカメラ位置及び光学系位置は、自車情報取得部73にて取得されるハイト情報及びトルク情報に基づき、車両Aの姿勢変化を反映した位置にそれぞれ補正される。以上のように、視点変換処理では、主に低周波数帯域(例えば、0.5Hz未満)の車両Aの姿勢変化及びドライバのアイポイントEPの変化について、それぞれの補正が実施される。
表示生成部78は、ARコンテンツの元画像の描画に併行して、選定した非ARコンテンツの元画像を描画する(S31参照)。表示生成部78は、併行して描画されたARコンテンツ及び非ARコンテンツの各元画像を合成し、出力画像を生成する(S41参照)。
ここで、表示生成部78は、HCU100に設けられたジャイロセンサ79から、最新の計測結果を取得する。ジャイロセンサ79は、車両Aに生じる姿勢変化のうちで、高周波数帯域(例えば、0.5〜2Hz程度)の姿勢変化を計測する計測部である。ジャイロセンサ79は、一例として、車両Aのピッチ方向及びロール方向の各角速度を計測し、その計測結果を表示生成部78に逐次出力する。
表示生成部78は、出力画像の生成処理において、ジャイロセンサ79の計測情報を参照し、高周波数帯域の姿勢変化を補正するように、出力画像におけるARコンテンツの元画像の位置を調整する。加えて表示生成部78は、拡大光学系22での反射に伴う光像の歪みが相殺されるように、予め規定された変形を出力画像に付与する。こうして歪み補正を適用された出力画像は、映像データにおける個々のフレーム画像となる。表示生成部78は、多数の出力画像よりなる映像データを、プロジェクタ21へ向けて逐次出力する(S42参照)。
次に、選定したコンテンツの表示期間を制御する機能の詳細を、図5〜図9に示す連続案内のシーンに基づき、図1〜図3を参照しつつ説明する。
表示生成部78は、ナビゲーションECU53より取得される経路案内情報を用いて、経路案内コンテンツCNTgをHUD装置20によって前景中の路面に重畳表示させる。経路案内情報には、各案内ポイントの位置情報、2つの案内ポイント間の距離情報、各交差点にて実施する右左折の方向、及びナビ地図データ等が含まれている。ナビ地図データには、走行中の道路の種別、交差点形状、交差点の車線数、及び各車線に許容された進行方向等が含まれている。
表示生成部78は、ナビゲーションECU53より通知される案内実施要求をトリガとして、経路案内情報に基づく経路案内コンテンツCNTgにより、案内ポイントでの経路案内を開始させる。連続案内のシーンでも、表示生成部78は、案内実施要求の取得に基づき、最初の経路案内コンテンツCNTgの表示を開始し、且つ、各経路案内コンテンツCNTgの表示開始タイミング及び表示終了タイミングを、それぞれ設定する。
表示生成部78は、経路情報取得部71にて取得されるナビ地図データ又は高精度地図データを参照し、走行中の道路の種別を判定する。表示生成部78は、走行中の道路が自動車専用道路及び高速自動車国道等の高速道路であるか否かに基づき、連続案内における経路案内コンテンツCNTgの提示方法を変更する。
詳記すると、表示生成部78は、走行中の道路が高速道路であると判定した場合、連続案内通知の取得に基づき、ナビゲーション装置50と同様の経路案内を実施する。即ち、表示生成部78は、1つ目の経路案内を行う第1案内ポイントに所定の距離(例えば1km)まで接近すると、1つ目の経路案内を行う経路案内コンテンツCNTgと、2つ目の経路案内を行う経路案内コンテンツCNTgとを、共に表示させる。
一方、表示生成部78は、走行中の道路が高速道路でないと判定した場合、連続案内通知の取得に基づき、複数の経路案内コンテンツCNTgの表示を順次開始させる。具体的に、右左折の経路案内が連続する連続案内エリアCGAにおいて、表示生成部78は、1つ目の経路案内を行う経路案内コンテンツCNTg(以下、「第1案内コンテンツCNT1」)を、連続案内通知の取得に基づき開始する。このとき、2つ目の経路案内を行う経路案内コンテンツCNTg(以下、「第2案内コンテンツCNT2」)の表示は、開始されない。表示生成部78は、第1案内コンテンツCNT1を非表示とした後で、第2案内コンテンツCNT2の表示を開始させる。尚、ナビゲーション装置50は、上述したように、連続案内エリアCGAにて、1つ目の経路案内を行う経路案内画像の表示と、2つ目の経路案内を行う経路案内画像の表示とを、共に開始する。
表示生成部78は、設定経路に沿った車両Aの走行に合わせるかたちで、各案内ポイントの手前にて、準備した描画データを各フレーム画像に描画する処理を開始し、経路案内コンテンツCNTgの表示を開始させる。加えて表示生成部78は、各案内ポイントに関連する位置にて、描画データを各フレーム画像に描画する処理を終了し、経路案内コンテンツCNTgの表示を終了させる。以下、図5に示す連続案内エリアCGAでの第1案内コンテンツCNT1及び第2案内コンテンツCNT2の表示開始タイミング及び表示終了タイミングの詳細を、さらに説明する。
<第1案内コンテンツの表示開始タイミング>
ナビゲーションECU53は、1つ目の交差点(右左折地点P1)の所定距離(例えば300m)手前にて、案内実施要求と共に、連続案内通知を含んだ経路案内情報を、HCU100に出力する。表示生成部78は、経路情報取得部71による案内実施要求の取得に基づき、経路案内情報を用いて、経路案内コンテンツCNTgとしての第1案内コンテンツCNT1の表示を開始させる。
第1案内コンテンツCNT1は、右左折地点P1での右折を指示する右折コンテンツである(図7参照)。第1案内コンテンツCNT1は、第1道路R1の路面に重畳表示され、経路案内情報に基づく車両Aの予定走行軌跡を、ドライバに示す。第1案内コンテンツCNT1は、右左折地点P1への進入経路と、右左折地点P1からの退出経路とをAR表示する。こうした表示により、第1案内コンテンツCNT1は、右左折地点P1到達までの右折車線への移動実施と、右左折地点P1での右折実施とを、ドライバに促す内容となる。
<第1案内コンテンツの表示終了タイミング>
表示生成部78は、右左折地点P1に車両Aが到達する以前に、第1案内コンテンツCNT1を非表示とする。具体的に、表示生成部78は、経路情報取得部71にて取得される地図データと、位置情報取得部72にて取得される車両A(自車)の位置情報とに基づき、自車から右左折地点P1までの距離を把握する。表示生成部78は、右左折地点P1までの距離が所定の距離(以下、「終了距離Lh1」)未満となると(図6参照)、第1案内コンテンツCNT1の表示を終了する。終了距離Lh1は、例えば15m程度に設定されている。終了距離Lh1は、一例として、右左折地点P1を含む交差点が画角VAの下側にフレームアウトする距離に設定される。尚、本実施形態では、第1案内コンテンツCNT1の表示終了から、第2案内コンテンツCNT2の表示開始までの間に、経路案内コンテンツCNTgを表示させないインターバルが設けられる。
<第2案内コンテンツの表示開始タイミング>
表示生成部78は、右左折地点P1にて車両Aの右折が開始されると、車両姿勢推定部77より走行方向の判定結果を取得する。表示生成部78は、接続道路Rcに対する車両Aの走行方向と、車両A(自車)から連続地点P2までの距離とに基づき、連続地点P2の経路案内を行う第2案内コンテンツCNT2の表示開始を制御する。表示生成部78は、車両Aが連続地点P2に所定の距離まで接近しており、且つ、車両Aの走行方向が接続道路Rcの延伸方向に近づくと、第2案内コンテンツCNT2の表示を開始させる。
詳記すると、表示生成部78は、2つ目の経路案内の対象である連続地点P2を含むように、第2案内コンテンツCNT2の表示予定位置を設定する(図8参照)。第2案内コンテンツCNT2は、基端画像部PeB及び先端画像部PeTを含む重畳コンテンツとされている。基端画像部PeBは、第2案内コンテンツCNT2において、連続地点P2から自車側となる路面範囲、即ち、接続道路Rcの路面に重畳される画像要素群である。一方、先端画像部PeTは、第2案内コンテンツCNT2において、連続地点P2から進行方向側となる路面範囲に重畳される画像要素である。先端画像部PeTの重畳範囲は、連続地点P2から予定走行方向に例えば数m〜20m程度の長さに設定される。
表示生成部78は、3Dオブジェクトを用いた仮想空間でのレイアウトシミュレーション(図4 S23参照)の結果に基づき、HUD装置20の画角VAと、第2案内コンテンツCNT2に対応する3Dオブジェクトとの位置関係を把握する。表示生成部78は、表示予定位置への重畳を仮定した第2案内コンテンツCNT2において、基端画像部PeBの少なくとも一部が画角VA内であると判定したことに基づき(図8 斜線範囲参照)、第2案内コンテンツCNT2の表示を開始させる。
第2案内コンテンツCNT2は、接続道路Rcの路面に重畳表示され、経路情報に基づく車両Aの予定走行軌跡をドライバに示す経路案内コンテンツCNTgである(図9参照)。第2案内コンテンツCNT2は、連続地点P2への進入経路と、連続地点P2からの退出経路とをAR表示する。こうした表示により、第2案内コンテンツCNT2は、連続地点P2の相対位置を示すと共に、連続地点P2での左折実施をドライバに促す内容となる。
さらに、表示生成部78は、右左折地点P1から連続地点P2までのポイント間距離に応じて、第2案内コンテンツCNT2の表示開始タイミングを調整可能である。一例として、連続案内判定部75にてポイント間距離が所定の距離(例えば、100m程度)よりも短いと判定されている場合、表示生成部78は、第2案内コンテンツCNT2の表示開始タイミングを早める調整を実施する。
例えば、接続道路Rcに対して車両Aが概ね真っ直ぐとなったタイミングまで第2案内コンテンツCNT2の表示開始を待機してしまうと、第2案内コンテンツCNT2は、連続地点P2の直前(例えば、20m程度)で表示開始となる虞がある。この場合、経路案内の内容理解に必要な時間の確保が困難となり、且つ、連続地点P2が画角VA外となる虞もあるため、経路案内は、意味をなさなくなる。
故に、表示生成部78は、右左折地点P1及び連続地点P2間のポイント間距離が所定の距離より短い場合、第2案内コンテンツCNT2の表示開始条件を緩和する。一例として、表示生成部78は、第1案内コンテンツCNT1の表示終了直後、又は車両Aが右左折地点P1を通過したタイミングで、第2案内コンテンツCNT2の表示を開始させる。このとき、表示生成部78は、アイコン状の様態に変更した第2案内コンテンツCNT2を、非AR表示させてもよい。以上のような第2案内コンテンツCNT2の非AR表示は、例えば住宅地等の細街路で、ポイント間距離が確保されない場合に、ドライバの認識し易さ向上に寄与できる。
また表示生成部78は、第2案内コンテンツCNT2の表示開始タイミングを、接続道路Rcの路側域の見通し状況に応じて変更する。車両姿勢推定部77は、路側物体判定部76にて接続道路Rcの路側域に遮蔽物BO(図12参照)がないと判定された場合、路側域に遮蔽物BOあると判定される場合よりも、第2案内コンテンツCNT2の表示開始を早める調整を実施する。一例として、表示生成部78は、表示予定位置への重畳を仮定した第2案内コンテンツCNT2の少なくとも一部が画角VA内であると判定したことに基づき、第2案内コンテンツCNT2の表示を開始させてよい。
さらに表示生成部78は、第2案内コンテンツCNT2の種別、換言すれば、2つ目の案内ポイントの種別に応じて、第2案内コンテンツCNT2の表示開始タイミングを変更する。表示生成部78は、2つ目の案内ポイントが目的地等である場合、ゴール地点となる路側域の建物等に第2案内コンテンツCNT2を重畳表示させる。この場合、第2案内コンテンツCNT2は、目的地を示すピン形状等となる。故に、表示生成部78は、第2案内コンテンツCNT2の少なくとも一部が画角VA内であると判定したことに基づき、第2案内コンテンツCNT2の表示を開始させてよい。
<第2案内コンテンツの表示終了タイミング>
表示生成部78は、車両A(自車)の位置情報を把握し、連続地点P2への接近又は通過に基づき、第2案内コンテンツCNT2の表示を終了する。一例として、表示生成部78は、例えば第1案内コンテンツCNT1と同様に、連続地点P2までの距離が所定の距離(例えば、15m)未満となると、第2案内コンテンツCNT2の表示を終了する。さらに別の一例として、表示生成部78は、車両Aが連続地点P2を通過したタイミングで、又は、連続地点P2を通過した後、所定の距離を走行したタイミングで、第2案内コンテンツCNT2の表示を終了する。
次に、HCU100にて実施される案内表示処理の詳細を、図10に示すフローチャートに基づき、図5〜図9を参照しつつ、以下説明する。図10に示す案内表示処理は、ナビゲーションECU53(図1参照)からHCU100に通知される案内実施要求に基づいて開始される。
S101では、今回の案内表示処理の開始トリガとなった案内実施要求に関連するナビゲーション関連情報、具体的には、車両Aの位置情報、方角情報及び経路案内情報等を取得し、S102に進む。
S102では、S101にて取得した経路案内情報を参照し、経路案内情報に連続案内情報が含まれるか否かに基づき、連続案内を行うか否かを判定する。S102にて、連続案内を行わないと判定した場合、S104に進む。一方、S102にて、連続案内を行うと判定した場合、S103に進む。S103では、経路案内情報に基づき、連続している案内ポイントの数を設定する。加えてS103では、連続案内エリアCGAにおける一連の経路案内情報を個々の案内ポイントの情報として分離し、S104に進む。
S104では、案内ポイントを計数するカウンタの数値を「1」に設定し、S105に進む。S105では、カウンタの数値に基づき、現在(第N番目)の案内ポイントについての経路案内コンテンツCNTgを生成する。具体的には、映像データへの経路案内コンテンツCNTgの元画像の描画により、当該経路案内コンテンツCNTgのAR表示を開始させて、S106に進む。
S106では、表示中の経路案内コンテンツCNTgに対応する表示終了タイミングを設定し、S107に進む。S107では、次(第N+1番目)の案内ポイントの有無を判定する。S107にて、次の案内ポイントが無いと判定した場合、S109に進む。一方、S107にて、次(第N+1番目)の案内ポイント(連続地点P2等)があると判定した場合、S108に進む。S108では、次の案内ポイントを案内する経路案内コンテンツCNTgの表示開始タイミングを設定し、S109に進む。
S109では、S106にて設定した表示終了タイミングになったか否かを判定する。S109にて、表示終了タイミングになったと判定した場合、S110に進む。現在(第N番目)の経路案内コンテンツCNTgの表示を終了し、S111に進む。
S111では、S103にて設定した案内ポイントに残りがあるか否かを判定する。S111にて、残りの案内ポイントがないと判定した場合、今回の案内実施要求に基づく一連の案内表示処理を終了する。一方で、S111にて、残りの案内ポイントがあると判定した場合、S112に進む。
S112では、案内ポイントのカウンタの値を1つ増やし、S113に進む。S113では、直前のS108にて設定した表示開始タイミングになったか否かを判定する。S112にて、表示開始タイミングになったと判定した場合、S105に進む。2回目以降のS105では、S112にてインクリメントされたカウンタの値に基づき、次(第N+1番目)の案内ポイント、即ち連続地点P2を案内する第2案内コンテンツCNT2の生成及びAR表示を開始する。そして、以降のS107〜S113にて、AR表示の終了又は開始を待機する。こうして全ての案内ポイントでの経路案内を完了した場合、今回の案内実施要求に基づく一連の案内表示処理を終了する。
ここまで説明した本実施形態の解決課題及び作用効果を、以下説明する。
ナビゲーション装置50は、連続案内エリアCGAにおいて、1つ目の経路案内画像を表示すると共に、2つ目の経路案内画像をナビゲーションディスプレイ52に表示させる「連続案内」を実施する。こうした「連続案内」に際し、HCU100は、複数の案内ポイントの情報を含んだ経路案内情報を取得した場合に、1つ目の案内ポイントを案内する案内コンテンツと、2つ目の案内ポイントを案内する案内コンテンツとを、共に表示させることも可能である。
しかし、HUD装置20の画角VAには左右方向の制限がある。故に、1つ目の案内ポイントの案内コンテンツの表示開始に合わせて、2つ目の案内ポイントの案内コンテンツまで表示させたとしても、この案内コンテンツは、多くのシーンにおいて画角VAから見切れる可能性が高くなる。その結果、早期に表示を開始した2つ目の案内コンテンツは、経路案内の情報提示をかえって認識し難くする可能性があった。さらに、2つ目の案内コンテンツは、車両Aの現在位置から遠い位置に重畳表示されるため、表示サイズが小さくなり、より認識し難くなる可能性もあった。
こうした課題を解決するため、本実施形態では、ナビゲーション装置50が複数の経路案内画像の表示を共に開始する連続案内エリアCGAにおいて、HCU100は、複数の案内エリアを案内する経路案内コンテンツCNTgを順次表示させる。即ち、HCU100は、1つ目の経路案内を行う第1案内コンテンツCNT1を表示させ、この第1案内コンテンツCNT1を非表示とした後、2つ目の経路案内を行う第2案内コンテンツCNT2を表示させる。
以上の本実施形態では、ナビゲーション装置50にて、1つ目の経路案内と2つ目の経路案内とが共に開始されるため、連続案内の全体像がユーザによって把握され得る。そのため、HCU100は、個々の経路案内に特化した情報提示を実施でき、具体的には、1つ目の経路案内を行う第1案内コンテンツCNT1を非表示とするまで、2つ目の経路案内を行う第2案内コンテンツCNT2の表示を待機させる。以上のように、第1案内コンテンツCNT1及び第2案内コンテンツCNT2を順に表示させることで、表示システム110及びHCU100は、ユーザにとって認識し易い連続案内の重畳表示を実現できる。
また図11に示す比較例のように、右左折地点での旋回中に次の案内ポイント(連続地点)を案内するコンテンツCNTXの表示が開始された場合、このコンテンツCNTXの少なくとも一部は、路側域の遮蔽物BOに重畳表示されてしまい得る。例えば、ナビゲーションECU53にて実施されるマップマッチング処理の結果に基づき、コンテンツCNTXへの切り替えを実施した場合、この比較例のような重畳表示が発生し易くなる。そして、車両Aが道路正面を向いていない段階で表示を開始されたコンテンツCNTXは、ドライバに誤解を与えたり、煩わしさを与えたりする。そのため、コンテンツCNTXによって提示される情報は、ドライバに正しく伝わり難くなる。
そのため本実施形態では、図9に示すように、第2案内コンテンツCNT2は、連続地点P2から自車側となる基端画像部PeBの少なくとも一部が画角VA内であるとの判定に基づき、表示を開始される。以上によれば、第2案内コンテンツCNT2は、予定走行経路の前後両端を共に示し得る状態で、表示を開始される。したがって、第2案内コンテンツCNT2は、ユーザにとっていっそう認識し易い様態で提示され得る。
また本実施形態では、1つ目の経路案内の対象である右左折地点P1に車両Aが到達する以前に、表示生成部78は、第1案内コンテンツCNT1を非表示とする。故に、前景中に重畳させる第1案内コンテンツCNT1により、右左折地点P1に存在する歩行者等の注意対象物が隠されてしまう事態は、回避される。以上のように、右左折地点P1の手前で第1案内コンテンツCNT1を消す制御は、右左折地点P1の円滑な走行に寄与し得る。
さらに本実施形態では、例えば高速道路等の特定種別の道路において、表示生成部78は、第2案内コンテンツCNT2の表示を待機させず、第1案内コンテンツCNT1を非表示とする前に、第2案内コンテンツCNT2の表示を開始させる。以上によれば、車両Aの走行速度が高い場合に、第2案内コンテンツCNT2の認識に要する時間の確保が難しくなる事態は、回避される。
さらに本実施形態では、右左折地点P1での右折又は左折の開始後、車両Aに搭載されたフロントカメラ31よる接続道路Rcの区画線又は道路端の検出情報を用いて、車両Aの走行方向が判定される。そのため表示生成部78は、接続道路Rcに対する車両Aの向きをリアルタイムで把握して、第2案内コンテンツCNT2の表示開始タイミングを決定できる。以上によれば、HCU100は、車両Aの姿勢判定の精度を高めて、連続地点P2の経路案内を適切なよりタイミングで開始させることができる。したがって、経路案内の誤認識のおそれは、いっそう低減される。
加えて本実施形態では、右左折地点P1での右折又は左折の開始後、地図データと、測位信号に基づく方角情報とを用いて、車両Aの走行方向が判定される。そのため表示生成部78は、接続道路Rcが区画線及び道路端を検出困難な態様であっても、接続道路Rcに対する車両Aの向きを把握して、第2案内コンテンツCNT2の表示開始タイミングを適切に制御できる。以上によれば、道路環境に依存らないで素行方向を判定できるため、多くの走行シーンにおいて、経路案内の誤認識の虞が低減され得る。
また本実施形態では、図12に示すように、接続道路Rcの路側域に遮蔽物BO(図9参照)がない場合、第2案内コンテンツCNT2の表示開始が早められる。こうしたシーンでは、第2案内コンテンツCNT2の重畳表示を早期に開始しても、誤った重畳対象への重畳が生じない。故に、ドライバの誤認識の虞も、実質的に無くなり得る。したがって、遮蔽物BOの不存在に基づき第2案内コンテンツCNT2の表示開始を早める処理によれば、ドライバに連続地点P2を早期に認識させることができる。
さらに本実施形態では、第2案内コンテンツCNT2の重畳対象が接続道路Rcの路側域にある目的地等である場合、当該重畳対象が路面域にある場合よりも、第2案内コンテンツCNT2は、早期に表示を開始される。こうした調整によれば、ドライバによる連続地点P2の認識も、早期に実施可能になる。
尚、上記実施形態において、HUD装置20が「ヘッドアップディスプレイ」に相当し、表示生成部78が「表示制御部」に相当し、HCU100が「表示制御装置」に相当する。また、基端画像部PeBが「(第2案内コンテンツの)手前側の部分」に相当し、右左折地点P1が「第1案内ポイント」に相当し、連続地点P2が「第2案内ポイント」に相当する。
(他の実施形態)
以上、本開示の一実施形態について説明したが、本開示は、上記実施形態に限定して解釈されるものではなく、本開示の要旨を逸脱しない範囲内において種々の実施形態及び組み合わせに適用することができる。
<変形例1>
図13に示す上記実施形態の変形例1では、第1案内コンテンツCNT1の表示終了タイミングが、上記実施形態と異なっている。HCU100は、連続案内エリアCGAにおいて、1つ目の経路案内の対象である右左折地点P1を通過した後、車両Aが所定の距離(終了距離Lh1)を走行したことに基づき、第1案内コンテンツCNT1を非表示とする。一例として、HCU100は、交差点の中心から車両Aまでの終了距離Lh1が10m又は50m程度になったことに基づき、第1案内コンテンツCNT1の表示を終了する。
以上の変形例1では、車両Aが右左折地点P1となる交差点を抜けるまで、第1案内コンテンツCNT1の表示が継続される。故に、右左折地点P1が多叉路等の複雑交差点である場合、ドライバは、案内されている退出先の道路を最後まで把握し続けることができる。以上によれば、ユーザにとって認識し易い連続案内の重畳表示が実現される。このように、案内ポイントは、十字路等の単純交差点や複雑交差点等の種々の種類が存在する。そこで、経路案内情報に含まれる案内ポイントの種類に応じて、第1案内コンテンツCNT1の表示終了タイミングを変化させる制御が実施されてもよい。
尚、HCU100は、第1案内コンテンツCNT1の終了後、車両Aから連続地点P2までの距離が所定の距離よりも短くなったタイミングで、第2案内コンテンツCNT2の表示を開始させる。変形例1では、第1案内コンテンツCNT1の表示終了と第2案内コンテンツCNT2の表示開始とが連続していてもよい。
<変形例2>
図14及び図15に示す上記実施形態の変形例2では、第2案内コンテンツCNT2の表示の様態が上記実施形態とは異なっている。変形例2の第2案内コンテンツCNT2は、車両Aの予定走行軌跡を示す矢印形状のコンテンツである。変形例2の第2案内コンテンツCNT2でも、接続道路Rcの路面に重畳される画像部分が基端画像部PeBとなる。また、第2案内コンテンツCNT2のうちで、連続地点P2から進行方向側となる路面範囲に重畳される画像部分が先端画像部PeTとなる。
加えて変形例2では、第1案内コンテンツCNT1の表示終了タイミングと、第2案内コンテンツCNT2の表示開始タイミングとが、上記実施形態と異なっている。HCU100は、連続案内エリアCGAにおいて、1つ目の経路案内の対象である右左折地点P1を通過したことに基づき、第1案内コンテンツCNT1を非表示とする。
そして、HCU100は、右左折地点P1の通過後、2つ目の経路案内の対象である連続地点P2が画角VA内であると判定したことに基づき、第2案内コンテンツCNT2の表示を開始する。HCU100は、上記実施形態と同様に、3Dオブジェクトを用いた仮想空間でのレイアウトシミュレーション(図4 S23参照)の結果に基づき、画角VAと連続地点P2との位置関係を仮想空間内で把握し、連続地点P2が画角VA内か否かの判定を行う。
以上の変形例2では、第2案内コンテンツCNT2の表示開始は、連続地点P2が画角VA内に入るまで待機される。故に、第2案内コンテンツCNT2は、右左折地点P1での旋回中に、先端画像部PeTのごく先端のみが表示されることなく、先端画像部PeT及び基端画像部PeBが互いに繋がった状態で、表示を開始される。したがって、ドライバにとって分かり易い第2案内コンテンツCNT2の表示が実現される。
加えて変形例2では、連続地点P2にて右折するシーン(図15参照)でも、第2案内コンテンツCNT2は、基端画像部PeBと共に、先端画像部PeTの一部を含んだ様態で、表示を開始される。即ち、第2案内コンテンツCNT2は、意味理解が可能な様態で表示を開始される。故に、第2案内コンテンツCNT2の分かり易い表示は、連続地点P2での右左折の方向にかかわらず、実現される。
<変形例3>
図16に示す上記実施形態の変形例3でも、第2案内コンテンツCNT2の表示開始タイミングが、上記実施形態と異なっている。HCU100は、2つ目の経路案内の対象である連続地点P2へ向かう接続道路Rcに沿う方向に車両Aの進行方向が向いたと推定したことに基づき、第2案内コンテンツCNT2の表示を開始させる。即ち、変形例3では、右左折地点P1及び連続地点P2が連続している場合、第2案内コンテンツCNT2の表示は、右左折地点P1での右折又は左折の開始後に、直進判定が成立したことを条件に開始される。
以上の変形例3において、表示生成部78は、車両姿勢推定部77から取得する車両Aの走行方向の推定結果を継続的に取得する。表示生成部78は、接続道路Rcの区画線又は道路端の相対位置、交差角度θ1(図5参照)及び姿勢変化角度、及び操舵角情報等に基づき、これらの情報を使い分けて、直進判定を実施する。
詳記すると、表示生成部78は、車両Aに対して左右両側に位置する区画線又は道路端がフロントカメラ31の画角内に入り、これらを撮影可能な状態になったタイミングで、直進判定を成立させる。表示生成部78は、片側の区画線又は道路端がフロントカメラ31の画角内に入ったタイミングで、直進判定を成立させてもよい。
また表示生成部78は、接続道路Rcの区画線及び道路端がいずれも撮像データから検出できない場合等に、地図データ及び方角情報を組み合わせた直進判定を実施する。表示生成部78は、交差角度θ1を基準とし、交差角度θ1よりも僅かに小さい閾値角度を設定する。表示生成部78は、右左折地点P1における車両Aのヨー方向の姿勢変化角度が閾値角度を超えたタイミングで、直進判定を成立させる。
さらに表示生成部78は、接続道路Rcの区画線及び道路端が検出困難であり、且つ、測位信号の受信環境が良好でない場合等に、操舵角情報を用いた走行方向判定を実施する。表示生成部78は、操舵角情報に基づき、右左折地点P1におけるステアリング操作の推移を監視し、ステアリングの角速度が所定速度未満となった場合、即ち、操舵角の変化が落ち着いたタイミングにて、直進判定を成立させる。
尚、表示生成部78は、操舵角情報に基づき、ステアリングを戻す過程にて、操舵角が所定閾値未満となったタイミングで、直進判定を成立させてもよい。この場合、直進判定を成立させる所定閾値は、地図データに基づき、交差角度θ1や接続道路Rcの形状等に応じて、適宜変更される。
ここまで説明した変形例3でも、第2案内コンテンツCNT2は、先端画像部PeT及び基端画像部PeBが互いにつながった様態で表示を開始される。故に、分かり易い第2案内コンテンツCNT2の表示が実現される。
加えて変形例3では、車両Aに搭載されたフロントカメラ31よる接続道路Rcの区画線又は道路端の検出情報を用いて、車両Aの走行方向判定が実施される。そのため表示生成部78は、接続道路Rcに対する車両Aの向きをリアルタイムで把握して、第2案内コンテンツCNT2の表示開始タイミングを決定できる。以上によれば、HCU100は、車両Aの直進判定の精度を高めて、第2案内コンテンツCNT2の表示開始タイミングを適切に制御できる。
また変形例3では、地図データと、測位信号に基づく方角情報とを用いて、車両Aの走行方向判定が実施される。そのため表示生成部78は、接続道路Rcの区画線及び道路端が検出困難であっても、接続道路Rcに対する車両Aの向きを把握して、第2案内コンテンツCNT2の表示開始タイミングを決定できる。以上によれば、道路環境に依存らないで直進判定を実施できるため、多くの走行シーンにおいて、第2案内コンテンツCNT2の表示開始タイミングは、適切に制御され得る。
さらに変形例3では、操舵角情報を用いての車両Aの走行方向判定が実施可能である。このように、自車情報を用いて車両Aの旋回の終了を把握できれば、表示生成部78は、車両Aの外部環境に影響を受けることなく、第2案内コンテンツCNT2の表示開始タイミングを決定できる。以上によれば、さらに多くの走行シーンにて、第2案内コンテンツCNT2の表示開始タイミングは、適切に制御され得る。
尚、変形例3における直進判定の成立条件は、適宜変更されてよい。一例として、表示生成部78は、検出情報に基づく走行方向判定、地図データ及び方角情報を用いた走行方向判定、並びに操舵角情報を用いた走行方向判定の少なくとも一つにて、直進判定が成立した場合に、案内コンテンツCNT2の表示を開始させてよい。また別の一例として、表示生成部78は、これら3つの走行方向判定の多数決に基づき、直進判定を成立させてよい。さらに別の一例として、表示生成部78は、3つの走行方向の判定機能を全て備えていなくてもよい。
<変形例4>
上記実施形態の変形例4のHCU100は、図17に示すように、第2案内コンテンツCNT2の重畳範囲を敢えて路面外まで拡張させる。こうした表示処理によれば、第2案内コンテンツCNT2は、先端画像部PeT及び基端画像部PeBが互いに繋がった様態で表示され易くなる。その結果、第2案内コンテンツCNT2の拡大は、先端画像部PeT及び基端画像部PeBの一体的な表示を早期に可能にし、連続地点P2における案内経路の分かり易い提示に寄与できる。
上記実施形態の変形例5のHCU100は、第2案内コンテンツCNT2の少なくとも一部が画角VA内となったことに基づき、第2案内コンテンツCNT2の表示を開始する。また、上記実施形態の変形例6のHCU100は、連続案内を行う場合、右左折地点P1の通過後、所定の距離を走行した地点(時点)で、第1案内コンテンツCNT1から第2案内コンテンツCNT2へと切り替える。尚、各案内コンテンツCNT1,CNT2の表示開始タイミング及び表示終了タイミングは、上記実施形態及び変形例にて例示したタイミングのうちで、適宜変更されてよい。具体的には、第2案内コンテンツCNT2の表示開始タイミングは、右左折地点P1の通過時、及び右左折地点P1を通過後の所定の距離を走行したとき等であってよい。
上記実施形態の変形例7では、複数の案内ポイントが連続しているか否かの判断を、ナビゲーションECU53に替えて、連続案内判定部75が実施する。例えばナビゲーションECU53が連続案内通知を出力しない場合、連続案内判定部75は、ナビゲーションECU53より取得する他の経路案内情報に基づき、連続案内の実施の要否を判定してもよい。
一例として、連続案内判定部75は、案内実施要求と共に送信されるひと纏まりの経路案内情報に複数の案内ポイントの情報が含まれている場合、連続案内情報があると判定し、これらの案内ポイントの連続案内の実施を決定する。また別の一例として、連続案内判定部75は、逐次取得する経路案内情報から、設定経路上に並ぶ右左折地点P1と連続地点P2とのポイント間距離を算出する。連続案内判定部75は、ナビゲーションECU53と同様の判定ロジックで、右左折地点P1及び連続地点P2が連続している、即ち、連続案内情報があると判定する。
尚、連続案内をするか否かの閾値となるポイント間距離は、例えば100〜1000m程度のうちで適宜設定されてよい。こうしたポイント間距離は、ドライバ等の車両Aのユーザによって調整可能であってもよく、又は連続地点P2の種別に応じて自動的に調整されてもよい。
上記実施形態では、接続道路Rcの路側域に例えば遮蔽物BO等の特定物体がない場合、案内コンテンツCNT2への切り替えタイミングが早められていた。こうした特定物体の具体的な種別は、上述の遮蔽物BOに限定されず、例えば案内コンテンツCNT2の内容に応じて適宜変更されてよい。また、特定物体を認識する処理は、周辺監視センサ30又は運転支援ECU57にて実施されてもよく、或いは外界情報取得部74又は路側物体判定部76にて実施されてもよい。
上記実施形態の変形例8では、スマートフォン等のユーザ端末が、車載ネットワークに接続されている。ユーザ端末にて実行されるアプリケーションには、ドライバ等のユーザ操作により、目的地までの経路が設定されている。ユーザ端末は、目的地までの経路案内情報、及び関連するナビ地図データ等を、車載ネットワーク等を通じて経路情報取得部71に提供可能である。さらに、経路案内情報には、連続案内通知が含まれていてもよい。
また上記実施形態の変形例9の経路情報取得部71は、車外ネットワークを通じて、クラウド上のサーバから経路情報及び地図データ等を取得できる。以上の変形例8,9のように、スマートフォン又はクラウドサーバからルート案内に必要な情報が取得できるのであれば、ナビゲーション装置は、車両に予め固定された構成でなくてもよい。
経路案内コンテンツCNTgの様態は、ドライバによる認識を良好にするため、適宜変更されてよい。一例として、経路案内コンテンツCNTgは、自車から遠ざかるほど低輝度となる様態であってよい。さらに、経路案内コンテンツCNTgの先端画像部PeTのうちで、遮蔽物BOと重なる部分が、遮蔽物BOと重ならない部分よりも低輝度とされてよい。また、自車から遠ざかるほど、路面から浮き上がっているかのように重畳表示させることで、遠方部分を大きく見せるような工夫がなされていてもよい。
上述の実施形態において、HCU100により実現されていた表示制御機能は、車両Aに搭載される他の車載ECUによって実現されていてもよい。一例として、表示制御機能は、ナビゲーション装置50のナビECU53に実装されてもよい。また別の一例として、表示制御機能は、HUD装置20の制御回路に実装されていてもよい。さらに、HCU100は、メータECUとして車両Aに搭載される電子制御装置であってよい。或いは、HCU100が、ナビゲーションECU53の機能を含んでおり、ナビゲーションディスプレイ52による経路案内表示を、HUD装置20の虚像表示と共に制御してもよい。
重畳表示に用いられるHUD装置のプロジェクタの具体構成は、適宜変更されてよい。例えば変形例10のHUD装置には、LCD及びバックライトに替えて、EL(Electro Luminescence)パネルが設けられている。さらに、ELパネルに替えて、プラズマディスプレイパネル、ブラウン管及びLED等の表示器を用いたプロジェクタがHUD装置には採用可能である。
また変形例11のHUD装置には、LCD及びバックライトに替えて、レーザモジュール(以下「LSM」)及びスクリーンが設けられている。LSMは、例えばレーザ光源及びMEMS(Micro Electro Mechanical Systems)スキャナ等を含む構成である。スクリーンは、例えばマイクロミラーアレイ又はマイクロレンズアレイである。変形例12のHUD装置では、LSMから照射されるレーザ光の走査により、スクリーンに表示像が描画される。HUD装置は、スクリーンに描画された表示像を、拡大光学素子によってウィンドシールドに投影し、虚像を空中表示させる。
また変形例13のHUD装置には、DLP(Digital Light Processing,登録商標)プロジェクタが設けられている。DLPプロジェクタは、多数のマイクロミラーが設けられたデジタルミラーデバイス(以下、「DMD」)と、DMDに向けて光を投射する投射光源とを有している。DLPプロジェクタは、DMD及び投射光源を連携させた制御により、表示像をスクリーンに描画する。
さらに、変形例14のHUD装置では、LCOS(Liquid Crystal On Silicon)を用いたプロジェクタが採用されている。またさらに、変形例15のHUD装置には、虚像を空中表示させる光学系の一つに、ホログラフィック光学素子が採用されている。
上記実施形態にて、HCUによって提供されていた各機能は、ソフトウェア及びそれを実行するハードウェア、ソフトウェアのみ、ハードウェアのみ、あるいはそれらの複合的な組合せによっても提供可能である。さらに、こうした機能がハードウェアとしての電子回路によって提供される場合、各機能は、多数の論理回路を含むデジタル回路、又はアナログ回路によっても提供可能である。
また、上記の表示制御方法を実現可能なプログラム等を記憶する記憶媒体の形態も、適宜変更されてよい。例えば記憶媒体は、回路基板上に設けられた構成に限定されず、メモリカード等の形態で提供され、スロット部に挿入されて、HCUの制御回路に電気的に接続される構成であってよい。さらに、記憶媒体は、HCUへのプログラムのコピー基となる光学ディスク及びのハードディスクドライブ等であってもよい。
HMIシステムを搭載する車両は、一般的な自家用の乗用車に限定されず、レンタカー用の車両、有人タクシー用の車両、ライドシェア用の車両、貨物車両及びバス等であってもよい。さらに、モビリティサービスに用いられる無人運転専用の車両に、HMIシステム及びHCUが搭載されてもよい。
本開示に記載の制御部及びその手法は、コンピュータプログラムにより具体化された一つ乃至は複数の機能を実行するようにプログラムされたプロセッサを構成する専用コンピュータにより、実現されてもよい。あるいは、本開示に記載の装置及びその手法は、専用ハードウェア論理回路により、実現されてもよい。もしくは、本開示に記載の装置及びその手法は、コンピュータプログラムを実行するプロセッサと一つ以上のハードウェア論理回路との組み合わせにより構成された一つ以上の専用コンピュータにより、実現されてもよい。また、コンピュータプログラムは、コンピュータにより実行されるインストラクションとして、コンピュータ読み取り可能な非遷移有形記録媒体に記憶されていてもよい。
ここまで説明した実施形態及び変形例に関する技術的特徴として、さらに以下の付記を開示する。
(付記1)
車両(A)において用いられ、経路案内のために前景に重畳される表示を制御する表示制御装置であって、
前記経路案内に用いられる経路情報に、前記車両の右左折を案内する右左折地点(P1)と、当該右左折地点の次に案内を実施する順次案内地点(P2)との連続を示す連続案内情報が含まれるか否かを判定する連続案内判定部(75)と、
走行中の道路(Rc)に対する前記車両の向きを推定し、前記車両の向きについて、前記順次案内地点を案内する案内コンテンツ(CNT2)を表示可能な向きとなったか否かを判定する車両姿勢推定部(77)と、
前記経路情報に前記連続案内情報が含まれると判定された場合に、前記右左折地点を案内する右左折コンテンツ(CNT1)を表示後、前記車両の向きが前記案内コンテンツを表示可能な向きとなったことを条件に、前記案内コンテンツの表示を開始させる表示制御部(78)と、
を備える表示制御装置。
(付記2)
前記車両姿勢推定部は、前記車両に搭載された外界センサ(31)による前記道路の区画線又は道路端の検出情報に基づいて、前記車両の向きが前記案内コンテンツを表示可能な向きとなったことを判定する付記1に記載の表示制御装置。
(付記3)
前記車両姿勢推定部は、前記車両が走行中の前記道路に関する地図情報と、測位衛星から受信する測位信号に基づく前記車両の方角情報とを用いて、前記車両の向きが前記案内コンテンツを表示可能な向きとなったことを判定する付記1又は2に記載の表示制御装置。
(付記4)
前記車両姿勢推定部は、前記車両の操舵角に関する操舵角情報を用いて、前記車両の向きが前記案内コンテンツを表示可能な向きとなったことを判定する付記1〜3のいずれか一項に記載の表示制御装置。
(付記5)
前記右左折地点での右左折後に前記車両の走行する前記道路の路側域に、前記案内コンテンツを重畳する対象として適切ではない特定物体(BO)があるか否かを判定する路側物体判定部(76)、をさらに備え、
前記特定物体が路側域にないと判定される場合、前記特定物体が路側域にあると判定される場合よりも、前記案内コンテンツの表示開始が早められる付記1〜4のいずれか一項に記載の表示制御装置。
(付記6)
前記車両姿勢推定部は、前記案内コンテンツの重畳対象が前記道路の路側域にある場合、前記案内コンテンツの重畳対象が前記道路の路面域にある場合よりも、前記案内コンテンツが表示可能か否かを判定するための判定基準を緩和する付記1〜5のいずれか一項に記載の表示制御装置。
(付記7)
車両(A)において用いられ、経路案内のために前景に重畳される表示を制御する表示制御プログラムであって、
少なくとも一つの処理部(11)に、
前記経路案内に用いられる経路情報に、前記車両の右左折を案内する右左折地点(P1)と、当該右左折地点の次に案内を実施する順次案内地点(P2)との連続を示す連続案内情報が含まれるか否かを判定し(S102)、
走行中の道路(Rc)に対する前記車両の向きを推定し、前記車両の向きについて、前記順次案内地点を案内する案内コンテンツ(CNT2)を表示可能な向きとなったか否かを判定し(S106)、
前記経路情報に前記連続案内情報が含まれると判定された場合に、前記右左折地点を案内する右左折コンテンツ(CNT1)を表示後、前記車両の向きが前記案内コンテンツを表示可能な向きとなったことを条件に、前記案内コンテンツの表示を開始させる(S105)、
ことを含む処理を実行させる表示制御プログラム。
(効果)
これらの技術的特徴によれば、右左折地点及び順次案内地点が連続している場合、順次案内地点を案内する案内コンテンツの表示は、右左折地点での右折又は左折の後に、順次案内地点の案内コンテンツを表示可能な向きに車両が向いたことを条件に、開始される。以上によれば、順次案内地点を案内する案内コンテンツの表示開始タイミングは、適切となり得る。したがって、経路案内のための重畳表示に起因する誤認識のおそれは、低減可能となる。
A 車両、CNTg 経路案内コンテンツ、CNT1 第1案内コンテンツ、CNT2 第2案内コンテンツ、PeB 基端画像部(部分)、CGA 連続案内エリア、P1 右左折地点(第1案内ポイント)、P2 連続地点(第2案内ポイント)、VA 画角、11 処理部、20 HUD装置(ヘッドアップディスプレイ)、50 ナビゲーション装置、52 ナビゲーションディスプレイ、71 経路情報取得部、78 表示生成部(表示制御部)、100 HCU(表示制御装置)、110 表示システム

Claims (9)

  1. 車両(A)において用いられる表示システムであって、
    目的地までの経路案内を行うナビゲーション装置(50)と、
    前記ナビゲーション装置より取得する経路案内情報から、経路案内コンテンツ(CNTg)をヘッドアップディスプレイ(20)によって路面に重畳表示させる表示制御装置(100)と、を備え、
    前記ナビゲーション装置は、複数の経路案内が連続する連続案内であると判定した場合、1つ目の経路案内と2つ目の経路案内とを共に開始し、
    前記表示制御装置は、前記ナビゲーション装置より取得する前記経路案内情報が前記連続案内であると判定した場合に、前記1つ目の経路案内を行う第1案内コンテンツ(CNT1)を表示させ、前記第1案内コンテンツを非表示とした後、前記2つ目の経路案内を行う第2案内コンテンツ(CNT2)を表示させる表示システム。
  2. 前記表示制御装置は、
    前記2つ目の経路案内の対象である第2案内ポイント(P2)を含むように前記第2案内コンテンツの表示予定位置を設定し、
    前記表示予定位置への重畳を仮定した前記第2案内コンテンツにおいて前記第2案内ポイントから自車側となる部分(PeB)の少なくとも一部が前記ヘッドアップディスプレイの画角(VA)内であると判定したことに基づき、前記第2案内コンテンツの表示を開始させる請求項1に記載の表示システム。
  3. 前記表示制御装置は、前記2つ目の経路案内の対象である第2案内ポイント(P2)が前記ヘッドアップディスプレイの画角(VA)内である判定したことに基づき、前記第2案内コンテンツの表示を開始させる請求項1に記載の表示システム。
  4. 前記表示制御装置は、前記2つ目の経路案内の対象である第2案内ポイント(P2)へ向かう道路に沿う方向に前記車両の進行方向が向いたと推定したことに基づき、前記第2案内コンテンツの表示を開始させる請求項1に記載の表示システム。
  5. 前記表示制御装置は、前記1つ目の経路案内の対象である第1案内ポイント(P1)に前記車両が到達する以前に、前記第1案内コンテンツを非表示とする請求項1〜4のいずれか一項に記載の表示システム。
  6. 前記表示制御装置は、前記1つ目の経路案内の対象である第1案内ポイント(P1)を通過した後、前記車両が所定の距離を走行したことに基づき、前記第1案内コンテンツを非表示とする請求項1〜4のいずれか一項に記載の表示システム。
  7. 前記表示制御装置は、経路案内を行う道路が特定種別の道路である場合に、前記第1案内コンテンツを非表示とする前に、前記第2案内コンテンツの表示を開始させる請求項1〜6のいずれか一項に記載の表示システム。
  8. ナビゲーション装置(50)を搭載する車両(A)において用いられ、ヘッドアップディスプレイ(20)による路面への重畳表示を制御する表示制御装置であって、
    目的地までの経路案内を行う前記ナビゲーション装置より経路案内情報を取得する経路情報取得部(71)と、
    前記経路案内情報から生成する経路案内コンテンツ(CNTg)を、前記ヘッドアップディスプレイによって路面に重畳表示させる表示制御部(78)と、を備え、
    前記経路情報取得部は、前記ナビゲーション装置にて複数の経路案内が連続する連続案内であると判定された場合に、当該連続案内があることを示す前記経路案内情報を取得し、
    前記表示制御部は、前記連続案内を示す前記経路案内情報を前記経路情報取得部が取得した場合に、前記ナビゲーション装置が1つ目の経路案内と2つ目の経路案内とを共に開始する連続案内エリア(CGA)において、前記1つ目の経路案内を行う第1案内コンテンツ(CNT1)を表示させ、前記第1案内コンテンツを非表示とした後、前記2つ目の経路案内を行う第2案内コンテンツ(CNT2)を表示させる表示制御装置。
  9. ナビゲーションディスプレイ(52)を搭載する車両(A)において用いられ、ヘッドアップディスプレイ(20)による路面への重畳表示を制御する表示制御プログラムであって、
    少なくとも一つの処理部(11)に、
    目的地までの経路案内に用いられる経路案内情報を取得し(S101)、
    前記経路案内情報に基づき、前記ナビゲーションディスプレイによって行われる経路案内が、複数の経路案内を連続して行う連続案内であるか否かを判定し(S102)、
    前記経路案内情報から生成する経路案内コンテンツ(CNTg)を、前記ヘッドアップディスプレイによって路面に重畳表示させ(S105)、
    前記連続案内を示す前記経路案内情報を取得した場合に、1つ目の経路案内と2つ目の経路案内とが前記ナビゲーションディスプレイによって共に開始される連続案内エリア(CGA)において、前記1つ目の経路案内を行う第1案内コンテンツ(CNT1)を表示させ、前記第1案内コンテンツを非表示とした後、前記2つ目の経路案内を行う第2案内コンテンツ(CNT2)を表示させる、
    ことを含む処理を実行させる表示制御プログラム。
JP2019178859A 2019-01-16 2019-09-30 表示システム、表示制御装置及び表示制御プログラム Active JP7028228B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/JP2019/050352 WO2020149109A1 (ja) 2019-01-16 2019-12-23 表示システム、表示制御装置及び表示制御プログラム
US17/374,044 US11982539B2 (en) 2019-01-16 2021-07-13 Display system, display control device, and display control program product

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019005543 2019-01-16
JP2019005543 2019-01-16

Publications (3)

Publication Number Publication Date
JP2020112542A true JP2020112542A (ja) 2020-07-27
JP2020112542A5 JP2020112542A5 (ja) 2021-02-18
JP7028228B2 JP7028228B2 (ja) 2022-03-02

Family

ID=71668259

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019178859A Active JP7028228B2 (ja) 2019-01-16 2019-09-30 表示システム、表示制御装置及び表示制御プログラム

Country Status (2)

Country Link
US (1) US11982539B2 (ja)
JP (1) JP7028228B2 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114114685A (zh) * 2020-08-27 2022-03-01 纳宝实验室株式会社 平视显示器及其控制方法
JP2022071799A (ja) * 2020-10-28 2022-05-16 株式会社日本総合研究所 情報処理方法及び情報処理システム
JP7512961B2 (ja) 2021-06-23 2024-07-09 トヨタ自動車株式会社 表示制御装置、表示方法及び表示プログラム

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20200106102A (ko) * 2019-02-21 2020-09-11 현대자동차주식회사 저비용 자율 주행 셔틀 운행 방법 및 장치
JP7120963B2 (ja) * 2019-05-21 2022-08-17 矢崎総業株式会社 表示ユニット
WO2021006060A1 (ja) * 2019-07-08 2021-01-14 株式会社デンソー 表示制御装置および表示制御プログラム
US20220163919A1 (en) * 2020-11-23 2022-05-26 GM Global Technology Operations LLC Micromirror pixel design to eliminate intensity artifacts in holographic displays
JP7578075B2 (ja) * 2021-07-07 2024-11-06 トヨタ自動車株式会社 車両用表示制御装置、表示方法及びプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010236915A (ja) * 2009-03-30 2010-10-21 Equos Research Co Ltd 情報表示装置
WO2013046424A1 (ja) * 2011-09-30 2013-04-04 パイオニア株式会社 ヘッドアップディスプレイ、制御方法、及び表示装置
JP2018128466A (ja) * 2018-04-25 2018-08-16 パイオニア株式会社 ナビゲーション装置、ヘッドアップディスプレイ、制御方法、プログラム、及び記憶媒体

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8751156B2 (en) * 2004-06-30 2014-06-10 HERE North America LLC Method of operating a navigation system using images
US7460953B2 (en) * 2004-06-30 2008-12-02 Navteq North America, Llc Method of operating a navigation system using images
AU2012261938B2 (en) * 2011-06-03 2015-03-19 Apple Inc. Devices and methods for comparing and selecting alternative navigation routes
US9482296B2 (en) * 2012-06-05 2016-11-01 Apple Inc. Rendering road signs during navigation
WO2015118859A1 (ja) 2014-02-05 2015-08-13 パナソニックIpマネジメント株式会社 車両用表示装置および車両用表示装置の表示方法
JP6699646B2 (ja) 2017-02-08 2020-05-27 株式会社デンソー 車両用表示制御装置
JP6866875B2 (ja) 2018-05-29 2021-04-28 株式会社デンソー 表示制御装置、及び表示制御プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010236915A (ja) * 2009-03-30 2010-10-21 Equos Research Co Ltd 情報表示装置
WO2013046424A1 (ja) * 2011-09-30 2013-04-04 パイオニア株式会社 ヘッドアップディスプレイ、制御方法、及び表示装置
JP2018128466A (ja) * 2018-04-25 2018-08-16 パイオニア株式会社 ナビゲーション装置、ヘッドアップディスプレイ、制御方法、プログラム、及び記憶媒体

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114114685A (zh) * 2020-08-27 2022-03-01 纳宝实验室株式会社 平视显示器及其控制方法
JP2022040021A (ja) * 2020-08-27 2022-03-10 ネイバーラボス コーポレーション ヘッドアップディスプレイ及びその制御方法
US11897394B2 (en) 2020-08-27 2024-02-13 Naver Labs Corporation Head up display and control method thereof
JP2022071799A (ja) * 2020-10-28 2022-05-16 株式会社日本総合研究所 情報処理方法及び情報処理システム
JP7170076B2 (ja) 2020-10-28 2022-11-11 株式会社日本総合研究所 情報処理方法及び情報処理システム
JP7512961B2 (ja) 2021-06-23 2024-07-09 トヨタ自動車株式会社 表示制御装置、表示方法及び表示プログラム

Also Published As

Publication number Publication date
JP7028228B2 (ja) 2022-03-02
US11982539B2 (en) 2024-05-14
US20210356289A1 (en) 2021-11-18

Similar Documents

Publication Publication Date Title
JP7028228B2 (ja) 表示システム、表示制御装置及び表示制御プログラム
US12025461B2 (en) Display control device, display control method, and non-transitory tangible computer-readable medium therefor
JP7218822B2 (ja) 表示制御装置
WO2020261781A1 (ja) 表示制御装置、表示制御プログラム、および持続的有形コンピュータ読み取り媒体
US11803053B2 (en) Display control device and non-transitory tangible computer-readable medium therefor
WO2020208989A1 (ja) 表示制御装置及び表示制御プログラム
US20220058998A1 (en) Display control device and non-transitory computer-readable storage medium for display control on head-up display
US11850940B2 (en) Display control device and non-transitory computer-readable storage medium for display control on head-up display
JP2021006805A (ja) 表示制御装置及び表示制御プログラム
JP7215466B2 (ja) 表示制御装置及び表示制御プログラム
JP7243660B2 (ja) 表示制御装置及び表示制御プログラム
WO2020149109A1 (ja) 表示システム、表示制御装置及び表示制御プログラム
JP6930563B2 (ja) 表示制御装置及び表示制御プログラム
JP7111121B2 (ja) 表示制御装置及び表示制御プログラム
JP2020185830A (ja) 表示制御装置及び表示制御プログラム
JP7092158B2 (ja) 表示制御装置及び表示制御プログラム
JP7014206B2 (ja) 表示制御装置および表示制御プログラム
JP7234650B2 (ja) 表示制御装置及び表示制御プログラム
JP7230960B2 (ja) 表示制御装置
JP2021094965A (ja) 表示制御装置、および表示制御プログラム
JP7420165B2 (ja) 表示制御装置、および表示制御プログラム
JP2021028587A (ja) 車載表示制御装置
JP7172830B2 (ja) 車両用表示装置及び表示制御プログラム
JP7255443B2 (ja) 表示制御装置及び表示制御プログラム
JP2020138610A (ja) 車両用表示制御装置、車両用表示制御方法、車両用表示制御プログラム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201223

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201223

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211012

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211103

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220131

R151 Written notification of patent or utility model registration

Ref document number: 7028228

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151