[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN113016016A - 信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质 - Google Patents

信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质 Download PDF

Info

Publication number
CN113016016A
CN113016016A CN201880099030.9A CN201880099030A CN113016016A CN 113016016 A CN113016016 A CN 113016016A CN 201880099030 A CN201880099030 A CN 201880099030A CN 113016016 A CN113016016 A CN 113016016A
Authority
CN
China
Prior art keywords
attention
display
information
information presentation
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880099030.9A
Other languages
English (en)
Inventor
粟野智治
木村胜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN113016016A publication Critical patent/CN113016016A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B60K35/265—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R99/00—Subject matter not provided for in other groups of this subclass
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/186—Displaying information according to relevancy
    • B60K2360/1868—Displaying information according to relevancy according to driving situations
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/229—Attention level, e.g. attentive to driving, reading or sleeping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/15—Biometric patterns based on physiological signals, e.g. heartbeat, blood flow

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)

Abstract

在使搭载于车辆的多个显示器和语音输出装置提示驾驶辅助用的信息的信息提示控制方法中，根据与位于车辆周边的注意对象有关的检测信息计算危险度，根据计算出的危险度，使多个显示器中的至少一个显示器进行注意唤起显示，根据计算出的危险度，使语音输出装置产生注意唤起声音。产生以虚拟声源被定位于进行注意唤起显示的显示器中的至少一个显示器的位置的方式被控制声像的声音，作为注意唤起声音。能够使驾驶者的视线迅速地朝向正在显示应该注视的信息的显示器，能够迅速地对驾驶者赋予应该识别的信息。

Description

信息提示控制装置、信息提示装置和信息提示控制方法、以及 程序和记录介质
技术领域
本发明涉及信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质。
背景技术
公知有显示用于辅助车辆的驾驶操作的信息的信息提示装置。近年来，车辆用的显示器的电子化不断发展，信息提示方法多样化。作为显示器的例子，具有电子仪表板、平视显示器、电子镜。通过使用这些显示器，能够以容易看到且容易理解的方式向驾驶者提供驾驶所需要的信息。这里所说的驾驶所需要的信息包含表示正在接近的其他车辆的影像。另一方面，伴随着要提供的信息的增加，驾驶者很难判断多个信息中的哪个信息是应该紧急识别的信息，可能对驾驶操作带来障碍。
已提出一种具有再现单元的车辆显示器，该再现单元选择电子仪表板上显示的多个影像中的应该使驾驶者注视的注视影像，以将驾驶者的视线引导至注视影像的方式使标记移动显示，并且，能够再现与标记的移动位置对应的定位的声音(专利文献1)。
现有技术文献
专利文献
专利文献1：日本特开2012-113672号公报(第0014、0020段、图4)
专利文献2：日本特许第5930067号说明书
专利文献3：日本特许第6381736号说明书
专利文献4：日本特许第6289788号说明书
发明内容
发明要解决的课题
在专利文献1中，使用显示器上显示的标记进行视线引导，视线被引导至目标影像需要时间。此外，标记的位置有时时时刻刻地变化，很难再现与标记的移动位置对应的定位的声音。
用于解决课题的手段
本发明的信息提示控制装置使搭载于车辆的多个显示器和语音输出装置提示驾驶辅助用的信息，其中，所述信息提示控制装置具有：信息分析部，其根据与位于所述车辆周边的注意对象有关的检测信息计算危险度；影像处理部，其根据由所述信息分析部计算出的危险度，使所述多个显示器中的至少一个显示器进行注意唤起显示；以及语音处理部，其根据由所述信息分析部计算出的危险度，使所述语音输出装置产生注意唤起声音，所述语音处理部产生以虚拟声源被定位于进行所述注意唤起显示的显示器中的至少一个显示器的位置的方式被控制声像的声音，作为所述注意唤起声音。
本发明的信息提示装置使搭载于车辆的多个显示器和语音输出装置提示驾驶辅助用的信息，其中，所述信息提示装置具有：外部状况检测部，其检测位于所述车辆周边的注意对象；以及信息提示控制装置，其根据与通过所述外部状况检测部的检测而得到的所述注意对象有关的检测信息计算危险度，根据计算出的危险度使所述多个显示器中的至少一个显示器进行注意唤起显示，根据计算出的危险度使所述语音输出装置产生注意唤起声音，所述信息提示控制装置产生以虚拟声源被定位于进行所述注意唤起显示的显示器中的至少一个显示器的位置的方式被控制声像的声音，作为所述注意唤起声音。
发明效果
根据本发明，能够使驾驶者的视线迅速地朝向正在显示应该注视的信息的显示器，能够迅速地对驾驶者赋予应该识别的信息。
附图说明
图1是示出具有本发明的实施方式1的信息提示装置的驾驶辅助装置的结构例的功能框图。
图2是示出搭载有图1所示的驾驶辅助装置的车辆的概略图。
图3是示出为了通过软件实现图1所示的处理电路的功能而使用的计算机的结构例的功能框图。
图4是示出图1所示的外部状况检测部的结构例的功能框图。
图5是示出构成图4所示的摄像部的摄像机的拍摄方向的概略图。
图6是示出构成图1所示的显示器组的显示器的配置的一例的概略图。
图7是示出图6所示的显示器各自的结构例的功能框图。
图8是示出图1所示的语音输出装置的结构例的功能框图。
图9是示出图1所示的处理电路的结构例的功能框图。
图10是示出图9所示的处理电路的动作的一例的流程图。
图11是概念地示出图1所示的信息提示装置的动作的例子的图。
图12是示出图9所示的处理电路的动作的另一例的流程图。
图13是示出本发明的实施方式2中使用的处理电路的结构的功能框图。
图14是示出具有本发明的实施方式3的信息提示装置的驾驶辅助装置的结构例的功能框图。
图15是示出图14所示的内部状况检测部的结构例的功能框图。
图16是示出图14所示的处理电路的结构例的功能框图。
具体实施方式
实施方式1
图1示出具有本发明的实施方式1的信息提示装置的驾驶辅助装置10的结构例。
例如，如图2所示，图示的驾驶辅助装置10搭载于车辆102，具有外部状况检测部1、车辆信息取得部2、处理电路3、显示器组5和语音输出装置6。利用外部状况检测部1、车辆信息取得部2和处理电路3构成信息提示装置。
图1所示的处理电路3具有作为信息提示装置的控制部的功能，也被称作信息提示控制装置。
处理电路3的功能能够通过硬件来实现，还能够通过软件即程序化的计算机来实现。图3中示出通过软件实现的情况下使用的计算机的结构例。利用图3的处理器31和程序存储器32构成图1的处理电路3，处理器31按照程序存储器32中存储的程序进行动作，由此，作为图1的处理电路3进行动作。
处理电路3与存储装置4连接。
存储装置4也可以由HDD(硬件驱动器)、SSD(固态驱动器)等构成。存储装置4可以与处理电路3直接连接，也可以经由网络连接。
外部状况检测部1取得表示车辆102周边的状况的信息，输出与注意对象有关的检测信息Da。注意对象包含位于车辆102周边的其他车辆、人、被固定的构造物。其他车辆包含自动四轮车(乘用车、卡车、巴士等)、自动二轮车、自行车。为了与“其他车辆”进行区分，有时将搭载有驾驶辅助装置10的车辆102称作“本车辆”。
如图4所示，外部状况检测部1具有摄像部11、检测部12、通信器13和检测信息处理部14。
摄像部11拍摄车辆102周边，输出表示通过拍摄而得到的影像的影像信号。摄像部11取得车辆102周边的多个不同方向的影像。摄像部11例如包含分别拍摄上述多个方向的多个摄像机。
例如，如图5所示，摄像部11包含拍摄车辆102的右前方的第1摄像机11a、拍摄车辆102的左前方的第2摄像机11b、拍摄车辆102的右后方的第3摄像机11c以及拍摄车辆102的左后方的第4摄像机11d。
检测部12检测位于车辆102周边的注意对象。检测部12例如可以包含激光雷达(LIDAR：Laser Imaging Detection and Ranging)、毫米波雷达、超声波传感器中的任意一方以上。检测部12检测注意对象的存在，或者检测与这些注意对象之间的距离。
通信器13接收从车辆102外部提供的与其他车辆有关的信息。与其他车辆有关的信息可以包含表示该其他车辆的位置、移动的方向和速度的信息。来自车辆102外部的提供可以是基于来自其他车辆的直接通信的提供，也可以是基于经由基站的通信的提供。
检测信息处理部14根据表示通过摄像部11的拍摄而得到的影像的影像信号、通过检测部12的检测而得到的信息和由通信器13接收到的信息，生成并输出检测信息Da。
从检测信息处理部14输出的检测信息Da包含表示车辆102周边状况的影像的信息、以及与位于车辆102周边的注意对象有关的信息。这种与注意对象有关的信息也可以包含表示与该注意对象之间的距离的信息、表示该注意对象的位置以及移动的方向和速度的信息。
车辆信息取得部2取得与车辆102有关的信息(本车辆信息)Db。本车辆信息Db可以包含表示本车辆的位置以及移动的方向和速度的信息。表示本车辆的位置以及本车辆的移动的方向和速度的信息例如可以是从导航系统得到的信息。
处理电路3根据从外部状况检测部1输出的检测信息Da和从车辆信息取得部2输出的本车辆信息Db，对显示器组5和语音输出装置6进行控制。具体而言，通过生成影像信号Dc并将其供给到显示器组5，对显示器组5中显示的影像进行控制，通过生成语音信号Dd并将其供给到语音输出装置6，对语音输出装置6中的语音输出进行控制。
显示器组5由处理电路3控制而显示影像。即，处理电路3向显示器组5供给影像信号Dc，显示器组5根据来自处理电路3的影像信号Dc显示影像。
由显示器组5显示的影像例如是由外部状况检测部1取得且由处理电路3根据需要进行增强处理后的影像。
例如，如图6所示，显示器组5具有设置于仪表盘104上的第1显示器5a～第4显示器5d。
例如，如图7所示，第1显示器5a～第4显示器5d分别(用标号5i表示)也可以具有显示部51、以及对该显示部51中的显示进行控制的显示控制部52。
对显示器5i的显示控制部52供给影像信号Dc中的应该由显示器51i的显示部51显示的影像信号Dci。
例如，第1显示器5a显示车辆102的右前方的影像，第2显示器5b显示车辆102的左前方的影像，第3显示器5c显示车辆102的右后方的影像，第4显示器5d显示车辆102的左后方的影像。
例如，第1显示器5a～第4显示器5d与第1摄像机11a～第4摄像机11d对应地设置，分别显示通过第1摄像机11a～第4摄像机11d的拍摄而得到的影像。
优选第1显示器5a设置成从驾驶者观察位于观察车辆102的右前方的方向或与其接近的方向。
优选第2显示器5b设置成从驾驶者观察位于观察车辆102的左前方的方向或与其接近的方向。
优选第3显示器5c设置成从驾驶者观察位于观察右侧后视镜112的方向或与其接近的方向。在驾驶者确认车辆102的右后方的状况时目视右侧后视镜112。
优选第4显示器5d设置成从驾驶者观察位于观察左侧后视镜114的方向或与其接近的方向。在驾驶者确认车辆102的左后方的状况时目视左侧后视镜114。
在图6所示的例子中，第1显示器5a～第4显示器5d在仪表盘104上从右侧起按照第3显示器5c、第1显示器5a、第2显示器5b、第4显示器5d的顺序排列。
语音输出装置6由处理电路3控制，输出注意唤起声音。即，处理电路3向语音输出装置6供给语音信号Dd，语音输出装置6根据来自处理电路3的语音信号Dd输出注意唤起声音。
注意唤起声音用于识别应该注视第1显示器5a～第4显示器5d中的哪个显示器。注意唤起声音以其虚拟声源被定位于第1显示器5a～第4显示器5d中的任意一个显示器的位置的方式被控制声像，通过虚拟声源的定位，识别应该注视第1显示器5a～第4显示器5d中的哪个显示器。
例如，如图8所示，语音输出装置6也可以具有多个扬声器6a～6d、以及对该扬声器6a～6d中的语音输出进行控制的语音输出控制部6e。这里所说的语音输出控制部6e包含放大器。语音输出装置6可以与显示器5a～5d分开即分体地设置。
图9是示出图1的处理电路3的结构的功能框图。图示的处理电路3具有信息分析部302、影像处理部304、语音数据存储部306和语音处理部308。
信息分析部302取得来自外部状况检测部1的检测信息Da。
信息分析部302根据来自外部状况检测部1的检测信息Da，检测位于车辆102周边的注意对象，例如其他车辆、人、构造物等。这里，设仅检测到一个注意对象来进行说明。
作为位于车辆102周边的注意对象的检测方法，例如可以使用以下的任意方法。
(a1)使用影像的方法。例如专利文献2(日本特许第5930067号说明书)所示的方法。
(a2)基于激光雷达(LIDAR)的检测结果的方法。例如专利文献3(日本特许第6381736号说明书)所示的方法。
(a3)基于超声波传感器的检测结果的方法。例如专利文献4(日本特许第6289788号说明书)所示的方法。
信息分析部302根据与注意对象有关的检测信息Da和与本车辆有关的信息计算危险度。
关于危险度的计算，例如，也可以根据注意对象的位置以及移动的方向和速度、本车辆的位置以及移动的方向和速度，求出直到假设本车辆继续这样(本车辆不改变移动的方向和速度)行驶时发生碰撞为止的时间，计算求出的时间的倒数作为危险度。在注意对象或本车辆正在改变移动方向的情况下，也可以考虑该情况。在注意对象是被固定的构造物的情况下，将注意对象的移动速度设为零，根据本车辆的位置以及移动的方向和速度计算危险度即可。
在来自外部状况检测部1的检测信息Da包含表示注意对象的位置以及移动的方向和速度的信息的情况下，能够将该信息所示的注意对象的位置以及移动的方向和速度用于危险度的计算。
在来自外部状况检测部1的检测信息Da不包含表示注意对象的位置以及移动的方向和速度的信息的情况下，也可以根据检测信息Da中包含的信息计算注意对象的位置以及移动的方向和速度。例如，在检测信息Da包含与注意对象之间的距离和包含注意对象的影像的情况下，也可以根据它们计算注意对象的位置以及移动的方向和速度。
作为用于计算危险度的本车辆的位置以及移动的方向和速度，能够使用来自车辆信息取得部2的本车辆信息Db所示的本车辆的位置以及移动的方向和速度。
此外，如果针对注意对象计算出的危险度为阈值以上，则信息分析部302判断为应该对驾驶者进行注意唤起，选择应该进行注意唤起显示的显示器。
在显示器的选择中，可以选择正在显示包含检测到的注意对象的影像的显示器。
信息分析部302将表示选择出的显示器的信息供给到影像处理部304和语音处理部308。
影像处理部304将通过摄像部11的摄像机11a～11d的拍摄而得到的影像分别供给到对应的显示器5a～5d。影像处理部304包含增强处理部314。
增强处理部314对由选择出的显示器显示的影像实施增强处理。增强处理是使判断为碰撞的危险度为阈值以上的注意对象明显的处理。作为增强处理的方法，例如可以使用以下的任意方法。
(b1)利用带颜色的线包围注意对象。
(b2)使注意对象以外的影像模糊或消失。
由增强处理部314实施增强处理后的影像被供给到选择出的显示器。由此，利用选择出的显示器进行注意唤起显示。
语音处理部308使语音输出装置6产生注意唤起声音。语音处理部308从语音数据存储部306接受语音数据，输出由语音数据表示的声音作为注意唤起声音。
语音处理部308包含声像控制部318。声像控制部318产生以虚拟声源被定位于进行注意唤起显示的显示器的位置的方式被控制声像的声音，作为上述注意唤起声音。语音处理部308对语音数据进行用于产生被控制声像的声音的信号处理。
语音数据唤起驾驶者的注意即可，可以使用任意的数据。作为语音数据，例如能够使用表示以下的任意语音的数据。
(c1)纯声(由单一的正弦波表示的声音)
(c2)人声(语音消息)
(c3)不和谐音(感觉是噪声的声音)
(c4)效果声
此外，作为声像控制的方法，例如可以使用以下的任意方法。
(d1)使用夹着选择出的显示器的两个扬声器的振幅平移处理
(d2)使用多个扬声器的串扰消除处理
(d3)使用多个扬声器的波面合成法(Wave Field Synthesis)
下面，参照图10的流程图对基于处理电路3的信息提示用的处理进行说明。
在步骤ST11中，信息分析部302使用从外部状况检测部1输出的检测信息Da检测注意对象。
在步骤ST12中，信息分析部302取得与在步骤ST11中检测到的注意对象有关的信息。
在步骤ST13中，信息分析部302从车辆信息取得部2取得与本车辆有关的信息。
步骤ST12的处理和步骤ST13的处理能够平行地进行。
接着步骤ST12和步骤ST13，在步骤ST14中，信息分析部302根据与注意对象有关的信息和与本车辆有关的信息计算与注意对象有关的危险度。
在步骤ST15中，信息分析部302判定危险度是否大于预定的阈值。
在判断为大于阈值的情况下，判断为应该进行注意唤起显示，输出表示该判断结果的信息(ST16)。例如输出表示应该进行注意唤起显示这样的判断结果的信息，作为注意唤起标志。
在输出注意唤起标志后，在步骤ST17中，信息分析部302选择应该进行注意唤起显示的显示器，将选择出的显示器通知给影像处理部304和语音处理部308。
作为应该进行注意唤起显示的显示器，选择正在显示包含判定为危险度大于阈值的注意对象的影像的显示器。
接着步骤ST17，进行步骤ST18的处理和步骤ST19的处理。
在步骤ST18中，影像处理部304的增强处理部314根据在步骤ST16中生成的信息和表示步骤ST17中的选择结果的信息，对由选择出的显示器显示的影像进行增强处理。
在步骤ST19中，语音处理部308的声像控制部318根据在步骤ST16中生成的信息和表示步骤ST17中的选择结果的信息，进行用于以虚拟声源被定位于选择出的显示器的位置的方式被控制声像的信号处理。
实施增强处理后的影像由选择出的显示器显示，信号处理后生成的语音由语音输出装置6再现。
图11概念地示出进行上述处理的情况下的动作的一例。
例如，在左前方存在接近车辆108(AT1)，在判断为该车辆108与本车辆102碰撞的危险度为阈值以上的情况下，选择车内的显示器中的显示左前方的影像的显示器5b，对由选择出的显示器5b显示的影像中的接近车辆108a的部分进行增强(AT2)，同时产生虚拟声源被定位于该显示器5b的位置的声像的注意唤起声音(AT3)。
根据注意唤起声音，驾驶者106使视线朝向位于虚拟声源的位置的显示器5b(AT4)。
在显示于显示器5b的影像中，利用增强用的线Em包围接近车辆108a，使视线朝向其位置的驾驶者能够尽快地识别接近车辆108a。
这样，驾驶者注意到显示于显示器5b的接近车辆108a，其结果是，还注意到实际的接近车辆108，能够采取用于避免碰撞的驾驶操作(实施制动的操作、转动方向盘的操作等)。
例如在接近车辆108对于驾驶者而言位于死角的情况下，例如隐藏于本车辆102的支柱103的阴影的情况下，这种信息提示的处理特别有效。这是因为，对于驾驶者而言位于死角位置的注意对象很难通过直视来识别，存在注意延迟的倾向，与此相对，通过注意唤起声音示出应该注视的显示器5b，由此，驾驶者106使视线朝向该显示器5b，能够识别进行增强处理(AT2)后的接近车辆108b。
另外，也可以省略增强处理。该情况下，也通过注意唤起声音示出应该注视的显示器，由此，驾驶者使视线朝向该显示器，能够识别被显示的接近车辆。
在上述例子中，第1显示器5a～第4显示器5d始终显示通过第1摄像机～第4摄像机的拍摄而得到的影像，但是，也可以仅在步骤ST15中判断为危险度大于阈值时显示影像。
该情况下，也可以利用位于注意对象所在的方向(从驾驶者观察的方向)或映出注意对象的后视镜所在的方向或最接近这些方向的方向的显示器进行拍摄影像的显示。
例如，在判断为位于前方的稍微靠右的注意对象的危险度大于阈值的情况下，利用位于右前方的显示器5a进行影像显示。
同样，在判断为位于后方的稍微靠右的注意对象的危险度大于阈值的情况下，利用位于最接近右侧后视镜112(映出右后方的注意对象)所在的方向(从驾驶者观察的方向)的方向的显示器5c进行影像显示。
此外，通常也可以不进行显示，而在步骤ST11中检测到注意对象后开始进行注意对象的影像显示。图12中示出该情况下的处理的步骤。
图12与图10大致相同，但是，附加有步骤ST21和ST22。
在步骤ST21中，信息分析部302根据注意对象的检测结果选择应该显示检测对象的显示器，将选择出的显示器通知给影像处理部304。
该情况下的显示器的选择与上述同样，也可以利用位于检测到的注意对象所在的方向(从驾驶者观察的方向)或映出注意对象的后视镜所在的方向或最接近这些方向的方向的显示器进行拍摄影像的显示。
例如，在前方的稍微靠右的方向检测到注意对象的情况下，选择位于右前方的显示器5a。同样，在后方的稍微靠右的方向检测到注意对象的情况下，选择位于最接近右侧后视镜112(映出右后方的注意对象)所在的方向(从驾驶者观察的方向)的方向的显示器5c。
在步骤ST22中，影像处理部304开始进行检测对象的影像显示。
在这种结构的情况下，显示器5a～5d通常也可以显示其他影像。例如也可以使用导航系统的显示器作为显示器5a～5d中的任意一方。
在上述结构中，外部状况检测部1具有拍摄彼此不同的方向的第1摄像机11a～第4摄像机11d，第1显示器5a～第4显示器5d分别对应于第1摄像机11a～第4摄像机11d，分别显示通过对应的摄像机11a～11d的拍摄而得到的影像。
取而代之，关于由显示器5a～5d分别显示的影像，也可以显示观察与任意摄像机的拍摄方向不同的方向时的影像。例如，在利用第1显示器5a显示车辆102的右前方的影像的情况下，也可以不使用拍摄相同方向的摄像机，而根据通过拍摄不同方向的多个摄像机的拍摄而得到的影像生成右前方的影像。
例如，也可以合成通过拍摄前方向的摄像机的拍摄而得到的影像和通过拍摄右侧方的摄像机的拍摄而得到的影像，生成右前方的影像。
总之，只要外部状况检测部1生成由第1显示器5a～第4显示器5d显示的多个不同方向的影像即可。
该情况下，只要构成为利用检测信息处理部14对通过多个摄像机的拍摄而得到的影像进行合成而生成期望方向的影像即可。显示器也可以不是分别对应于摄像机。此外，摄像机的数量也可以不与显示器的数量相同。
实施方式2
图13是示出本发明的实施方式2中使用的处理电路3b的结构的功能框图。
图13所示的处理电路3b与图9所示的处理电路3大致相同，但是附加有优先级决定部322。此外，代替信息分析部302而设置有信息分析部302b，代替影像处理部304而设置有影像处理部304b。
信息分析部302b在检测到多个注意对象的情况下，针对各个注意对象计算危险度。
优先级决定部322在由信息分析部302b针对多个注意对象计算危险度后，根据计算出的危险度赋予优先级。作为优先级，越是驾驶者应该更加迅速地识别的注意对象，则赋予越高的优先级。
作为优先级的赋予方法，例如可以使用以下的任意方法。
(e1)信息分析部302计算的危险度越大，则优先级越高。
(e2)根据注意对象的种类(车辆、人、构造物)，分别预先赋予优先级(优先顺位)。
优先级决定部322将决定的优先级通知给影像处理部304b，将表示决定的优先级最高的显示器的信息通知给语音处理部308。
影像处理部304b的增强处理部314b根据被通知的优先级进行注意对象的增强处理。
作为基于优先级的增强处理的方法，例如可以使用以下的任意方法。
(f1)仅利用正在显示包含优先级最高的注意对象的影像的显示器进行增强处理。
(f2)利用正在显示包含注意对象的影像的全部显示器进行增强显示。但是，进行根据优先级而不同的增强。
作为根据优先级而不同的增强，可考虑改变影像中的包围注意对象的线的颜色或粗细。该情况下，可考虑使包围优先级更高的注意对象的线成为更明显的颜色或更粗的线。
语音处理部308的声像控制部318根据被通知的表示优先级最高的显示器的信息进行声像控制。具体而言，以虚拟声源被定位于优先级最高的显示器的位置的方式进行声像控制。
叙述通过本实施方式得到的效果。在本车辆的周围检测到多个注意对象的情况下，根据优先级进行彼此不同的增强显示，由此，容易识别应该优先注视多个显示器中的哪个显示器，驾驶者能够迅速地进行适当的驾驶操作。
此外，通过以虚拟声源被定位于优先级最高的显示器的位置的方式被控制声像，容易识别应该最优先地注视的显示器，能够迅速地应对紧迫的危险。
实施方式3
图14示出具有本发明的实施方式3的信息提示装置的驾驶辅助装置10c的结构例。
图14所示的驾驶辅助装置10c与图1所示的驾驶辅助装置10大致相同，但是附加有内部状况检测部7，代替处理电路3而设置有处理电路3c。
如图15所示，内部状况检测部7包含摄像部71、检测部72和检测信息处理部73。
摄像部71包含1个或2个以上的摄像机。摄像机拍摄车内的搭乘者。搭乘者包含驾驶者和除此以外的搭乘者(同乘者)。
检测部72检测车内的搭乘者的状态。检测部72也可以包含活体传感器或语音检测器(麦克风)。活体传感器可以检测搭乘者例如驾驶者的心率。语音检测器检测搭乘者发出的语音即可。
检测信息处理部73将通过摄像部71的拍摄而得到的信息和通过检测部72的检测而得到的信息作为检测信息De供给到处理电路3c。
图16示出图14的处理电路3c的结构例。
图16的处理电路3c与图9的处理电路3大致相同，但是附加有搭乘者监视部332，代替语音处理部308而设置有语音处理部308c。
作为搭乘者监视部332，能够使用一般被称作驾驶员监视系统(DMS)的部件。搭乘者监视部332根据通过内部状况检测部7的检测而得到的检测信息De判断搭乘者的状态。
作为搭乘者的状态的判断方法，例如可以使用以下的任意方法。
(g1)利用车内摄像机分析搭乘者的面部朝向或视线朝向，判断搭乘者是否注意到注意对象的接近。
(g2)利用活体传感器检测心率，由此评价驾驶者针对驾驶的注意力的程度。
(g3)在驾驶者以外的搭乘者注意到危险并通过讲话或动作使驾驶者得知危险的情况下，检测该情况。
语音处理部308c与图9的语音处理部308大致相同，但是附加有音量控制部338。音量控制部338根据由搭乘者监视部332判断出的本车辆的搭乘者的状态，对注意唤起声音的音量进行控制。
语音处理部308c以由音量控制部338控制的音量使语音输出装置6产生声音。
音量控制部338例如进行以下的任意音量控制。
(h1)如果驾驶者已经注意到位于车辆102周边的危险度大的注意对象，则停止注意唤起声音的产生或者减小注意唤起声音的音量。
(h2)在驾驶者以外的搭乘者注意到位于车辆102周边的危险度大的注意对象并使驾驶者得知危险的情况下，检测该情况，停止注意唤起声音的产生或者减小注意唤起声音的音量。
(h3)如果处于驾驶者的注意力低的状态，则增大音量。
在上述例子中，语音处理部308c具有音量控制部338，根据搭乘者的状态对音量进行控制。取而代之，声像控制部318也可以以改变虚拟声源被定位的位置的方式进行声像控制。例如，也可以代替上述(h3)的处理而设为：
(h4)如果处于驾驶者的注意力低的状态，则以虚拟声源被定位于驾驶者的耳边的方式控制注意唤起声音的声像。
总之，语音处理部308c进行如下控制即可：如果处于驾驶者的注意力低的状态，则对于驾驶者而言注意唤起声音的注意唤起的程度更强。
叙述通过本实施方式得到的效果。
注意唤起声音用于传递搭乘者(特别是驾驶者)所需要的信息，但是，可能给搭乘者带来不舒适感。
因此，如果根据搭乘者的状况而判断为不需要产生注意唤起声音，则停止或减小声音，由此，不会给搭乘者带来不舒适感。
此外，在驾驶者的注意力降低的情况下，增大音量，或者以虚拟声源被定位于耳边的方式被控制声像，由此，提高注意唤起的程度，能够迅速地识别危险度。
在上述实施方式1～3中，设检测信息处理部14是外部状况检测部1的一部分进行了说明，但是，也可以构成为处理电路3的一部分。该情况下，也可以通过软件即图3所示的程序化的计算机实现检测信息处理部14的功能。
在上述实施方式3中，设检测信息处理部73是内部状况检测部7的一部分进行了说明，但是，也可以构成为处理电路3c的一部分。该情况下，也可以通过软件即图3所示的程序化的计算机实现检测信息处理部73的功能。
以上说明了本发明的信息提示装置和信息提示控制装置，但是，由信息提示装置实施的信息提示方法和由信息提示控制装置实施的信息提示控制方法也构成本发明的一部分。此外，用于使计算机执行这些装置或方法中的处理的程序以及记录有这种程序的计算机能读取的记录介质也构成本发明的一部分。
标号说明
1：外部状况检测部；2：车辆信息取得部；3、3b、3c：处理电路；4：存储装置；5：显示器组；5a～5d：显示器；6：语音输出装置；6a～6d：扬声器；6e：语音输出控制部；7：内部状况检测部；10：信息提示装置；11：摄像部；11a～11d：摄像机；12：检测部；13：通信部；14：检测信息处理部；31：处理器；32：程序存储器；51：显示部；52：显示控制部；71：摄像部；72：检测部；73：检测信息处理部；102：车辆；104：仪表盘；106：驾驶者；112：侧后视镜；114：侧后视镜；302、302b：信息分析部；304、304b：影像处理部；306：语音数据存储部；308、308b、308c：语音处理部；314：增强处理部；318：声像控制部；322：优先级决定部；332：搭乘者监视部；338：音量控制部。

Claims (17)

1.一种信息提示控制装置，其使搭载于车辆的多个显示器和语音输出装置提示驾驶辅助用的信息，其中，所述信息提示控制装置具有：
信息分析部，其根据与位于所述车辆周边的注意对象有关的检测信息计算危险度；
影像处理部，其根据由所述信息分析部计算出的危险度，使所述多个显示器中的至少一个显示器进行注意唤起显示；以及
语音处理部，其根据由所述信息分析部计算出的危险度，使所述语音输出装置产生注意唤起声音，
所述语音处理部产生以虚拟声源被定位于进行所述注意唤起显示的显示器中的至少一个显示器的位置的方式被控制声像的声音，作为所述注意唤起声音。
2.根据权利要求1所述的信息提示控制装置，其特征在于，
所述危险度是所述车辆与所述注意对象碰撞的危险度。
3.根据权利要求1或2所述的信息提示控制装置，其特征在于，
所述影像处理部使得显示通过拍摄所述车辆周边而得到的对所述危险度大的注意对象进行了增强的影像。
4.根据权利要求1～3中的任意一项所述的信息提示控制装置，其特征在于，
在所述车辆的周围检测到多个危险度大的注意对象的情况下，所述信息分析部针对所述多个危险度大的注意对象分别决定优先级，
所述影像处理部使所述至少一个显示器分别显示包含所述多个危险度大的注意对象的影像，针对各个注意对象进行与所述优先级对应的注意唤起显示。
5.根据权利要求4所述的信息提示控制装置，其特征在于，
所述语音处理部产生以虚拟声源被定位于进行所述注意唤起显示的显示器中的正在显示包含所述优先级最高的检测对象的影像的显示器的位置的方式被控制声像的声音，作为所述注意唤起声音。
6.根据权利要求1～5中的任意一项所述的信息提示控制装置，其特征在于，
所述信息提示控制装置还具有搭乘者监视部，该搭乘者监视部根据通过检测所述车辆的内部状况而得到的信息判定搭乘者的状态，
所述语音处理部根据所述搭乘者监视部的判定结果，对所述注意唤起声音的输出进行控制。
7.一种信息提示装置，其使搭载于车辆的多个显示器和语音输出装置提示驾驶辅助用的信息，其中，所述信息提示装置具有：
外部状况检测部，其检测位于所述车辆周边的注意对象；以及
信息提示控制装置，其根据与通过所述外部状况检测部的检测而得到的所述注意对象有关的检测信息计算危险度，根据计算出的危险度使所述多个显示器中的至少一个显示器进行注意唤起显示，根据计算出的危险度使所述语音输出装置产生注意唤起声音，
所述信息提示控制装置产生以虚拟声源被定位于进行所述注意唤起显示的显示器中的至少一个显示器的位置的方式被控制声像的声音，作为所述注意唤起声音。
8.根据权利要求7所述的信息提示装置，其中，
所述外部状况检测部具有拍摄所述车辆周边的1个或2个以上的摄像机。
9.根据权利要求8所述的信息提示装置，其特征在于，
所述信息提示控制装置使得显示通过所述摄像机的拍摄而得到对与所述车辆碰撞的危险高的注意对象进行了增强的影像，作为所述注意唤起显示。
10.根据权利要求7～9中的任意一项所述的信息提示装置，其特征在于，
所述信息提示装置还具有内部状况检测部，该内部状况检测部检测所述车辆的内部状况，
所述信息提示控制装置根据通过所述内部状况检测部的检测而得到的搭乘者的状态，对所述注意唤起声音的输出进行控制。
11.根据权利要求10所述的信息提示装置，其特征在于，
所述内部状况检测部具有拍摄搭乘者的摄像机、检测搭乘者发出的语音的麦克风和检测驾驶者的心率的传感器中的至少一方。
12.根据权利要求7～11中的任意一项所述的信息提示装置，其特征在于，
所述多个显示器分别具有显示部和对所述显示部的显示进行控制的显示控制部。
13.根据权利要求7～12中的任意一项所述的信息提示装置，其特征在于，
所述语音输出装置具有多个扬声器和对所述多个扬声器的语音输出进行控制的语音输出控制部。
14.根据权利要求7～13中的任意一项所述的信息提示装置，其特征在于，
所述语音输出装置具有与所述显示器分开设置的多个扬声器。
15.一种信息提示控制方法，使搭载于车辆的多个显示器和语音输出装置提示驾驶辅助用的信息，其中，
根据与位于所述车辆周边的注意对象有关的检测信息计算危险度，
根据计算出的危险度，使所述多个显示器中的至少一个显示器进行注意唤起显示，
根据计算出的危险度，使所述语音输出装置产生注意唤起声音，
产生以虚拟声源被定位于进行所述注意唤起显示的显示器中的至少一个显示器的位置的方式被控制声像的声音，作为所述注意唤起声音。
16.一种程序，其使计算机执行权利要求15所述的信息提示控制方法中的处理。
17.一种计算机能读取的记录介质，其记录有权利要求16所述的程序。
CN201880099030.9A 2018-11-26 2018-11-26 信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质 Pending CN113016016A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/043395 WO2020110172A1 (ja) 2018-11-26 2018-11-26 情報提示制御装置、情報提示装置及び情報提示制御方法、並びにプログラム及び記録媒体

Publications (1)

Publication Number Publication Date
CN113016016A true CN113016016A (zh) 2021-06-22

Family

ID=68159761

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880099030.9A Pending CN113016016A (zh) 2018-11-26 2018-11-26 信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质

Country Status (5)

Country Link
US (1) US11472432B2 (zh)
JP (1) JP6587776B1 (zh)
CN (1) CN113016016A (zh)
DE (1) DE112018008107B4 (zh)
WO (1) WO2020110172A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020170916A1 (ja) * 2019-02-22 2020-08-27 パナソニックＩｐマネジメント株式会社 状態検知装置及び状態検知方法
EP3822931B1 (en) * 2019-11-12 2023-12-27 Aptiv Technologies Limited A vehicle alert system for notifying a potentially dangerous driving situation to a driver
US11724641B2 (en) * 2021-01-26 2023-08-15 Ford Global Technologies, Llc Hazard condition warning for package delivery operation
JP2022148856A (ja) * 2021-03-24 2022-10-06 本田技研工業株式会社 車両用表示装置、表示制御方法、及びプログラム
IT202100008915A1 (it) * 2021-04-09 2022-10-09 St Microelectronics Srl Procedimento di elaborazione di segnali indicativi di un livello di attenzione di un individuo umano, corrispondenti sistema, veicolo e prodotto informatico
CN114454718B (zh) * 2022-01-21 2024-09-13 北京地平线机器人技术研发有限公司 信息显示方法和装置、电子设备和存储介质
US20230331235A1 (en) * 2022-04-18 2023-10-19 Qualcomm Incorporated Systems and methods of collaborative enhanced sensing

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000149167A (ja) * 1998-11-10 2000-05-30 Nissan Motor Co Ltd 警報装置
JP2001143191A (ja) * 1999-11-12 2001-05-25 Yazaki Corp 車両用情報処理方法、及びその装置、並びに車両
CN202389288U (zh) * 2011-12-21 2012-08-22 浙江吉利汽车研究院有限公司 一种车辆邻车安全预警装置
CN102855774A (zh) * 2011-06-27 2013-01-02 歌乐株式会社 车辆周围监视装置
CN103204123A (zh) * 2013-03-25 2013-07-17 中国电子科技集团公司第三十八研究所 一种车辆行人检测跟踪预警装置及其预警方法
CN106467112A (zh) * 2016-10-11 2017-03-01 斑马信息科技有限公司 车载辅助驾驶系统
CN107221196A (zh) * 2017-05-26 2017-09-29 广东中星电子有限公司 车辆驾驶风险评估方法、装置、系统及可读存储介质
JP2018149894A (ja) * 2017-03-13 2018-09-27 マクセル株式会社 ヘッドアップディスプレイ装置

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5930067B2 (ja) 1980-11-27 1984-07-25 武好 前田 珍味食品の製造装置
JP3235522B2 (ja) * 1997-07-22 2001-12-04 トヨタ自動車株式会社 走行レーン逸脱警報装置
US8212659B2 (en) * 2008-09-05 2012-07-03 Mazda Motor Corporation Driving assist device for vehicle
WO2011114366A1 (ja) 2010-03-16 2011-09-22 三菱電機株式会社 路車協調型安全運転支援装置
JP5745827B2 (ja) 2010-11-29 2015-07-08 パイオニア株式会社 車両表示装置
JP2013143744A (ja) 2012-01-12 2013-07-22 Denso Corp 音像提示装置
DE112012005852T5 (de) * 2012-02-10 2014-11-27 Mitsubishi Electric Corporation Fahrerassistenzvorrichtung und Fahrerassistenzverfahren
DE112012007236B4 (de) 2012-12-18 2021-02-11 Mitsubishi Electric Corporation Sichtbarkeitsschätzungsgerät, Sichtbarkeitsschätzungsverfahren und Fahrsicherheitsunterstützungssystem
US9975483B1 (en) * 2013-02-08 2018-05-22 Amazon Technologies, Inc. Driver assist using smart mobile devices
US20170174129A1 (en) * 2014-03-06 2017-06-22 Sensedriver Technologies, Llc Vehicular visual information system and method
JP6394281B2 (ja) * 2014-10-29 2018-09-26 株式会社デンソー 車載注意喚起システム、報知制御装置
JP2016103249A (ja) * 2014-11-28 2016-06-02 富士通株式会社 運転支援装置および運転支援方法
KR101977090B1 (ko) * 2015-07-22 2019-05-10 엘지전자 주식회사 차량 제어 장치 및 이를 구비한 차량의 제어방법
JP2017182776A (ja) * 2016-03-29 2017-10-05 株式会社デンソー 車両周辺監視装置及びコンピュータプログラム
JP6778872B2 (ja) * 2016-06-28 2020-11-04 パナソニックＩｐマネジメント株式会社 運転支援装置及び運転支援方法
US10007854B2 (en) * 2016-07-07 2018-06-26 Ants Technology (Hk) Limited Computer vision based driver assistance devices, systems, methods and associated computer executable code
DE112016007309T5 (de) * 2016-10-03 2019-07-04 Mitsubishi Electric Corporation Informationsausgabesteuervorrichtung und Informationsausgabesteuerverfahren
US20180272894A1 (en) * 2017-03-27 2018-09-27 Alan Logan Vehicle occupancy alert system and method
JP6381736B1 (ja) 2017-05-24 2018-08-29 三菱電機株式会社 物体検知装置およびこれを用いた自動運転システム
CN110709729A (zh) 2017-06-06 2020-01-17 三菱电机株式会社 物体检测装置
US11494950B2 (en) * 2017-06-16 2022-11-08 Honda Motor Co., Ltd. Experience providing system, experience providing method, and experience providing program
KR102465970B1 (ko) * 2017-08-11 2022-11-10 삼성전자주식회사 주변 상황에 기초하여 음악을 재생하는 방법 및 장치

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000149167A (ja) * 1998-11-10 2000-05-30 Nissan Motor Co Ltd 警報装置
JP2001143191A (ja) * 1999-11-12 2001-05-25 Yazaki Corp 車両用情報処理方法、及びその装置、並びに車両
CN102855774A (zh) * 2011-06-27 2013-01-02 歌乐株式会社 车辆周围监视装置
CN202389288U (zh) * 2011-12-21 2012-08-22 浙江吉利汽车研究院有限公司 一种车辆邻车安全预警装置
CN103204123A (zh) * 2013-03-25 2013-07-17 中国电子科技集团公司第三十八研究所 一种车辆行人检测跟踪预警装置及其预警方法
CN106467112A (zh) * 2016-10-11 2017-03-01 斑马信息科技有限公司 车载辅助驾驶系统
JP2018149894A (ja) * 2017-03-13 2018-09-27 マクセル株式会社 ヘッドアップディスプレイ装置
CN107221196A (zh) * 2017-05-26 2017-09-29 广东中星电子有限公司 车辆驾驶风险评估方法、装置、系统及可读存储介质

Also Published As

Publication number Publication date
DE112018008107T5 (de) 2021-07-15
JPWO2020110172A1 (ja) 2021-02-15
WO2020110172A1 (ja) 2020-06-04
JP6587776B1 (ja) 2019-10-09
DE112018008107B4 (de) 2022-05-19
US11472432B2 (en) 2022-10-18
US20210221396A1 (en) 2021-07-22

Similar Documents

Publication Publication Date Title
CN113016016A (zh) 信息提示控制装置、信息提示装置和信息提示控制方法、以及程序和记录介质
US10536791B2 (en) Vehicular sound processing system
US7327235B2 (en) Alarm sound outputting device for vehicle and program thereof
JP5495071B2 (ja) 車両周辺監視装置
KR20000070673A (ko) 차량 충돌 경고 시스템
JP2005134971A (ja) 運転支援装置
JP6799391B2 (ja) 車両用方向提示装置
JP2015022453A (ja) 緊急車両報知システム
JP7186233B2 (ja) ヘッドアップディスプレイ装置
EP3495942B1 (en) Head-mounted display and control method thereof
JP2005316704A (ja) 周囲状況通知装置、周囲状況通知方法
WO2021192508A1 (ja) 画像合成装置、及び、画像合成方法
JP2008083184A (ja) 運転評価システム
JP2016199124A (ja) 音場制御装置及び適用方法
JP2007133732A (ja) 安全走行支援装置
EP3761271A1 (en) Vehicle recording device, vehicle recording method, and program
JP7456490B2 (ja) 音データ処理装置および音データ処理方法
JP2019186790A (ja) 映像制御装置、車両用撮影装置、映像制御方法およびプログラム
US10373601B2 (en) System and method for active noise compensation in motorcycles, and motorcycle having a system for active noise compensation
JP2009286328A (ja) 障害物認知支援装置
JP2020013369A (ja) 運転支援装置、運転支援システム、及び運転支援プログラム
JP2016149014A (ja) 対話装置
US20230162609A1 (en) Reporting device, vehicle, and reporting control method
US20230048800A1 (en) Vehicular sound processing system with enhanced recognition of audible alerts from other vehicles
JP2006182324A (ja) 車両用警報装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210622

RJ01 Rejection of invention patent application after publication