[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2017107354A - Operation assistance system, object device, control method, and program - Google Patents

Operation assistance system, object device, control method, and program Download PDF

Info

Publication number
JP2017107354A
JP2017107354A JP2015239908A JP2015239908A JP2017107354A JP 2017107354 A JP2017107354 A JP 2017107354A JP 2015239908 A JP2015239908 A JP 2015239908A JP 2015239908 A JP2015239908 A JP 2015239908A JP 2017107354 A JP2017107354 A JP 2017107354A
Authority
JP
Japan
Prior art keywords
information
target device
auxiliary information
unit
assisting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015239908A
Other languages
Japanese (ja)
Other versions
JP6657891B2 (en
Inventor
雄太 清水
Yuta Shimizu
雄太 清水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2015239908A priority Critical patent/JP6657891B2/en
Publication of JP2017107354A publication Critical patent/JP2017107354A/en
Application granted granted Critical
Publication of JP6657891B2 publication Critical patent/JP6657891B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To provide an operation assistance system with which it is possible to assist an operator in performing operation in a prescribed dangerous situation.SOLUTION: According to the present invention, an object device transmits a vehicle packet signal to the outside in a prescribed situation, receives information for assisting the operation of the object device, acquires information for assisting the operation of the object device, combines information for assisting the operation of the object device received by an operation assist information reception unit and information for assisting the operation of the object device acquired by a first operation assist information acquisition unit, and displays the combined information assisting the operation of the object device. An operation assist information provision device determines, when the vehicle packet signal is received from a packet signal transmission unit, whether it is located at a position where it can acquire operation assist information, and when the operation assist information provision device is located at a position where it can acquire information for assisting the operation of the object device, it acquires information for assisting the operation of the object device, and transmits information for assisting the operation of the object device that is acquired by a second operation assist information acquisition unit, to the object device.SELECTED DRAWING: Figure 1

Description

本発明は、操作補助システム、対象装置、制御方法及びプログラムに関する。   The present invention relates to an operation assistance system, a target device, a control method, and a program.

自動車、オートバイなどの車両の操作は、慣れが必要であり、交差点や狭い道路などで操作が困難な場合がある。
特許文献1〜3には、関連する技術として、自車両、または、自車両の周囲を撮影した画像を表示部に表示する技術が開示されている。
Operation of vehicles such as automobiles and motorcycles requires familiarity and may be difficult to operate at intersections and narrow roads.
In Patent Documents 1 to 3, as a related technique, a technique for displaying an image obtained by photographing the host vehicle or the periphery of the host vehicle on a display unit is disclosed.

特開2008−191988号公報Japanese Patent Laid-Open No. 2008-191988 特開2005−347864号公報JP 2005-347864 A 特開2005−174061号公報JP 2005-174061 A

ところで、操作が困難な、特に事故が起こりやすい所定の状況での操作を注意する必要がある。
そのため、危険な所定の状況において、操作者の操作を補助することのできる技術が求められていた。
By the way, it is necessary to pay attention to an operation in a predetermined situation where the operation is difficult, in particular, an accident is likely to occur.
Therefore, there has been a demand for a technique that can assist an operator's operation in a predetermined dangerous situation.

本発明は、上記の課題を解決することのできる操作補助システム、対象装置、制御方法及びプログラムを提供することを目的としている。   An object of the present invention is to provide an operation assistance system, a target device, a control method, and a program that can solve the above-described problems.

上記目的を達成するために、本発明は、対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、前記対象装置は、前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、を備え、前記操作補助情報提供装置は、前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、前記操作補助情報取得判定部が前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、を備える操作補助システムである。   In order to achieve the above object, the present invention is an operation assistance system that includes an object device and an operation assistance information providing device, and assists the operation of the object device, and the object device identifies the object device. A packet signal transmitter that transmits vehicle packet signals including information that can be transmitted to the outside in a predetermined situation, an operation auxiliary information receiver that receives information assisting the operation of the target device from the operation auxiliary information providing device, A first operation auxiliary information acquisition unit that acquires information for assisting the operation of the target device, information that assists the operation of the target device received by the operation auxiliary information reception unit, and a first operation auxiliary information acquisition unit A table for displaying information for assisting the operation of the target device after synthesis, which is synthesized by the operation auxiliary information synthesis unit. A position at which the operation auxiliary information providing device can acquire information for assisting the operation of the target device when the vehicle packet signal is received from the packet signal transmission unit. When the operation auxiliary information acquisition determination unit that determines whether or not the operation auxiliary information acquisition determination unit determines that the operation auxiliary information providing device is in a position where the information for assisting the operation of the target device can be acquired A second operation auxiliary information acquisition unit that acquires information for assisting the operation of the target device, and an operation of transmitting information for assisting the operation of the target device acquired by the second operation auxiliary information acquisition unit to the target device. And an auxiliary information transmission unit.

また、本発明は、対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、前記対象装置は、前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、前記操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、を備え、前記操作補助情報提供装置は、前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置の周辺の情報を取得する第2操作補助情報取得部と、前記第2操作補助情報取得部が取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信する操作補助情報送信部と、を備える操作補助システムである。   In addition, the present invention is an operation assistance system that includes a target device and an operation assistance information providing device, and assists the operation of the target device, and the target device includes information that can identify the target device. A packet signal transmitting unit for transmitting a vehicle packet signal to the outside in a predetermined situation; an operation auxiliary information receiving unit for receiving information around the operation auxiliary information providing device from the operation auxiliary information providing device; and the operation auxiliary information receiving Operation auxiliary information acquisition determination for determining whether or not the operation auxiliary information providing device is in a position where the information for assisting the operation of the target device can be acquired based on information around the operation auxiliary information providing device received by the unit Information that assists the operation of the target device received by the operation assist information receiving unit, a first operation auxiliary information acquisition unit that acquires information for assisting the operation of the target device Assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesizing unit and the operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device acquired by the first operation auxiliary information obtaining unit A display unit that displays information to be received, and the operation assistance information providing device acquires information about the periphery of the operation assistance information providing device when the vehicle packet signal is received from the packet signal transmission unit. An operation assistance system comprising: 2 operation assistance information acquisition units; and an operation assistance information transmission unit that transmits information around the operation assistance information providing device acquired by the second operation assistance information acquisition unit to the target device. .

また、本発明は、対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、を備える対象装置である。   The present invention also provides a packet signal transmission unit that transmits a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation, and information that assists the operation of the target device from the operation assistance information providing device. An operation auxiliary information receiving unit that receives the information, a first operation auxiliary information acquisition unit that acquires information that assists the operation of the target device, and information that assists the operation of the target device received by the operation auxiliary information receiving unit. Assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesizing unit and the operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device acquired by the first operation auxiliary information obtaining unit And a display unit that displays information to be performed.

また、本発明は、対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、を備える対象装置である。   In addition, the present invention provides a packet signal transmission unit that transmits a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation, and an operation auxiliary information providing device to the periphery of the operation auxiliary information providing device. Information for assisting the operation of the target device by the operation assistance information providing device based on information about the operation assistance information receiving unit that receives the information and information about the periphery of the operation assistance information providing device received by the operation assistance information receiving unit. The operation auxiliary information acquisition determination unit that determines whether or not it is in a position where it can be acquired, the first operation auxiliary information acquisition unit that acquires information that assists the operation of the target device, and the operation auxiliary information reception unit that has received the An operation auxiliary information combining unit that combines information for assisting operation of the target device and information for assisting operation of the target device acquired by the first operation auxiliary information acquiring unit; and the operation auxiliary information. A display unit for displaying information to assist the operation of the target device after synthesis generation unit was synthesized, a target apparatus comprising a.

また、本発明は、対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、前記対象装置が前記対象装置の操作を補助する情報を取得すること、前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、合成した合成後の前記対象装置の操作を補助する情報を表示すること、を含む対象装置の制御方法である。   Further, the present invention transmits a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation, and receives information assisting the operation of the target device from the operation assistance information providing device. The target device acquires information for assisting the operation of the target device, the information for assisting the operation of the target device received from the operation assist information providing device, and the operation of the target device acquired by the target device And information for assisting the operation of the combined target device after combining and displaying the combined information.

また、本発明は、対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、前記対象装置が前記対象装置の操作を補助する情報を取得すること、前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、合成した合成後の前記対象装置の操作を補助する情報を表示すること、を含む対象装置の制御方法である。   Further, the present invention transmits a vehicle packet signal including information that can specify a target device to the outside in a predetermined situation, and receives information around the operation assistance information providing device from the operation assistance information providing device. Determining whether or not the operation assistance information providing apparatus is in a position where the information for assisting the operation of the target apparatus can be acquired based on the received information about the periphery of the operation assistance information providing apparatus, Acquires information for assisting operation of the target device, information for assisting operation of the target device received from the operation assist information providing device, and information for assisting operation of the target device acquired by the target device And displaying information for assisting the operation of the synthesized target device after the synthesis.

また、本発明は、対象装置のコンピュータに、対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、前記対象装置が前記対象装置の操作を補助する情報を取得すること、前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、合成した合成後の前記対象装置の操作を補助する情報を表示すること、を実行させるプログラムである。   The present invention also provides a computer of the target device to transmit a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation, and assists the operation of the target device from the operation auxiliary information providing device. Receiving information to be obtained, obtaining information for assisting the operation of the target device by the target device, assisting operation of the target device received from the operation assistance information providing device, and obtaining by the target device The information is a program that executes combining the information that assists the operation of the target device and displaying the information that assists the operation of the combined target device after the synthesis.

また、本発明は、対象装置のコンピュータに、対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、前記対象装置が前記対象装置の操作を補助する情報を取得すること、前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、合成した合成後の前記対象装置の操作を補助する情報を表示すること、を実行させるプログラムである。   In addition, the present invention provides a computer of the target device to transmit a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation, from the operation auxiliary information providing device to the operation auxiliary information providing device. Receiving peripheral information, and determining whether or not the operation auxiliary information providing device is in a position where the information for assisting the operation of the target device can be acquired based on the received peripheral information of the operation auxiliary information providing device The target device acquiring information for assisting the operation of the target device, the information for assisting the operation of the target device received from the operation assist information providing device, and the target device acquired by the target device And information for assisting the operation of the combined target device after the composition is displayed.

本発明によれば、危険な所定の状況において、操作者の操作を補助することができる。   According to the present invention, an operator's operation can be assisted in a predetermined dangerous situation.

本発明の第一の実施形態による操作補助システムの構成を示す図である。It is a figure which shows the structure of the operation assistance system by 1st embodiment of this invention. 本発明の第一の実施形態による操作補助システムの処理フローを示す図である。It is a figure which shows the processing flow of the operation assistance system by 1st embodiment of this invention. 本発明の第二の実施形態による操作補助システムの構成を示す図である。It is a figure which shows the structure of the operation assistance system by 2nd embodiment of this invention. 本発明の第二の実施形態による車両の構成を示す図である。It is a figure which shows the structure of the vehicle by 2nd embodiment of this invention. 本発明の第二の実施形態おける表示部による表示例を示す第1の図である。It is a 1st figure which shows the example of a display by the display part in 2nd embodiment of this invention. 本発明の第二の実施形態おける表示部による表示例を示す第2の図である。It is a 2nd figure which shows the example of a display by the display part in 2nd embodiment of this invention. 本発明の第二の実施形態おける表示部による表示例を示す第3の図である。It is a 3rd figure which shows the example of a display by the display part in 2nd embodiment of this invention. 本発明の第二の実施形態による周辺車両の構成を示す図である。It is a figure which shows the structure of the surrounding vehicle by 2nd embodiment of this invention. 本発明の第二の実施形態による路側機の構成を示す図である。It is a figure which shows the structure of the roadside machine by 2nd embodiment of this invention. 本発明の第二の実施形態による操作補助システムの処理フローを示す図である。It is a figure which shows the processing flow of the operation assistance system by 2nd embodiment of this invention.

<第一の実施形態>
本発明の第一の実施形態による操作補助システムについて説明する。
本発明の第一の実施形態による操作補助システムは、本発明の最小構成の操作補助システムである。
本発明の第一の実施形態による操作補助システム1は、図1に示すように、少なくとも、対象装置10と、操作補助情報提供装置40と、を備える。
<First embodiment>
An operation assistance system according to a first embodiment of the present invention will be described.
The operation assistance system according to the first embodiment of the present invention is an operation assistance system having a minimum configuration according to the present invention.
As illustrated in FIG. 1, the operation assistance system 1 according to the first embodiment of the present invention includes at least a target device 10 and an operation assistance information providing device 40.

対象装置10は、第1操作補助情報取得部102と、パケット信号送信部104aと、操作補助情報受信部104bと、表示部105と、操作補助情報合成部107と、を備える。
パケット信号送信部104aは、所定の状況で車両パケット信号を外部に送信する。車両パケット信号は、対象装置10を特定することができる情報を含んでいる。所定の状況は、例えば、交差点、交差点の手前、狭い道路、狭い道路の手前などの道路を走行する危険な状況である。また、所定の状況は、例えば、対象装置10が一定速度以下の速度で走行する安全を確保する必要のある状況である。
操作補助情報受信部104bは、操作補助情報提供装置40から対象装置10の操作を補助する情報を受信する。以下、操作補助情報提供装置40が取得した対象装置10の操作を補助する情報であり、操作補助情報受信部104bが操作補助情報提供装置40から受信した対象装置10の操作を補助する情報を「第1操作補助情報」という。
第1操作補助情報取得部102は、対象装置10の操作を補助する情報を取得する。以下、第1操作補助情報取得部102が取得した対象装置10の操作を補助する情報を「第2操作補助情報」という。
操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成する。以下、操作補助情報合成部107が合成した合成後の対象装置10の操作を補助する情報を「第3操作補助情報」という。
表示部105は、第3操作補助情報を表示する。
The target device 10 includes a first operation auxiliary information acquisition unit 102, a packet signal transmission unit 104a, an operation auxiliary information reception unit 104b, a display unit 105, and an operation auxiliary information synthesis unit 107.
The packet signal transmission unit 104a transmits a vehicle packet signal to the outside in a predetermined situation. The vehicle packet signal includes information that can identify the target device 10. The predetermined situation is a dangerous situation of traveling on a road such as an intersection, before an intersection, a narrow road, or before a narrow road. Further, the predetermined situation is a situation in which it is necessary to ensure the safety that the target apparatus 10 travels at a speed equal to or lower than a constant speed, for example.
The operation auxiliary information receiving unit 104 b receives information for assisting the operation of the target device 10 from the operation auxiliary information providing device 40. Hereinafter, information that assists the operation of the target device 10 acquired by the operation auxiliary information providing device 40, and information that assists the operation of the target device 10 received by the operation auxiliary information receiving unit 104b from the operation auxiliary information providing device 40 will be described. This is referred to as “first operation assistance information”.
The first operation auxiliary information acquisition unit 102 acquires information that assists the operation of the target device 10. Hereinafter, information that assists the operation of the target device 10 acquired by the first operation auxiliary information acquisition unit 102 is referred to as “second operation auxiliary information”.
The operation auxiliary information combining unit 107 combines the first operation auxiliary information and the second operation auxiliary information. Hereinafter, the information that assists the operation of the target device 10 after the synthesis combined by the operation auxiliary information combining unit 107 is referred to as “third operation auxiliary information”.
The display unit 105 displays the third operation auxiliary information.

操作補助情報提供装置40は、操作補助情報取得判定部404と、第2操作補助情報取得部402と、操作補助情報送信部4011aと、を備える。
操作補助情報取得判定部404は、パケット信号送信部104aから車両パケット信号を受信した場合に、操作補助情報提供装置40が対象装置10の操作を補助する情報を取得できる位置にいるか否かを判定する。
第2操作補助情報取得部402は、操作補助情報取得判定部404が操作補助情報提供装置40が対象装置10の操作を補助する情報を取得できる位置にいると判定した場合に、対象装置10の操作を補助する情報を取得する。
操作補助情報送信部4011aは、第2操作補助情報取得部402が取得した対象装置10の操作を補助する情報を対象装置10に送信する。
The operation auxiliary information provision device 40 includes an operation auxiliary information acquisition determination unit 404, a second operation auxiliary information acquisition unit 402, and an operation auxiliary information transmission unit 4011a.
The operation auxiliary information acquisition determination unit 404 determines whether or not the operation auxiliary information providing device 40 is in a position where the information for assisting the operation of the target device 10 can be acquired when the vehicle packet signal is received from the packet signal transmission unit 104a. To do.
The second operation auxiliary information acquisition unit 402 determines that the operation auxiliary information acquisition determination unit 404 determines that the operation auxiliary information providing device 40 is in a position where the information for assisting the operation of the target device 10 can be acquired. Get information to assist the operation.
The operation auxiliary information transmission unit 4011 a transmits information to assist the operation of the target device 10 acquired by the second operation auxiliary information acquisition unit 402 to the target device 10.

なお、対象装置10は、例えば、自動車、オートバイなどの車両である。
また、操作補助情報提供装置40は、対象装置10が自動車、オートバイなどの車両である場合には、車両(周辺車両)、道路の脇に設置された路側機などである。
また、第1操作補助情報、第2操作補助情報のそれぞれは、例えば、対象装置10を撮影した画像を含む画像の画像情報である。また、第1操作補助情報、第2操作補助情報のそれぞれは、例えば、対象装置10の位置を基準とした障害物の位置を示す情報を含む位置情報である。
The target device 10 is, for example, a vehicle such as an automobile or a motorcycle.
Further, when the target device 10 is a vehicle such as an automobile or a motorcycle, the operation assistance information providing device 40 is a vehicle (peripheral vehicle), a roadside machine installed on the side of the road, or the like.
Moreover, each of the 1st operation assistance information and the 2nd operation assistance information is image information of the image containing the image which image | photographed the object apparatus 10, for example. Moreover, each of the 1st operation assistance information and the 2nd operation assistance information is position information including the information which shows the position of the obstruction on the basis of the position of the object apparatus 10, for example.

図2に示す本発明の第一の実施形態による操作補助システム1の処理フローについて説明する。
本発明の第一の実施形態による操作補助システム1において、パケット信号送信部104aは、所定の状況で車両パケット信号をブロードキャストで外部に送信する(ステップS1)。
The process flow of the operation assistance system 1 by 1st embodiment of this invention shown in FIG. 2 is demonstrated.
In the operation assistance system 1 according to the first embodiment of the present invention, the packet signal transmission unit 104a transmits a vehicle packet signal to the outside by broadcasting in a predetermined situation (step S1).

操作補助情報取得判定部404は、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している(ステップS2)。   The operation auxiliary information acquisition determination unit 404 always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a (step S2).

操作補助情報取得判定部404は、パケット信号送信部104aから車両パケット信号を受信しないと判定した場合に(ステップS2においてNO)、ステップS2の処理に戻す。   When it is determined that the operation auxiliary information acquisition determination unit 404 does not receive the vehicle packet signal from the packet signal transmission unit 104a (NO in step S2), the operation auxiliary information acquisition determination unit 404 returns to the process of step S2.

操作補助情報取得判定部404は、パケット信号送信部104aから車両パケット信号を受信した場合に(ステップS2においてYES)、操作補助情報提供装置40が第1操作補助情報を取得できる位置にいるか否かを判定する(ステップS3)。   When the operation auxiliary information acquisition determination unit 404 receives a vehicle packet signal from the packet signal transmission unit 104a (YES in step S2), it is determined whether or not the operation auxiliary information providing device 40 is in a position where the first operation auxiliary information can be acquired. Is determined (step S3).

操作補助情報取得判定部404は、操作補助情報提供装置40が第1操作補助情報を取得できる位置にいないと判定した場合(ステップS3においてNO)、ステップS2の処理に戻す。   If the operation assistance information acquisition determination unit 404 determines that the operation assistance information providing device 40 is not in a position where the first operation assistance information can be acquired (NO in step S3), the operation assistance information acquisition determination unit 404 returns to the process of step S2.

操作補助情報取得判定部404が第1操作補助情報を取得できる位置にいると判定した場合(ステップS3においてYES)、第2操作補助情報取得部402は、第1操作補助情報を取得する(ステップS4)。   When it is determined that the operation auxiliary information acquisition determination unit 404 is in a position where the first operation auxiliary information can be acquired (YES in step S3), the second operation auxiliary information acquisition unit 402 acquires the first operation auxiliary information (step S3). S4).

第2操作補助情報取得部402は、操作補助情報送信部4011aを介して、第1操作補助情報を対象装置10に送信する(ステップS5)。   The second operation auxiliary information acquisition unit 402 transmits the first operation auxiliary information to the target device 10 via the operation auxiliary information transmission unit 4011a (step S5).

操作補助情報合成部107は、操作補助情報受信部104bを介して、操作補助情報提供装置40から第1操作補助情報を受信する(ステップS6)。   The operation auxiliary information combining unit 107 receives the first operation auxiliary information from the operation auxiliary information providing device 40 via the operation auxiliary information receiving unit 104b (step S6).

第1操作補助情報取得部102は、第2操作補助情報を取得する(ステップS7)。
操作補助情報合成部107は、第1操作補助情報取得部102から第1操作補助情報を受信する。操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成し(ステップS8)、第3操作補助情報を生成する。操作補助情報合成部107は、第3操作補助情報を表示部105に送信する。
表示部105は、第3操作補助情報を表示する(ステップS9)。
The first operation auxiliary information acquisition unit 102 acquires second operation auxiliary information (step S7).
The operation auxiliary information synthesis unit 107 receives the first operation auxiliary information from the first operation auxiliary information acquisition unit 102. The operation auxiliary information combining unit 107 combines the first operation auxiliary information and the second operation auxiliary information (step S8) to generate third operation auxiliary information. The operation auxiliary information combining unit 107 transmits the third operation auxiliary information to the display unit 105.
The display unit 105 displays the third operation auxiliary information (step S9).

以上、本発明の第一の実施形態による操作補助システム1について説明した。本発明の第一の実施形態による操作補助システム1は、対象装置10と操作補助情報提供装置40とを備える。対象装置10は、第1操作補助情報取得部102と、パケット信号送信部104aと、操作補助情報受信部104bと、表示部105と、操作補助情報合成部107と、を備える。パケット信号送信部104aは、所定の状況で車両パケット信号を外部に送信する。操作補助情報受信部104bは、操作補助情報提供装置40から対象装置10の操作を補助する情報を受信する。第1操作補助情報取得部102は、対象装置10の操作を補助する情報を取得する。操作補助情報合成部107は、操作補助情報受信部104bが操作補助情報提供装置40から受信した対象装置10の操作を補助する情報(第1操作補助情報)と、第1操作補助情報取得部102が取得した対象装置10の操作を補助する情報(第2操作補助情報)とを合成する。表示部105は、操作補助情報合成部107が合成した合成後の対象装置10の操作を補助する情報(第3操作補助情報)を表示する。
このようにすれば、操作補助システム1は、危険な所定の状況において、操作者の操作を補助することができる。その結果、操作者は、対象装置10を安全に走行させることができる。
The operation assistance system 1 according to the first embodiment of the present invention has been described above. The operation assistance system 1 according to the first embodiment of the present invention includes a target device 10 and an operation assistance information providing device 40. The target device 10 includes a first operation auxiliary information acquisition unit 102, a packet signal transmission unit 104a, an operation auxiliary information reception unit 104b, a display unit 105, and an operation auxiliary information synthesis unit 107. The packet signal transmission unit 104a transmits a vehicle packet signal to the outside in a predetermined situation. The operation auxiliary information receiving unit 104 b receives information for assisting the operation of the target device 10 from the operation auxiliary information providing device 40. The first operation auxiliary information acquisition unit 102 acquires information that assists the operation of the target device 10. The operation assistance information combining unit 107 includes information (first operation assistance information) that assists the operation of the target device 10 received by the operation assistance information receiving unit 104b from the operation assistance information providing device 40, and the first operation assistance information obtaining unit 102. Is combined with information (second operation auxiliary information) that assists the operation of the target device 10 acquired by the user. The display unit 105 displays information (third operation auxiliary information) that assists the operation of the combined target device 10 combined by the operation auxiliary information combining unit 107.
In this way, the operation assistance system 1 can assist the operation of the operator in a dangerous predetermined situation. As a result, the operator can drive the target device 10 safely.

<第二の実施形態>
本発明の第二の実施形態による操作補助システムについて説明する。
本発明の第二の実施形態による操作補助システム1は、図3に示すように、車両10と、周辺車両20a、20b、20c、20dと、路側機30a、30bと、を備える。周辺車両20a、20b、20c、20dのそれぞれは、車両10の周辺の道路を走行中の車両である。路側機30a、30bのそれぞれは、車両10の周辺の道路の路側帯に設置された装置である。
以下では、周辺車両20a、20b、20c、20dを総称して周辺車両20という。また、路側機30a、30bを総称して路側機30という。
なお、本発明の第二の実施形態は、本発明の第一の実施形態における対象装置10が自動車、オートバイなどの車両である場合の例である。また、本発明の第二の実施形態は、本発明の第一の実施形態における操作補助情報提供装置40が複数存在する場合の例である。本発明の第二の実施形態による周辺車両20、路側機30のそれぞれは、本発明の第一の実施形態による操作補助システム1における操作補助情報提供装置40である。周辺車両20と路側機30のそれぞれは、車両10から車両パケット信号を受信できる位置に存在している。
<Second Embodiment>
An operation assistance system according to a second embodiment of the present invention will be described.
As shown in FIG. 3, the operation assistance system 1 according to the second embodiment of the present invention includes a vehicle 10, surrounding vehicles 20 a, 20 b, 20 c, and 20 d, and roadside devices 30 a and 30 b. Each of the peripheral vehicles 20 a, 20 b, 20 c, and 20 d is a vehicle that is traveling on a road around the vehicle 10. Each of the roadside machines 30 a and 30 b is a device installed in a roadside zone of a road around the vehicle 10.
Hereinafter, the surrounding vehicles 20a, 20b, 20c, and 20d are collectively referred to as the surrounding vehicle 20. Further, the roadside machines 30a and 30b are collectively referred to as the roadside machine 30.
In addition, 2nd embodiment of this invention is an example in case the target apparatus 10 in 1st embodiment of this invention is vehicles, such as a motor vehicle and a motorcycle. Moreover, 2nd embodiment of this invention is an example in case there exist multiple operation assistance information provision apparatuses 40 in 1st embodiment of this invention. Each of the surrounding vehicle 20 and the roadside machine 30 by 2nd embodiment of this invention is the operation assistance information provision apparatus 40 in the operation assistance system 1 by 1st embodiment of this invention. Each of the surrounding vehicle 20 and the roadside machine 30 exists at a position where the vehicle packet signal can be received from the vehicle 10.

本発明の第二の実施形態による操作補助システム1の動作の概要について説明する。
操作補助システム1において、車両10は、車両10が所定の状況にあるか否かを常時判定している。具体的には、車両10は、例えば、地図情報と、車両10の現在の位置とに基づいて、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったか否かを判定する。車両10は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったと判定した場合、車両10が所定の状況にあると判定する。また、車両10は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲外であると判定した場合、車両10が所定の状況にないと判定する。
The outline | summary of operation | movement of the operation assistance system 1 by 2nd embodiment of this invention is demonstrated.
In the operation assistance system 1, the vehicle 10 always determines whether or not the vehicle 10 is in a predetermined situation. Specifically, for example, the vehicle 10 is predetermined based on map information and the current position of the vehicle 10 with respect to a position such as an intersection, a front of the intersection, a narrow road, a narrow road, or the like. It is determined whether or not the distance is entered. The vehicle 10 determines that the vehicle 10 is in a predetermined situation when it is determined that the vehicle 10 has entered a range of a predetermined distance with respect to a position such as an intersection, near an intersection, a narrow road, or a narrow road. . Further, when the vehicle 10 determines that the vehicle 10 is out of a predetermined distance range with respect to a position such as an intersection, a front of the intersection, a narrow road, or a narrow road, the vehicle 10 is not in a predetermined situation. judge.

車両10は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったと判定した場合、その位置から車両パケット信号をブロードキャストで外部に送信する。車両パケット信号は、車両10を特定することができる情報を含んでいる。車両10を特定することができる情報は、例えば、車両10のナンバーの情報、車両10の通信アドレスなどである。   When the vehicle 10 determines that the vehicle 10 has entered a predetermined distance range with respect to a position such as an intersection, before the intersection, a narrow road, or before a narrow road, the vehicle 10 broadcasts a vehicle packet signal from the position to the outside. Send. The vehicle packet signal includes information that can identify the vehicle 10. The information that can specify the vehicle 10 is, for example, information on the number of the vehicle 10, a communication address of the vehicle 10, and the like.

周辺車両20と路側機30のそれぞれは、車両10から車両パケット信号を受信した場合に、周辺車両20と路側機30のそれぞれが第1操作補助情報を取得できる位置にいるか否かを判定する。例えば、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302がカメラである場合、周辺車両20と路側機30のそれぞれは、車両パケット信号を受信すると、周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302が撮影している画像において車両10が映っているか否かを判定する。周辺車両20と路側機30のそれぞれは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが対応するカメラが撮影している画像に含まれていると判定した場合に、対応するカメラが撮影している画像に車両10が映っていると判定する。文字パターンを認識する技術は、例えば、テンプレートマッチングなどの技術である。また、周辺車両20と路側機30のそれぞれは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが対応するカメラが撮影している画像に含まれていないと判定した場合に、対応するカメラが撮影している画像に車両10が映っていないと判定する。
周辺車両20と路側機30のそれぞれは、周辺車両20と路側機30のそれぞれが備えるカメラが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、周辺車両20と路側機30のそれぞれは、周辺車両20と路側機30のそれぞれが備えるカメラが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
When each of the surrounding vehicle 20 and the roadside machine 30 receives a vehicle packet signal from the vehicle 10, it determines whether each of the surrounding vehicle 20 and the roadside machine 30 is in a position where the first operation auxiliary information can be acquired. For example, when the first operation auxiliary information acquisition unit 102 is a camera and the corresponding second operation auxiliary information acquisition units 202 and 302 included in each of the surrounding vehicle 20 and the roadside device 30 are cameras, the surrounding vehicle 20 and the roadside device are When each of 30 receives the vehicle packet signal, whether or not the vehicle 10 is reflected in the images captured by the corresponding second operation auxiliary information acquisition units 202 and 302 included in each of the surrounding vehicle 20 and the roadside device 30. Determine. Each of the surrounding vehicle 20 and the roadside machine 30 is included in an image captured by a camera corresponding to a license plate indicating the same information as the number included in the vehicle packet signal, using a technology for recognizing a character pattern. When it is determined that the vehicle 10 is present, it is determined that the vehicle 10 is reflected in the image captured by the corresponding camera. A technique for recognizing a character pattern is, for example, a technique such as template matching. In addition, each of the surrounding vehicle 20 and the roadside machine 30 corresponds to the case where it is determined that the license plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the corresponding camera. It is determined that the vehicle 10 is not reflected in the image captured by the camera.
Each of the surrounding vehicle 20 and the roadside machine 30 is a position where the first operation assistance information can be acquired when it is determined that the vehicle 10 is reflected in an image captured by a camera included in each of the surrounding vehicle 20 and the roadside machine 30. Determine that you are in Moreover, each of the surrounding vehicle 20 and the roadside machine 30 acquires 1st operation assistance information, when it determines with the vehicle 10 not being reflected in the image which the camera with which each of the surrounding vehicle 20 and the roadside machine 30 equips. It is determined that the position is not possible.

第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれは、第1操作補助情報を取得し続ける。第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれは、取得している第1操作補助情報と、自身の位置を示す位置情報とを車両10のアドレスを指定してリアルタイムにユニキャストで車両10に送信する。位置情報は、例えば、緯度と経度の組み合わせが示す情報である。   Each of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information can be acquired continues to acquire the first operation auxiliary information. Each of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information can be acquired, uses the acquired first operation auxiliary information and position information indicating its own position as the address of the vehicle 10. It designates and transmits to the vehicle 10 by unicast in real time. The position information is, for example, information indicated by a combination of latitude and longitude.

対象装置10は、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれから第1操作補助情報を受信する。
対象装置10は、第2操作補助情報を取得する。
対象装置10は、第1操作補助情報と、第2操作補助情報とを合成し、第3操作補助情報を生成する。対象装置10は、第3操作補助情報を表示する。
The target device 10 receives the first operation assistance information from each of the surrounding vehicle 20 and the roadside device 30 that are determined to be in a position where the first operation assistance information can be obtained.
The target device 10 acquires second operation assistance information.
The target apparatus 10 combines the first operation assistance information and the second operation assistance information to generate third operation assistance information. The target device 10 displays the third operation assistance information.

上述のように、本発明の第二の実施形態による操作補助システム1において、車両10は、所定の状況で車両パケット信号を外部に送信する。車両10は、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれから対象装置10の操作を補助する情報を受信する。車両10は、対象装置10の操作を補助する情報を取得する。車両10は、操作補助情報提供装置40から受信した対象装置10の操作を補助する情報(第1操作補助情報)と、車両10が取得した対象装置10の操作を補助する情報(第2操作補助情報)とを合成する。車両10は、合成した合成後の対象装置10の操作を補助する情報(第3操作補助情報)を表示する。   As described above, in the operation assistance system 1 according to the second embodiment of the present invention, the vehicle 10 transmits a vehicle packet signal to the outside in a predetermined situation. The vehicle 10 receives information that assists the operation of the target device 10 from each of the surrounding vehicle 20 and the roadside device 30 that are determined to be in a position where the first operation assistance information can be obtained. The vehicle 10 acquires information that assists the operation of the target device 10. The vehicle 10 receives information (first operation assistance information) that assists the operation of the target device 10 received from the operation assistance information providing device 40 and information (second operation assistance) that assists the operation of the target device 10 acquired by the vehicle 10. Information). The vehicle 10 displays information (third operation auxiliary information) that assists the operation of the combined target device 10 after synthesis.

本発明の第二の実施形態による車両10の構成について説明する。
車両10は、図4に示すように、位置判定部101と、第1操作補助情報取得部102と、無線通信部104と、表示部105と、記憶部106と、操作補助情報合成部107と、を備える。
A configuration of the vehicle 10 according to the second embodiment of the present invention will be described.
As illustrated in FIG. 4, the vehicle 10 includes a position determination unit 101, a first operation auxiliary information acquisition unit 102, a wireless communication unit 104, a display unit 105, a storage unit 106, and an operation auxiliary information synthesis unit 107. .

位置判定部101は、所定の状況にあるか否かを判定する。
無線通信部104は、パケット信号送信部104aと、操作補助情報受信部104bと、を備える。
The position determination unit 101 determines whether or not a predetermined situation exists.
The wireless communication unit 104 includes a packet signal transmission unit 104a and an operation auxiliary information reception unit 104b.

パケット信号送信部104aは、所定の状況で車両パケット信号を外部に送信する。車両パケット信号は、対象装置10を特定することができる情報を含んでいる。所定の状況は、例えば、交差点、交差点の手前、狭い道路、狭い道路の手前などの道路を走行する危険な状況である。また、所定の状況は、例えば、対象装置10が一定速度以下の速度で走行する安全を確保する必要のある状況である。   The packet signal transmission unit 104a transmits a vehicle packet signal to the outside in a predetermined situation. The vehicle packet signal includes information that can identify the target device 10. The predetermined situation is a dangerous situation of traveling on a road such as an intersection, before an intersection, a narrow road, or before a narrow road. Further, the predetermined situation is a situation in which it is necessary to ensure the safety that the target apparatus 10 travels at a speed equal to or lower than a constant speed, for example.

操作補助情報受信部104bは、操作補助情報提供装置40から第1操作補助情報を受信する。   The operation auxiliary information receiving unit 104 b receives the first operation auxiliary information from the operation auxiliary information providing device 40.

第1操作補助情報取得部102は、第2操作補助情報を取得する。
操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成し、第3操作補助情報を生成する。
操作補助情報合成部107が行う第1操作補助情報と第2操作補助情報との合成の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える第2操作補助情報取得部がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示するための情報を生成する。また、アイコンのそれぞれで表示できる画像の情報を生成する。
また、別の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える第2操作補助情報取得部がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302のそれぞれにおける設置位置、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302の画角、のそれぞれに基づいて、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした画像に変換する。操作補助情報合成部107は、車両10が備える第1操作補助情報取得部102が撮影した画像と、車両10が備える第1操作補助情報取得部102の車両10における設置位置、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした変換後の画像とを重ねた画像の情報を生成する。
The first operation auxiliary information acquisition unit 102 acquires second operation auxiliary information.
The operation auxiliary information combining unit 107 combines the first operation auxiliary information and the second operation auxiliary information to generate third operation auxiliary information.
As a specific example of the combination of the first operation auxiliary information and the second operation auxiliary information performed by the operation auxiliary information combining unit 107, the first operation auxiliary information acquiring unit 102 is a camera, and each of the surrounding vehicle 20 and the roadside machine 30 is A case where the second auxiliary operation information acquisition unit provided is a camera will be described. The operation auxiliary information combining unit 107 is based on the position information indicating the position of the vehicle 10 and the position information of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information can be acquired. The positions of the surrounding vehicle 20 and the roadside machine 30 that are determined to be in a position where the first operation auxiliary information can be acquired with reference to the position of 10 are specified at short time intervals (for example, every 100 milliseconds). The operation auxiliary information combining unit 107 displays the positions of the surrounding vehicle 20 and the roadside machine 30 that are determined to be in a position where the first operation auxiliary information can be acquired with reference to the position of the vehicle 10 on one screen as icons (vehicle 10 , Information for display on the surrounding vehicles 20a, 20b, 20d, roadside machine 30b) is generated. In addition, information about an image that can be displayed with each icon is generated.
As another specific example, a case where the first operation auxiliary information acquisition unit 102 is a camera and the second operation auxiliary information acquisition unit provided in each of the surrounding vehicle 20 and the roadside machine 30 is a camera will be described. The operation auxiliary information combining unit 107 is based on the position information indicating the position of the vehicle 10 and the position information of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information can be acquired. The positions of the surrounding vehicle 20 and the roadside machine 30 that are determined to be in a position where the first operation auxiliary information can be acquired with reference to the position of 10 are specified at short time intervals (for example, every 100 milliseconds). The operation auxiliary information combining unit 107 determines the position of the vehicle 10, the positions of the surrounding vehicle 20 and the roadside machine 30 that have been determined to be in a position where the first operation auxiliary information can be acquired based on the position of the vehicle 10, The installation position in each of the corresponding second operation auxiliary information acquisition units 202 and 302 provided in each of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information based on the position can be acquired, Based on each of the corresponding view angles of the second operation auxiliary information acquisition units 202 and 302 included in each of the surrounding vehicle 20 and the roadside device 30 determined to be in a position where the operation auxiliary information can be acquired, It converts into the image on the basis of the installation position in the vehicle 10 of the 1 operation assistance information acquisition part 102, and the angle of view (viewing angle) of the 1st operation assistance information acquisition part 102. FIG. The operation auxiliary information combining unit 107 includes an image captured by the first operation auxiliary information acquisition unit 102 included in the vehicle 10, an installation position of the first operation auxiliary information acquisition unit 102 included in the vehicle 10 in the vehicle 10, and a first configuration included in the vehicle 10. Information of an image obtained by superimposing an installation position of the one operation auxiliary information acquisition unit 102 in the vehicle 10 and an image after conversion based on the angle of view (viewing angle) of the first operation auxiliary information acquisition unit 102 is generated.

表示部105は、第3操作補助情報を表示する。例えば、周辺車両20a、20b、20d、路側機30bのそれぞれが車両10を撮影している場合、表示部105は、図5で示した表示画面を表示する。図5は、車両10が撮影している画像と、周辺車両20a、20b、20dが車両10を撮影している画像と、路側機30bが車両10を撮影している画像とを合成したときに表示部105が表示する表示画面である。より具体的には、図5は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示する表示画面である。また、例えば、表示部105は、図6で示した表示画面を表示する。図6は、図5で示した周辺車両20aのアイコンを選択したときに表示部105に表示される周辺車両20aの前方画像の表示例である。周辺車両20aの前方画像は、車両10、周辺車両20bの一部、車両10の対向車両である周辺車両20dのそれぞれを1つの画面に表示する画像である。   The display unit 105 displays the third operation auxiliary information. For example, when each of the surrounding vehicles 20a, 20b, 20d and the roadside machine 30b is photographing the vehicle 10, the display unit 105 displays the display screen shown in FIG. FIG. 5 shows a case where an image taken by the vehicle 10, an image taken by the surrounding vehicles 20 a, 20 b, and 20 d taking the vehicle 10, and an image taken by the roadside device 30 b are taken by the vehicle 10. It is a display screen which the display part 105 displays. More specifically, FIG. 5 shows, on one screen, icons indicating the positions of the surrounding vehicle 20 and the roadside machine 30 that have been determined to be in a position where the first operation auxiliary information can be acquired based on the position of the vehicle 10. It is a display screen displayed on the vehicle 10, the surrounding vehicles 20a, 20b, 20d, and the roadside machine 30b). For example, the display unit 105 displays the display screen shown in FIG. FIG. 6 is a display example of a front image of the surrounding vehicle 20a displayed on the display unit 105 when the icon of the surrounding vehicle 20a shown in FIG. 5 is selected. The front image of the surrounding vehicle 20a is an image that displays the vehicle 10, a part of the surrounding vehicle 20b, and the surrounding vehicle 20d that is an oncoming vehicle of the vehicle 10 on one screen.

記憶部106は、車両10が行う処理に必要な種々の情報を記憶する。例えば、記憶部106は、車両10が所定の状況にある場合に「危険な場所を通過します。ご注意ください。」などを図7のように表示部105が表示するための表示情報である。また、記憶部106は、地図情報を記憶する。   The storage unit 106 stores various information necessary for processing performed by the vehicle 10. For example, the storage unit 106 is display information for the display unit 105 to display “pass through a dangerous place. Be careful” or the like when the vehicle 10 is in a predetermined situation as shown in FIG. . The storage unit 106 stores map information.

本発明の第二の実施形態による周辺車両20aの構成について説明する。
周辺車両20aは、図8に示すように、無線通信部201aと、第2操作補助情報取得部202aと、記憶部203aと、操作補助情報取得判定部204aと、を備える。
The structure of the surrounding vehicle 20a by 2nd embodiment of this invention is demonstrated.
As shown in FIG. 8, the surrounding vehicle 20a includes a wireless communication unit 201a, a second operation auxiliary information acquisition unit 202a, a storage unit 203a, and an operation auxiliary information acquisition determination unit 204a.

記憶部203aは、周辺車両20aが行う処理に必要な種々の情報を記憶する。例えば、記憶部203aは、車両10のナンバープレートの文字のテンプレートを示す情報を記憶している。   The memory | storage part 203a memorize | stores various information required for the process which the surrounding vehicle 20a performs. For example, the memory | storage part 203a has memorize | stored the information which shows the template of the character of the license plate of the vehicle 10. FIG.

操作補助情報取得判定部204aは、パケット信号送信部104aから車両パケット信号を受信した場合に、周辺車両20aが対象装置10の操作を補助する情報を取得できる位置にいるか否かを判定する。具体的には、後述する第2操作補助情報取得部202aがカメラである場合、操作補助情報取得判定部204aは、車両パケット信号を受信すると、第2操作補助情報取得部202aが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部204aは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202aが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部202aが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部204aは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202aが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部202aが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
When receiving a vehicle packet signal from the packet signal transmission unit 104a, the operation auxiliary information acquisition determination unit 204a determines whether or not the surrounding vehicle 20a is in a position where information for assisting the operation of the target device 10 can be acquired. Specifically, when a second operation auxiliary information acquisition unit 202a described later is a camera, when the operation auxiliary information acquisition determination unit 204a receives a vehicle packet signal, the second operation auxiliary information acquisition unit 202a takes a picture. It is determined whether or not the vehicle 10 is shown in the image. The operation auxiliary information acquisition determination unit 204a uses a technology for recognizing a character pattern to display a license plate indicating the same information as the number included in the vehicle packet signal on the image captured by the second operation auxiliary information acquisition unit 202a. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202a. Further, when the operation auxiliary information acquisition determination unit 204a determines that the license plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 202a. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202a.
When determining that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202a, the operation auxiliary information acquisition determination unit 204a determines that the operation auxiliary information acquisition determination unit 204a is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 204a determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202a, the operation auxiliary information acquisition determination unit 204a determines that the operation auxiliary information acquisition determination unit 204a is not in a position where the first operation auxiliary information can be acquired. To do.

第2操作補助情報取得部202aは、操作補助情報取得判定部204aが周辺車両20aが対象装置10の操作を補助する情報を取得できる位置にいると判定した場合に、対象装置10の操作を補助する情報を取得する。   The second operation auxiliary information acquisition unit 202a assists the operation of the target device 10 when the operation auxiliary information acquisition determination unit 204a determines that the surrounding vehicle 20a is in a position where information for assisting the operation of the target device 10 can be acquired. Get information to do.

無線通信部201aは、操作補助情報送信部2011aを備える。
操作補助情報送信部2011aは、第2操作補助情報取得部202aが取得した対象装置10の操作を補助する情報を対象装置10に送信する。
The wireless communication unit 201a includes an operation auxiliary information transmission unit 2011a.
The operation auxiliary information transmission unit 2011a transmits information to assist the operation of the target device 10 acquired by the second operation auxiliary information acquisition unit 202a to the target device 10.

周辺車両20bは、無線通信部201bと、第2操作補助情報取得部202bと、記憶部203bと、操作補助情報取得判定部204bと、を備える。
無線通信部201bは、操作補助情報送信部2011bを備える。
周辺車両20cは、無線通信部201cと、第2操作補助情報取得部202cと、記憶部203cと、操作補助情報取得判定部204cと、を備える。
無線通信部201cは、操作補助情報送信部2011cを備える。
周辺車両20dは、無線通信部201dと、第2操作補助情報取得部202dと、記憶部203dと、操作補助情報取得判定部204dと、を備える。
無線通信部201dは、操作補助情報送信部2011dを備える。
The peripheral vehicle 20b includes a wireless communication unit 201b, a second operation auxiliary information acquisition unit 202b, a storage unit 203b, and an operation auxiliary information acquisition determination unit 204b.
The wireless communication unit 201b includes an operation auxiliary information transmission unit 2011b.
The peripheral vehicle 20c includes a wireless communication unit 201c, a second operation auxiliary information acquisition unit 202c, a storage unit 203c, and an operation auxiliary information acquisition determination unit 204c.
The wireless communication unit 201c includes an operation auxiliary information transmission unit 2011c.
The peripheral vehicle 20d includes a wireless communication unit 201d, a second operation auxiliary information acquisition unit 202d, a storage unit 203d, and an operation auxiliary information acquisition determination unit 204d.
The wireless communication unit 201d includes an operation auxiliary information transmission unit 2011d.

なお、無線通信部201b、201c、201dのそれぞれは、無線通信部201aと同様の機能を有し、同様に動作する。
また、第2操作補助情報取得部202b、202c、202dのそれぞれは、第2操作補助情報取得部202aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部204b、204c、204dのそれぞれは、操作補助情報取得判定部204aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部2011b、2011c、2011dのそれぞれは、操作補助情報送信部2011aと同様の機能を有し、同様に動作する。
Note that each of the wireless communication units 201b, 201c, and 201d has the same function as the wireless communication unit 201a and operates in the same manner.
Each of the second operation auxiliary information acquisition units 202b, 202c, and 202d has the same function as that of the second operation auxiliary information acquisition unit 202a and operates in the same manner.
Each of the operation auxiliary information acquisition determination units 204b, 204c, and 204d has the same function as the operation auxiliary information acquisition determination unit 204a and operates in the same manner.
In addition, each of the operation auxiliary information transmission units 2011b, 2011c, and 2011d has the same function as the operation auxiliary information transmission unit 2011a and operates in the same manner.

本発明の第二の実施形態による路側機30aの構成について説明する。
路側機30aは、図9に示すように、無線通信部301aと、第2操作補助情報取得部302aと、記憶部303aと、操作補助情報取得判定部304aと、を備える。
The structure of the roadside machine 30a by 2nd embodiment of this invention is demonstrated.
As shown in FIG. 9, the roadside device 30a includes a wireless communication unit 301a, a second operation auxiliary information acquisition unit 302a, a storage unit 303a, and an operation auxiliary information acquisition determination unit 304a.

記憶部303aは、路側機30aが行う処理に必要な種々の情報を記憶する。例えば、記憶部303aは、車両10のナンバープレートの文字のテンプレートを示す情報を記憶している。   The memory | storage part 303a memorize | stores various information required for the process which the roadside machine 30a performs. For example, the memory | storage part 303a has memorize | stored the information which shows the template of the character of the license plate of the vehicle 10. FIG.

操作補助情報取得判定部304aは、パケット信号送信部104aから車両パケット信号を受信した場合に、路側機30aが対象装置10の操作を補助する情報を取得できる位置にいるか否かを判定する。具体的には、後述する第2操作補助情報取得部302aがカメラである場合、操作補助情報取得判定部304aは、車両パケット信号を受信すると、第2操作補助情報取得部302aが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部304aは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302aが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部302aが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部304aは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302aが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部302aが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
When receiving the vehicle packet signal from the packet signal transmission unit 104a, the operation auxiliary information acquisition determination unit 304a determines whether or not the roadside device 30a is in a position where the information for assisting the operation of the target device 10 can be acquired. Specifically, when a second operation auxiliary information acquisition unit 302a described later is a camera, when the operation auxiliary information acquisition determination unit 304a receives a vehicle packet signal, the second operation auxiliary information acquisition unit 302a takes a picture. It is determined whether or not the vehicle 10 is shown in the image. The operation auxiliary information acquisition determination unit 304a uses a technique for recognizing a character pattern to display a license plate indicating the same information as the number included in the vehicle packet signal on the image captured by the second operation auxiliary information acquisition unit 302a. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 302a. Further, when the operation auxiliary information acquisition determination unit 304a determines that the number plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 302a. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 302a.
When it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 302a, the operation auxiliary information acquisition determination unit 304a determines that the operation auxiliary information acquisition determination unit 304a is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 304a determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 302a, the operation auxiliary information acquisition determination unit 304a determines that the operation auxiliary information acquisition determination unit 304a is not in a position where the first operation auxiliary information can be acquired. To do.

第2操作補助情報取得部302aは、操作補助情報取得判定部304aが路側機30aが対象装置10の操作を補助する情報を取得できる位置にいると判定した場合に、対象装置10の操作を補助する情報を取得する。   The second operation auxiliary information acquisition unit 302a assists the operation of the target device 10 when the operation auxiliary information acquisition determination unit 304a determines that the roadside device 30a is in a position where the information for assisting the operation of the target device 10 can be acquired. Get information to do.

無線通信部301aは、操作補助情報送信部3011aを備える。
操作補助情報送信部3011aは、第2操作補助情報取得部302aが取得した対象装置10の操作を補助する情報を対象装置10に送信する。
The wireless communication unit 301a includes an operation auxiliary information transmission unit 3011a.
The operation auxiliary information transmission unit 3011a transmits information to assist the operation of the target device 10 acquired by the second operation auxiliary information acquisition unit 302a to the target device 10.

路側機30bは、無線通信部301bと、第2操作補助情報取得部302bと、記憶部303bと、操作補助情報取得判定部304bと、を備える。
無線通信部301bは、操作補助情報送信部3011bを備える。
The roadside device 30b includes a wireless communication unit 301b, a second operation auxiliary information acquisition unit 302b, a storage unit 303b, and an operation auxiliary information acquisition determination unit 304b.
The wireless communication unit 301b includes an operation auxiliary information transmission unit 3011b.

なお、無線通信部301b、は、無線通信部301aと同様の機能を有し、同様に動作する。
また、第2操作補助情報取得部302bは、第2操作補助情報取得部302aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部304bは、操作補助情報取得判定部304aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部3011bは、操作補助情報送信部3011aと同様の機能を有し、同様に動作する。
The wireless communication unit 301b has the same function as the wireless communication unit 301a and operates in the same manner.
The second operation auxiliary information acquisition unit 302b has the same function as the second operation auxiliary information acquisition unit 302a and operates in the same manner.
Further, the operation auxiliary information acquisition determination unit 304b has the same function as the operation auxiliary information acquisition determination unit 304a and operates in the same manner.
Further, the operation assistance information transmission unit 3011b has the same function as the operation assistance information transmission unit 3011a and operates in the same manner.

図10に示す本発明の第二の実施形態による操作補助システム1の処理フローについて説明する。ここでは、第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれがカメラであるものとして操作補助システム1の処理フローについて説明する。   The process flow of the operation assistance system 1 by 2nd embodiment of this invention shown in FIG. 10 is demonstrated. Here, the processing flow of the operation assistance system 1 will be described assuming that each of the first operation assistance information acquisition unit 102 and the second operation assistance information acquisition units 202 and 302 is a camera.

以下では、無線通信部201a、201b、201c、201dを総称して無線通信部201という。第2操作補助情報取得部202a、202b、202c、202dを総称して第2操作補助情報取得部202という。記憶部203a、203b、203c、203dを総称して記憶部203という。操作補助情報取得判定部204a、204b、204c、204dを総称して操作補助情報取得判定部204という。操作補助情報送信部2011a、2011b、2011c、2011dを総称して操作補助情報送信部2011という。
また、無線通信部301a、301bを総称して無線通信部301という。第2操作補助情報取得部302a、302bを総称して第2操作補助情報取得部302という。記憶部303a、303bを総称して記憶部303という。操作補助情報取得判定部304a、304bを総称して操作補助情報取得判定部304という。操作補助情報送信部3011a、3011bを総称して操作補助情報送信部3011という。
本発明の第二の実施形態による操作補助情報取得判定部204、304は、本発明の第一の実施形態による操作補助情報取得判定部404に対応している。本発明の第二の実施形態による第2操作補助情報取得部202、302は、本発明の第一の実施形態による第2操作補助情報取得部402に対応している。本発明の第二の実施形態による操作補助情報送信部2011、3011は、本発明の第一の実施形態による操作補助情報送信部4011aに対応している。
Hereinafter, the wireless communication units 201a, 201b, 201c, and 201d are collectively referred to as the wireless communication unit 201. The second operation auxiliary information acquisition units 202a, 202b, 202c, and 202d are collectively referred to as a second operation auxiliary information acquisition unit 202. The storage units 203a, 203b, 203c, and 203d are collectively referred to as the storage unit 203. The operation auxiliary information acquisition determination units 204a, 204b, 204c, and 204d are collectively referred to as the operation auxiliary information acquisition determination unit 204. The operation auxiliary information transmission units 2011a, 2011b, 2011c, and 2011d are collectively referred to as an operation auxiliary information transmission unit 2011.
The wireless communication units 301a and 301b are collectively referred to as a wireless communication unit 301. The second operation auxiliary information acquisition units 302a and 302b are collectively referred to as a second operation auxiliary information acquisition unit 302. The storage units 303a and 303b are collectively referred to as a storage unit 303. The operation auxiliary information acquisition determination units 304a and 304b are collectively referred to as an operation auxiliary information acquisition determination unit 304. The operation auxiliary information transmission units 3011a and 3011b are collectively referred to as an operation auxiliary information transmission unit 3011.
The operation auxiliary information acquisition determination unit 204 or 304 according to the second embodiment of the present invention corresponds to the operation auxiliary information acquisition determination unit 404 according to the first embodiment of the present invention. The second operation auxiliary information acquisition units 202 and 302 according to the second embodiment of the present invention correspond to the second operation auxiliary information acquisition unit 402 according to the first embodiment of the present invention. The operation auxiliary information transmission units 2011 and 3011 according to the second embodiment of the present invention correspond to the operation auxiliary information transmission unit 4011a according to the first embodiment of the present invention.

位置判定部101は、車両10が所定の状況にあるか否かを判定する(ステップS11)。具体的には、位置判定部101は、記憶部106から地図情報を読み出す。位置判定部101は、地図情報と、車両10の現在の位置とに基づいて、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったか否かを判定する。位置判定部101は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲内に入ったと判定した場合、車両10が所定の状況にあると判定する。また、位置判定部101は、車両10が交差点、交差点の手前、狭い道路、狭い道路の手前などの位置に対して所定の距離の範囲外であると判定した場合、車両10が所定の状況にないと判定する。   The position determination unit 101 determines whether or not the vehicle 10 is in a predetermined situation (step S11). Specifically, the position determination unit 101 reads map information from the storage unit 106. Based on the map information and the current position of the vehicle 10, the position determination unit 101 is within a predetermined distance range relative to the position of the vehicle 10 such as an intersection, an intersection, a narrow road, or a narrow road. Judge whether or not. The position determination unit 101 determines that the vehicle 10 is in a predetermined situation when it is determined that the vehicle 10 is within a predetermined distance range with respect to a position such as an intersection, near an intersection, a narrow road, or a narrow road. judge. In addition, when the position determination unit 101 determines that the vehicle 10 is out of a predetermined distance range with respect to a position such as an intersection, near an intersection, a narrow road, or a narrow road, the vehicle 10 is in a predetermined situation. Judge that there is no.

位置判定部101は、車両10が所定の状況にないと判定した場合(ステップS11においてNO)、ステップS11の処理に戻す。   If position determination unit 101 determines that vehicle 10 is not in the predetermined situation (NO in step S11), it returns to the process in step S11.

また、位置判定部101は、車両10が所定の状況にあると判定した場合(ステップS11においてYES)、その位置から車両パケット信号をブロードキャストで外部に送信する(ステップS12)。車両パケット信号は、車両10を特定することができる情報を含んでいる。車両10を特定することができる情報は、例えば、車両10のナンバーの情報、車両10の通信アドレスなどである。   If position determination unit 101 determines that vehicle 10 is in a predetermined situation (YES in step S11), it transmits a vehicle packet signal from the position to the outside by broadcast (step S12). The vehicle packet signal includes information that can identify the vehicle 10. The information that can specify the vehicle 10 is, for example, information on the number of the vehicle 10, a communication address of the vehicle 10, and the like.

操作補助情報取得判定部204のそれぞれは、対応する無線通信部201を介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している(ステップS13)。   Each of the operation auxiliary information acquisition determination units 204 always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the corresponding wireless communication unit 201 (step S13).

具体的には、操作補助情報取得判定部204aは、無線通信部201aを介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。   Specifically, the operation auxiliary information acquisition determination unit 204a constantly determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the wireless communication unit 201a.

同様に、操作補助情報取得判定部204bは、無線通信部201bを介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。   Similarly, the operation assistance information acquisition determination unit 204b always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the wireless communication unit 201b.

同様に、操作補助情報取得判定部204cは、無線通信部201cを介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。   Similarly, the operation auxiliary information acquisition determination unit 204c always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the wireless communication unit 201c.

同様に、操作補助情報取得判定部204dは、無線通信部201dを介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。   Similarly, the operation auxiliary information acquisition determination unit 204d always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the wireless communication unit 201d.

操作補助情報取得判定部204のそれぞれは、パケット信号送信部104aから車両パケット信号を受信しないと判定した場合に(ステップS13においてNO)、ステップS13の処理に戻す。   When each of the auxiliary operation information acquisition determination unit 204 determines not to receive the vehicle packet signal from the packet signal transmission unit 104a (NO in step S13), the operation auxiliary information acquisition determination unit 204 returns to the process of step S13.

操作補助情報取得判定部204のそれぞれは、パケット信号送信部104aから車両パケット信号を受信した場合に(ステップS13においてYES)、周辺車両20aが第1操作補助情報を取得できる位置にいるか否かを判定する(ステップS14)。
具体的には、第2操作補助情報取得部202aがカメラである場合、操作補助情報取得判定部204aは、車両パケット信号を受信すると、第2操作補助情報取得部202aが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部204aは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202aが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部202aが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部204aは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202aが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部202aが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204aは、第2操作補助情報取得部202aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
Each of the operation auxiliary information acquisition determination units 204 determines whether or not the surrounding vehicle 20a is in a position where the first operation auxiliary information can be acquired when a vehicle packet signal is received from the packet signal transmission unit 104a (YES in step S13). Determination is made (step S14).
Specifically, when the second operation auxiliary information acquisition unit 202a is a camera, when the operation auxiliary information acquisition determination unit 204a receives a vehicle packet signal, the image of the second operation auxiliary information acquisition unit 202a is captured. It is determined whether or not the vehicle 10 is shown. The operation auxiliary information acquisition determination unit 204a uses a technology for recognizing a character pattern to display a license plate indicating the same information as the number included in the vehicle packet signal on the image captured by the second operation auxiliary information acquisition unit 202a. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202a. Further, when the operation auxiliary information acquisition determination unit 204a determines that the license plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 202a. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202a.
When determining that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202a, the operation auxiliary information acquisition determination unit 204a determines that the operation auxiliary information acquisition determination unit 204a is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 204a determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202a, the operation auxiliary information acquisition determination unit 204a determines that the operation auxiliary information acquisition determination unit 204a is not in a position where the first operation auxiliary information can be acquired. To do.

同様に、第2操作補助情報取得部202bがカメラである場合、操作補助情報取得判定部204bは、車両パケット信号を受信すると、第2操作補助情報取得部202bが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部204bは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202bが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部202bが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部204bは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202bが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部202bが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部204bは、第2操作補助情報取得部202bが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204bは、第2操作補助情報取得部202bが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
Similarly, when the second operation auxiliary information acquisition unit 202b is a camera, when the operation auxiliary information acquisition determination unit 204b receives the vehicle packet signal, the vehicle 10 in the image captured by the second operation auxiliary information acquisition unit 202b. It is determined whether or not is reflected. The operation auxiliary information acquisition determination unit 204b uses a technique for recognizing a character pattern to display a license plate indicating the same information as the number included in the vehicle packet signal on the image captured by the second operation auxiliary information acquisition unit 202b. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202b. Further, when the operation auxiliary information acquisition determination unit 204b determines that the license plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 202b. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202b.
When determining that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202b, the operation auxiliary information acquisition determination unit 204b determines that the operation auxiliary information acquisition determination unit 204b is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 204b determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202b, the operation auxiliary information acquisition determination unit 204b determines that the operation auxiliary information acquisition determination unit 204b is not in a position where the first operation auxiliary information can be acquired. To do.

同様に、第2操作補助情報取得部202cがカメラである場合、操作補助情報取得判定部204cは、車両パケット信号を受信すると、第2操作補助情報取得部202cが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部204cは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202cが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部202cが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部204cは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202cが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部202cが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部204cは、第2操作補助情報取得部202cが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204cは、第2操作補助情報取得部202cが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
Similarly, when the second operation auxiliary information acquisition unit 202c is a camera, when the operation auxiliary information acquisition determination unit 204c receives the vehicle packet signal, the vehicle 10 in the image captured by the second operation auxiliary information acquisition unit 202c. It is determined whether or not is reflected. Using the technology for recognizing the character pattern, the operation auxiliary information acquisition determination unit 204c uses the technology for recognizing the number pattern indicating the same information as the number included in the vehicle packet signal in the image captured by the second operation auxiliary information acquisition unit 202c. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202c. Further, when the operation auxiliary information acquisition determination unit 204c determines that the number plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 202c. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202c.
When determining that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202c, the operation auxiliary information acquisition determination unit 204c determines that the operation auxiliary information acquisition determination unit 204c is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 204c determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202c, the operation auxiliary information acquisition determination unit 204c determines that the operation auxiliary information acquisition determination unit 204c is not in a position where the first operation auxiliary information can be acquired. To do.

同様に、第2操作補助情報取得部202dがカメラである場合、操作補助情報取得判定部204dは、車両パケット信号を受信すると、第2操作補助情報取得部202dが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部204dは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202dが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部202dが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部204dは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部202dが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部202dが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部204dは、第2操作補助情報取得部202dが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部204dは、第2操作補助情報取得部202dが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
Similarly, when the second operation auxiliary information acquisition unit 202d is a camera, when the operation auxiliary information acquisition determination unit 204d receives the vehicle packet signal, the vehicle 10 in the image captured by the second operation auxiliary information acquisition unit 202d. It is determined whether or not is reflected. The operation auxiliary information acquisition determination unit 204d uses a technique for recognizing a character pattern, and a license plate indicating the same information as the number included in the vehicle packet signal is displayed on the image captured by the second operation auxiliary information acquisition unit 202d. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202d. Further, when the operation auxiliary information acquisition determination unit 204d determines that the number plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 202d. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202d.
When determining that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202d, the operation auxiliary information acquisition determination unit 204d determines that the operation auxiliary information acquisition determination unit 204d is at a position where the first operation auxiliary information can be acquired. In addition, when the operation auxiliary information acquisition determination unit 204d determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 202d, the operation auxiliary information acquisition determination unit 204d determines that the operation auxiliary information acquisition determination unit 204d is not in a position where the first operation auxiliary information can be acquired. To do.

操作補助情報取得判定部204のそれぞれは、対応する周辺車両20が第1操作補助情報を取得できる位置にいないと判定した場合(ステップS14においてNO)、ステップS13の処理に戻す。   When each of the operation auxiliary information acquisition determination units 204 determines that the corresponding surrounding vehicle 20 is not in a position where the first operation auxiliary information can be acquired (NO in step S14), the operation auxiliary information acquisition determination unit 204 returns to the process of step S13.

第2操作補助情報取得部202のそれぞれは、対応する操作補助情報取得判定部204が第1操作補助情報を取得できる位置にいると判定した場合(ステップS14においてYES)、第1操作補助情報を取得する(ステップS15)。   When each of the second operation auxiliary information acquisition units 202 determines that the corresponding operation auxiliary information acquisition determination unit 204 is in a position where the first operation auxiliary information can be acquired (YES in step S14), the second operation auxiliary information acquisition unit 202 stores the first operation auxiliary information. Obtain (step S15).

第2操作補助情報取得部202のそれぞれは、対応する操作補助情報送信部2011を介して、第1操作補助情報を対象装置10に送信する(ステップS16)。   Each of the second operation auxiliary information acquisition units 202 transmits the first operation auxiliary information to the target device 10 via the corresponding operation auxiliary information transmission unit 2011 (step S16).

また、操作補助情報取得判定部304のそれぞれは、対応する無線通信部301を介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している(ステップS17)。   Each of the operation assistance information acquisition determination units 304 always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the corresponding wireless communication unit 301 (step S17).

具体的には、操作補助情報取得判定部304aは、無線通信部301aを介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。   Specifically, the operation auxiliary information acquisition determination unit 304a constantly determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the wireless communication unit 301a.

同様に、操作補助情報取得判定部304bは、無線通信部301bを介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。   Similarly, the operation assistance information acquisition determination unit 304b always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the wireless communication unit 301b.

操作補助情報取得判定部304のそれぞれは、パケット信号送信部104aから車両パケット信号を受信しないと判定した場合に(ステップS17においてNO)、ステップS17の処理に戻す。   When each of the auxiliary operation information acquisition determination unit 304 determines not to receive the vehicle packet signal from the packet signal transmission unit 104a (NO in step S17), the process returns to the process of step S17.

操作補助情報取得判定部304のそれぞれは、パケット信号送信部104aから車両パケット信号を受信した場合に(ステップS17においてYES)、路側機30aが第1操作補助情報を取得できる位置にいるか否かを判定する(ステップS18)。
具体的には、第2操作補助情報取得部302aがカメラである場合、操作補助情報取得判定部304aは、車両パケット信号を受信すると、第2操作補助情報取得部302aが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部304aは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302aが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部302aが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部304aは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302aが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部302aが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部304aは、第2操作補助情報取得部302aが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
Each of the operation auxiliary information acquisition determination unit 304 determines whether or not the roadside device 30a is in a position where the first operation auxiliary information can be acquired when a vehicle packet signal is received from the packet signal transmission unit 104a (YES in step S17). Determination is made (step S18).
Specifically, when the second operation auxiliary information acquisition unit 302a is a camera, when the operation auxiliary information acquisition determination unit 304a receives a vehicle packet signal, in the image captured by the second operation auxiliary information acquisition unit 302a. It is determined whether or not the vehicle 10 is shown. The operation auxiliary information acquisition determination unit 304a uses a technique for recognizing a character pattern to display a license plate indicating the same information as the number included in the vehicle packet signal on the image captured by the second operation auxiliary information acquisition unit 302a. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 302a. Further, when the operation auxiliary information acquisition determination unit 304a determines that the number plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 302a. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 302a.
When it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 302a, the operation auxiliary information acquisition determination unit 304a determines that the operation auxiliary information acquisition determination unit 304a is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 304a determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 302a, the operation auxiliary information acquisition determination unit 304a determines that the operation auxiliary information acquisition determination unit 304a is not in a position where the first operation auxiliary information can be acquired. To do.

同様に、第2操作補助情報取得部302bがカメラである場合、操作補助情報取得判定部304bは、車両パケット信号を受信すると、第2操作補助情報取得部302bが撮影している画像において車両10が映っているか否かを判定する。操作補助情報取得判定部304bは、文字パターンを認識する技術を用いて、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302bが撮影している画像に含まれていると判定した場合に、第2操作補助情報取得部302bが撮影している画像に車両10が映っていると判定する。また、操作補助情報取得判定部304bは、車両パケット信号に含まれるナンバーと同一の情報を示すナンバープレートが第2操作補助情報取得部302bが撮影している画像に含まれていないと判定した場合に、第2操作補助情報取得部302bが撮影している画像に車両10が映っていないと判定する。
操作補助情報取得判定部304bは、第2操作補助情報取得部302bが撮影している画像において車両10が映っていると判定した場合、第1操作補助情報を取得できる位置にいると判定する。また、操作補助情報取得判定部304bは、第2操作補助情報取得部302bが撮影している画像において車両10が映っていないと判定した場合、第1操作補助情報を取得できる位置にいないと判定する。
Similarly, when the second operation auxiliary information acquisition unit 302b is a camera, when the operation auxiliary information acquisition determination unit 304b receives the vehicle packet signal, the vehicle 10 in the image captured by the second operation auxiliary information acquisition unit 302b. It is determined whether or not is reflected. Using the technology for recognizing the character pattern, the operation auxiliary information acquisition determination unit 304b uses the technology for recognizing the number plate indicating the same information as the number included in the vehicle packet signal in the image captured by the second operation auxiliary information acquisition unit 302b. When it is determined that the vehicle 10 is included, it is determined that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 302b. Further, when the operation auxiliary information acquisition determination unit 304b determines that the number plate indicating the same information as the number included in the vehicle packet signal is not included in the image captured by the second operation auxiliary information acquisition unit 302b. In addition, it is determined that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 302b.
When determining that the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 302b, the operation auxiliary information acquisition determination unit 304b determines that the operation auxiliary information acquisition determination unit 304b is at a position where the first operation auxiliary information can be acquired. Further, when the operation auxiliary information acquisition determination unit 304b determines that the vehicle 10 is not reflected in the image captured by the second operation auxiliary information acquisition unit 302b, the operation auxiliary information acquisition determination unit 304b determines that the operation auxiliary information acquisition determination unit 304b is not in a position where the first operation auxiliary information can be acquired. To do.

操作補助情報取得判定部304のそれぞれは、対応する路側機30が第1操作補助情報を取得できる位置にいないと判定した場合(ステップS18においてNO)、ステップS17の処理に戻す。   When each of the operation auxiliary information acquisition determination units 304 determines that the corresponding roadside machine 30 is not in a position where the first operation auxiliary information can be acquired (NO in step S18), the operation auxiliary information acquisition determination unit 304 returns to the process of step S17.

第2操作補助情報取得部302のそれぞれは、対応する操作補助情報取得判定部304が第1操作補助情報を取得できる位置にいると判定した場合(ステップS18においてYES)、第1操作補助情報を取得する(ステップS19)。   When each of the second operation auxiliary information acquisition units 302 determines that the corresponding operation auxiliary information acquisition determination unit 304 is in a position where the first operation auxiliary information can be acquired (YES in step S18), the second operation auxiliary information acquisition unit 302 stores the first operation auxiliary information. Obtain (step S19).

第2操作補助情報取得部302のそれぞれは、対応する操作補助情報送信部3011を介して、第1操作補助情報を対象装置10に送信する(ステップS20)。
なお、上述のステップS17〜S20の処理は、ステップS13〜S16の処理とほぼ並行に行われる。
Each of the second operation auxiliary information acquisition units 302 transmits the first operation auxiliary information to the target device 10 via the corresponding operation auxiliary information transmission unit 3011 (step S20).
In addition, the process of above-mentioned step S17-S20 is performed substantially in parallel with the process of step S13-S16.

操作補助情報合成部107は、周辺車両20、路側機30のそれぞれから操作補助情報受信部104bを介して、第1操作補助情報を受信する(ステップS21)。   The operation auxiliary information combining unit 107 receives the first operation auxiliary information from each of the surrounding vehicle 20 and the roadside machine 30 through the operation auxiliary information receiving unit 104b (step S21).

第1操作補助情報取得部102は、第2操作補助情報を取得する(ステップS22)。 操作補助情報合成部107は、第1操作補助情報取得部102から第1操作補助情報を受信する。操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成し(ステップS23)、第3操作補助情報を生成する。
操作補助情報合成部107が行う第1操作補助情報と第2操作補助情報との合成の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示するための情報を生成する。また、アイコンのそれぞれで表示できる画像の情報を生成する。
また、別の具体例として、第1操作補助情報取得部102がカメラであり、周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302がカメラである場合について説明する。操作補助情報合成部107は、車両10の位置を示す位置情報と、第1操作補助情報を取得できる位置に存在すると判定した周辺車両20と路側機30のそれぞれの位置情報とに基づいて、車両10の位置を基準とした第1操作補助情報を取得できる位置に存在すると判定した周辺車両20と路側機30のそれぞれの位置を短い時間間隔で(例えば、100ミリ秒毎に)特定する。操作補助情報合成部107は、車両10の位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302のそれぞれにおける設置位置、第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれが備える対応する第2操作補助情報取得部202、302の画角、のそれぞれに基づいて、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした画像に変換する。操作補助情報合成部107は、車両10が備える第1操作補助情報取得部102が撮影した画像と、車両10が備える第1操作補助情報取得部102の車両10における設置位置、車両10が備える第1操作補助情報取得部102の車両10における設置位置、及び、第1操作補助情報取得部102の画角(視野角)を基準とした変換後の画像とを重ねた画像の情報を生成する。
The first operation auxiliary information acquisition unit 102 acquires second operation auxiliary information (step S22). The operation auxiliary information synthesis unit 107 receives the first operation auxiliary information from the first operation auxiliary information acquisition unit 102. The operation auxiliary information combining unit 107 combines the first operation auxiliary information and the second operation auxiliary information (step S23) to generate third operation auxiliary information.
As a specific example of the combination of the first operation auxiliary information and the second operation auxiliary information performed by the operation auxiliary information combining unit 107, the first operation auxiliary information acquiring unit 102 is a camera, and each of the surrounding vehicle 20 and the roadside machine 30 is The case where the corresponding second operation auxiliary information acquisition units 202 and 302 provided are cameras will be described. The operation auxiliary information combining unit 107 is based on the position information indicating the position of the vehicle 10 and the position information of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information can be acquired. The positions of the surrounding vehicle 20 and the roadside machine 30 that are determined to be in a position where the first operation auxiliary information can be acquired with reference to the position of 10 are specified at short time intervals (for example, every 100 milliseconds). The operation auxiliary information combining unit 107 displays the positions of the surrounding vehicle 20 and the roadside machine 30 that are determined to be in a position where the first operation auxiliary information can be acquired with reference to the position of the vehicle 10 on one screen as icons (vehicle 10 , Information for display on the surrounding vehicles 20a, 20b, 20d, roadside machine 30b) is generated. In addition, information about an image that can be displayed with each icon is generated.
As another specific example, the first operation auxiliary information acquisition unit 102 is a camera, and the corresponding second operation auxiliary information acquisition units 202 and 302 included in each of the surrounding vehicle 20 and the roadside machine 30 are cameras. explain. The operation auxiliary information combining unit 107 is based on the position information indicating the position of the vehicle 10 and the position information of the surrounding vehicle 20 and the roadside machine 30 determined to be present at a position where the first operation auxiliary information can be acquired. The positions of the surrounding vehicle 20 and the roadside machine 30 that are determined to be present at a position where the first operation auxiliary information with reference to the position of 10 can be acquired are specified at short time intervals (for example, every 100 milliseconds). The operation auxiliary information combining unit 107 determines the position of the vehicle 10, the positions of the surrounding vehicle 20 and the roadside machine 30 that have been determined to be in a position where the first operation auxiliary information can be acquired based on the position of the vehicle 10, The installation position in each of the corresponding second operation auxiliary information acquisition units 202 and 302 provided in each of the surrounding vehicle 20 and the roadside machine 30 determined to be in a position where the first operation auxiliary information based on the position can be acquired, Based on each of the corresponding view angles of the second operation auxiliary information acquisition units 202 and 302 included in each of the surrounding vehicle 20 and the roadside device 30 determined to be in a position where the operation auxiliary information can be acquired, It converts into the image on the basis of the installation position in the vehicle 10 of the 1 operation assistance information acquisition part 102, and the angle of view (viewing angle) of the 1st operation assistance information acquisition part 102. FIG. The operation auxiliary information combining unit 107 includes an image captured by the first operation auxiliary information acquisition unit 102 included in the vehicle 10, an installation position of the first operation auxiliary information acquisition unit 102 included in the vehicle 10 in the vehicle 10, and a first configuration included in the vehicle 10. Information of an image obtained by superimposing an installation position of the one operation auxiliary information acquisition unit 102 in the vehicle 10 and an image after conversion based on the angle of view (viewing angle) of the first operation auxiliary information acquisition unit 102 is generated.

操作補助情報合成部107は、第3操作補助情報を表示部105に送信する。
表示部105は、操作補助情報合成部107から第3操作補助情報を受信する。表示部105は、第3操作補助情報を表示する(ステップS24)。例えば、周辺車両20a、20b、20d、路側機30bのそれぞれが車両10を撮影している場合、表示部105は、図5で示した表示画面を表示する。図5は、車両10が撮影している画像と、周辺車両20a、20b、20dが車両10を撮影している画像と、路側機30bが車両10を撮影している画像とを合成したときに表示部105が表示する表示画面である。より具体的には、図5は、車両10の位置を基準とした第1操作補助情報を取得できる位置にいると判定した周辺車両20と路側機30のそれぞれの位置を1つの画面にアイコン(車両10、周辺車両20a、20b、20d、路側機30b)で表示する表示画面である。また、例えば、表示部105は、図6で示した表示画面を表示する。図6は、図5で示した周辺車両20aのアイコンを選択したときに表示部105に表示される周辺車両20aの前方画像の表示例である。周辺車両20aの前方画像は、車両10、周辺車両20bの一部、車両10の対向車両である周辺車両20dのそれぞれを1つの画面に表示する画像である。また、例えば、表示部105は、図7で示した表示画面を表示する。図7は、車両10が所定の状況にある場合に「危険な場所を通過します。ご注意ください。」と画面に表示する画像である。
The operation auxiliary information combining unit 107 transmits the third operation auxiliary information to the display unit 105.
The display unit 105 receives the third operation auxiliary information from the operation auxiliary information combining unit 107. The display unit 105 displays the third operation auxiliary information (step S24). For example, when each of the surrounding vehicles 20a, 20b, 20d and the roadside device 30b is photographing the vehicle 10, the display unit 105 displays the display screen shown in FIG. FIG. 5 shows a case where an image taken by the vehicle 10, an image taken by the surrounding vehicles 20 a, 20 b, and 20 d taking the vehicle 10, and an image taken by the roadside device 30 b are taken by the vehicle 10. It is a display screen which the display part 105 displays. More specifically, FIG. 5 shows, on one screen, icons indicating the positions of the surrounding vehicle 20 and the roadside machine 30 that have been determined to be in a position where the first operation auxiliary information can be acquired based on the position of the vehicle 10. It is a display screen displayed on the vehicle 10, the surrounding vehicles 20a, 20b, 20d, and the roadside machine 30b). For example, the display unit 105 displays the display screen shown in FIG. FIG. 6 is a display example of a front image of the surrounding vehicle 20a displayed on the display unit 105 when the icon of the surrounding vehicle 20a shown in FIG. 5 is selected. The front image of the surrounding vehicle 20a is an image that displays the vehicle 10, a part of the surrounding vehicle 20b, and the surrounding vehicle 20d that is an oncoming vehicle of the vehicle 10 on one screen. For example, the display unit 105 displays the display screen shown in FIG. FIG. 7 is an image that is displayed on the screen when the vehicle 10 is in a predetermined situation, “You will pass through a dangerous place.

以上、本発明の第二の実施形態による操作補助システム1について説明した。本発明の第二の実施形態による操作補助システム1は、車両10(対象装置)と、周辺車両20(操作補助情報提供装置)と、路側機30(操作補助情報提供装置)と、を備える。
車両10は、位置判定部101と、第1操作補助情報取得部102と、無線通信部104と、表示部105と、記憶部106と、操作補助情報合成部107と、を備える。
The operation assisting system 1 according to the second embodiment of the present invention has been described above. The operation assistance system 1 according to the second embodiment of the present invention includes a vehicle 10 (target device), a surrounding vehicle 20 (operation assistance information providing device), and a roadside machine 30 (operation assistance information providing device).
The vehicle 10 includes a position determination unit 101, a first operation auxiliary information acquisition unit 102, a wireless communication unit 104, a display unit 105, a storage unit 106, and an operation auxiliary information synthesis unit 107.

周辺車両20aは、無線通信部201aと、第2操作補助情報取得部202aと、記憶部203aと、操作補助情報取得判定部204aと、を備える。
無線通信部201aは、操作補助情報送信部2011aを備える。
周辺車両20bは、無線通信部201bと、第2操作補助情報取得部202bと、記憶部203bと、操作補助情報取得判定部204bと、を備える。
無線通信部201bは、操作補助情報送信部2011bを備える。
周辺車両20cは、無線通信部201cと、第2操作補助情報取得部202cと、記憶部203cと、操作補助情報取得判定部204cと、を備える。
無線通信部201cは、操作補助情報送信部2011cを備える。
周辺車両20dは、無線通信部201dと、第2操作補助情報取得部202dと、記憶部203dと、操作補助情報取得判定部204dと、を備える。
無線通信部201dは、操作補助情報送信部2011dを備える。
無線通信部201b、201c、201dのそれぞれは、無線通信部201aと同様の機能を有し、同様に動作する。
また、第2操作補助情報取得部202b、202c、202dのそれぞれは、第2操作補助情報取得部202aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部204b、204c、204dのそれぞれは、操作補助情報取得判定部204aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部2011b、2011c、2011dのそれぞれは、操作補助情報送信部2011aと同様の機能を有し、同様に動作する。
The surrounding vehicle 20a includes a wireless communication unit 201a, a second operation auxiliary information acquisition unit 202a, a storage unit 203a, and an operation auxiliary information acquisition determination unit 204a.
The wireless communication unit 201a includes an operation auxiliary information transmission unit 2011a.
The peripheral vehicle 20b includes a wireless communication unit 201b, a second operation auxiliary information acquisition unit 202b, a storage unit 203b, and an operation auxiliary information acquisition determination unit 204b.
The wireless communication unit 201b includes an operation auxiliary information transmission unit 2011b.
The peripheral vehicle 20c includes a wireless communication unit 201c, a second operation auxiliary information acquisition unit 202c, a storage unit 203c, and an operation auxiliary information acquisition determination unit 204c.
The wireless communication unit 201c includes an operation auxiliary information transmission unit 2011c.
The peripheral vehicle 20d includes a wireless communication unit 201d, a second operation auxiliary information acquisition unit 202d, a storage unit 203d, and an operation auxiliary information acquisition determination unit 204d.
The wireless communication unit 201d includes an operation auxiliary information transmission unit 2011d.
Each of the wireless communication units 201b, 201c, and 201d has the same function as the wireless communication unit 201a and operates in the same manner.
Each of the second operation auxiliary information acquisition units 202b, 202c, and 202d has the same function as that of the second operation auxiliary information acquisition unit 202a and operates in the same manner.
Each of the operation auxiliary information acquisition determination units 204b, 204c, and 204d has the same function as the operation auxiliary information acquisition determination unit 204a and operates in the same manner.
In addition, each of the operation auxiliary information transmission units 2011b, 2011c, and 2011d has the same function as the operation auxiliary information transmission unit 2011a and operates in the same manner.

路側機30aは、無線通信部301aと、第2操作補助情報取得部302aと、記憶部303aと、操作補助情報取得判定部304aと、を備える。
無線通信部301aは、操作補助情報送信部3011aを備える。
路側機30bは、無線通信部301bと、第2操作補助情報取得部302bと、記憶部303bと、操作補助情報取得判定部304bと、を備える。
無線通信部301bは、操作補助情報送信部3011bを備える。
無線通信部301bは、無線通信部301aと同様の機能を有し、同様に動作する。
また、第2操作補助情報取得部302bは、第2操作補助情報取得部302aと同様の機能を有し、同様に動作する。
また、操作補助情報取得判定部304bは、操作補助情報取得判定部304aと同様の機能を有し、同様に動作する。
また、操作補助情報送信部3011bは、操作補助情報送信部3011aと同様の機能を有し、同様に動作する。
The roadside device 30a includes a wireless communication unit 301a, a second operation auxiliary information acquisition unit 302a, a storage unit 303a, and an operation auxiliary information acquisition determination unit 304a.
The wireless communication unit 301a includes an operation auxiliary information transmission unit 3011a.
The roadside device 30b includes a wireless communication unit 301b, a second operation auxiliary information acquisition unit 302b, a storage unit 303b, and an operation auxiliary information acquisition determination unit 304b.
The wireless communication unit 301b includes an operation auxiliary information transmission unit 3011b.
The wireless communication unit 301b has the same function as the wireless communication unit 301a and operates in the same manner.
The second operation auxiliary information acquisition unit 302b has the same function as the second operation auxiliary information acquisition unit 302a and operates in the same manner.
Further, the operation auxiliary information acquisition determination unit 304b has the same function as the operation auxiliary information acquisition determination unit 304a and operates in the same manner.
Further, the operation assistance information transmission unit 3011b has the same function as the operation assistance information transmission unit 3011a and operates in the same manner.

位置判定部101は、車両10が所定の状況にあるか否かを判定する。位置判定部101は、車両10が所定の状況にあると判定した場合、その位置から車両パケット信号をブロードキャストで外部に送信する。操作補助情報取得判定部204のそれぞれは、対応する無線通信部201を介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。操作補助情報取得判定部204のそれぞれは、パケット信号送信部104aから車両パケット信号を受信した場合に、周辺車両20aが第1操作補助情報を取得できる位置にいるか否かを判定する。第2操作補助情報取得部202のそれぞれは、対応する操作補助情報取得判定部204が第1操作補助情報を取得できる位置にいると判定した場合、第1操作補助情報を取得する。第2操作補助情報取得部202のそれぞれは、対応する操作補助情報送信部2011を介して、第1操作補助情報を対象装置10に送信する。また、操作補助情報取得判定部304のそれぞれは、対応する無線通信部301を介して、パケット信号送信部104aから車両パケット信号を受信するか否かを常時判定している。操作補助情報取得判定部304のそれぞれは、パケット信号送信部104aから車両パケット信号を受信した場合に、路側機30aが第1操作補助情報を取得できる位置にいるか否かを判定する。第2操作補助情報取得部302のそれぞれは、対応する操作補助情報取得判定部304が第1操作補助情報を取得できる位置にいると判定した場合、第1操作補助情報を取得する。第2操作補助情報取得部302のそれぞれは、対応する操作補助情報送信部3011を介して、第1操作補助情報を対象装置10に送信する。   The position determination unit 101 determines whether or not the vehicle 10 is in a predetermined situation. When it is determined that the vehicle 10 is in a predetermined situation, the position determination unit 101 transmits a vehicle packet signal from the position to the outside by broadcasting. Each of the auxiliary operation information acquisition determination unit 204 always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the corresponding wireless communication unit 201. Each of the operation auxiliary information acquisition determination units 204 determines whether or not the surrounding vehicle 20a is in a position where the first operation auxiliary information can be acquired when a vehicle packet signal is received from the packet signal transmission unit 104a. When each of the second operation auxiliary information acquisition units 202 determines that the corresponding operation auxiliary information acquisition determination unit 204 is in a position where the first operation auxiliary information can be acquired, the second operation auxiliary information acquisition unit 202 acquires the first operation auxiliary information. Each of the second operation auxiliary information acquisition units 202 transmits the first operation auxiliary information to the target device 10 via the corresponding operation auxiliary information transmission unit 2011. Each of the operation assistance information acquisition determination units 304 always determines whether or not to receive a vehicle packet signal from the packet signal transmission unit 104a via the corresponding wireless communication unit 301. Each of the operation auxiliary information acquisition determination unit 304 determines whether or not the roadside device 30a is in a position where the first operation auxiliary information can be acquired when the vehicle packet signal is received from the packet signal transmission unit 104a. Each of the second operation auxiliary information acquisition units 302 acquires the first operation auxiliary information when it is determined that the corresponding operation auxiliary information acquisition determination unit 304 is in a position where the first operation auxiliary information can be acquired. Each of the second operation auxiliary information acquisition units 302 transmits the first operation auxiliary information to the target device 10 via the corresponding operation auxiliary information transmission unit 3011.

操作補助情報合成部107は、周辺車両20、路側機30のそれぞれから操作補助情報受信部104bを介して、第1操作補助情報を受信する。第1操作補助情報取得部102は、第2操作補助情報を取得する。操作補助情報合成部107は、第1操作補助情報取得部102から第1操作補助情報を受信する。操作補助情報合成部107は、第1操作補助情報と、第2操作補助情報とを合成し、第3操作補助情報を生成する。操作補助情報合成部107は、第3操作補助情報を表示部105に送信する。表示部105は、操作補助情報合成部107から第3操作補助情報を受信する。表示部105は、第3操作補助情報を表示する。   The operation auxiliary information combining unit 107 receives the first operation auxiliary information from each of the surrounding vehicle 20 and the roadside device 30 via the operation auxiliary information receiving unit 104b. The first operation auxiliary information acquisition unit 102 acquires second operation auxiliary information. The operation auxiliary information synthesis unit 107 receives the first operation auxiliary information from the first operation auxiliary information acquisition unit 102. The operation auxiliary information combining unit 107 combines the first operation auxiliary information and the second operation auxiliary information to generate third operation auxiliary information. The operation auxiliary information combining unit 107 transmits the third operation auxiliary information to the display unit 105. The display unit 105 receives the third operation auxiliary information from the operation auxiliary information combining unit 107. The display unit 105 displays the third operation auxiliary information.

このようにすれば、操作補助システム1は、危険な所定の状況において、操作者の操作を補助することができる。   In this way, the operation assistance system 1 can assist the operation of the operator in a dangerous predetermined situation.

なお、本発明の第二の実施形態による操作補助システム1において、第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれは、カメラであるものとして説明した。しかしながら、本発明の第二の実施形態による操作補助システム1における第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれは、それに限定しない。
例えば、操作補助システム1において、第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれは、レーダスキャナ、ミリ波レーダなどのセンサであってもよい。第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれは、レーダスキャナ、ミリ波レーダなどのセンサである場合、車両10の周辺の物体の位置を検出する。この場合、操作補助情報合成部107は、第1操作補助情報取得部102、第2操作補助情報取得部202、302のそれぞれが検出した物体と車両10のそれぞれの位置を示す画像を合成すればよい。
In the operation assistance system 1 according to the second embodiment of the present invention, the first operation assistance information acquisition unit 102 and the second operation assistance information acquisition units 202 and 302 have been described as being cameras. However, each of the 1st operation assistance information acquisition part 102 and the 2nd operation assistance information acquisition parts 202 and 302 in the operation assistance system 1 by 2nd embodiment of this invention is not limited to it.
For example, in the operation assistance system 1, each of the first operation assistance information acquisition unit 102 and the second operation assistance information acquisition units 202 and 302 may be a sensor such as a radar scanner or a millimeter wave radar. When each of the first operation auxiliary information acquisition unit 102 and the second operation auxiliary information acquisition units 202 and 302 is a sensor such as a radar scanner or a millimeter wave radar, the position of an object around the vehicle 10 is detected. In this case, the operation auxiliary information combining unit 107 combines the objects detected by the first operation auxiliary information acquiring unit 102 and the second operation auxiliary information acquiring units 202 and 302 and images indicating the positions of the vehicle 10. Good.

なお、本発明の第二の実施形態による操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてから第1操作補助情報を受信するものとして説明した。しかしながら、本発明の第二の実施形態による操作補助システム1における操作補助情報合成部107は、それに限定しない。
例えば、操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、例えば、最も近い5つの第2操作補助情報取得部202、302から第1操作補助情報を受信してもよい。また、例えば、操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、例えば、所定の距離の範囲内にある第2操作補助情報取得部202、302から第1操作補助情報を受信してもよい。また、例えば、操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、例えば、車両10と同方向または逆方向に走行する周辺車両20の第2操作補助情報取得部202から第1操作補助情報を受信してもよい。操作補助システム1において、操作補助情報合成部107は、第1操作補助情報を取得できる位置にいると判定した第2操作補助情報取得部202、302のすべてのうち、任意の第2操作補助情報取得部202、302から第1操作補助情報を受信してよい。
Note that, in the operation assistance system 1 according to the second embodiment of the present invention, the operation assistance information combining unit 107 determines that the second operation assistance information acquisition units 202 and 302 have determined that they are in a position where the first operation assistance information can be acquired. It has been described that the first operation auxiliary information is received from all. However, the operation assistance information combining unit 107 in the operation assistance system 1 according to the second embodiment of the present invention is not limited thereto.
For example, in the operation assistance system 1, the operation assistance information synthesis unit 107 is, for example, the nearest 5 of the second operation assistance information acquisition units 202 and 302 that are determined to be in a position where the first operation assistance information can be obtained. The first operation assistance information may be received from the two second operation assistance information acquisition units 202 and 302. Further, for example, in the operation assistance system 1, the operation assistance information synthesis unit 107 is, for example, a predetermined one of all the second operation assistance information acquisition units 202 and 302 that are determined to be in a position where the first operation assistance information can be obtained. You may receive 1st operation assistance information from the 2nd operation assistance information acquisition part 202,302 which exists in the range of distance. Further, for example, in the operation assistance system 1, the operation assistance information synthesis unit 107 is, for example, a vehicle among all of the second operation assistance information acquisition units 202 and 302 that are determined to be in a position where the first operation assistance information can be obtained. The first operation assistance information may be received from the second operation assistance information acquisition unit 202 of the surrounding vehicle 20 that travels in the same direction as or in the opposite direction to the vehicle 10. In the operation assistance system 1, the operation assistance information combining unit 107 selects any second operation assistance information among all the second operation assistance information acquisition units 202 and 302 that have been determined to be in a position where the first operation assistance information can be obtained. You may receive 1st operation assistance information from the acquisition parts 202 and 302. FIG.

なお、本発明の実施形態による操作補助システム1において、表示部105が第3操作補助情報を表示するものとして説明した。しかしながら、本発明の実施形態による操作補助システム1において、表示部105が第3操作補助情報を表示するものに限定しない。
例えば、操作補助システム1において、スピーカが第3操作補助情報を音声で報知してもよい。
In the operation assistance system 1 according to the embodiment of the present invention, the display unit 105 has been described as displaying the third operation assistance information. However, in the operation assistance system 1 by embodiment of this invention, it is not limited to what the display part 105 displays 3rd operation assistance information.
For example, in the operation assistance system 1, a speaker may alert | report the 3rd operation assistance information with an audio | voice.

なお、本発明の実施形態による操作補助システム1において、周辺車両20、路側機30のそれぞれは、自身が第1操作補助情報を取得できる位置にいるか否かを判定するものとして説明した。しかしながら、本発明の実施形態による操作補助システム1において、周辺車両20、路側機30のそれぞれは、自身が第1操作補助情報を取得できる位置にいるか否かを判定するものに限定しない。
例えば、操作補助システム1において、車両10が、例えば、周辺車両20、路側機30のそれぞれから位置情報を取得し、それらの位置と車両10の位置との相対位置の関係に基づいて、周辺車両20、路側機30のそれぞれが第1操作補助情報を取得できる位置にいるか否かを判定してもよい。具体的には、操作補助システム1は、対象装置10(車両10)と操作補助情報提供装置40(周辺車両20、路側機30)とを備え、対象装置10の操作を補助する操作補助システムである。操作補助システムにおいて、対象装置10は、対象装置10を特定することのできる情報を含むパケット信号を所定の状況で外部に送信するパケット信号送信部104aと、操作補助情報提供装置40から操作補助情報提供装置40の周辺の情報を受信する操作補助情報受信部104bと、操作補助情報受信部104bが受信した操作補助情報提供装置40の周辺の情報に基づいて、操作補助情報提供装置40が対象装置10の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部404と、対象装置10の操作を補助する情報を取得する第1操作補助情報取得部102と、操作補助情報受信部104bが受信した対象装置10の操作を補助する情報と、第1操作補助情報取得部102が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部107と、操作補助情報合成部107が合成した合成後の対象装置10の操作を補助する情報を表示する表示部105と、を備える。操作補助情報提供装置40は、パケット信号送信部104aからパケット信号を受信した場合に、操作補助情報提供装置40の周辺の情報を取得する第2操作補助情報取得部402と、第2操作補助情報取得部402が取得した操作補助情報提供装置40の周辺の情報を対象装置10に送信する操作補助情報送信部4011aと、を備えていてもよい。
In addition, in the operation assistance system 1 by embodiment of this invention, each of the surrounding vehicle 20 and the roadside machine 30 demonstrated as what determines whether it exists in the position which can acquire 1st operation assistance information itself. However, in the operation assistance system 1 according to the embodiment of the present invention, each of the surrounding vehicle 20 and the roadside machine 30 is not limited to one that determines whether or not it is in a position where it can acquire the first operation assistance information.
For example, in the operation assistance system 1, the vehicle 10 acquires position information from, for example, each of the surrounding vehicle 20 and the roadside machine 30, and based on the relationship between the relative position between these positions and the position of the vehicle 10, the surrounding vehicle 20, it may be determined whether each of the roadside devices 30 is in a position where the first operation auxiliary information can be acquired. Specifically, the operation assistance system 1 is an operation assistance system that includes the target device 10 (the vehicle 10) and the operation assistance information providing device 40 (the surrounding vehicle 20, the roadside machine 30), and assists the operation of the target device 10. is there. In the operation assistance system, the target device 10 includes a packet signal transmission unit 104a that transmits a packet signal including information that can identify the target device 10 to the outside in a predetermined situation, and the operation assistance information from the operation assistance information providing device 40. The auxiliary operation information receiving unit 104b that receives information around the providing device 40, and the auxiliary operation information providing device 40 based on the information around the auxiliary operation information providing device 40 received by the auxiliary operation information receiving unit 104b. An operation auxiliary information acquisition determination unit 404 that determines whether or not the information that assists the operation of 10 is acquired, a first operation auxiliary information acquisition unit 102 that acquires information to assist the operation of the target device 10, and an operation Information assisting the operation of the target device 10 received by the auxiliary information receiving unit 104b and the target device acquired by the first operation auxiliary information acquiring unit 102. Includes operation as operation support information combining unit 107 for combining the information to assist, a display unit 105 for displaying data assist information combining unit 107 to assist the operation of the target device 10 after synthesized synthesis,. When receiving a packet signal from the packet signal transmitting unit 104a, the operation auxiliary information providing device 40 acquires a second operation auxiliary information acquiring unit 402 that acquires information around the operation auxiliary information providing device 40, and second operation auxiliary information. An operation auxiliary information transmission unit 4011a that transmits information around the operation auxiliary information providing device 40 acquired by the acquisition unit 402 to the target device 10 may be provided.

なお、本発明の実施形態による操作補助システム1において、車両パケット信号は、車両10の車種を示す情報、車両10のボディカラーを示す情報などを含んでいてもよい。この場合、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像において車両10が映っているか否かを車両10の車種、車両10のボディカラーのそれぞれの情報を用いて判定してもよい。
具体的には、操作補助情報取得判定部204、304のそれぞれは、予め記憶部に記憶した車両10の車種に対応する車両10の外形と、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけるエッジとを比較して、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけて車両10を特定した場合に車両10が映っていると判定する。また、操作補助情報取得判定部204、304のそれぞれは、予め記憶部に記憶した車両10の車種に対応する車両10の外形と、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけるエッジとを比較して、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけて車両10を特定できない場合に車両10が映っていないと判定する。
また、具体的には、操作補助情報取得判定部204、304のそれぞれは、予め記憶部に記憶した車両10の車種に対応する車両10のボディカラーと、直前に対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像におけるエッジの内部の色とを比較し、エッジ内部の色の主な成分が車両10のボディカラーの色の成分と一致した場合に車両10が映っていないと判定する。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、直前に第2操作補助情報取得部202、302が撮影した画像において車両10が映っているか否かを車両10のナンバーのみの情報を用いる場合よりも正確に判定することができる。
In the operation assistance system 1 according to the embodiment of the present invention, the vehicle packet signal may include information indicating the vehicle type of the vehicle 10, information indicating the body color of the vehicle 10, and the like. In this case, when each of the operation auxiliary information acquisition determination units 204 and 304 receives the vehicle packet signal, the image captured by the corresponding second operation auxiliary information acquisition unit 202 or the corresponding second operation auxiliary information acquisition unit 302 is received. It may be determined using the information on the vehicle type of the vehicle 10 and the body color of the vehicle 10 whether or not the vehicle 10 is shown in FIG.
Specifically, each of the operation auxiliary information acquisition determination units 204 and 304 includes the outer shape of the vehicle 10 corresponding to the vehicle type of the vehicle 10 stored in advance in the storage unit, and the second operation auxiliary information acquisition unit 202 corresponding to the immediately preceding operation. The edge of the image captured by the corresponding second operation auxiliary information acquisition unit 302 is compared with the image captured by the corresponding second operation auxiliary information acquisition unit 202 or the corresponding second operation auxiliary information acquisition unit 302. When the vehicle 10 is specified, it is determined that the vehicle 10 is reflected. In addition, each of the operation auxiliary information acquisition determination units 204 and 304 includes the outer shape of the vehicle 10 corresponding to the vehicle type of the vehicle 10 stored in the storage unit in advance, and the second operation auxiliary information acquisition unit 202 corresponding to the immediately preceding one. The vehicle in the image taken by the second operation auxiliary information acquisition unit 202 or the corresponding second operation auxiliary information acquisition unit 302 corresponding immediately before is compared with the edge in the image taken by the two operation auxiliary information acquisition unit 302. When 10 cannot be specified, it is determined that the vehicle 10 is not reflected.
Specifically, each of the operation auxiliary information acquisition determination units 204 and 304 acquires the body color of the vehicle 10 corresponding to the vehicle type of the vehicle 10 stored in advance in the storage unit, and the second operation auxiliary information acquisition corresponding to immediately before. When the main component of the color inside the edge matches the color component of the body color of the vehicle 10 by comparing the color inside the edge in the image captured by the unit 202 or the corresponding second operation auxiliary information acquisition unit 302 It is determined that the vehicle 10 is not reflected.
In this way, when each of the operation auxiliary information acquisition determination units 204 and 304 receives the vehicle packet signal, whether or not the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition units 202 and 302 immediately before. This can be determined more accurately than when only the information of the number of the vehicle 10 is used.

また、本発明の実施形態による操作補助システム1において、車両パケット信号は、車両10の位置を示す情報などを含んでもよい。車両10の位置を示す情報は、例えば、緯度と経度の組み合わせが示す情報である。この場合、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像において車両10が映っているか否かを車両10の位置と自身を備える周辺車両20との相対位置、または、車両10の位置と自身を備える路側機30との相対位置を用いて判定してもよい。
例えば、操作補助情報取得判定部204aは、車両10の位置と周辺車両20aとの相対位置を算出し、算出した相対位置が特定の(例えば、距離、方位角が)しきい値の範囲内である場合に車両10を撮影できると判定すればよい。
また、例えば、操作補助情報取得判定部304aは、車両10の位置と路側機30aとの相対位置を算出し、算出した相対位置が特定の(例えば、距離、方位角が)しきい値の範囲内である場合に車両10を撮影できると判定すればよい。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、直前に第2操作補助情報取得部202が撮影した画像において車両10が映っているか否かを車両10のナンバーのみの情報を用いる場合よりも正確に判定することができる。
In the operation assistance system 1 according to the embodiment of the present invention, the vehicle packet signal may include information indicating the position of the vehicle 10. The information indicating the position of the vehicle 10 is, for example, information indicated by a combination of latitude and longitude. In this case, when each of the operation auxiliary information acquisition determination units 204 and 304 receives the vehicle packet signal, the vehicle in the image captured by the corresponding second operation auxiliary information acquisition unit 202 or the corresponding second operation auxiliary information acquisition unit 302. 10 may be determined using a relative position between the position of the vehicle 10 and the surrounding vehicle 20 including the vehicle 10 or a relative position between the position of the vehicle 10 and the roadside machine 30 including the vehicle 10.
For example, the operation auxiliary information acquisition determination unit 204a calculates the relative position between the position of the vehicle 10 and the surrounding vehicle 20a, and the calculated relative position is within a specific threshold range (for example, the distance and the azimuth angle). It may be determined that the vehicle 10 can be photographed in some cases.
Further, for example, the operation assistance information acquisition determination unit 304a calculates a relative position between the position of the vehicle 10 and the roadside device 30a, and the calculated relative position is within a specific threshold range (for example, a distance and an azimuth angle). What is necessary is just to determine that the vehicle 10 can be image | photographed when it is in.
In this way, when each of the operation auxiliary information acquisition determination units 204 and 304 receives the vehicle packet signal, it determines whether or not the vehicle 10 is reflected in the image captured by the second operation auxiliary information acquisition unit 202 immediately before. This can be determined more accurately than when only the information of the number of the vehicle 10 is used.

また、本発明の実施形態による操作補助システム1において、車両パケット信号は、車両10のナンバー、車両10の車種、車両10のボディカラー、車両10の位置のそれぞれの任意の組み合わせの情報を含んでもよい。この場合、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、対応する第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像において車両10が映っているか否かを車両10のナンバー、車両10の車種、車両10のボディカラー、車両10の位置のそれぞれの任意の組み合わせの情報を用いて判定してもよい。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、車両パケット信号を受信すると、第2操作補助情報取得部202または対応する第2操作補助情報取得部302が撮影した画像において車両10が映っているか否かを車両パケット信号が含む情報に応じて判定することができる。
In the operation assistance system 1 according to the embodiment of the present invention, the vehicle packet signal may include information on any combination of the number of the vehicle 10, the vehicle type of the vehicle 10, the body color of the vehicle 10, and the position of the vehicle 10. Good. In this case, when each of the operation auxiliary information acquisition determination units 204 and 304 receives the vehicle packet signal, the vehicle in the image captured by the corresponding second operation auxiliary information acquisition unit 202 or the corresponding second operation auxiliary information acquisition unit 302. 10 may be determined using information of any combination of the number of the vehicle 10, the vehicle type of the vehicle 10, the body color of the vehicle 10, and the position of the vehicle 10.
In this way, when each of the operation auxiliary information acquisition determination units 204 and 304 receives the vehicle packet signal, in the image captured by the second operation auxiliary information acquisition unit 202 or the corresponding second operation auxiliary information acquisition unit 302. Whether or not the vehicle 10 is shown can be determined according to information included in the vehicle packet signal.

また、本発明の第二の実施形態による操作補助システム1において、操作補助情報取得判定部204、304のそれぞれは、車両10のアドレスを指定して第1操作補助情報をユニキャストで車両10に送信するものとして説明した。しかしながら、本発明の実施形態による操作補助システム1における操作補助情報取得判定部204、304のそれぞれは、それに限定しない。
例えば、操作補助システム1において、操作補助情報取得判定部204、304のそれぞれは、DTN(Delay/Disruption−Tolerant Networking)の通信プロトコルに基づいて、第1操作補助情報を周辺車両20、路側機30のそれぞれの間で共有してもよい。
このようにすれば、操作補助情報取得判定部204、304のそれぞれは、第1操作補助情報をユニキャストで車両10に送信できなかった場合にも、第1操作補助情報を車両10に送信することができる。
In the operation assistance system 1 according to the second embodiment of the present invention, each of the operation assistance information acquisition determination units 204 and 304 designates the address of the vehicle 10 and unicasts the first operation assistance information to the vehicle 10. Described as sending. However, each of the operation assistance information acquisition determination units 204 and 304 in the operation assistance system 1 according to the embodiment of the present invention is not limited thereto.
For example, in the operation assistance system 1, each of the operation assistance information acquisition determination units 204 and 304 transmits the first operation assistance information to the surrounding vehicle 20 and the roadside machine 30 based on a communication protocol of DTN (Delay / Disruption-Tolerant Networking). May be shared between each of the.
In this way, each of the operation assistance information acquisition determination units 204 and 304 transmits the first operation assistance information to the vehicle 10 even when the first operation assistance information cannot be transmitted to the vehicle 10 by unicast. be able to.

なお、本発明の実施形態における処理フローは、適切な処理が行われる範囲において、処理の順番が入れ替わってもよい。   In the processing flow in the embodiment of the present invention, the order of processing may be changed within a range where appropriate processing is performed.

本発明の実施形態における記憶部106、203、203a、203b、203c、203d、303、303a、303b、その他の記憶部のそれぞれは、適切な情報の送受信が行われる範囲においてどこに備えられていてもよい。また、記憶部106、203、203a、203b、203c、203d、303、303a、303b、その他の記憶部のそれぞれは、適切な情報の送受信が行われる範囲において複数存在しデータを分散して記憶していてもよい。   Each of the storage units 106, 203, 203a, 203b, 203c, 203d, 303, 303a, 303b, and other storage units in the embodiment of the present invention is provided anywhere within a range where appropriate information is transmitted and received. Good. In addition, each of the storage units 106, 203, 203a, 203b, 203c, 203d, 303, 303a, 303b, and other storage units exists in a range in which appropriate information is transmitted and received, and data is distributed and stored. It may be.

本発明の実施形態について説明したが、上述の対象装置10(車両10)、操作補助情報提供装置40(周辺車両20、路側機30)のそれぞれは内部に、コンピュータシステムを有していてもよい。そして、上述した処理の過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、CD−ROM、DVD−ROM、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータがそのプログラムを実行するようにしてもよい。   Although the embodiment of the present invention has been described, each of the above-described target device 10 (vehicle 10) and operation assistance information providing device 40 (peripheral vehicle 20, roadside machine 30) may have a computer system therein. . The process described above is stored in a computer-readable recording medium in the form of a program, and the above process is performed by the computer reading and executing this program. Here, the computer-readable recording medium means a magnetic disk, a magneto-optical disk, a CD-ROM, a DVD-ROM, a semiconductor memory, or the like. Alternatively, the computer program may be distributed to the computer via a communication line, and the computer that has received the distribution may execute the program.

また、上記プログラムは、前述した機能の一部を実現してもよい。さらに、上記プログラムは、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるファイル、いわゆる差分ファイル(差分プログラム)であってもよい。   The program may realize part of the functions described above. Further, the program may be a so-called difference file (difference program) that can realize the above-described functions in combination with a program already recorded in the computer system.

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例であり、発明の範囲を限定しない。これらの実施形態は、発明の要旨を逸脱しない範囲で、追加、種々の省略、置き換え、変更を行ってよい。   Although several embodiments of the present invention have been described, these embodiments are examples and do not limit the scope of the invention. These embodiments may be added, variously omitted, replaced, and changed without departing from the gist of the invention.

なお、上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。   In addition, although a part or all of said embodiment can be described also as the following additional remarks, it is not restricted to the following.

(付記1)対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、
前記対象装置は、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記操作補助情報取得判定部が前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。
(Supplementary note 1) An operation assistance system that includes an object device and an operation assistance information providing device, and assists the operation of the object device,
The target device is:
A packet signal transmission unit that transmits a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
An operation assistance information receiving unit for receiving information to assist the operation of the target device from the operation assistance information providing device;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
With
The operation assistance information providing device includes:
An operation auxiliary information acquisition determination unit that determines whether or not the operation auxiliary information providing device is in a position where the information for assisting the operation of the target device can be acquired when the vehicle packet signal is received from the packet signal transmission unit; ,
A second operation of acquiring information for assisting operation of the target device when the operation assisting information acquisition determining unit determines that the operation assisting information providing device is in a position where information for assisting operation of the target device can be acquired; An auxiliary operation information acquisition unit;
An operation auxiliary information transmission unit that transmits information to assist the operation of the target device acquired by the second operation auxiliary information acquisition unit to the target device;
An operation assistance system comprising:

(付記2)対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、
前記対象装置は、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、
前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置の周辺の情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。
(Additional remark 2) It is an operation assistance system provided with an object device and an operation assistance information providing device, and assisting operation of the object device,
The target device is:
A packet signal transmission unit that transmits a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
An operation auxiliary information receiving unit that receives information around the operation auxiliary information providing device from the operation auxiliary information providing device;
Based on the peripheral information of the operation assistance information providing device received by the operation assistance information receiving unit, it is determined whether or not the operation assistance information providing device is in a position where information for assisting the operation of the target device can be acquired. An operation auxiliary information acquisition determination unit;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
With
The operation assistance information providing device includes:
A second operation auxiliary information acquisition unit that acquires information around the operation auxiliary information providing device when the vehicle packet signal is received from the packet signal transmission unit;
An operation auxiliary information transmitting unit that transmits information around the operation auxiliary information providing device acquired by the second operation auxiliary information acquiring unit to the target device;
An operation assistance system comprising:

(付記3)前記所定の状況にあるか否かを判定する位置判定部、
を備える付記1または付記2に記載の操作補助システム。
(Supplementary Note 3) A position determination unit that determines whether or not the predetermined state is present,
The operation assistance system according to Appendix 1 or Appendix 2.

(付記4)前記パケット信号送信部は、
前記車両パケット信号をブロードキャストで外部に送信する、
付記1から付記3の何れか一に記載の操作補助システム。
(Appendix 4) The packet signal transmitter
Transmitting the vehicle packet signal to the outside by broadcast,
The operation assistance system according to any one of supplementary notes 1 to 3.

(付記5)前記対象装置の操作を補助する情報は、前記対象装置を撮影した画像の情報を含む、
付記1から付記4の何れか一に記載の操作補助システム。
(Additional remark 5) The information which assists operation of the said target apparatus contains the information of the image which image | photographed the said target apparatus,
The operation assistance system according to any one of supplementary notes 1 to 4.

(付記6)前記対象装置は、自動車である、
付記1から付記5の何れか一に記載の操作補助システム。
(Appendix 6) The target device is an automobile.
The operation assistance system according to any one of Supplementary Note 1 to Supplementary Note 5.

(付記7)対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備える対象装置。
(Supplementary Note 7) a packet signal transmission unit that transmits a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
An operation assistance information receiving unit for receiving information to assist the operation of the target device from the operation assistance information providing device;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
A target device comprising:

(付記8)対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記操作補助情報取得判定部が前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助情報提供装置。
(Supplementary note 8) When receiving a vehicle packet signal from the target device, an operation auxiliary information acquisition determination unit that determines whether or not the operation auxiliary information providing device is in a position where information for assisting the operation of the target device can be acquired;
A second operation of acquiring information for assisting operation of the target device when the operation assisting information acquisition determining unit determines that the operation assisting information providing device is in a position where information for assisting operation of the target device can be acquired; An auxiliary operation information acquisition unit;
An operation auxiliary information transmission unit that transmits information to assist the operation of the target device acquired by the second operation auxiliary information acquisition unit to the target device;
A device for providing auxiliary operation information.

(付記9)対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、
前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備える対象装置。
(Supplementary Note 9) a packet signal transmission unit that transmits a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
An operation auxiliary information receiving unit for receiving information around the operation auxiliary information providing device from the operation auxiliary information providing device;
Based on the peripheral information of the operation assistance information providing device received by the operation assistance information receiving unit, it is determined whether or not the operation assistance information providing device is in a position where information for assisting the operation of the target device can be acquired. An operation auxiliary information acquisition determination unit;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
A target device comprising:

(付記10)対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置の周辺の情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助情報提供装置。
(Supplementary Note 10) When receiving a vehicle packet signal from the target device, a second operation auxiliary information acquisition unit that acquires information around the operation auxiliary information providing device;
An operation auxiliary information transmitting unit that transmits information around the operation auxiliary information providing device acquired by the second operation auxiliary information acquiring unit to the target device;
A device for providing auxiliary operation information.

(付記11)対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムの操作補助方法であって、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
前記車両パケット信号を受信した場合に、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得すること、
取得した前記対象装置の操作を補助する情報を前記対象装置に送信すること、
前記前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む操作補助方法。
(Supplementary note 11) An operation assisting method for an operation assisting system that includes an object device and an operation assistance information providing device, and assists the operation of the object device,
Transmitting a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
When receiving the vehicle packet signal, determining whether or not the operation assistance information providing device is in a position where information for assisting the operation of the target device can be acquired;
Obtaining the information for assisting the operation of the target device when it is determined that the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be obtained;
Transmitting information to assist the operation of the acquired target device to the target device;
Receiving information assisting the operation of the target device from the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining the information that assists the operation of the target device received from the operation assistance information providing device and the information that assists the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
Operation assistance method including

(付記12)対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムの操作補助方法であって、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
前記車両パケット信号を受信した場合に、前記操作補助情報提供装置の周辺の情報を取得すること、
取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信すること、
前記操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記対象装置の操作を補助する情報を取得できる位置にいる前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む操作補助方法。
(Supplementary note 12) An operation assisting method for an operation assisting system that includes an object device and an operation assistance information providing device, and assists the operation of the object device,
Transmitting a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
When receiving the vehicle packet signal, obtaining information around the operation assistance information providing device;
Transmitting the acquired peripheral information of the operation assistance information providing device to the target device;
Receiving information around the operation assistance information providing device from the operation assistance information providing device;
Determining whether or not the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be acquired based on the received information about the periphery of the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Information for assisting operation of the target device received from the operation assistance information providing device at a position where information for assisting operation of the target device can be acquired, and information for assisting operation of the target device acquired by the target device And
Displaying information that assists the operation of the combined target device after combining;
Operation assistance method including

(付記13)対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む対象装置の制御方法。
(Supplementary note 13) Transmitting a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
Receiving information to assist the operation of the target device from the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A method for controlling a target device including:

(付記14)対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得すること、
取得した前記対象装置の操作を補助する情報を前記対象装置に送信すること、
を含む操作補助情報提供装置の制御方法。
(Supplementary Note 14) When receiving a vehicle packet signal from the target device, it is determined whether or not the operation auxiliary information providing device is in a position where information for assisting the operation of the target device can be acquired.
Obtaining the information for assisting the operation of the target device when it is determined that the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be obtained;
Transmitting information to assist the operation of the acquired target device to the target device;
Control method for operation assistance information providing apparatus including

(付記15)対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む対象装置の制御方法。
(Supplementary Note 15) Transmitting a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
Receiving information around the operation assistance information providing device from the operation assistance information providing device;
Determining whether or not the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be acquired based on the received information about the periphery of the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A method for controlling a target device including:

(付記16)対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置の周辺の情報を取得すること、
取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信すること、
を含む操作補助情報提供装置の制御方法。
(Supplementary Note 16) When receiving a vehicle packet signal from the target device, obtaining information around the operation assistance information providing device,
Transmitting the acquired peripheral information of the operation assistance information providing device to the target device;
Control method for operation assistance information providing apparatus including

(付記17)対象装置のコンピュータに、
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を実行させるプログラム。
(Supplementary note 17) In the computer of the target device,
Transmitting a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
Receiving information to assist the operation of the target device from the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A program that executes

(付記18)操作補助情報提供装置のコンピュータに、
対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得すること、
取得した前記対象装置の操作を補助する情報を前記対象装置に送信すること、
を実行させるプログラム。
(Supplementary note 18) In the computer of the operation assistance information providing device,
When receiving a vehicle packet signal from the target device, determining whether or not the operation assistance information providing device is in a position where information for assisting the operation of the target device can be acquired;
Obtaining the information for assisting the operation of the target device when it is determined that the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be obtained;
Transmitting information to assist the operation of the acquired target device to the target device;
A program that executes

(付記19)対象装置のコンピュータに、
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を実行させるプログラム。
(Supplementary note 19) In the computer of the target device,
Transmitting a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
Receiving information around the operation assistance information providing device from the operation assistance information providing device;
Determining whether or not the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be acquired based on the received information about the periphery of the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A program that executes

(付記20)操作補助情報提供装置のコンピュータに、
対象装置から車両パケット信号を受信した場合に、操作補助情報提供装置の周辺の情報を取得すること、
取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信すること、
を実行させるプログラム。
(Supplementary note 20) In the computer of the operation assistance information providing device,
When receiving a vehicle packet signal from the target device, obtaining information around the operation assistance information providing device,
Transmitting the acquired peripheral information of the operation assistance information providing device to the target device;
A program that executes

10・・・車両
20、20a、20b、20c、20d・・・周辺車両
30、30a、30b・・・路側機
40・・・操作補助情報提供装置
101・・・位置判定部
102・・・第1操作補助情報取得部
104、201、201a、201b、201c、201d、301、301a、301b・・・無線通信部
104a・・・パケット信号送信部
104b・・・操作補助情報受信部
105・・・表示部
106、203、203a、203b、203c、203d、303、303a、303b・・・記憶部
107・・・操作補助情報合成部
202、202a、202b、202c、202d、302、302a、302b、402・・・第2操作補助情報取得部
204、204a、204b、204c、204d、304、304a、304b、404・・・操作補助情報取得判定部
2011a、2011b、2011c、2011d、3011a、3011b、3011c、3011d、4011a・・・操作補助情報送信部
DESCRIPTION OF SYMBOLS 10 ... Vehicle 20, 20a, 20b, 20c, 20d ... Surrounding vehicle 30, 30a, 30b ... Roadside machine 40 ... Operation assistance information provision apparatus 101 ... Position determination part 102 ... No. 1 operation auxiliary information acquisition unit 104, 201, 201a, 201b, 201c, 201d, 301, 301a, 301b ... wireless communication unit 104a ... packet signal transmission unit 104b ... operation auxiliary information reception unit 105 ... Display unit 106, 203, 203a, 203b, 203c, 203d, 303, 303a, 303b ... Storage unit 107 ... Operation auxiliary information synthesis unit 202, 202a, 202b, 202c, 202d, 302, 302a, 302b, 402 ... Second operation auxiliary information acquisition units 204, 204a, 204b, 204c, 204d, 304, 304a, 30 b, 404 · · · assist information acquisition determining section 2011a, 2011b, 2011c, 2011d, 3011a, 3011b, 3011c, 3011d, 4011a ··· assist information transmitter

Claims (10)

対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、
前記対象装置は、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記操作補助情報取得判定部が前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいると判定した場合に、前記対象装置の操作を補助する情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記対象装置の操作を補助する情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。
An operation assistance system comprising a target device and an operation assistance information providing device, and assisting the operation of the target device,
The target device is:
A packet signal transmission unit that transmits a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
An operation assistance information receiving unit for receiving information to assist the operation of the target device from the operation assistance information providing device;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
With
The operation assistance information providing device includes:
An operation auxiliary information acquisition determination unit that determines whether or not the operation auxiliary information providing device is in a position where the information for assisting the operation of the target device can be acquired when the vehicle packet signal is received from the packet signal transmission unit; ,
A second operation of acquiring information for assisting operation of the target device when the operation assisting information acquisition determining unit determines that the operation assisting information providing device is in a position where information for assisting operation of the target device can be acquired; An auxiliary operation information acquisition unit;
An operation auxiliary information transmission unit that transmits information to assist the operation of the target device acquired by the second operation auxiliary information acquisition unit to the target device;
An operation assistance system comprising:
対象装置と操作補助情報提供装置とを備え、前記対象装置の操作を補助する操作補助システムであって、
前記対象装置は、
前記対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
前記操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、
前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備え、
前記操作補助情報提供装置は、
前記パケット信号送信部から前記車両パケット信号を受信した場合に、前記操作補助情報提供装置の周辺の情報を取得する第2操作補助情報取得部と、
前記第2操作補助情報取得部が取得した前記操作補助情報提供装置の周辺の情報を前記対象装置に送信する操作補助情報送信部と、
を備える操作補助システム。
An operation assistance system comprising a target device and an operation assistance information providing device, and assisting the operation of the target device,
The target device is:
A packet signal transmission unit that transmits a vehicle packet signal including information that can identify the target device to the outside in a predetermined situation;
An operation auxiliary information receiving unit that receives information around the operation auxiliary information providing device from the operation auxiliary information providing device;
Based on the peripheral information of the operation assistance information providing device received by the operation assistance information receiving unit, it is determined whether or not the operation assistance information providing device is in a position where information for assisting the operation of the target device can be acquired. An operation auxiliary information acquisition determination unit;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
With
The operation assistance information providing device includes:
A second operation auxiliary information acquisition unit that acquires information around the operation auxiliary information providing device when the vehicle packet signal is received from the packet signal transmission unit;
An operation auxiliary information transmitting unit that transmits information around the operation auxiliary information providing device acquired by the second operation auxiliary information acquiring unit to the target device;
An operation assistance system comprising:
前記所定の状況にあるか否かを判定する位置判定部、
を備える請求項1または請求項2に記載の操作補助システム。
A position determination unit for determining whether or not the predetermined condition is present;
The operation assistance system of Claim 1 or Claim 2 provided with.
前記対象装置の操作を補助する情報は、前記対象装置を撮影した画像の情報を含む、
請求項1から請求項3の何れか一項に記載の操作補助システム。
The information that assists the operation of the target device includes information of an image obtained by photographing the target device.
The operation assistance system as described in any one of Claims 1-3.
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信する操作補助情報受信部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備える対象装置。
A packet signal transmitter that transmits a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
An operation assistance information receiving unit for receiving information to assist the operation of the target device from the operation assistance information providing device;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
A target device comprising:
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信するパケット信号送信部と、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信する操作補助情報受信部と、
前記操作補助情報受信部が受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定する操作補助情報取得判定部と、
前記対象装置の操作を補助する情報を取得する第1操作補助情報取得部と、
前記操作補助情報受信部が受信した前記対象装置の操作を補助する情報と、第1操作補助情報取得部が取得した前記対象装置の操作を補助する情報とを合成する操作補助情報合成部と、
前記操作補助情報合成部が合成した合成後の前記対象装置の操作を補助する情報を表示する表示部と、
を備える対象装置。
A packet signal transmitter that transmits a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
An operation auxiliary information receiving unit for receiving information around the operation auxiliary information providing device from the operation auxiliary information providing device;
Based on the peripheral information of the operation assistance information providing device received by the operation assistance information receiving unit, it is determined whether or not the operation assistance information providing device is in a position where information for assisting the operation of the target device can be acquired. An operation auxiliary information acquisition determination unit;
A first operation auxiliary information acquisition unit for acquiring information for assisting the operation of the target device;
An operation auxiliary information synthesizing unit that synthesizes the information assisting the operation of the target device received by the operation auxiliary information receiving unit and the information assisting the operation of the target device acquired by the first operation auxiliary information acquiring unit;
A display unit for displaying information for assisting the operation of the target device after the synthesis synthesized by the operation auxiliary information synthesis unit;
A target device comprising:
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む対象装置の制御方法。
Transmitting a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
Receiving information to assist the operation of the target device from the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A method for controlling a target device including:
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を含む対象装置の制御方法。
Transmitting a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
Receiving information around the operation assistance information providing device from the operation assistance information providing device;
Determining whether or not the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be acquired based on the received information about the periphery of the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A method for controlling a target device including:
対象装置のコンピュータに、
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記対象装置の操作を補助する情報を受信すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を実行させるプログラム。
In the computer of the target device,
Transmitting a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
Receiving information to assist the operation of the target device from the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A program that executes
対象装置のコンピュータに、
対象装置を特定することのできる情報を含む車両パケット信号を所定の状況で外部に送信すること、
操作補助情報提供装置から前記操作補助情報提供装置の周辺の情報を受信すること、
受信した前記操作補助情報提供装置の周辺の情報に基づいて、前記操作補助情報提供装置が前記対象装置の操作を補助する情報を取得できる位置にいるか否かを判定すること、
前記対象装置が前記対象装置の操作を補助する情報を取得すること、
前記操作補助情報提供装置から受信した前記対象装置の操作を補助する情報と、前記対象装置が取得した前記対象装置の操作を補助する情報とを合成すること、
合成した合成後の前記対象装置の操作を補助する情報を表示すること、
を実行させるプログラム。
In the computer of the target device,
Transmitting a vehicle packet signal including information that can identify a target device to the outside in a predetermined situation;
Receiving information around the operation assistance information providing device from the operation assistance information providing device;
Determining whether or not the operation assistance information providing device is in a position where the information for assisting the operation of the target device can be acquired based on the received information about the periphery of the operation assistance information providing device;
Obtaining information for assisting the operation of the target device by the target device;
Combining information assisting the operation of the target device received from the operation assisting information providing device and information assisting the operation of the target device acquired by the target device;
Displaying information that assists the operation of the combined target device after combining;
A program that executes
JP2015239908A 2015-12-09 2015-12-09 Operation assistance system and operation assistance method using operation assistance system Active JP6657891B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015239908A JP6657891B2 (en) 2015-12-09 2015-12-09 Operation assistance system and operation assistance method using operation assistance system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015239908A JP6657891B2 (en) 2015-12-09 2015-12-09 Operation assistance system and operation assistance method using operation assistance system

Publications (2)

Publication Number Publication Date
JP2017107354A true JP2017107354A (en) 2017-06-15
JP6657891B2 JP6657891B2 (en) 2020-03-04

Family

ID=59059743

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015239908A Active JP6657891B2 (en) 2015-12-09 2015-12-09 Operation assistance system and operation assistance method using operation assistance system

Country Status (1)

Country Link
JP (1) JP6657891B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002367080A (en) * 2001-06-12 2002-12-20 Clarion Co Ltd Method and device for visual support for vehicle
JP2007249811A (en) * 2006-03-17 2007-09-27 Denso Corp Drive support image display device and program
JP2008191988A (en) * 2007-02-06 2008-08-21 Denso Corp Vehicle surrounding monitoring device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002367080A (en) * 2001-06-12 2002-12-20 Clarion Co Ltd Method and device for visual support for vehicle
JP2007249811A (en) * 2006-03-17 2007-09-27 Denso Corp Drive support image display device and program
JP2008191988A (en) * 2007-02-06 2008-08-21 Denso Corp Vehicle surrounding monitoring device

Also Published As

Publication number Publication date
JP6657891B2 (en) 2020-03-04

Similar Documents

Publication Publication Date Title
CN109937568B (en) Image processing apparatus, image processing method, and program
RU2656933C2 (en) Method and device for early warning during meeting at curves
JP4434224B2 (en) In-vehicle device for driving support
JP5765995B2 (en) Image display system
EP2442291A1 (en) Traffic event monitoring
JP2007104373A (en) On-vehicle image displaying device
US20200175872A1 (en) Information providing system, server, onboard device, storage medium, and information providing method
JP2017068640A (en) Vehicle-to-vehicle data communication device
WO2018225392A1 (en) Control apparatus, image pickup apparatus, control method, program, and image pickup system
JPH11351895A (en) Car navigation system
US11525882B2 (en) Establishing a direct communication link with another vehicle in the vicinity of a motor vehicle
JP2008114649A (en) Horn controller
TW201904282A (en) Camera device, camera module and control method of camera device
JP2004351977A (en) Vehicle outside image display device
US20130141221A1 (en) Apparatus
JP2017016200A (en) Image processing apparatus, image display system, and image processing method
KR20220122582A (en) Communication device
JP2001243596A (en) On-vehicle navigation system
WO2005054783A1 (en) Navigation device
JP3655119B2 (en) Status information providing apparatus and method
JP6657891B2 (en) Operation assistance system and operation assistance method using operation assistance system
WO2018021025A1 (en) Pedestrian position detection device
JP6406175B2 (en) In-vehicle display control device, in-vehicle display control method
JP2024052899A (en) Communication device and communication method
JP2007028363A (en) Top view image generating apparatus and top view image display method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181107

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20191015

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191216

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200120

R150 Certificate of patent or registration of utility model

Ref document number: 6657891

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150