[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP5023988B2 - Information notification system, portable terminal device, in-vehicle device, and information transmission method - Google Patents

Information notification system, portable terminal device, in-vehicle device, and information transmission method Download PDF

Info

Publication number
JP5023988B2
JP5023988B2 JP2007298448A JP2007298448A JP5023988B2 JP 5023988 B2 JP5023988 B2 JP 5023988B2 JP 2007298448 A JP2007298448 A JP 2007298448A JP 2007298448 A JP2007298448 A JP 2007298448A JP 5023988 B2 JP5023988 B2 JP 5023988B2
Authority
JP
Japan
Prior art keywords
terminal device
mobile terminal
information
vehicle
attention
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2007298448A
Other languages
Japanese (ja)
Other versions
JP2009123105A (en
Inventor
久美子 坂本
浩 藤本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nissan Motor Co Ltd
Original Assignee
Nissan Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nissan Motor Co Ltd filed Critical Nissan Motor Co Ltd
Priority to JP2007298448A priority Critical patent/JP5023988B2/en
Publication of JP2009123105A publication Critical patent/JP2009123105A/en
Application granted granted Critical
Publication of JP5023988B2 publication Critical patent/JP5023988B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

本発明は、歩行者が有する携帯端末装置と、無線通信によりこの携帯端末装置から取得される情報を車両内の乗員に通知する車両に搭載された車載装置とを備える情報通知システム、携帯端末装置、車載装置及び情報送信方法に関する。   The present invention relates to an information notification system, a portable terminal device, which includes a portable terminal device possessed by a pedestrian and an in-vehicle device mounted on a vehicle for notifying an occupant in the vehicle of information acquired from the portable terminal device by wireless communication. The present invention relates to an in-vehicle device and an information transmission method.

従来より、歩行者が存在する情報を車両の運転者に通知するために、歩行者が保有する歩行者携帯用送受信機(携帯端末装置)から位置情報を送信させて、車両に搭載された車載機(車載装置)で受信し、この車載機を介して車両内の乗員に通知する技術が考案されている(例えば、特許文献1参照。)。
特開平7−306995号公報
Conventionally, in order to notify a driver of a vehicle of information on the presence of a pedestrian, position information is transmitted from a portable pedestrian transmitter / receiver (portable terminal device) held by the pedestrian and mounted on the vehicle. A technology has been devised in which a vehicle (on-vehicle device) receives the information and notifies a passenger in the vehicle via the on-vehicle device (see, for example, Patent Document 1).
JP 7-306995 A

しかしながら、特許文献1に記載されている技術では、各歩行者の所有する歩行者携帯用送受信機から送信される信号を、車載機にて解析することで、危険判定を行うなどの演算処理を実行している。したがって、システムを構成する複数の歩行者携帯用送受信機から送信される全ての信号を車載機側で演算処理する必要があるため、システムに登録される歩行者携帯用送受信機の数が増えれば増えるほど演算処理負荷が増大してしまうといった問題がある。   However, in the technique described in Patent Document 1, an arithmetic process such as performing a risk determination is performed by analyzing a signal transmitted from a pedestrian portable transceiver owned by each pedestrian with an in-vehicle device. Running. Therefore, since it is necessary to perform arithmetic processing on the in-vehicle device side for all signals transmitted from a plurality of pedestrian portable transceivers constituting the system, if the number of pedestrian portable transceivers registered in the system increases. There is a problem that the calculation processing load increases as the number increases.

そこで、本発明は、上述した実情に鑑みて提案されたものであり、携帯端末装置から必要な情報だけを車両に搭載された車載装置に送信することで、車載装置の演算処理負荷を低減させることができる情報通知システム、携帯端末装置、車載装置及び情報送信方法を提供することを目的とする。   Therefore, the present invention has been proposed in view of the above-described situation, and transmits only necessary information from the mobile terminal device to the in-vehicle device mounted on the vehicle, thereby reducing the processing load of the in-vehicle device. It is an object of the present invention to provide an information notification system, a portable terminal device, an in-vehicle device, and an information transmission method.

本発明は、歩行者が有する携帯端末装置と、前記携帯端末装置との無線通信により取得される情報を車両内の乗員に通知する車両に搭載された車載装置とを備える。   The present invention includes a portable terminal device possessed by a pedestrian and an in-vehicle device mounted on a vehicle for notifying an occupant in the vehicle of information acquired by wireless communication with the portable terminal device.

そして、前記携帯端末装置が、当該携帯端末装置が存在する現在の位置を特定する現在位置情報を取得し、当該携帯端末装置の移動速度、移動方向を検出し、検出される前記移動速度、移動方向から推定される当該携帯端末装置を有する歩行者の挙動が、前記歩行者の近傍を走行する車両にとって、注意を要するかどうかを判定し、注意を要すると判定されたことに応じて、取得された前記現在位置情報を無線通信により前記車載装置に送信するよう制御し、注意を要すると判定されたことに応じて、前記車載装置との無線通信により情報を送信する送信時間を、当該携帯端末装置の移動速度と、当該携帯端末装置の現在位置近傍に存在する道路の道路幅とに基づき決定する。 And the said portable terminal device acquires the present position information which pinpoints the present position where the said portable terminal device exists, detects the moving speed and moving direction of the said portable terminal device, and the said detected moving speed and movement Acquired when the behavior of a pedestrian having the mobile terminal device estimated from the direction is determined to require attention for a vehicle traveling in the vicinity of the pedestrian, and is determined to require attention. The current position information is transmitted to the in-vehicle device by wireless communication , and when it is determined that attention is required, a transmission time for transmitting information by wireless communication with the in-vehicle device is set to This is determined based on the moving speed of the terminal device and the road width of the road existing near the current position of the mobile terminal device.

本発明によれば、携帯端末装置から必要な情報だけを車両に搭載された車載装置に送信することで、車載装置の演算処理負荷を低減させることを可能とする。   According to the present invention, it is possible to reduce the processing load of the in-vehicle device by transmitting only necessary information from the mobile terminal device to the in-vehicle device mounted in the vehicle.

以下、本発明の実施の形態について図面を参照して説明する。まず、図1を用いて、本発明の実施の形態として示す情報通知システムについて説明をする。   Hereinafter, embodiments of the present invention will be described with reference to the drawings. First, an information notification system shown as an embodiment of the present invention will be described with reference to FIG.

図1に示すように、情報通知システムは、複数の歩行者がそれぞれ有する携帯端末装置10と、複数の車両にそれぞれ搭載された車載装置20とを備えている。情報通知システムは、主に、携帯端末装置10で取得された現在位置情報を無線通信により車両に搭載された車載装置20へ送信することで、車両内の乗員に通知することができる。   As shown in FIG. 1, the information notification system includes a mobile terminal device 10 that each of a plurality of pedestrians has, and an in-vehicle device 20 that is mounted on each of a plurality of vehicles. The information notification system can notify a passenger in the vehicle mainly by transmitting the current position information acquired by the mobile terminal device 10 to the in-vehicle device 20 mounted on the vehicle by wireless communication.

まず、携帯端末装置10について説明をする。携帯端末装置10は、車載装置20と無線通信を行う通信部11と、位置特定部12と、位置履歴記憶部13と、簡易地図記憶部14と、モーションセンサ15と、処理部16とを備えている。携帯端末装置10は、例えば、通話機能を備えた携帯電話装置やPDA(Personal Data Assistance)などである。   First, the mobile terminal device 10 will be described. The mobile terminal device 10 includes a communication unit 11 that performs wireless communication with the in-vehicle device 20, a position specifying unit 12, a position history storage unit 13, a simple map storage unit 14, a motion sensor 15, and a processing unit 16. ing. The mobile terminal device 10 is, for example, a mobile phone device having a call function or a PDA (Personal Data Assistance).

位置特定部12は、いわゆるGPS(Global Positioning System)であり、処理部16の制御に応じて、GPS衛星から送信される信号をGPSアンテナで受信することで、GPS航法による位置計測を行い、当該携帯端末装置10の絶対位置(緯度、経度)情報を歩行者の現在位置情報として取得する。取得された携帯端末装置10の現在位置情報は、処理部16に出力される。   The position specifying unit 12 is a so-called GPS (Global Positioning System), receives a signal transmitted from a GPS satellite with a GPS antenna in accordance with control of the processing unit 16, and performs position measurement by GPS navigation. Absolute position (latitude, longitude) information of the mobile terminal device 10 is acquired as pedestrian current position information. The acquired current position information of the mobile terminal device 10 is output to the processing unit 16.

位置履歴記憶部13は、処理部16の制御に応じて、位置特定部12で求められた携帯端末装置10の現在位置情報を履歴として記憶する。   The position history storage unit 13 stores the current position information of the mobile terminal device 10 obtained by the position specifying unit 12 as a history under the control of the processing unit 16.

簡易地図記憶部14は、当該携帯端末装置10の要求に応じて、外部装置である図示しないセンタ装置などから送信される簡易地図情報を記憶する。   The simple map storage unit 14 stores simple map information transmitted from a center device (not shown) that is an external device in response to a request from the mobile terminal device 10.

モーションセンサ15は、当該携帯端末装置10の前後、左右、上下といった3方向に対する動きを検出するセンサである。モーションセンサ15は、当該携帯端末装置10の前後、左右、上下といった3方向に対する動きを、移動速度、移動方向という物理量にて検出する。このような、モーションセンサ15としては、例えば、当該携帯端末装置10の前後、左右、上下といった3方向に対する加速度の変化を検出することで、当該携帯端末装置10の移動速度、移動方向を検出することができる、いわゆる3次元加速度センサなどを適用することができる。この、3次元加速度センサは、搭載された物体の傾きも検出することができる。モーションセンサ15で検出された移動速度、移動方向は、処理部16に出力される。   The motion sensor 15 is a sensor that detects movement in three directions such as front and rear, left and right, and up and down of the mobile terminal device 10. The motion sensor 15 detects the movement of the mobile terminal device 10 in three directions such as front and rear, left and right, and up and down with physical quantities such as a movement speed and a movement direction. As such a motion sensor 15, for example, by detecting a change in acceleration in three directions such as front and rear, left and right, and up and down of the mobile terminal device 10, the moving speed and the moving direction of the mobile terminal device 10 are detected. A so-called three-dimensional acceleration sensor can be applied. This three-dimensional acceleration sensor can also detect the inclination of the mounted object. The moving speed and moving direction detected by the motion sensor 15 are output to the processing unit 16.

処理部16は、当該携帯端末装置10を統括的に制御する制御手段である。処理部16は、モーションセンサ15で検出された移動速度、移動方向を取得し、取得した移動速度、移動方向から当該携帯端末装置10を有する歩行者の挙動を推定する。   The processing unit 16 is a control unit that comprehensively controls the mobile terminal device 10. The processing unit 16 acquires the movement speed and the movement direction detected by the motion sensor 15, and estimates the behavior of the pedestrian having the mobile terminal device 10 from the acquired movement speed and movement direction.

そして、処理部16は、推定した当該携帯端末装置10を有する歩行者の挙動が、歩行者の近傍を走行する車両にとって注意を要するかどうかを判定する。処理部16は、取得した当該携帯端末装置10の移動速度、移動方向に急激な変化がみられた場合、推定される歩行者の挙動が、歩行者の近傍を走行する車両にとって注意を要すると判定する。   Then, the processing unit 16 determines whether or not the estimated behavior of the pedestrian having the mobile terminal device 10 requires attention for a vehicle traveling in the vicinity of the pedestrian. The processing unit 16 indicates that when a sudden change is observed in the movement speed and movement direction of the acquired mobile terminal device 10, the estimated pedestrian behavior requires attention for a vehicle traveling in the vicinity of the pedestrian. judge.

具体的には、処理部16は、取得した当該携帯端末装置10の移動速度が頻発して変化した場合、歩行者が歩く、停止するという挙動を頻繁に繰り返していると推定されるため、歩行者の近傍を走行する車両にとって注意を要すると判定する。また、処理部16は、取得した当該携帯端末装置10の移動方向が急激に変化した場合、歩行者が急に進行方向を変えるような挙動であると推定されるため、歩行者の近傍を走行する車両にとって注意を要すると判定する。また、処理部16は、取得した当該携帯端末装置10の移動速度が急減に変化した場合、歩行者が走り出す、走っているという挙動であると推定されるため、歩行者の近傍を走行する車両にとって注意を要すると判定する。   Specifically, when the movement speed of the acquired mobile terminal device 10 is frequently changed, the processing unit 16 is assumed to frequently repeat the behavior of a pedestrian walking or stopping. It is determined that a vehicle traveling in the vicinity of the person needs attention. In addition, when the movement direction of the acquired mobile terminal device 10 is suddenly changed, the processing unit 16 is estimated to behave as if the pedestrian suddenly changes the traveling direction, and thus travels in the vicinity of the pedestrian. It is determined that attention is required for the vehicle to be used. Moreover, since the processing unit 16 is estimated to be a behavior that the pedestrian starts running or is running when the acquired moving speed of the mobile terminal device 10 is suddenly decreased, the vehicle running in the vicinity of the pedestrian Is determined to require attention.

このように、処理部16は、歩行者の近傍を走行する車両にとって注意を要すると判定した場合、位置特定部12から取得された現在位置情報を車載装置20に送信するよう通信部11を制御する。   As described above, the processing unit 16 controls the communication unit 11 to transmit the current position information acquired from the position specifying unit 12 to the in-vehicle device 20 when it is determined that the vehicle traveling in the vicinity of the pedestrian needs attention. To do.

例えば、処理部16は、図2に示すように、取得した移動速度、移動方向から当該携帯端末装置10を有する歩行者が矢印MAで示されるような挙動をしていると推定した場合、この矢印MAで示される挙動には移動方向に急激な変化がみられることから、歩行者の近傍を走行する車両5にとって注意を要すると判定し、現在位置情報を車両5に搭載された車載装置20に送信するよう通信部11を制御する。   For example, as illustrated in FIG. 2, when the processing unit 16 estimates that the pedestrian having the mobile terminal device 10 behaves as indicated by the arrow MA from the acquired moving speed and moving direction, Since the behavior indicated by the arrow MA has a rapid change in the moving direction, it is determined that the vehicle 5 traveling in the vicinity of the pedestrian needs attention, and the in-vehicle device 20 in which the current position information is mounted on the vehicle 5 is determined. The communication unit 11 is controlled to transmit to

また、処理部16は、推定される歩行者の挙動が、歩行者の近傍を走行する車両にとって、どの程度の注意を要するか、つまり注意のレベルを示した注意度情報を算出する。注意度情報は、モーションセンサ15から取得した当該携帯端末装置10の移動速度、移動方向から変化の度合いを算出した情報であり、この変化の度合いが予め設定されている注意レベルのどのレベルに相当するかという注意度を示した情報である。また、注意度情報には、移動速度、移動方向のいずれかの急激な変化に基づき注意を要すると判定されたかを示す情報を添付するようにしてもよい。   Further, the processing unit 16 calculates attention level information indicating how much attention the pedestrian's estimated behavior requires for a vehicle traveling in the vicinity of the pedestrian, that is, the level of attention. The attention level information is information obtained by calculating the degree of change from the moving speed and direction of movement of the mobile terminal device 10 acquired from the motion sensor 15, and the degree of change corresponds to any of the preset attention levels. This is information indicating the degree of attention to do. Further, the attention level information may be attached with information indicating whether it is determined that attention is required based on a sudden change in either the moving speed or the moving direction.

処理部16は、歩行者の近傍を走行する車両にとって注意を要すると判定した場合、上述した現在位置情報とともに、この注意度情報を車載装置20に送信するよう通信部11を制御する。注意度情報で示される注意度は、例えば、予め10段階程度に設定されており、車載装置20に送信された場合に、車両内の乗員に通知する情報の通知タイミング、通知頻度、通知形態などを制御する際の指標として利用される。   When the processing unit 16 determines that the vehicle traveling in the vicinity of the pedestrian needs attention, the processing unit 16 controls the communication unit 11 to transmit the attention level information to the in-vehicle device 20 together with the current position information described above. The attention level indicated by the attention level information is, for example, set to about 10 levels in advance, and when transmitted to the in-vehicle device 20, the notification timing, notification frequency, notification mode, etc. of the information notified to the passenger in the vehicle It is used as an index when controlling.

処理部16は、図示しない外部装置であるセンタ装置と無線通信をすることにより、位置特定部12で取得される当該携帯端末装置10の現在位置情近傍の簡易地図情報を取得する。この簡易地図情報は、当該携帯端末装置10の処理能力を考慮して、車載装置20などで扱われる地図情報よりも情報量の少ない簡易的な地図情報である。この簡易地図情報には、少なくとも道路の幅を示す情報である道路幅情報が含まれている。   The processing unit 16 acquires simple map information in the vicinity of the current position information of the mobile terminal device 10 acquired by the position specifying unit 12 by performing wireless communication with a center device that is an external device (not shown). This simple map information is simple map information having a smaller amount of information than the map information handled by the in-vehicle device 20 or the like in consideration of the processing capability of the mobile terminal device 10. This simple map information includes at least road width information that is information indicating the width of the road.

処理部16は、通信部11を制御して、現在位置情報、注意度情報を無線通信により車載装置20に送信する際、その送信時間を制御する。具体的には、処理部16は、モーションセンサ15から取得される当該携帯端末装置10の移動速度と、当該携帯端末装置10の現在位置近傍の簡易地図情報に含まれる道路幅情報、つまり、当該携帯端末装置10の現在位置近傍に存在する道路幅情報とに基づき、この送信時間を決定する。   The processing unit 16 controls the communication unit 11 to control the transmission time when transmitting current position information and attention level information to the in-vehicle device 20 by wireless communication. Specifically, the processing unit 16 acquires the moving speed of the mobile terminal device 10 acquired from the motion sensor 15 and the road width information included in the simplified map information in the vicinity of the current position of the mobile terminal device 10, that is, This transmission time is determined based on road width information existing in the vicinity of the current position of the mobile terminal device 10.

図3に示すように、処理部16は、当該携帯端末装置10の現在位置近傍の簡易地図情報に含まれる道路幅情報のうち、GPSである位置特定部12の誤差範囲GR内で最も広い道路幅を示す道路幅情報を選択する。図3に示すようように、誤差範囲GR内の簡易地図情報には、道路幅情報として道路r1の道路幅W、道路r2の道路幅Wを規定した道路幅情報が含まれている。図3に示すように、道路幅W、道路幅Wは、W>Wとなっているため、処理部16は、道路幅Wを選択する。ここで当該携帯端末装置10の移動速度を移動速度Voとすると、処理部16は、以下に示す(1)式のようにして現在位置情報、注意度情報を送信する送信時間Tを算出する。 As shown in FIG. 3, the processing unit 16 has the widest road within the error range GR of the position specifying unit 12 that is GPS among road width information included in the simplified map information near the current position of the mobile terminal device 10. Select road width information indicating the width. As so illustrated in FIG. 3, the simple map data in the error range GR is the road width W S of the road r1 as the road width information includes road width information for defining the road width W L of the road r2. As shown in FIG. 3, the road width W S, the road width W L, since that is the W L> W S, the processing unit 16 selects the road width W L. Here, if the moving speed of the mobile terminal device 10 is a moving speed Vo, the processing unit 16 calculates a transmission time T for transmitting current position information and attention level information as shown in the following equation (1).

T=W×Vo ・ ・ ・ (1)
このように(1)式を用いて送信時間Tを算出することで、図3に示す誤差範囲GR内において、最も広い道路幅、つまり歩行者が横断するのに最も時間を要する道路幅Wの道路r2を矢印MBに示すように歩行者が横断している場合でも、道路r2を走行している車両、あるいは道路r2を走行しようとしている車両に対して、車載装置20を介して現在位置情報、注意度情報を確実に送信することができるため、注意が必要である旨を車両内の乗員に対して事前に通知することができる。
T = W L × Vo (1)
Thus, by calculating the transmission time T using the equation (1), the widest road width, that is, the road width W L that takes the longest time for a pedestrian to cross within the error range GR shown in FIG. Even when a pedestrian crosses the road r2 as indicated by the arrow MB, the current position of the vehicle traveling on the road r2 or the vehicle about to travel on the road r2 via the in-vehicle device 20 is determined. Since the information and the attention level information can be reliably transmitted, it is possible to notify the passengers in the vehicle in advance that attention is required.

また、携帯端末装置10から車載装置20に対して、無線通信により情報を送信する送信時間Tを制限することで、車載装置20で不必要な情報を受信してしまうことを回避できる。また、携帯端末装置10は、車載装置20と無線通信により情報を送信する送信時間Tを制限することで、消費電力を大幅に削減することができる。   Further, by limiting the transmission time T for transmitting information from the mobile terminal device 10 to the in-vehicle device 20 by wireless communication, it is possible to avoid receiving unnecessary information in the in-vehicle device 20. Moreover, the portable terminal device 10 can significantly reduce power consumption by limiting the transmission time T during which information is transmitted by wireless communication with the in-vehicle device 20.

また、処理部16は、図示しないメモリに記憶されている当該携帯端末装置10を有する歩行者を特定する属性情報に応じて、(1)式で算出された送信時間Tを変化させるようにしてもよい。歩行者を特定する属性情報とは、例えば、性別や年齢といったユーザ固有の情報であり、携帯端末装置10の購入時にシステム管理者によって登録されるか、ユーザ自身によって登録されることになる。この携帯端末装置10の図示しないメモリへの属性情報の登録処理は、ユーザの希望に応じて任意に実行されるため、必ずしも携帯端末装置10に登録されているとは限らない。   Further, the processing unit 16 changes the transmission time T calculated by the expression (1) according to the attribute information specifying the pedestrian having the mobile terminal device 10 stored in a memory (not shown). Also good. The attribute information that identifies the pedestrian is information unique to the user such as gender and age, for example, and is registered by the system administrator at the time of purchase of the mobile terminal device 10 or by the user himself / herself. Since the registration process of the attribute information in the memory (not shown) of the mobile terminal device 10 is arbitrarily executed according to the user's desire, it is not necessarily registered in the mobile terminal device 10.

処理部16は、図示しないメモリに属性情報が記憶されている場合、この属性情報に応じて送信時間Tを変化させる。例えば、属性情報から当該携帯端末装置10を有している歩行者が、子供や高齢者であると判断できる場合、処理部16は、(1)式を用いて算出された送信時間Tを長くなるように制御する。このように、突発的に変化する動作をするため挙動が不安定となりがちな子供や、動作の機敏でない高齢者の現在位置情報を送信する送信時間Tを長くすることで、車載装置20を搭載した車両内の乗員に対して注意喚起を行う時間も長くなることから、注意が必要であると推定される挙動に確実に対処するよう促すことができる。   When attribute information is stored in a memory (not shown), the processing unit 16 changes the transmission time T according to the attribute information. For example, when it can be determined from the attribute information that the pedestrian having the mobile terminal device 10 is a child or an elderly person, the processing unit 16 increases the transmission time T calculated using the equation (1). Control to be. As described above, the vehicle-mounted device 20 is installed by increasing the transmission time T for transmitting the current position information of a child whose behavior tends to become unstable due to a suddenly changing motion or an elderly person who is not agile. Since the time for alerting the occupant in the vehicle becomes longer, it is possible to promptly cope with the behavior estimated to require attention.

特に、属性情報から当該携帯端末装置10を有している歩行者が、高齢者であると判断できる場合には、処理部16は、(1)式を用いて算出された送信時間Tをより長くなるように制御する。これにより、他の歩行者と比較して、動作の制約や視覚の衰えなどから周辺状況を把握することが困難であると推定される高齢者に配慮した送信時間Tとすることができる。   In particular, when the pedestrian having the mobile terminal device 10 can be determined to be an elderly person from the attribute information, the processing unit 16 uses the transmission time T calculated using the expression (1). Control to be longer. Thereby, compared with other pedestrians, it can be set as the transmission time T which considered the elderly who are estimated that it is difficult to grasp | ascertain a surrounding condition from the restrictions of operation | movement, a visual decline, etc. FIG.

なお、(1)式を用いて算出される送信時間Tは、あくまでも一つの送信時間の目安となる基準の時間であり、処理部16は、例えば、移動速度、移動方向などから当該携帯端末装置10を有する歩行者が、歩行者の近傍を走行する車両にとって注意が必要であると継続して判定している場合には、送信時間Tに限定されることなく、通信部11を制御して現在位置情報、注意度情報を車載装置20に送信する。   Note that the transmission time T calculated using the equation (1) is only a reference time that serves as a reference for one transmission time, and the processing unit 16 determines the mobile terminal device from the moving speed, the moving direction, and the like, for example. When the pedestrian having 10 continuously determines that the vehicle traveling in the vicinity of the pedestrian needs attention, the communication unit 11 is controlled without being limited to the transmission time T. Current position information and attention level information are transmitted to the in-vehicle device 20.

また、処理部16は、モーションセンサ15で検出された移動速度、移動方向から推定した当該携帯端末装置10を有する歩行者の挙動が、歩行者の近傍を走行する車両に対して、歩行者の意思を示す特徴的な動作であるかどうかを判定する。歩行者の意思を示す特徴的な動作としては、例えば、道路を横断する際に歩行者によって一般的になされる“手をあげる”という動作がある。一般に歩行者が、手をあげる動作をした場合、道路を横断する意思があるとみなせるため、処理部16は、上述したように推定した歩行者の挙動から、図4に示す矢印MCのように、下方から上方へと手をあげるといった歩行者の意思を示す特徴的な動作がなされたと判定した場合、現在位置情報を車載装置20に送信するよう通信部11を制御する。   In addition, the processing unit 16 is configured such that the behavior of the pedestrian having the mobile terminal device 10 estimated from the moving speed and the moving direction detected by the motion sensor 15 is compared with a vehicle traveling in the vicinity of the pedestrian. It is determined whether or not it is a characteristic action indicating intention. As a characteristic operation indicating the intention of a pedestrian, for example, there is an operation of “raising a hand” which is generally performed by a pedestrian when crossing a road. In general, when the pedestrian raises his hand, it can be considered that he / she intends to cross the road. Therefore, the processing unit 16 determines the behavior of the pedestrian estimated as described above as indicated by an arrow MC shown in FIG. When it is determined that a characteristic action indicating the intention of the pedestrian, such as raising his hand from the bottom to the top, has been performed, the communication unit 11 is controlled to transmit the current position information to the in-vehicle device 20.

このとき、処理部16は、通信部11を制御して、現在位置情報を無線通信により車載装置20に送信する送信時間を、歩行者が手をあげている状態が継続されている時間、つまり、歩行者が道路を横断していると推定される時間に制限することで、車載装置20で不必要な情報を受信してしまうことを回避できる。また、携帯端末装置10は、車載装置20と無線通信により情報を送信する送信時間を制限することで、消費電力を大幅に削減することができる。   At this time, the processing unit 16 controls the communication unit 11 to transmit the transmission time for transmitting the current position information to the in-vehicle device 20 by wireless communication, that is, the time during which the state where the pedestrian is raising his / her hand, that is, By limiting to the time when it is estimated that the pedestrian is crossing the road, it is possible to avoid receiving unnecessary information by the in-vehicle device 20. Moreover, the portable terminal device 10 can significantly reduce power consumption by limiting the transmission time for transmitting information by wireless communication with the in-vehicle device 20.

このように、処理部16は、歩行者の近傍を走行する車両に対して、歩行者の意思を示す特徴的な動作がなされたと判定されたことに応じて、現在位置情報を車載装置20に送信するため、車載装置20を搭載した車両内の乗員に、何らかの挙動を示すであろう歩行者の存在を明確に通知することができる。特に体の小さい子供など、車両内から視認しにくい歩行者に対して有効となる。   In this way, the processing unit 16 sends the current position information to the in-vehicle device 20 in response to determining that a characteristic operation indicating the intention of the pedestrian has been performed on the vehicle traveling in the vicinity of the pedestrian. Since it transmits, the passenger | crew in the vehicle carrying the vehicle-mounted apparatus 20 can be notified clearly of the presence of the pedestrian who will show some behavior. This is particularly effective for pedestrians who are difficult to see from inside the vehicle, such as small children.

次に、車載装置20について説明をする。車載装置20は、携帯端末装置10と無線通信を行う通信部21と、位置特定部22と、車両内の乗員によって操作される操作部23と、処理部24と、表示部25と、音響信号を増幅して出力するアンプ、スピーカなどである音響出力部26とを備えている。車載装置20は、移動体である車両に搭載され、車両の現在位置を検出し、地図データから描画された車両の現在位置に対応する地図を表示しながら、所望の目的地までの経路案内をする、例えば、ナビゲーション装置などである。   Next, the in-vehicle device 20 will be described. The in-vehicle device 20 includes a communication unit 21 that performs wireless communication with the mobile terminal device 10, a position specifying unit 22, an operation unit 23 that is operated by a passenger in the vehicle, a processing unit 24, a display unit 25, and an acoustic signal. And an acoustic output unit 26 that is a speaker or the like. The in-vehicle device 20 is mounted on a vehicle that is a moving body, detects the current position of the vehicle, displays a map corresponding to the current position of the vehicle drawn from the map data, and provides route guidance to a desired destination. For example, a navigation device or the like.

位置特定部22は、いわゆるGPSを有し、処理部24の制御に応じて、GPS衛星から送信される信号をGPSアンテナで受信することで、GPS航法による位置計測を行い、当該車載装置20が搭載された移動体である車両の絶対位置(緯度、経度)情報を求める。また、位置特定部22は、図示しない距離センサから出力された走行距離情報、図示しない方位センサから出力された進行方位情報に基づいて、自律航法による車両の相対位置を求める。   The position specifying unit 22 has a so-called GPS, and receives a signal transmitted from a GPS satellite by a GPS antenna in accordance with the control of the processing unit 24, thereby performing position measurement by GPS navigation. The absolute position (latitude, longitude) information of the vehicle that is the mounted moving body is obtained. Further, the position specifying unit 22 obtains the relative position of the vehicle by autonomous navigation based on the travel distance information output from a distance sensor (not shown) and the traveling direction information output from an orientation sensor (not shown).

さらに、位置特定部22は、上述した絶対位置(緯度、経度)情報と、相対位置情報とから、当該車載装置20が搭載された車両の地図上における位置を算出する。算出された車両の現在位置情報は、処理部24に出力される。   Further, the position specifying unit 22 calculates the position on the map of the vehicle on which the in-vehicle device 20 is mounted from the absolute position (latitude, longitude) information and the relative position information. The calculated current position information of the vehicle is output to the processing unit 24.

処理部24は、当該車載装置20を統括的に制御する制御手段である。処理部24は、位置特定部22から出力された現在位置情報に基づいて、対応する地図情報、道路情報など、ナビゲーションに必要となる各種情報を図示しない記憶部から読み出したり、図示しない外部装置であるセンタ装置などから無線通信により取得するよう制御する。   The processing unit 24 is a control unit that comprehensively controls the in-vehicle device 20. Based on the current position information output from the position specifying unit 22, the processing unit 24 reads various information necessary for navigation, such as corresponding map information and road information, from a storage unit (not shown) or by an external device (not shown). Control is performed so as to obtain wireless communication from a certain center device or the like.

また、処理部24は、ユーザによって入力される目的地と、現在位置情報とを用いて、現在位置から目的地までの最適な走行経路を提示して目的地の近傍領域までの経路案内(ナビゲーション)をするルートガイダンスを行う。このとき、処理部24は、音響出力部26を制御して、音声によるナビゲーションを実行することもできる。   Further, the processing unit 24 presents an optimal travel route from the current position to the destination using the destination input by the user and the current position information, and provides route guidance (navigation) to the vicinity area of the destination. ) To provide route guidance. At this time, the processing unit 24 can also control the sound output unit 26 to execute voice navigation.

さらに、処理部24は、表示部25に表示させる表示画像を生成する。例えば、処理部24は、表示画像としてナビゲーション用の地図を生成したり、さらに、携帯端末装置10から無線通信により取得した現在位置情報を付加した表示画像を生成し表示させる。   Further, the processing unit 24 generates a display image to be displayed on the display unit 25. For example, the processing unit 24 generates a map for navigation as a display image, and further generates and displays a display image to which current position information acquired from the mobile terminal device 10 by wireless communication is added.

また、処理部24は、音響出力部26から出力させる音響信号を生成する。例えば、処理部24は、表示部25に表示させる携帯端末装置10から無線通信により取得した現在位置情報を付加した表示画像に連動して音響出力部26から出力させる車両内の乗員に注意喚起を促す音響信号を生成する。   Further, the processing unit 24 generates an acoustic signal to be output from the acoustic output unit 26. For example, the processing unit 24 alerts an occupant in the vehicle to output from the sound output unit 26 in conjunction with the display image to which the current position information acquired by wireless communication from the mobile terminal device 10 to be displayed on the display unit 25 is added. Produce an acoustic signal to prompt.

また、処理部24は、携帯端末装置10から無線通信により現在位置情報の他に注意度情報も取得した場合には、注意度情報で示される注意度に基づき、表示部25、音響出力部26を介して車両内の乗員に通知する現在位置情報の通知タイミング、通知頻度、通知形態を制御する。   Further, when acquiring the attention level information in addition to the current position information from the mobile terminal device 10 by wireless communication, the processing unit 24 displays the display unit 25 and the sound output unit 26 based on the attention level indicated by the attention level information. The notification timing, notification frequency, and notification form of the current position information notified to the passengers in the vehicle are controlled.

処理部24は、注意度情報で示される注意度が高い場合には、通知する現在位置情報の通知タイミングを早め、通知頻度を多くするように制御する。また、処理部24は、表示部25に表示させる現在位置情報の表示形態を強調するように制御し、音響出力部26から出力させる注意喚起を強調するよう制御する。処理部24は、逆に、注意度情報で示される注意度が低い場合には、通知する情報の通知タイミングを遅め、通知頻度を少なくするよう制御する。また、処理部24は、表示部25に表示させる現在位置情報の表示形態の強調を抑制するように制御し、音響出力部26から出力させる注意喚起の強調を抑制するよう制御する。   When the attention level indicated by the attention level information is high, the processing unit 24 controls to notify the current position information to be notified earlier and increase the notification frequency. In addition, the processing unit 24 performs control so as to emphasize the display form of the current position information displayed on the display unit 25 and controls to emphasize the alert that is output from the sound output unit 26. Conversely, when the attention level indicated by the attention level information is low, the processing unit 24 controls to delay the notification timing of the information to be notified and reduce the notification frequency. In addition, the processing unit 24 controls to suppress the emphasis on the display form of the current position information displayed on the display unit 25 and controls to suppress the emphasis on the alerting to be output from the sound output unit 26.

また、処理部24は、携帯端末装置10から送信される注意度情報に移動速度、移動方向のいずれかの急激な変化に基づき注意を要すると判定されたかを示す情報が添付されている場合、移動速度に急激な変化があったのか、移動方向に急激な変化があったのかを一瞥して視認できるような表示形態で表示させるように制御する。   In addition, when the processing unit 24 includes information indicating whether it is determined that attention is required based on a sudden change in either the moving speed or the moving direction in the attention level information transmitted from the mobile terminal device 10, Control is performed so as to display in a display form that allows a quick glance at whether there is a sudden change in the moving speed or a sudden change in the moving direction.

例えば、処理部24は、移動速度に急激な変化があった場合には、歩行者が急に走り出したとして該当する現在位置情報の表示色を赤色にしたり、移動方向に急激な変化があった場合には、歩行者が急に進行方向を変えたとして該当する現在位置情報の表示色をオレンジ色にしたりすることで、移動速度に急激な変化があったのか、移動方向に急激な変化があったのかを一瞥して視認できるような表示形態で表示させるように制御する。   For example, when there is a sudden change in the moving speed, the processing unit 24 changes the display color of the current current position information to red as the pedestrian starts running suddenly, or there is a sudden change in the moving direction. In this case, if the pedestrian suddenly changes the direction of travel, the display color of the corresponding current position information is changed to orange, so that there is a sudden change in the moving speed or a sudden change in the moving direction. The display is controlled so that it can be seen at a glance.

また、例えば、処理部24は、移動速度に急激な変化があったのか、移動方向に急激な変化があったのかに応じて、該当する現在位置情報の大きさ自体を変える(一方を大きく、他方を小さく)ことで、移動速度に急激な変化があったのか、移動方向に急激な変化があったのかを一瞥して視認できるような表示形態で表示させるように制御する。   Further, for example, the processing unit 24 changes the size of the corresponding current position information itself depending on whether there is a sudden change in the moving speed or a sudden change in the moving direction (one is increased, By making the other smaller, the display is controlled so that it can be viewed at a glance whether there is a sudden change in the moving speed or a sudden change in the moving direction.

この通知する情報の通知タイミング、通知頻度、通知形態は、必ずしも携帯端末装置10から送信される注意度情報で示される注意度に1対1で対応して制御されるばかりではなく、操作部23を介したユーザによる操作によって任意に設定を変更することで、車両内の乗員にとって最適と思われる通知タイミング、通知頻度、通知形態へと変更することができる。例えば、携帯端末装置10側で10段階に注意度が設定されていたとしても、車載装置20において、操作部23を介したユーザによる操作によって3段階に設定変更すれば、携帯端末装置10から送信される注意度情報で示される10段階の注意度を、処理部24によって、自動的に3段階の注意度へと振り分けられ、各注意度に応じた通知タイミング、通知頻度、通知形態となるように制御される。   The notification timing, the notification frequency, and the notification form of the information to be notified are not necessarily controlled in one-to-one correspondence with the attention level indicated by the attention level information transmitted from the mobile terminal device 10, but also the operation unit 23. By arbitrarily changing the setting by an operation by the user via the vehicle, it is possible to change to a notification timing, a notification frequency, and a notification form that are considered optimal for the passenger in the vehicle. For example, even if the attention level is set to 10 levels on the mobile terminal device 10 side, if the setting is changed to 3 levels by an operation by the user via the operation unit 23 in the in-vehicle device 20, transmission is performed from the mobile terminal device 10. The 10 levels of caution indicated by the level of caution level information are automatically assigned to 3 levels of caution by the processing unit 24 so that the notification timing, notification frequency, and notification form according to each level of caution are obtained. Controlled.

このように、情報を通知される側である車載装置20が搭載された車両内の乗員の要求に応じて、通知される情報の通知タイミング、通知頻度、通知形態を調節することができるため、携帯端末装置10側で一意に指定された注意度を単純に反映させるだけでなく、ドライバが所望する通知タイミング、通知頻度、通知形態とすることができるため、ユーザの利便性、嗜好性を向上させることができる。   In this way, according to the request of the occupant in the vehicle on which the in-vehicle device 20 on which information is notified is mounted, the notification timing, notification frequency, and notification form of the information to be notified can be adjusted. In addition to simply reflecting the attention level uniquely specified on the mobile terminal device 10 side, the notification timing, notification frequency, and notification form desired by the driver can be set, thereby improving user convenience and preference. Can be made.

表示部25は、処理部24によって生成された表示画像を表示する表示手段である。表示部25は、液晶ディスプレイなどであり、ユーザから視認し易い位置、例えば、主に運転者に視認し易い位置に設置される。また、表示部25の表示パネルは、タッチパネルになっていてもよい。   The display unit 25 is a display unit that displays the display image generated by the processing unit 24. The display unit 25 is a liquid crystal display or the like, and is installed at a position that is easily visible to the user, for example, a position that is mainly easily visible to the driver. Moreover, the display panel of the display unit 25 may be a touch panel.

続いて、図5に示すフローチャートを用いて、携帯端末装置10の処理動作について説明をする。   Next, the processing operation of the mobile terminal device 10 will be described using the flowchart shown in FIG.

ステップS1において、処理部16は、電源がオン(ON)状態となったかどうか判断し、オン状態となった場合には、ステップS2へと処理を進める一方、オン状態となっていない場合には、待機状態を継続する。   In step S1, the processing unit 16 determines whether or not the power supply is turned on (ON). When the processing unit 16 is turned on, the process proceeds to step S2, while when the power is not turned on. Continue the standby state.

ステップS2において、処理部16は、位置特定部12を制御してGPS衛星との無線通信により緯度、経度情報である、当該携帯端末装置10の現在位置情報を取得する。GPS衛星との無線通信は、当該携帯端末装置10の存在位置をロストしない程度の周期とし、当該携帯端末装置10の消費電力をできるだけ制限するようにする。   In step S <b> 2, the processing unit 16 controls the position specifying unit 12 to acquire current position information of the mobile terminal device 10 that is latitude and longitude information through wireless communication with a GPS satellite. In the wireless communication with the GPS satellite, the position where the mobile terminal device 10 is located is set to a period that does not cause the mobile terminal device 10 to be lost, and the power consumption of the mobile terminal device 10 is limited as much as possible.

ステップS3において、処理部16は、モーションセンサ15で検出される移動速度、移動方向を取得し、取得した移動速度、移動方向から当該携帯端末装置10を有する歩行者の挙動を推定する。   In step S <b> 3, the processing unit 16 acquires the moving speed and moving direction detected by the motion sensor 15, and estimates the behavior of the pedestrian having the portable terminal device 10 from the acquired moving speed and moving direction.

ステップS4において、処理部16は、ステップS3で推定された歩行者の挙動が歩行者の近傍を走行する車両にとって注意を要するかどうかを判定する。処理部16は、歩行者の挙動が注意を要すると判定した場合、ステップS5へと処理を進める一方、歩行者の挙動が注意を要さないと判定した場合、ステップS2へと処理を戻す。   In step S4, the processing unit 16 determines whether or not the behavior of the pedestrian estimated in step S3 requires attention for a vehicle traveling in the vicinity of the pedestrian. If the processing unit 16 determines that the behavior of the pedestrian requires attention, the processing unit 16 proceeds to step S5. On the other hand, if the processing unit 16 determines that the behavior of the pedestrian does not require attention, the processing unit 16 returns the processing to step S2.

ステップS5において、処理部16は、位置履歴記憶部13を参照し、当該携帯端末装置10の現在位置情報に対応する簡易地図情報が簡易地図記憶部14に記憶されているかどうかを判断する。そして、処理部16は、簡易地図記憶部14に該当する簡易地図情報が記憶されている場合、この簡易地図情報に含まれる道路幅情報を参照し、最も広い道路幅の道路幅情報を取得する。   In step S <b> 5, the processing unit 16 refers to the position history storage unit 13 and determines whether or not simple map information corresponding to the current position information of the mobile terminal device 10 is stored in the simple map storage unit 14. And when the simple map information applicable to the simple map memory | storage part 14 is memorize | stored, the process part 16 refers to the road width information contained in this simple map information, and acquires the road width information of the widest road width. .

ステップS6において、処理部16は、ステップS3で取得された移動速度と、ステップS5で取得された道路幅情報で規定された道路幅とから、上述した(1)式を用いて、送信時間Tを算出する。   In step S6, the processing unit 16 uses the above equation (1) to calculate the transmission time T from the movement speed acquired in step S3 and the road width specified by the road width information acquired in step S5. Is calculated.

ステップS7において、処理部16は、通信部11を制御して車載装置20へとアクセスし、車載装置20との接続状態を確立する。そして、処理部16は、通信部11を制御して、ステップS2で取得した現在位置情報を無線通信により車載装置20へと送信する。なお、処理部16は、車載装置20との無線通信が開始されると、図示しないタイマによる計時を開始する。   In step S <b> 7, the processing unit 16 controls the communication unit 11 to access the in-vehicle device 20 and establish a connection state with the in-vehicle device 20. And the process part 16 controls the communication part 11, and transmits the present position information acquired by step S2 to the vehicle-mounted apparatus 20 by radio | wireless communication. Note that when the wireless communication with the in-vehicle device 20 is started, the processing unit 16 starts measuring time by a timer (not shown).

ステップS8において、処理部16は、図示しないタイマで計時されている時間が、ステップS6で算出された送信時間T経過したかどうかを判断する。処理部16は、図示しないタイマで計時されている時間が送信時間Tを経過した場合にはステップS9へと処理を進める一方、送信時間Tを経過していない場合にはステップS7へと処理を戻す。   In step S8, the processing unit 16 determines whether or not the time counted by a timer (not shown) has passed the transmission time T calculated in step S6. The processing unit 16 advances the process to step S9 when the time counted by a timer (not shown) has passed the transmission time T, and proceeds to step S7 when the transmission time T has not passed. return.

ステップS9において、処理部16は、図示しないタイマで計時されている時間が、送信時間T経過したことに応じて、車載装置20との無線通信を終了する。   In step S <b> 9, the processing unit 16 ends the wireless communication with the in-vehicle device 20 when the time counted by a timer (not shown) has elapsed the transmission time T.

このように、本発明の実施の形態として示す情報通知システムの携帯端末装置10は、処理部16によって、当該携帯端末装置10の移動速度、移動方向から歩行者の挙動を推定し、推定した歩行者の挙動から、歩行者の近傍を走行する車両にとって注意を要する挙動であるかを判定する。そして、処理部16は、注意を要すると判定した場合に、車載装置20との無線通信を開始して現在位置情報を送信するよう制御する。   As described above, the mobile terminal device 10 of the information notification system shown as the embodiment of the present invention uses the processing unit 16 to estimate the pedestrian's behavior from the moving speed and the moving direction of the mobile terminal device 10, and the estimated walking It is determined from the behavior of the person whether or not the vehicle is a behavior that requires attention for a vehicle traveling in the vicinity of the pedestrian. Then, when it is determined that attention is required, the processing unit 16 controls to start wireless communication with the in-vehicle device 20 and transmit the current position information.

これにより、携帯端末装置10から必要な情報だけが、車両に搭載された車載装置20に送信されるため、車載装置20の処理部24の演算処理負荷を低減させることができる。また、注意を要するかどうかの判定を携帯端末装置10の処理部16で実行してから現在位置情報を車載装置20に送信するため、車載装置20は、現在位置情報を取得してからすぐに注意を要する旨を通知することができるため、車両内の乗員に対して迅速な注意喚起を行うことができる。   Thereby, since only the necessary information is transmitted from the mobile terminal device 10 to the in-vehicle device 20 mounted on the vehicle, the calculation processing load of the processing unit 24 of the in-vehicle device 20 can be reduced. Further, since the current position information is transmitted to the in-vehicle device 20 after the processing unit 16 of the mobile terminal device 10 determines whether or not attention is required, the in-vehicle device 20 immediately acquires the current position information. Since it is possible to notify that attention is required, it is possible to promptly alert an occupant in the vehicle.

次に、図6に示すフローチャートを用いて、携帯端末装置10の別な処理動作について説明をする。図6に示すフローチャートでは、携帯端末装置10の処理部16で、注意度情報を算出する場合における処理動作について説明をする。   Next, another processing operation of the mobile terminal device 10 will be described using the flowchart shown in FIG. In the flowchart shown in FIG. 6, the processing operation when the processing unit 16 of the mobile terminal device 10 calculates the attention level information will be described.

なお、図6に示すフローチャートは、図5に示すフローチャートのステップS3とステップS4との間にステップS10を挿入し、ステップS7に換えてステップS7Aとしただけであるので、同一の処理ステップについては、同一のステップ番号を付し説明を省略する。   In the flowchart shown in FIG. 6, only step S10 is inserted between step S3 and step S4 in the flowchart shown in FIG. 5 and step S7A is replaced with step S7A. The same step number is assigned and the description is omitted.

ステップS10において、携帯端末装置10の処理部16は、ステップS3で推定された歩行者の挙動が、歩行者の近傍を走行する車両にとって、どの程度の注意を要するか、つまり注意のレベルを示した注意度情報を算出する。   In step S10, the processing unit 16 of the mobile terminal device 10 indicates how much attention the pedestrian's behavior estimated in step S3 requires for the vehicle traveling in the vicinity of the pedestrian, that is, the level of attention. Attention level information is calculated.

ステップS7Aにおいて、処理部16は、通信部11を制御して車載装置20へとアクセスし、車載装置20との接続状態を確立する。そして、処理部16は、通信部11を制御して、ステップS2で取得した現在位置情報と、ステップS10で算出した注意度情報を無線通信により車載装置20へと送信する。なお、処理部16は、車載装置20との無線通信が開始されると、図示しないタイマによる計時を開始する。   In step S <b> 7 </ b> A, the processing unit 16 controls the communication unit 11 to access the in-vehicle device 20 and establish a connection state with the in-vehicle device 20. Then, the processing unit 16 controls the communication unit 11 to transmit the current position information acquired in step S2 and the attention level information calculated in step S10 to the in-vehicle device 20 by wireless communication. Note that when the wireless communication with the in-vehicle device 20 is started, the processing unit 16 starts measuring time by a timer (not shown).

このように、本発明の実施の形態として示す情報通知システムの携帯端末装置10は、処理部16によって、推定された歩行者の挙動が、歩行者の近傍を走行する車両にとって、どの程度の注意を要するか、つまり注意のレベルを示した注意度情報を算出し、注意を要すると判定した場合に、車載装置20との無線通信を開始して現在位置情報とともに注意度情報を送信するよう制御する。   As described above, the mobile terminal device 10 of the information notification system shown as the embodiment of the present invention has a pedestrian's behavior estimated by the processing unit 16 to what degree of attention to a vehicle traveling in the vicinity of the pedestrian. Control, that is, attention level information indicating the level of attention is calculated, and when it is determined that attention is required, control is performed to start wireless communication with the in-vehicle device 20 and transmit the attention level information together with the current position information. To do.

これにより、注意度情報を受信した車載装置20において、処理部24により、注意度情報で示される注意度に基づき、表示部25、音響出力部26を介して車両内の乗員に通知する現在位置情報の通知タイミング、通知頻度、通知形態を制御することができるため、車両内の乗員に対して注意度に応じて的確な注意喚起を行うことができる。   Thus, in the in-vehicle device 20 that has received the attention level information, the processing unit 24 notifies the occupant in the vehicle via the display unit 25 and the sound output unit 26 based on the attention level indicated by the attention level information. Since it is possible to control the information notification timing, the notification frequency, and the notification form, it is possible to appropriately alert the passengers in the vehicle according to the attention level.

次に、図7に示すフローチャートを用いて、車載装置20の処理動作について説明をする。   Next, the processing operation of the in-vehicle device 20 will be described using the flowchart shown in FIG.

ステップS11において、車載装置20の処理部24は、携帯端末装置10から送信された情報(現在位置情報、注意度情報)を無線通信を介して受信したかどうかを判断する。処理部24は、携帯端末装置10から送信された情報を受信した場合、ステップS12へと処理を進める一方、受信していない場合、ステップS11へと処理を戻し、情報の受信待機状態を継続する。   In step S <b> 11, the processing unit 24 of the in-vehicle device 20 determines whether information (current position information, attention level information) transmitted from the mobile terminal device 10 has been received via wireless communication. When the information transmitted from the mobile terminal device 10 is received, the processing unit 24 proceeds to step S12. If not received, the processing unit 24 returns to step S11 and continues the information reception standby state. .

ステップS12において、処理部24は、受信した情報に基づき、車両内の乗員に対して注意喚起を促す処理を実行する。   In step S <b> 12, the processing unit 24 executes a process for prompting a passenger in the vehicle to call attention based on the received information.

処理部24は、現在位置情報のみを受信した場合、表示部25を介して現在位置情報を表示させ、音響出力部26から注意喚起を促す音響信号を出力する。また、処理部24は、注意度情報も受信した場合、注意度情報で示される注意度に基づき、表示部25、音響出力部26を介して車両内の乗員に通知する現在位置情報の通知タイミング、通知頻度、通知形態を制御する。   When only the current position information is received, the processing unit 24 displays the current position information via the display unit 25, and outputs an acoustic signal that prompts attention from the acoustic output unit 26. In addition, when the attention level information is also received, the processing unit 24 notifies the passenger in the vehicle of the current position information via the display unit 25 and the sound output unit 26 based on the attention level indicated by the attention level information. , Control notification frequency and notification form.

このように、本発明の実施の形態として示す情報通知システムの車載装置20には、注意を要するかどうかの判定を携帯端末装置10で実行されてから現在位置情報が送信されるため、車載装置20の処理部24は、現在位置情報を取得してからすぐに注意を要する旨を通知することができるため、車両内の乗員に対して迅速な注意喚起を行うことができる。   As described above, since the current position information is transmitted to the in-vehicle device 20 of the information notification system shown as the embodiment of the present invention after the mobile terminal device 10 determines whether or not attention is required, the in-vehicle device. Since the 20 processing units 24 can notify that attention is required immediately after acquiring the current position information, it is possible to promptly alert the passengers in the vehicle.

また、現在位置情報とともに注意度情報を受信した場合、車載装置20の処理部24は、車両内の乗員に対して注意度情報で示される注意度に応じて的確な注意喚起を行うことができる。   Further, when the attention level information is received together with the current position information, the processing unit 24 of the in-vehicle device 20 can appropriately alert the passenger in the vehicle according to the attention level indicated by the attention level information. .

なお、上述の実施の形態は本発明の一例である。このため、本発明は、上述の実施形態に限定されることはなく、この実施の形態以外であっても、本発明に係る技術的思想を逸脱しない範囲であれば、設計等に応じて種々の変更が可能であることは勿論である。   The above-described embodiment is an example of the present invention. For this reason, the present invention is not limited to the above-described embodiment, and various modifications can be made depending on the design and the like as long as the technical idea according to the present invention is not deviated from this embodiment. Of course, it is possible to change.

本発明の実施の形態として示す情報通知システムの構成について説明するための図である。It is a figure for demonstrating the structure of the information notification system shown as embodiment of this invention. 前記情報通知システムの携帯端末装置によって歩行者の挙動に注意判定がなされ、車載装置と無線通信される様子を示した図である。It is the figure which showed a mode that attention determination was made | formed by the portable terminal device of the said information notification system, and radio | wireless communication with a vehicle-mounted apparatus is carried out. 前記携帯端末装置と前記車載装置との無線通信による情報の送信時間を算出する手法について説明するための図である。It is a figure for demonstrating the method of calculating the transmission time of the information by radio | wireless communication with the said portable terminal device and the said vehicle-mounted apparatus. 前記携帯端末装置を有する歩行者の挙動が、歩行者の近傍を走行する車両に対して、歩行者の意思を示す特徴的な動作である場合に、前記車載装置との無線通信がなされることについて説明するための図である。When the behavior of the pedestrian having the portable terminal device is a characteristic operation indicating the intention of the pedestrian with respect to a vehicle traveling in the vicinity of the pedestrian, wireless communication with the in-vehicle device is performed. It is a figure for demonstrating. 前記情報通知システムの携帯端末装置の処理動作について説明するためのフローチャートである。It is a flowchart for demonstrating the processing operation of the portable terminal device of the said information notification system. 前記情報通知システムの携帯端末装置の別な処理動作について説明するためのフローチャートである。It is a flowchart for demonstrating another process operation | movement of the portable terminal device of the said information notification system. 前記情報通知システムの車載装置の処理動作について説明するためのフローチャートである。It is a flowchart for demonstrating the processing operation of the vehicle-mounted apparatus of the said information notification system.

符号の説明Explanation of symbols

10 携帯端末装置
11 通信部
12 位置特定部
13 位置履歴記憶部
14 簡易地図記憶部
15 モーションセンサ
16 処理部
20 車載装置
21 通信部
23 操作部
24 処理部
25 表示部
26 音響出力部
DESCRIPTION OF SYMBOLS 10 Portable terminal device 11 Communication part 12 Position specific | specification part 13 Position history memory | storage part 14 Simple map memory | storage part 15 Motion sensor 16 Processing part 20 Car-mounted apparatus 21 Communication part 23 Operation part 24 Processing part 25 Display part 26 Sound output part

Claims (9)

歩行者が有する携帯端末装置と、前記携帯端末装置との無線通信により取得される情報を車両内の乗員に通知する車両に搭載された車載装置とを備える情報通知システムにおいて、
前記携帯端末装置は、
当該携帯端末装置が存在する現在の位置を特定する現在位置情報を取得する現在位置情報取得手段と、
当該携帯端末装置の移動速度、移動方向を検出する移動速度・移動方向検出手段と、
前記移動速度・移動方向検出手段によって検出される移動速度、移動方向から推定される当該携帯端末装置を有する歩行者の挙動が、前記歩行者の近傍を走行する車両にとって、注意を要するかどうかを判定する注意挙動判定手段と、
前記注意挙動判定手段によって注意を要すると判定されたことに応じて、前記現在位置情報取得手段によって取得された現在位置情報を無線通信により前記車載装置に送信するよう制御し、前記注意挙動判定手段によって注意を要すると判定されたことに応じて、前記車載装置との無線通信により情報を送信する送信時間を、前記移動速度・移動方向検出手段によって検出される当該携帯端末装置の移動速度と、当該携帯端末装置の現在位置近傍に存在する道路の道路幅とに基づき決定する送信制御手段とを有すること
を特徴とする情報通知システム。
In an information notification system comprising a mobile terminal device possessed by a pedestrian and an in-vehicle device mounted on a vehicle for notifying an occupant in the vehicle of information acquired by wireless communication with the mobile terminal device,
The portable terminal device
Current position information acquisition means for acquiring current position information for specifying the current position where the mobile terminal device exists;
A moving speed / moving direction detecting means for detecting a moving speed and a moving direction of the mobile terminal device;
Whether the behavior of the pedestrian having the mobile terminal device estimated from the moving speed and moving direction detected by the moving speed / moving direction detecting means requires attention for a vehicle traveling in the vicinity of the pedestrian. Attention behavior determination means for determining;
When the attention behavior determining means determines that attention is required, the current position information acquired by the current position information acquisition means is controlled to be transmitted to the in-vehicle device by wireless communication , and the attention behavior determination means , The mobile terminal device's moving speed detected by the moving speed / moving direction detecting means, the transmission time for transmitting information by wireless communication with the in-vehicle device, An information notification system comprising: a transmission control unit that determines based on a road width of a road existing in the vicinity of the current position of the mobile terminal device .
前記携帯端末装置は、
前記注意挙動判定手段によって推定される歩行者の挙動が、前記歩行者の近傍を走行する車両にとって、どの程度の注意を要するかを示した注意度情報を算出する注意度情報算出手段を有し、
前記送信制御手段は、前記注意挙動判定手段によって注意を要すると判定されたことに応じて、前記注意度情報算出手段によって算出された注意度情報を無線通信により前記車載装置に送信するよう制御すること
を特徴とする請求項1記載の情報通知システム。
The portable terminal device
Attention level information calculating means for calculating attention level information indicating how much attention the pedestrian's behavior estimated by the attentive behavior determination means requires for a vehicle traveling in the vicinity of the pedestrian ,
The transmission control unit controls the attention level information calculated by the attention level information calculation unit to be transmitted to the in-vehicle device by wireless communication when it is determined that the attention behavior determination unit needs attention. The information notification system according to claim 1, wherein:
前記携帯端末装置の注意挙動判定手段は、
前記移動速度・移動方向検出手段によって検出される当該携帯端末装置の移動速度が頻発して変化した場合、
前記移動速度・移動方向検出手段によって検出される当該携帯端末装置の移動方向が急激に変化した場合、
または前記移動速度・移動方向検出手段によって検出される当該携帯端末装置の移動速度が急激に変化した場合の少なくともいずれかの場合に、
前記歩行者の挙動が、前記歩行者の近傍を走行する車両にとって、注意を要すると判定すること
を特徴とする請求項1又は請求項2記載の情報通知システム。
The attention behavior determining means of the mobile terminal device is:
When the moving speed of the mobile terminal device detected by the moving speed / moving direction detecting means frequently changes,
When the moving direction of the mobile terminal device detected by the moving speed / moving direction detecting means changes suddenly,
Or at least one of the cases where the moving speed of the mobile terminal device detected by the moving speed / moving direction detecting means has suddenly changed,
The information notification system according to claim 1, wherein the behavior of the pedestrian is determined to require attention for a vehicle traveling in the vicinity of the pedestrian.
前記携帯端末装置の送信制御手段は、当該携帯端末装置に予め与えられた当該携帯端末装置を有する歩行者を特定する属性情報に応じて、前記送信時間を変化させること
を特徴とする請求項1乃至3のいずれか1項に記載の情報通知システム。
Said transmission control means of the portable terminal device, according to claim 1 in accordance with the attribute information for specifying a pedestrian having a pre-given the portable terminal apparatus to the portable terminal device, and wherein the changing the transmission time 4. The information notification system according to any one of items 1 to 3 .
前記携帯端末装置は、
前記移動速度・移動方向検出手段によって検出される移動速度、移動方向から推定される当該携帯端末装置を有する歩行者の挙動が、前記歩行者の近傍を走行する車両に対して、歩行者の意思を示す特徴的な動作であるかどうかを判定する意思挙動判定手段を有し、
前記送信制御手段は、前記意思挙動判定手段によって歩行者の意思を示す特徴的な動作であると判定されたことに応じて、前記現在位置情報取得手段によって取得された現在位置情報を無線通信により前記車載装置に送信するよう制御すること
を特徴とする請求項1乃至請求項のいずれか1項に記載の情報通知システム。
The portable terminal device
The behavior of the pedestrian having the mobile terminal device estimated from the moving speed and the moving direction detected by the moving speed / moving direction detecting means is determined by the pedestrian's intention with respect to the vehicle traveling in the vicinity of the pedestrian. Having intention determination means for determining whether or not it is a characteristic action indicating
The transmission control means is configured to wirelessly communicate the current position information acquired by the current position information acquisition means when the intention behavior determination means determines that the movement is a characteristic action indicating a pedestrian's intention. The information notification system according to any one of claims 1 to 4 , wherein control is performed so as to transmit to the in-vehicle device.
前記車載装置は、前記携帯端末装置から無線通信により送信された注意度情報に基づき、車両内の乗員に通知する現在位置情報の通知タイミング、通知頻度、通知形態を制御する通知制御手段を有すること
を特徴とする請求項2記載の情報通知システム。
The in-vehicle device has notification control means for controlling a notification timing, a notification frequency, and a notification form of current position information to be notified to an occupant in the vehicle based on attention level information transmitted from the portable terminal device by wireless communication. The information notification system according to claim 2.
前記車載装置は、前記通知制御手段によって、注意度情報に基づき制御される、車両内の乗員に通知する現在位置情報の通知タイミング、通知頻度、通知形態を、前記車両内の乗員の操作によって任意に設定変更可能な設定変更手段を有すること
を特徴とする請求項記載の情報通知システム。
The in-vehicle device is controlled by the notification control unit based on the attention level information, and the notification timing, the notification frequency, and the notification form of the current position information notified to the occupant in the vehicle can be arbitrarily set by the operation of the occupant in the vehicle. The information notification system according to claim 6, further comprising setting change means capable of changing settings.
歩行者が有する当該携帯端末装置との無線通信により取得される情報を車両内の乗員に通知する車両に搭載された車載装置を備える情報通知システムの携帯端末装置において、
当該携帯端末装置が存在する現在の位置を特定する現在位置情報を取得する現在位置情報取得手段と、
当該携帯端末装置の移動速度、移動方向を検出する移動速度・移動方向検出手段と、
前記移動速度・移動方向検出手段によって検出される移動速度、移動方向から推定される当該携帯端末装置を有する歩行者の挙動が、前記歩行者の近傍を走行する車両にとって、注意を要するかどうかを判定する注意挙動判定手段と、
前記注意挙動判定手段によって注意を要すると判定されたことに応じて、前記現在位置情報取得手段によって取得された現在位置情報を無線通信により前記車載装置に送信するよう制御し、前記注意挙動判定手段によって注意を要すると判定されたことに応じて、前記車載装置との無線通信により情報を送信する送信時間を、前記移動速度・移動方向検出手段によって検出される当該携帯端末装置の移動速度と、当該携帯端末装置の現在位置近傍に存在する道路の道路幅とに基づき決定する送信制御手段とを備えること
を特徴とする携帯端末装置。
In a mobile terminal device of an information notification system comprising an in-vehicle device mounted on a vehicle for notifying an occupant in the vehicle of information acquired by wireless communication with the mobile terminal device possessed by a pedestrian,
Current position information acquisition means for acquiring current position information for specifying the current position where the mobile terminal device exists;
A moving speed / moving direction detecting means for detecting a moving speed and a moving direction of the mobile terminal device;
Whether the behavior of the pedestrian having the mobile terminal device estimated from the moving speed and moving direction detected by the moving speed / moving direction detecting means requires attention for a vehicle traveling in the vicinity of the pedestrian. Attention behavior determination means for determining;
When the attention behavior determining means determines that attention is required, the current position information acquired by the current position information acquisition means is controlled to be transmitted to the in-vehicle device by wireless communication , and the attention behavior determination means , The mobile terminal device's moving speed detected by the moving speed / moving direction detecting means, the transmission time for transmitting information by wireless communication with the in-vehicle device, A mobile terminal device comprising: a transmission control unit that determines a road width of a road existing in the vicinity of the current position of the mobile terminal device.
歩行者が有する携帯端末装置と、前記携帯端末装置との無線通信により取得される情報を車両内の乗員に通知する車両に搭載された車載装置とを備える情報通知システムの情報送信方法において、
前記携帯端末装置は、
当該携帯端末装置が存在する現在の位置を特定する現在位置情報を取得し、
当該携帯端末装置の移動速度、移動方向を検出し、
検出される前記移動速度、移動方向から推定される当該携帯端末装置を有する歩行者の挙動が、前記歩行者の近傍を走行する車両にとって、注意を要するかどうかを判定し、
注意を要すると判定されたことに応じて、取得された前記現在位置情報を無線通信により前記車載装置に送信するよう制御し、注意を要すると判定されたことに応じて、前記車載装置との無線通信により情報を送信する送信時間を、当該携帯端末装置の移動速度と、当該携帯端末装置の現在位置近傍に存在する道路の道路幅とに基づき決定すること
を特徴とする情報送信方法。
In an information transmission method of an information notification system comprising a mobile terminal device possessed by a pedestrian and an in-vehicle device mounted on a vehicle for notifying an occupant in the vehicle of information acquired by wireless communication with the mobile terminal device,
The portable terminal device
Obtain current location information that identifies the current location where the mobile terminal device exists,
Detecting the moving speed and moving direction of the mobile terminal device,
Determine whether the behavior of the pedestrian having the mobile terminal device estimated from the detected moving speed and moving direction requires attention for a vehicle traveling in the vicinity of the pedestrian,
When it is determined that attention is required, the acquired current position information is controlled to be transmitted to the in-vehicle device by wireless communication , and when it is determined that attention is required, An information transmission method comprising: determining a transmission time for transmitting information by wireless communication based on a moving speed of the mobile terminal device and a road width of a road existing near the current position of the mobile terminal device .
JP2007298448A 2007-11-16 2007-11-16 Information notification system, portable terminal device, in-vehicle device, and information transmission method Active JP5023988B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007298448A JP5023988B2 (en) 2007-11-16 2007-11-16 Information notification system, portable terminal device, in-vehicle device, and information transmission method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007298448A JP5023988B2 (en) 2007-11-16 2007-11-16 Information notification system, portable terminal device, in-vehicle device, and information transmission method

Publications (2)

Publication Number Publication Date
JP2009123105A JP2009123105A (en) 2009-06-04
JP5023988B2 true JP5023988B2 (en) 2012-09-12

Family

ID=40815163

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007298448A Active JP5023988B2 (en) 2007-11-16 2007-11-16 Information notification system, portable terminal device, in-vehicle device, and information transmission method

Country Status (1)

Country Link
JP (1) JP5023988B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10746752B2 (en) 2009-11-13 2020-08-18 Ventana Medical Systems, Inc. Opposables and automated specimen processing systems with opposables

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9140559B2 (en) 2009-10-01 2015-09-22 Qualcomm Incorporated Routing graphs for buildings using schematics
US8812015B2 (en) 2009-10-01 2014-08-19 Qualcomm Incorporated Mobile device locating in conjunction with localized environments
JP5322877B2 (en) * 2009-10-02 2013-10-23 本田技研工業株式会社 Transportation support system
US8880103B2 (en) 2009-10-12 2014-11-04 Qualcomm Incorporated Method and apparatus for transmitting indoor context information
JP5269755B2 (en) * 2009-12-10 2013-08-21 株式会社日立製作所 Cross-person support vehicle system and cross-person support method
JP5407853B2 (en) * 2009-12-28 2014-02-05 沖電気工業株式会社 Portable terminal, program thereof and safe driving support system
US9389085B2 (en) 2010-01-22 2016-07-12 Qualcomm Incorporated Map handling for location based services in conjunction with localized environments
JP2012048532A (en) * 2010-08-27 2012-03-08 Denso Corp Moving object position estimation system
EP2899608A4 (en) 2012-09-19 2016-06-01 Nec Corp Portable terminal, method for controlling same, and program
CN106063306B (en) 2014-03-03 2019-12-06 三菱电机株式会社 Wireless communication system and wireless communication device
EP2982562A1 (en) 2014-08-08 2016-02-10 Nokia Technologies OY Vehicle control
ITUB20153450A1 (en) * 2015-09-07 2017-03-07 Cristian Cantamessa Road safety device.
JP7108899B2 (en) * 2017-06-07 2022-07-29 パナソニックIpマネジメント株式会社 Pedestrian terminal device, in-vehicle terminal device, inter-pedestrian communication system, and getting-off notification method
JP6496783B2 (en) * 2017-08-03 2019-04-03 京セラ株式会社 Wearable terminal and control program
WO2019240070A1 (en) * 2018-06-11 2019-12-19 本田技研工業株式会社 Action verifying system
JP7422712B2 (en) * 2021-09-22 2024-01-26 三菱電機株式会社 External notification control device, external notification control system, and external notification control method

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004157847A (en) * 2002-11-07 2004-06-03 Seiko Epson Corp Road crossing pedestrian announcing system
JP4498911B2 (en) * 2004-12-24 2010-07-07 アルパイン株式会社 Alarm generation system and communication equipment
JP4790454B2 (en) * 2006-03-13 2011-10-12 富士通テン株式会社 Image recognition device, vehicle control device, image recognition method, and vehicle control method

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10746752B2 (en) 2009-11-13 2020-08-18 Ventana Medical Systems, Inc. Opposables and automated specimen processing systems with opposables

Also Published As

Publication number Publication date
JP2009123105A (en) 2009-06-04

Similar Documents

Publication Publication Date Title
JP5023988B2 (en) Information notification system, portable terminal device, in-vehicle device, and information transmission method
US8700318B2 (en) System and method for selective cancellation of navigation lockout
US20140032098A1 (en) Navigation device and method for guiding high-occupancy vehicles
JP2005190082A (en) Drowsy driving-warning device and car navigation device
WO2017110526A1 (en) Mobile terminal and vehicle
JP2000266553A (en) On-vehicle navigator
TW200949203A (en) Navigation apparatus and method that adapts to driver&#39;s workload
JP2020116999A (en) Control apparatus for vehicle
JP5885852B2 (en) In-vehicle information processing equipment
JP2014142798A (en) Inter-vehicle communication portable device
JP2020050204A (en) Vehicular travel control method and travel control apparatus
JP2010118008A (en) Monitoring system for low-speed passenger mobility vehicle and the like
JP4483764B2 (en) Driving support system and program
JP2009015587A (en) Risk determination system and risk determination method
JP2015109003A (en) Pedestrian information providing system
JP2002257561A (en) Traffic congestion information providing device
JP4945394B2 (en) Current location information notification system, portable terminal device, center device, and current location information notification method
JP4412026B2 (en) In-vehicle device and in-vehicle navigation device
JP6703936B2 (en) Electronic device, vehicle, control device, control program, and operating method of electronic device
JP2006331154A (en) Approach warning system, mobile terminal apparatus and vehicle
WO2012131835A1 (en) Portable terminal device, control method for same, and control program
JP6708272B1 (en) Driving support device
JP2014115177A (en) Portable navigation device
JP2005345293A (en) Annunciator for vehicle
WO2024085102A1 (en) Information processing device and information processing method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101027

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120306

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120426

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120522

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120604

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150629

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5023988

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150