[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2011068347A - Attention arousing device, attention arousing method and remote control system - Google Patents

Attention arousing device, attention arousing method and remote control system Download PDF

Info

Publication number
JP2011068347A
JP2011068347A JP2010216016A JP2010216016A JP2011068347A JP 2011068347 A JP2011068347 A JP 2011068347A JP 2010216016 A JP2010216016 A JP 2010216016A JP 2010216016 A JP2010216016 A JP 2010216016A JP 2011068347 A JP2011068347 A JP 2011068347A
Authority
JP
Japan
Prior art keywords
obstacle
vehicle
control signal
unit
alarm sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010216016A
Other languages
Japanese (ja)
Other versions
JP5126328B2 (en
Inventor
Naoki Taki
直樹 滝
Takeshi Matsumura
健 松村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2010216016A priority Critical patent/JP5126328B2/en
Publication of JP2011068347A publication Critical patent/JP2011068347A/en
Application granted granted Critical
Publication of JP5126328B2 publication Critical patent/JP5126328B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Power-Operated Mechanisms For Wings (AREA)
  • Window Of Vehicle (AREA)
  • Emergency Alarm Devices (AREA)

Abstract

【課題】リモート操作により可動部を駆動する場合に、確実に注意喚起のための警報音を吹聴する注意喚起装置を提供すること。
【解決手段】車載装置を作動させる場合、作動させる車載装置に応じて注意を喚起させる警報音を吹聴する注意喚起装置10において、外部の送信機から送信された制御信号を受信する受信手段2と、制御信号に対応づけて、警報音を吹聴するか否かを定めた定義部と、警報音の吹聴のオンオフ又は音量が設定された設定内容を保持する警報音設定部6と、 前記制御信号を受信した場合、前記定義部を参照して受信した前記制御信号によるリモート操作が障害物干渉操作であるか否かを判定する操作判定部5と、車両周辺の障害物を検出する障害物検出部11と、操作判定部によりリモート操作が障害物干渉操作であると判定され、かつ、障害物検出部により障害物が検出された場合、設定内容に関わらず所定の音量で警報音を吹聴する警報発生部7と、を有する。
【選択図】図2
An object of the present invention is to provide a warning device that reliably sounds a warning sound when a movable part is driven by a remote operation.
Receiving means for receiving a control signal transmitted from an external transmitter in an alerting device for sounding an alarm sound that alerts the in-vehicle device to be activated when the on-vehicle device is operated; A definition unit that determines whether or not an alarm sound is to be heard in association with the control signal, an alarm sound setting unit 6 that holds a setting content in which on / off of the alarm sound is set or the volume is set, and the control signal , The operation determination unit 5 for determining whether the remote operation by the control signal received with reference to the definition unit is an obstacle interference operation, and obstacle detection for detecting obstacles around the vehicle When it is determined that the remote operation is an obstacle interference operation by the unit 11 and the operation determination unit, and an obstacle is detected by the obstacle detection unit, an alarm sound is heard at a predetermined volume regardless of the setting content. alarm Generator 7.
[Selection] Figure 2

Description

本発明は、警報音を吹聴する注意喚起装置に関し、特に、リモート操作が操作する車載装置に応じて警報音を吹聴する注意喚起装置に関する。   The present invention relates to a warning device that blows an alarm sound, and more particularly to a warning device that blows an alarm sound according to an in-vehicle device operated by a remote operation.

車両から離れた場所から車両の操作を行うことができるいわゆるリモート操作機能を備えた車両が知られている。リモート操作機能により車載装置(ドアやウィンドウなど)の可動部の駆動を行う場合、可動部付近の障害物と可動部との接触により不都合が生じるおそれがある。   A vehicle having a so-called remote operation function capable of operating a vehicle from a place away from the vehicle is known. When driving a movable part of an in-vehicle device (a door, a window, etc.) by a remote operation function, there is a possibility that inconvenience may occur due to contact between an obstacle near the movable part and the movable part.

そこで、誤って可動部を駆動し、かかる不都合が生じることを防止するため、可動部の操作を確実に行うドア開閉装置が提案されている(例えば、特許文献1参照。)。特許文献1記載のドア開閉装置では、可動部の開閉操作が2回以上行われた場合に、可動部を駆動するよう制御するので、誤ってリモート操作し可動部を駆動することが低減できる。   Therefore, a door opening / closing device that reliably operates the movable part has been proposed in order to prevent the inconvenience caused by driving the movable part by mistake (see, for example, Patent Document 1). In the door opening and closing apparatus described in Patent Document 1, since the movable part is controlled to be driven when the opening and closing operation of the movable part is performed twice or more, it is possible to reduce the accidental remote operation and driving the movable part.

また、リモート操作により可動部の駆動を行う場合、ブザーや警報音を吹聴して車両周辺の障害物に注意を喚起することが行われる場合がある。注意を喚起できれば障害物が可動部の駆動に注意を払うので、可動部との接触による不都合を回避することが可能となる。   Moreover, when driving a movable part by remote operation, a buzzer and an alarm sound may be heard and attention may be given to the obstacle around a vehicle. If the attention can be drawn, the obstacle pays attention to the driving of the movable part, so that it is possible to avoid inconvenience due to contact with the movable part.

特開2005−001573号公報JP 2005-001573 A

しかしながら、ブザーや警報音の吹聴を好ましくないと感じる状況があるため、吹聴のオン/オフや音量は、ユーザの任意で設定可能となっている。このため、例えばブザーや警報音の吹聴がオフになっていた場合、リモート操作により可動部を駆動しても、注意喚起のためのブザーや警報音が吹聴されないという問題がある。   However, since there is a situation in which it is not preferable to hear the buzzer or the alarm sound, the user can arbitrarily set the on / off of the sound and the sound volume. For this reason, for example, when the buzzer and the alarm sound are turned off, there is a problem that the buzzer and the alarm sound for alerting are not heard even if the movable part is driven by remote operation.

リモート操作によりブザーや警報音の吹聴のオン/オフ設定を可能としてもよいが、係る設定を可能とすると仕様が複雑となりコスト増をもたらすと共に、可動部の駆動前にブザーや警報音の吹聴をオンに設定する操作が必要となる等、ユーザの操作が煩雑となるという不都合がある。   It may be possible to turn on / off the buzzer and alarm sound by remote operation. However, if such a setting is possible, the specifications will be complicated and the cost will increase, and the buzzer and alarm sound will be heard before the movable part is driven. There is an inconvenience that the user's operation becomes complicated, for example, an operation to set to ON is required.

本発明は、上記問題に鑑み、リモート操作により可動部を駆動する場合に、確実に注意喚起のための警報音を吹聴する注意喚起装置、注意喚起方法及び遠隔操作システムを提供することを目的とする。   In view of the above problems, an object of the present invention is to provide an alerting device, an alerting method, and a remote control system that reliably hear an alarm sound for alerting when a movable part is driven by remote operation. To do.

上記問題を解決するため、本発明は、車外から車載装置を作動させる際、注意を喚起させる警報音を、吹鳴のオン・オフ又は音量が予め登録された設定内容に従い吹鳴する注意喚起装置において、外部の送信機から送信された、車載装置をリモート操作により作動させる制御信号を受信する受信手段(例えば、受信装置2)と、制御信号によるリモート操作が障害物干渉操作であるか否かを定めた定義部と、前記制御信号を受信した場合、前記定義部を参照して受信した前記制御信号によるリモート操作が障害物干渉操作であるか否かを判定する操作判定部(例えば、コントローラ5)と、車両周辺の障害物を検出する障害物検出部と、前記操作判定部によりリモート操作が障害物干渉操作であると判定され、かつ、前記障害物検出部により障害物が検出された場合、前記設定内容に関わらず所定の音量で警報音を吹聴する警報発生部と、を有することを特徴とする。   In order to solve the above problems, the present invention provides an alarm sound that alerts the user when operating the vehicle-mounted device from outside the vehicle. Receiving means (for example, receiving device 2) for receiving a control signal transmitted from an external transmitter for operating a vehicle-mounted device by remote operation, and whether or not the remote operation by the control signal is an obstacle interference operation. And an operation determination unit (for example, the controller 5) that determines whether or not the remote operation by the control signal received with reference to the definition unit is an obstacle interference operation when the control signal is received. An obstacle detection unit that detects obstacles around the vehicle, and the operation determination unit determines that the remote operation is an obstacle interference operation, and the obstacle detection unit If the harm were detected, and having a an alarm generator for trumpet alarm sound at a predetermined volume regardless the settings.

リモート操作により可動部を駆動する場合に、確実に注意喚起のための警報音を吹聴する注意喚起装置を提供することができる。   When the movable part is driven by a remote operation, it is possible to provide an alert device that reliably sounds an alarm sound for alerting.

リモート操作により車両を制御する場合、注意喚起のための警報音を吹聴する注意喚起装置が適用されたリモート制御システムの機能ブロック図である。When controlling a vehicle by remote operation, it is a functional block diagram of the remote control system to which the alerting device which sounds an alarm sound for alerting is applied. 注意喚起装置が警報音を吹聴する処理の流れを示すフローチャート図である。It is a flowchart figure which shows the flow of the process in which an alerting device blows out an alarm sound. 注意喚起装置が警報音を吹聴する処理の流れを示すフローチャート図である。It is a flowchart figure which shows the flow of the process in which an alerting device blows out an alarm sound.

以下、本発明を実施するための最良の形態について、添付図面を参照しながら説明する。図1は、リモート操作により車両を制御する場合、注意喚起のための警報音を吹聴する注意喚起装置が適用されたリモート制御システムの機能ブロック図を示す。なお、警報音には、ブザーやメロディ、音声等、注意喚起が可能な音を含む。   The best mode for carrying out the present invention will be described below with reference to the accompanying drawings. FIG. 1 shows a functional block diagram of a remote control system to which an alerting device for sounding an alarm sound for alerting when a vehicle is controlled by remote operation. Note that the warning sound includes sounds that can be alerted, such as buzzers, melodies, and voices.

図1のリモート制御システムでは、ユーザ(例えば運転者)が送信機1を操作して送信された制御信号を受信装置2が受信して、ウィンドウ開閉用アクチュエータ8やスライドルーフアクチュエータ9の制御、及び、注意喚起装置10の制御を行う。   In the remote control system of FIG. 1, the receiving device 2 receives a control signal transmitted by a user (for example, a driver) operating the transmitter 1, and controls the window opening / closing actuator 8 and the slide roof actuator 9, and The alerting device 10 is controlled.

送信機1は、例えば携帯電話により構成され、操作ボタンの操作に応じて操作信号を送信する。操作信号は、携帯電話網やネットワークを介しセンタ12に送信され、センタ12から該運転者の車両に車載された受信装置2に送信される。   The transmitter 1 is composed of a mobile phone, for example, and transmits an operation signal in response to operation of the operation button. The operation signal is transmitted to the center 12 via a mobile phone network or a network, and is transmitted from the center 12 to the receiving device 2 mounted on the driver's vehicle.

受信装置2は、センタ12から送信された操作信号を受信する受信回路3を有し、受信回路3は、センタ12から送信された操作信号を復調し、元の操作信号を生成する。生成された操作信号は信号判別回路4に送出され、信号判別回路4により運転者の操作の内容が判別され、判別結果に応じた制御信号がコントローラ5に送出される。   The receiving device 2 includes a receiving circuit 3 that receives an operation signal transmitted from the center 12, and the receiving circuit 3 demodulates the operation signal transmitted from the center 12 to generate an original operation signal. The generated operation signal is sent to the signal discrimination circuit 4, the content of the driver's operation is discriminated by the signal discrimination circuit 4, and a control signal corresponding to the discrimination result is sent to the controller 5.

コントローラ5は、制御信号に応じて、ウィンドウの開閉を行うウィンドウ開閉用アクチュエータ8やスライドルーフアクチュエータ9を駆動する。また、コントローラ5は、所定の可動部についてリモート操作された場合、車両周辺の障害物に警報音を吹聴する警報信号を生成し注意喚起装置10に送出する。   The controller 5 drives the window opening / closing actuator 8 and the slide roof actuator 9 for opening and closing the window in accordance with the control signal. Further, when a predetermined movable part is remotely operated, the controller 5 generates an alarm signal for listening to an alarm sound on an obstacle around the vehicle and sends the alarm signal to the alerting device 10.

コントローラ5は、警報信号を生成するリモート操作を定義した定義部13を備え、制御信号が定義部13に定義されたものであった場合、警報信号を生成する。定義部13には、車両の周辺に存在する障害物の挟み込みや押動のおそれがある操作、例えば、ウィンドウやスライドルーフの開閉操作や、ドアの開閉操作が定義されている。以下、車両の周辺に存在する障害物の挟み込みや押動のおそれがある操作を、障害物干渉操作という。   The controller 5 includes a definition unit 13 that defines a remote operation for generating an alarm signal. If the control signal is defined in the definition unit 13, the controller 5 generates an alarm signal. The definition unit 13 defines an operation that may cause an obstacle existing in the vicinity of the vehicle to be caught or pushed, for example, an opening / closing operation of a window or a slide roof, or an opening / closing operation of a door. Hereinafter, an operation that may cause an obstacle to be caught or pushed around the vehicle is referred to as an obstacle interference operation.

警報信号が生成された場合、注意喚起装置10は所定時間、警報音を吹聴し、その後、コントローラ5がウィンドウ開閉用アクチュエータ8又はスライドルーフアクチュエータ9を制御して、ウィンドウやスライドルーフの開閉を行う。   When the alarm signal is generated, the alerting device 10 sounds an alarm sound for a predetermined time, and then the controller 5 controls the window opening / closing actuator 8 or the slide roof actuator 9 to open / close the window or the slide roof. .

また、警報音が吹聴された場合、警報音が吹聴された旨の信号が所定の送信装置からセンタ12を介し運転者の送信機1に送信される。これにより、運転者は注意喚起されてから障害物と干渉するおそれのある可動部が駆動されたことを確認できる。   When an alarm sound is heard, a signal indicating that the alarm sound has been heard is transmitted from a predetermined transmission device to the driver's transmitter 1 via the center 12. Thus, the driver can confirm that the movable part that may interfere with the obstacle has been driven after being alerted.

注意喚起装置10について説明する。注意喚起装置10は、警報音に関する設定を行う警報音設定部6、音源回路、アンプ・スピーカにより構成され、警報音を吹聴する警報発生部7、及び、車両周辺の障害物を検出する障害物検出部11を有するように構成される。   The alerting device 10 will be described. The alert device 10 includes an alarm sound setting unit 6 that performs settings related to an alarm sound, a sound source circuit, an amplifier / speaker, an alarm generation unit 7 that listens to the alarm sound, and an obstacle that detects obstacles around the vehicle The detection unit 11 is configured.

運転者は、警報音設定部6をインターフェイスとして、警報音の吹聴のオン/オフや警報音の音量設定を行う。警報音設定部6はこれらの設定内容を保持しており、警報発生部7が警報音を吹聴する場合、設定内容に従って警報音の吹聴を行う。   The driver uses the alarm sound setting unit 6 as an interface to turn on / off the alarm sound and set the volume of the alarm sound. The alarm sound setting unit 6 holds these setting contents. When the alarm generation unit 7 sounds an alarm sound, the alarm sound setting part 6 performs the alarm sound according to the setting contents.

例えば、障害物干渉操作を車内から行う場合、車両周辺に障害物があるか否かを目視等により確認できるので、運転者が予め設定した警報音の吹聴のオン/オフ又は音量の設定内容に従って警報音の吹聴が行われる。   For example, when the obstacle interference operation is performed from the inside of the vehicle, it is possible to visually check whether there is an obstacle around the vehicle, so according to the setting of the on / off of the alarm sound or the volume set by the driver in advance. A warning sound is heard.

これに対し、リモート操作により障害物干渉操作を行う場合、車両周辺に障害物があるか否かを目視等により確認できない。このため、車両周辺に障害物が存在しても、警報音の吹聴の設定がオフになっていたり、音量設定が小さかった場合、障害物に注意を喚起できないおそれがある。本実施の形態の注意喚起装置10は、リモート操作により障害物干渉操作を行う場合、警報音設定部6の保持する設定内容に関わらず、充分な音量(例えば、最大音量)で警報音を吹聴する。したがって、警報発生部7は、受信装置2から警報信号を送出された場合、警報音設定部6の保持する設定内容において警報音の吹聴がオフになっていても、最大音量で警報音を吹聴する。   On the other hand, when the obstacle interference operation is performed by remote operation, it cannot be visually confirmed whether there is an obstacle around the vehicle. For this reason, even if there are obstacles around the vehicle, there is a possibility that attention cannot be drawn to the obstacles when the setting for sounding the alarm sound is turned off or the volume setting is low. The alerting device 10 of the present embodiment, when performing an obstacle interference operation by remote operation, plays an alarm sound at a sufficient volume (for example, maximum volume) regardless of the setting content held by the alarm sound setting unit 6 To do. Therefore, when the alarm generation unit 7 receives an alarm signal from the receiving device 2, the alarm generation unit 7 plays the alarm sound at the maximum volume even when the alarm sound is turned off in the setting content held by the alarm sound setting unit 6. To do.

ところで、車両の周辺に障害物が存在しないことが明らかであれば警報音を発生する必要がない。このため、障害物検出部11は、車両周辺の障害物を検出し、検出結果を警報発生部7に送出する。   By the way, if it is clear that there are no obstacles around the vehicle, there is no need to generate an alarm sound. For this reason, the obstacle detection unit 11 detects an obstacle around the vehicle and sends the detection result to the alarm generation unit 7.

障害物検出部11は、
・画像認識による検出、
・クリアランスソナー等のレーダによる検出
・温度センサによる検出
・車両への荷重検出
により車両周辺に障害物があるか否かを検出する。
The obstacle detection unit 11
・ Detection by image recognition,
-Detection by radar such as clearance sonar-Detection by temperature sensor-Detection of load on the vehicle to detect whether there is an obstacle around the vehicle.

また、障害物検出部11は、
・送信機1の位置の検出
・キーレスエントリのキー(スマートキー(登録商標))の有無の検出
により車両周辺に運転者がいるか否かを検出する。
In addition, the obstacle detection unit 11
Detecting the position of the transmitter 1 Detecting whether there is a driver around the vehicle by detecting the presence or absence of a keyless entry key (smart key (registered trademark)).

画像認識による検出は、カメラなどの撮影装置により車両の周辺を撮影し、障害物の撮影パターン(目、鼻、口の配列等)とマッチングする画像が撮影された場合、障害物が存在すると検出する。クリアランスソナー等のレーダによる検出は、超音波や電波を放射してその反射波に基づき、車両周辺に障害物があるか否かを判定する。温度センサによる検出は、車両に触れている障害物があればその温度により障害物を検出し、また、非接触温度計や赤外線モニタにより、車両周辺の障害物の存在を検出する。   Detection by image recognition detects the presence of an obstacle when the surroundings of the vehicle are photographed by a photographing device such as a camera, and an image that matches the photographing pattern of the obstacle (such as eyes, nose, mouth arrangement, etc.) is photographed. To do. Detection by a radar such as a clearance sonar determines whether or not there is an obstacle around the vehicle based on the reflected wave radiated by ultrasonic waves and radio waves. In the detection by the temperature sensor, if there is an obstacle touching the vehicle, the obstacle is detected based on the temperature, and the presence of an obstacle around the vehicle is detected by a non-contact thermometer or an infrared monitor.

車両への荷重の検出は、車高センサや各輪に設けられたストロークセンサの変位量により、車両への荷重の有無、すなわち車両の上に障害物が登っていることを検出する。スライドルーフは車両のルーフにあるので、車両への荷重を検出することでスライドルーフ周辺の障害物を検出できる。車内に運転者が存在している場合、車両の荷重となって検出されるが、車内に人が存在すれば障害物を目視により認識できるので、車内の乗員を検出する乗員検出センサ(赤外線センサやシートへの荷重検出センサ)により車内に人が検出された場合、車両へ荷重が検出されても、車両の上に障害物が登っていると判定しない。   The detection of the load on the vehicle detects the presence or absence of the load on the vehicle, that is, that an obstacle is climbing on the vehicle, based on the displacement amount of the vehicle height sensor and the stroke sensor provided on each wheel. Since the slide roof is on the roof of the vehicle, obstacles around the slide roof can be detected by detecting the load on the vehicle. When there is a driver in the vehicle, it is detected as a load of the vehicle, but if there is a person in the vehicle, an obstacle can be recognized visually, so an occupant detection sensor (infrared sensor) that detects an occupant in the vehicle When a person is detected in the vehicle by a load detection sensor), it is not determined that an obstacle is climbing on the vehicle even if a load is detected on the vehicle.

また、送信機1の位置とキーレスエントリのキーの有無の検出により、車両の周辺に障害物(この場合は運転者)が存在するか否かの検出が可能となる。車載されたGPS(Global Positioning System)により車両は現在の位置を検出できる。また、送信機1は送信機1の位置をGPSや基地局との電波強度により検出する。送信機1が操作信号と共に位置情報を受信装置2に送信することで、障害物検出部11は、送信機1と自車両との相対距離を算出でき、車両周辺に障害物(この場合は運転者)が存在するか否かを検出できる。   Further, by detecting the position of the transmitter 1 and the presence / absence of a keyless entry key, it is possible to detect whether there is an obstacle (in this case, a driver) around the vehicle. The vehicle can detect the current position by a GPS (Global Positioning System) mounted on the vehicle. Further, the transmitter 1 detects the position of the transmitter 1 based on the radio wave intensity with the GPS or the base station. When the transmitter 1 transmits the position information together with the operation signal to the receiving device 2, the obstacle detection unit 11 can calculate the relative distance between the transmitter 1 and the host vehicle, and the obstacle (in this case, driving) It is possible to detect whether or not a person exists.

また、キーレスエントリのキーの有無の検出は、車両から近距離に向けた電波を送信し、応答して送信される固有のIDコードに基づき、車両の周辺にキーレスエントリのキーが存在するか否かを検出する。これにより車両周辺に障害物(この場合は運転者)が存在するか否かを検出できる。   In addition, the presence or absence of the key of the keyless entry is detected based on a unique ID code transmitted in response to a short distance from the vehicle, and whether or not there is a keyless entry key around the vehicle. To detect. As a result, it is possible to detect whether an obstacle (in this case, a driver) exists around the vehicle.

送信機1やキーレスエントリのキーが車両周辺にあると判定された場合、カメラなどの撮影装置により検出された運転者の顔の向きを検出することで、障害物の有無を確認してから送信機1からのリモート操作を行ったか否かを判定できる。例えば、運転者が車両を向いていれば、運転者は車両周辺の障害物の有無を目視してリモート操作を行っていると判定できる。運転者が車両を向いている場合、車両周辺に障害物が存在しても、ウィンドウ等と障害物が干渉しないことが確認されているので、警報音を吹聴しなくてもよい等、警報音の吹聴を精度よく制御できる。   When it is determined that the transmitter 1 or the key of the keyless entry is in the vicinity of the vehicle, the direction of the driver's face detected by a photographing device such as a camera is detected, and then transmitted after confirming the presence or absence of an obstacle. Whether or not a remote operation from the machine 1 has been performed can be determined. For example, if the driver is facing the vehicle, it can be determined that the driver is performing a remote operation by visually checking whether there is an obstacle around the vehicle. When the driver is facing the vehicle, even if there are obstacles around the vehicle, it has been confirmed that the obstacles do not interfere with the window etc. Can be accurately controlled.

図2は、注意喚起装置10が警報音を吹聴する処理の流れを示すフローチャート図の一例である。図2の処理はリモート操作により送信機1から操作信号が送信され、受信装置2が操作信号を受信するとスタートする。   FIG. 2 is an example of a flowchart showing a flow of processing in which the alerting device 10 blows an alarm sound. The processing in FIG. 2 starts when an operation signal is transmitted from the transmitter 1 by remote operation and the receiving device 2 receives the operation signal.

まず、信号判別回路4は受信した操作信号に応じて制御信号をコントローラ5に送出し、コントローラ5は定義部13を参照して、リモート操作の内容が定義部13に定義された障害物干渉操作であるか否かを判定する(S11)。   First, the signal discriminating circuit 4 sends a control signal to the controller 5 according to the received operation signal. The controller 5 refers to the definition unit 13 and the obstacle interference operation in which the content of the remote operation is defined in the definition unit 13. It is determined whether or not (S11).

リモート操作の内容が定義部13に定義されていない場合(ステップS11のNo)、障害物と干渉する可動部の駆動は行われないので、警報音を吹聴せず、リモート操作により指示された制御(例えば、ドアロック、セキュリティ機能、エアコンの作動等)を行い(S13)、図2の処理は終了する。   If the content of the remote operation is not defined in the definition unit 13 (No in step S11), the movable unit that interferes with the obstacle is not driven, so that the control that is instructed by the remote operation is not performed without hearing the alarm sound. (For example, door lock, security function, operation of air conditioner, etc.) are performed (S13), and the process of FIG.

リモート操作の内容が定義部13に定義されている場合(ステップS11のYes)、障害物検出部11は車両周辺に障害物が存在するか否かを判定する(S12)。車両周辺に障害物が存在しない場合(ステップS12のNo)、警報音を吹聴する必要がないので警報音を吹聴せず、コントローラ5は、リモート操作の操作信号に応じて、ウィンドウ開閉用アクチュエータ8やスライドルーフアクチュエータ9を駆動する(S16)。   When the content of the remote operation is defined in the definition unit 13 (Yes in step S11), the obstacle detection unit 11 determines whether there is an obstacle around the vehicle (S12). When there is no obstacle around the vehicle (No in step S12), it is not necessary to hear the alarm sound. Therefore, the controller 5 does not hear the alarm sound, and the controller 5 operates the window opening / closing actuator 8 according to the operation signal of the remote operation. Then, the slide roof actuator 9 is driven (S16).

なお、車両周辺に障害物が存在するか否か不明な場合、障害物との干渉を避けるため警報音を吹聴する。したがって、本実施の形態では、車両周辺に明らかに障害物が存在しないと判定される場合に車両周辺に障害物が存在しないと判定する。   If it is unclear whether there is an obstacle around the vehicle, an alarm sound is heard to avoid interference with the obstacle. Therefore, in this embodiment, when it is determined that there is clearly no obstacle around the vehicle, it is determined that there is no obstacle around the vehicle.

車両周辺に障害物が存在する場合(ステップS12のYes)、コントローラ5は注意喚起装置10に警報音を吹聴させる警報信号を生成する(S14)。警報信号により、注意喚起装置10は、警報音設定部6が保持する設定内容に関わらず警報音を吹聴する。   If there is an obstacle around the vehicle (Yes in step S12), the controller 5 generates an alarm signal that causes the alert device 10 to hear an alarm sound (S14). In response to the alarm signal, the alerting device 10 sounds the alarm sound regardless of the setting content held by the alarm sound setting unit 6.

警報発生部7は、警報信号に基づき所定の音量(例えば最大)により警報音を吹聴する(S15)。これにより、警報音設定部6が保持する設定内容にかかわらず、充分な音量で警報音が吹聴される。警報発生部11は、障害物に注意を喚起するため所定の時間、警報音を吹聴を継続する。   The alarm generation unit 7 sounds an alarm sound with a predetermined volume (for example, maximum) based on the alarm signal (S15). Thereby, the alarm sound is heard at a sufficient volume regardless of the setting content held by the alarm sound setting unit 6. The alarm generation unit 11 continues to hear the alarm sound for a predetermined time in order to call attention to the obstacle.

次いで、コントローラ5は、リモート操作により開閉命令のあったウィンドウ開閉用アクチュエータ8やスライドルーフアクチュエータ9を駆動する(S16)。以上で、リモート操作により障害物干渉操作が行われる場合に注意喚起装置10が警報音を吹聴する処理が終了する。   Next, the controller 5 drives the window opening / closing actuator 8 and the slide roof actuator 9 which have been opened / closed by remote operation (S16). With the above, when the obstacle interference operation is performed by the remote operation, the processing for the alert device 10 to hear the alarm sound is completed.

本実施例によれば、警報音の吹聴がオフに設定されていても、リモート操作により障害物との干渉のおそれがある可動部が駆動される場合、充分な音量で警報音を吹聴することができる。したがって、運転者が車両周辺に障害物があるか否かを目視できない場合でも、車両の可動部と障害物との干渉を防止できる。   According to this embodiment, even when the alarm sound is turned off, the alarm sound is heard at a sufficient volume when a movable part that may interfere with an obstacle is driven by a remote operation. Can do. Therefore, even when the driver cannot visually check whether there is an obstacle around the vehicle, interference between the movable part of the vehicle and the obstacle can be prevented.

本実施例では、リモート操作により障害物干渉操作の命令が行われたが、運転者が障害物の有無を目視により確認している場合の注意喚起装置10の警報音の吹聴について説明する。   In the present embodiment, the instruction of the obstacle interference operation is performed by the remote operation, but the sounding of the alarm sound of the alerting device 10 when the driver visually confirms the presence or absence of the obstacle will be described.

図3は、注意喚起装置10が警報音を吹聴する処理の流れを示すフローチャート図の一例である。なお、図2と同じ処理には同一のステップ番号を付した。   FIG. 3 is an example of a flowchart showing a flow of processing in which the alerting device 10 blows an alarm sound. The same processes as those in FIG.

まず、信号判別回路4は受信した操作信号を判別してコントローラ5に送出し、コントローラ5は定義部13を参照して、リモート操作の内容が定義部13に定義された障害物干渉操作であるか否かを判定する(S11)。   First, the signal discriminating circuit 4 discriminates the received operation signal and sends it to the controller 5. The controller 5 refers to the definition unit 13 and is the obstacle interference operation in which the content of the remote operation is defined in the definition unit 13. It is determined whether or not (S11).

リモート操作の内容が定義部13に定義されていない場合(ステップS11のNo)、障害物と干渉する可動部の駆動は行われないので、警報音を吹聴せず、リモート操作により指示された制御(例えば、ドアロック、セキュリティ機能の作動等)を行い(S13)、図3の処理は終了する。   If the content of the remote operation is not defined in the definition unit 13 (No in step S11), the movable unit that interferes with the obstacle is not driven, so that the control that is instructed by the remote operation is not performed without hearing the alarm sound. (For example, door lock, security function operation, etc.) are performed (S13), and the process of FIG. 3 ends.

リモート操作の内容が定義部13に定義されている場合(ステップS11のYes)、障害物検出部11は車両周辺に障害物が存在するか否かを判定する(S12)。車両周辺に障害物が存在しない場合(ステップS12のNo)、警報音を吹聴する必要がないので警報音を吹聴せず、コントローラ5はウィンドウ開閉用アクチュエータ8やスライドルーフアクチュエータ9を駆動する(S16)。   When the content of the remote operation is defined in the definition unit 13 (Yes in step S11), the obstacle detection unit 11 determines whether there is an obstacle around the vehicle (S12). If there is no obstacle around the vehicle (No in step S12), it is not necessary to hear the alarm sound, so the controller 5 does not hear the alarm sound and the controller 5 drives the window opening / closing actuator 8 and the slide roof actuator 9 (S16). ).

車両周辺に障害物が存在する場合(ステップS12のYes)、障害物検出部11は車両周辺に運転者がいるか否かを判定する(S101)。運転者が周辺にいるか否かは、送信機1と車両との相対距離や、キーレスエントリのキーが車両周辺で検出されたか否かに基づき判定する。   If there is an obstacle around the vehicle (Yes in step S12), the obstacle detection unit 11 determines whether there is a driver around the vehicle (S101). Whether or not the driver is in the vicinity is determined based on the relative distance between the transmitter 1 and the vehicle and whether or not the key of the keyless entry has been detected around the vehicle.

また、車両周辺に運転者がいる場合(ステップS101のYes)、次いで、カメラ等により運転者が車両を向いているか否かを判定する(S102)。   If there is a driver around the vehicle (Yes in step S101), it is then determined by the camera or the like whether the driver is facing the vehicle (S102).

車両周辺に運転者がいない場合(ステップS101のNo)、又は、運転者が車両を向いていない場合(ステップS102のNo)、運転者が車両周辺の障害物の有無を目視したか否か定かでなく、また、運転者が誤って操作した場合があるため、実施例1と同様に、警報信号を生成し充分な音量で警報音を吹聴する。   When there is no driver around the vehicle (No in step S101), or when the driver is not facing the vehicle (No in step S102), it is determined whether the driver has visually observed the presence of an obstacle around the vehicle. In addition, since the driver may have operated by mistake, the alarm signal is generated and the alarm sound is heard at a sufficient volume as in the first embodiment.

運転者が車両を向いている場合(ステップS102のYes)、運転者が車両周辺の障害物の有無を目視により確認したと判定できるため、運転者の設定した警報音設定部6の保持する設定内容で警報音を吹聴する。   When the driver is facing the vehicle (Yes in step S102), it can be determined that the driver has visually confirmed the presence or absence of an obstacle around the vehicle. Therefore, the setting held by the alarm sound setting unit 6 set by the driver Listen to the alarm sound by contents.

警報発生部7は、警報音の吹聴がオフにされているか否かを設定内容に基づき判定する(S104)。警報音の吹聴がオフにされている場合(ステップS104のYes)、車両のハザードを明滅させる(S105)。ハザードの明滅により、車両の可動部が作動することに対し注意を喚起することができる。   The alarm generation unit 7 determines whether or not the alarm sound is turned off based on the set content (S104). When the alarm sound is turned off (Yes in step S104), the hazard of the vehicle is blinked (S105). Due to the blinking of the hazard, attention can be drawn to the operation of the moving parts of the vehicle.

また、警報音の吹聴がオフにされていない場合(ステップS104のNo)、警報発生部7は設定内容に保持されている音量で警報音を吹聴する(S106)。警報音の吹聴により、車両の可動部が作動することに対し注意を喚起することができる。   If the alarm sound is not turned off (No in step S104), the alarm generation unit 7 sounds the alarm sound at the volume held in the set content (S106). It is possible to alert the operation of the movable part of the vehicle by the sounding of the alarm sound.

次いで、コントローラ5は、リモート操作により開閉命令のあったウィンドウ開閉用アクチュエータ8やスライドルーフアクチュエータ9を駆動する(S16)。以上で、リモート操作により障害物干渉操作が行われる場合であって、運転者が障害物の有無を目視により確認している場合の注意喚起装置10の処理が終了する。   Next, the controller 5 drives the window opening / closing actuator 8 and the slide roof actuator 9 which have been opened / closed by remote operation (S16). The processing of the alerting device 10 when the obstacle interference operation is performed by the remote operation and the driver confirms the presence or absence of the obstacle visually is completed.

本実施例によれば、運転者が車両周辺の障害物を目視していないと判断される場合、実施例1と同様に、警報音の吹聴の設定内容にかかわらず充分な音量で警報音を吹聴することができる。また、運転者が車両周辺の障害物を目視していると判断される場合、警報音の吹聴の設定内容に従い、警報音の吹聴をせずハザードを明滅したり、設定された音量で警報音を吹聴できる。したがって、警報音の吹聴に関する運転者の設定に従いながら、リモート操作による可動部の作動に対し注意を喚起することができる。   According to the present embodiment, when it is determined that the driver does not visually check the obstacles around the vehicle, the alarm sound is generated at a sufficient volume regardless of the setting of the alarm sound. Can be heard. Also, if it is determined that the driver is looking at obstacles around the vehicle, according to the settings for sounding the alarm sound, the hazard will blink without sounding the alarm sound, or the alarm sound will be heard at the set volume. Can be heard. Therefore, it is possible to call attention to the operation of the movable part by remote operation while following the driver's setting relating to the alarm sound.

1 送信機
2 受信装置
3 受信回路
4 信号判別回路
5 コントローラ
6 警報音設定部
7 警報発生部
8 ウィンドウ開閉用アクチュエータ
9 スライドルーフアクチュエータ
10 注意喚起装置
11 障害物検出部
12 センタ
DESCRIPTION OF SYMBOLS 1 Transmitter 2 Receiving device 3 Receiving circuit 4 Signal discrimination circuit 5 Controller 6 Alarm sound setting part 7 Alarm generating part 8 Window opening / closing actuator 9 Slide roof actuator 10 Warning device 11 Obstacle detection part 12 Center

Claims (5)

車外から車載装置を作動させる際、注意を喚起させる警報音を、吹聴のオン・オフ又は音量が予め登録された設定内容に従い吹聴する注意喚起装置であって、
外部の送信機から送信された、車載装置をリモート操作により作動させる制御信号を受信する受信手段と、
前記制御信号によるリモート操作が障害物干渉操作であるか否かを定めた定義部と、
前記制御信号を受信した場合、前記定義部を参照して受信した前記制御信号によるリモート操作が障害物干渉操作であるか否かを判定する操作判定部と、
車両周辺の障害物を検出する障害物検出部と、
前記操作判定部によりリモート操作が障害物干渉操作であると判定され、かつ、前記障害物検出部により障害物が検出された場合、前記設定内容に関わらず所定の音量で警報音を吹聴する警報発生部と、
を有することを特徴とする注意喚起装置。
A warning device that sounds an alarm sound that alerts the user when operating the vehicle-mounted device from outside the vehicle according to the setting contents in which the sound is turned on / off or the volume is registered in advance,
Receiving means for receiving a control signal transmitted from an external transmitter and operating the in-vehicle device by remote operation;
A defining unit that determines whether or not the remote operation by the control signal is an obstacle interference operation;
When the control signal is received, an operation determination unit that determines whether a remote operation by the control signal received with reference to the definition unit is an obstacle interference operation,
An obstacle detection unit for detecting obstacles around the vehicle;
When the operation determining unit determines that the remote operation is an obstacle interference operation and the obstacle detecting unit detects an obstacle, an alarm is sounded at a predetermined volume regardless of the setting content. Generating part,
An alerting device characterized by comprising:
運転者が車両を目視可能な車両周辺に、運転者が存在するか否かを検知する運転者検知手段を有し、
前記運転者検知手段が運転者を検知した場合、前記警報発生部は、前記設定内容に従い警報音を吹聴する、
ことを特徴とする請求項1記載の注意喚起装置。
Driver detection means for detecting whether or not there is a driver around the vehicle where the driver can see the vehicle,
When the driver detection means detects a driver, the alarm generation unit sounds an alarm sound according to the setting content,
The alerting device according to claim 1, wherein:
車外から車載装置を作動させる際、注意を喚起させる警報音を、吹聴のオン・オフ又は音量が予め登録された設定内容に従い吹聴する注意喚起方法であって、
受信手段が、外部の送信機から、車載装置をリモート操作により作動させる制御信号を受信するステップと、
前記制御信号を受信した場合、操作判定部が、前記制御信号によるリモート操作が障害物干渉操作であるか否かが登録されている定義部を参照して、受信した前記制御信号によるリモート操作が障害物干渉操作であるか否かを判定するステップと、
障害物検出部が、車両周辺の障害物を検出するステップと、
前記操作判定部によりリモート操作が障害物干渉操作であると判定され、かつ、前記障害物検出部により障害物が検出された場合、警報発生部が、前記設定内容に関わらず所定の音量で警報音を吹聴するステップと、
を有することを特徴とする注意喚起方法。
An alerting method for sounding an alarm sound to call attention when operating an in-vehicle device from outside the vehicle, according to the setting contents on / off or sound volume registered in advance,
Receiving means, from an external transmitter, receiving a control signal for operating the in-vehicle device by remote operation;
When the control signal is received, the operation determination unit refers to the definition unit in which whether the remote operation by the control signal is an obstacle interference operation is registered, and the remote operation by the received control signal is Determining whether the operation is an obstacle interference operation;
An obstacle detecting unit detecting obstacles around the vehicle;
When it is determined by the operation determination unit that the remote operation is an obstacle interference operation and an obstacle is detected by the obstacle detection unit, the alarm generation unit generates an alarm at a predetermined volume regardless of the setting content. Tapping the sound,
An alert method characterized by comprising:
制御信号を送信する送信機と、受信した前記制御信号に応じて車載装置を作動させる際、注意を喚起させる警報音を、吹聴のオン・オフ又は音量が予め登録された設定内容に従い吹聴する注意喚起装置と、を有する遠隔操作システムであって、
前記注意喚起装置は、
外部の送信機から、車載装置をリモート操作により作動させる制御信号を受信する受信手段と、
前記制御信号に対応づけて、前記制御信号によるリモート操作が障害物干渉操作であるか否かを定めた定義部と、
前記制御信号を受信した場合、前記定義部を参照して受信した前記制御信号によるリモート操作が障害物干渉操作であるか否かを判定する操作判定部と、
車両周辺の障害物を検出する障害物検出部と、
前記操作判定部によりリモート操作が障害物干渉操作であると判定され、かつ、前記障害物検出部により障害物が検出された場合、前記設定内容に関わらず所定の音量で警報音を吹聴する警報発生部と、
を有することを特徴とする遠隔操作システム。
Attention to alert the alarm sound that alerts the transmitter when transmitting the control signal and the vehicle-mounted device in response to the received control signal according to the setting contents in which the sound is turned on / off or the volume is registered in advance. A remote control system having a stimulating device,
The alerting device is:
Receiving means for receiving a control signal for operating the in-vehicle device by remote operation from an external transmitter;
In association with the control signal, a definition unit that determines whether the remote operation by the control signal is an obstacle interference operation,
When the control signal is received, an operation determination unit that determines whether a remote operation by the control signal received with reference to the definition unit is an obstacle interference operation,
An obstacle detection unit for detecting obstacles around the vehicle;
When the operation determining unit determines that the remote operation is an obstacle interference operation and the obstacle detecting unit detects an obstacle, an alarm is sounded at a predetermined volume regardless of the setting content. Generating part,
A remote operation system comprising:
前記送信機は携帯電話である、ことを特徴とする請求項4記載の遠隔操作システム。   The remote control system according to claim 4, wherein the transmitter is a mobile phone.
JP2010216016A 2010-09-27 2010-09-27 Alerting device, alerting method, remote control system Active JP5126328B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010216016A JP5126328B2 (en) 2010-09-27 2010-09-27 Alerting device, alerting method, remote control system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2010216016A JP5126328B2 (en) 2010-09-27 2010-09-27 Alerting device, alerting method, remote control system

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2005138613A Division JP2006318108A (en) 2005-05-11 2005-05-11 Warning device

Publications (2)

Publication Number Publication Date
JP2011068347A true JP2011068347A (en) 2011-04-07
JP5126328B2 JP5126328B2 (en) 2013-01-23

Family

ID=44014050

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2010216016A Active JP5126328B2 (en) 2010-09-27 2010-09-27 Alerting device, alerting method, remote control system

Country Status (1)

Country Link
JP (1) JP5126328B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013044168A (en) * 2011-08-24 2013-03-04 Aisin Seiki Co Ltd Opening/closing body controller
WO2017082388A1 (en) * 2015-11-11 2017-05-18 パイオニア株式会社 Security device, security control method, program, and storage medium

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02503857A (en) * 1988-01-07 1990-11-08 モトローラ・インコーポレーテッド portable communication device
JPH11148261A (en) * 1997-11-17 1999-06-02 Nissan Motor Co Ltd Keyless entry system
JP2001219817A (en) * 2000-02-08 2001-08-14 Shinji Nakajima Burglary notifying and warning device for vehicle
JP2003155870A (en) * 2001-11-20 2003-05-30 Mitsui Mining & Smelting Co Ltd Controlling method of power sliding device for vehicle sliding door
JP2004019334A (en) * 2002-06-19 2004-01-22 Altia Co Ltd Voice answer back device
JP2005001573A (en) * 2003-06-13 2005-01-06 Asmo Co Ltd Vehicle door opening/closing device, and method for controlling opening/closing of vehicle door
JP2005171573A (en) * 2003-12-09 2005-06-30 Mitsuba Corp Automatic opening/closing device for vehicle

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02503857A (en) * 1988-01-07 1990-11-08 モトローラ・インコーポレーテッド portable communication device
JPH11148261A (en) * 1997-11-17 1999-06-02 Nissan Motor Co Ltd Keyless entry system
JP2001219817A (en) * 2000-02-08 2001-08-14 Shinji Nakajima Burglary notifying and warning device for vehicle
JP2003155870A (en) * 2001-11-20 2003-05-30 Mitsui Mining & Smelting Co Ltd Controlling method of power sliding device for vehicle sliding door
JP2004019334A (en) * 2002-06-19 2004-01-22 Altia Co Ltd Voice answer back device
JP2005001573A (en) * 2003-06-13 2005-01-06 Asmo Co Ltd Vehicle door opening/closing device, and method for controlling opening/closing of vehicle door
JP2005171573A (en) * 2003-12-09 2005-06-30 Mitsuba Corp Automatic opening/closing device for vehicle

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013044168A (en) * 2011-08-24 2013-03-04 Aisin Seiki Co Ltd Opening/closing body controller
WO2017082388A1 (en) * 2015-11-11 2017-05-18 パイオニア株式会社 Security device, security control method, program, and storage medium
JPWO2017082388A1 (en) * 2015-11-11 2018-08-30 パイオニア株式会社 Security device, security control method, program, and storage medium
JP2020091893A (en) * 2015-11-11 2020-06-11 パイオニア株式会社 Security device
US10857979B2 (en) 2015-11-11 2020-12-08 Pioneer Corporation Security device, security control method, program, and storage medium

Also Published As

Publication number Publication date
JP5126328B2 (en) 2013-01-23

Similar Documents

Publication Publication Date Title
US7477138B2 (en) Function operation warning device
US8854197B2 (en) Method of monitoring vehicle surroundings, and apparatus for monitoring vehicle surroundings
EP3330940B1 (en) Systems and methods for an enhanced garage door opener remote control
JP4578858B2 (en) Notification management apparatus and notification management method
JP2006159939A (en) Notice device for in-cabin object to be informed
JP5612538B2 (en) Terminal position determination system
GB2454866A (en) Alarm device
JP2016523323A (en) Access control system for automobile
US9159233B2 (en) System including vehicle location alert based communication with a vehicle audio entertainment system and related methods
US9031546B2 (en) System including vehicle speed alert based communication with a vehicle audio entertainment system and related methods
JP5126328B2 (en) Alerting device, alerting method, remote control system
JP2006318108A5 (en)
CN111415659A (en) Domestic intelligent monitoring device linked to transport vehicle
JP2020084573A (en) Opening/closing body control device
JPH10315917A (en) Alarm device of abnormal condition such as theft of automobile
JP2005161996A (en) Vehicle periphery monitoring system
JP2007164336A (en) Theft notification system
JP2013134589A (en) On-vehicle alarm device and vehicle linkage alarm system
JP3622686B2 (en) Vehicle management device, in-vehicle monitoring device, vehicle management method, vehicle monitoring method, vehicle management program, vehicle monitoring program, recording medium recording vehicle management program, recording medium recording vehicle monitoring program, and vehicle management system
JP2015187343A (en) vehicle control system
KR100544332B1 (en) Method of displaying vehicle information using antenna module and antenna module for remote start of car
JP2001088660A (en) Theft prevention device for vehicle
KR20160133222A (en) A black box apparatus for recognizing the owner of a vehicle
KR101640682B1 (en) Wireless charging apparatus for preventing loss of the mobile communication terminal and method thereof
JP3546109B2 (en) Automatic unauthorized use reporting device

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120731

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120910

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121002

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121015

R151 Written notification of patent or utility model registration

Ref document number: 5126328

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151109

Year of fee payment: 3