JP6331571B2

JP6331571B2 - Information notification apparatus, information notification method, information notification system, and computer program

Info

Publication number: JP6331571B2
Application number: JP2014067652A
Authority: JP
Inventors: 昇平松山
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2014-03-28
Filing date: 2014-03-28
Publication date: 2018-05-30
Anticipated expiration: 2034-03-28
Also published as: JP2015192264A

Description

本発明は、複数の送信装置から送出された発光信号を復号する技術分野に関する。 The present invention relates to a technical field for decoding light emission signals transmitted from a plurality of transmission devices.

近年、ＬＥＤ（Ｌｉｇｈｔ＿Ｅｍｉｔｔｉｎｇ＿Ｄｉｏｄｅ：以降、「ＬＥＤ」と称する）の技術進歩により、例えば、ＬＥＤの発光効率は、飛躍的に向上している。また、技術の進歩に伴い、ＬＥＤは、さまざまな分野に活用されている。より具体的に、例えば、活用されている技術としては、高速に点滅できるというＬＥＤの特性を活かした可視光通信が知られている。 2. Description of the Related Art In recent years, for example, the luminous efficiency of LEDs has been dramatically improved due to technological progress of LEDs (Light_Emitting_Diode: hereinafter referred to as “LEDs”). In addition, as technology advances, LEDs are used in various fields. More specifically, for example, as a technique that is utilized, visible light communication that utilizes the characteristic of an LED that can blink at high speed is known.

ここで、本願出願に先立って存在する関連技術として、例えば、特許文献１乃至特許文献５がある。より具体的に、一例として、特許文献１は、光情報処理システム、端末装置、光情報処理方法、プログラム及び記憶媒体に関する技術を開示する。 Here, as related technologies existing prior to the application of the present application, there are, for example, Patent Documents 1 to 5. More specifically, as an example, Patent Document 1 discloses a technique related to an optical information processing system, a terminal device, an optical information processing method, a program, and a storage medium.

特許文献１に開示された光情報処理システムは、光信号に変換されたコンテンツデータを発する送信装置と、この送信装置から発せられた光信号を受光するデジタルカメラとを備える。このデジタルカメラは、受光した光信号を電気信号に変換すると共に、変換した電気信号に基づいてコンテンツデータを復元する。そして、デジタルカメラは、映像を表す画像データと、復元したコンテンツデータとを対応付けるよう処理する。 The optical information processing system disclosed in Patent Document 1 includes a transmission device that emits content data converted into an optical signal, and a digital camera that receives the optical signal emitted from the transmission device. This digital camera converts the received optical signal into an electrical signal and restores the content data based on the converted electrical signal. Then, the digital camera processes to associate the image data representing the video with the restored content data.

これにより、係る光情報処理システムは、可視光通信により得たコンテンツデータを、映像と共に再生することができる。 Thereby, the optical information processing system can reproduce the content data obtained by visible light communication together with the video.

また、特許文献２及び特許文献５には、例えば、送信データや認証情報などの各種情報を、光信号を用いて処理する技術を開示する。 Patent Documents 2 and 5 disclose techniques for processing various types of information such as transmission data and authentication information using optical signals, for example.

特開２００８−２５８９８７号公報JP 2008-258987 A 国際公開ＷＯ２００３／０３６８２９号公報International Publication WO2003 / 036829 特開２０１０−１２８６２９号公報JP 2010-128629 A 特開２００７−３１８４９１号公報JP 2007-318491 A 特開２００７−１１０２７６号公報Japanese Patent Laid-Open No. 2007-110276

上述したように可視光通信では、例えば、ＬＥＤから発せられる光信号（以降、本願では、「ＬＥＤから発せられる光信号」を、「ＬＥＤ発光信号」とも記す）を用いて情報を通知する技術が知られている。このＬＥＤ発光信号を用いて情報を通知する技術は、例えば、２つの送信装置から異なる意味を表す同一の明滅パターンからなるＬＥＤ発光信号を送出する場合に、その発光信号の送出元である送信装置を判別することができない。 As described above, in visible light communication, for example, there is a technique for notifying information using an optical signal emitted from an LED (hereinafter, “optical signal emitted from an LED” is also referred to as “LED emission signal” in the present application). Are known. The technique for notifying information using this LED light emission signal is, for example, when transmitting LED light emission signals having the same blinking pattern representing different meanings from two transmission devices, the transmission device that is the transmission source of the light emission signal Cannot be determined.

そのため、係る技術では、送信装置毎に、送出されたＬＥＤ発光信号を受信する受信装置を用意する必要がある。または、当該技術は、送信装置を識別可能な識別情報を、ＬＥＤ発光信号に含めて（つまり、付与して）送出する必要がある。従って、自装置の識別情報を、ＬＥＤ発光信号に含めて送出する機能を持たない既存の送信装置では、送信装置毎に、受信装置の導入が必要となるため、その装置の導入に高額な費用が必要となる。また、例えば、送信装置の開発者は、自装置の識別情報を、ＬＥＤ発光信号に含めて送出可能なように当該送信装置を設計する必要がある。即ち、当該技術では、設計費用の増加を招くだけでなく、機能追加による製造コストの増加を招く虞がある。 Therefore, in such a technique, it is necessary to prepare a receiving device that receives the transmitted LED light emission signal for each transmitting device. Alternatively, the technology needs to include identification information that can identify the transmission device in the LED light emission signal (that is, give it) and transmit the identification information. Therefore, in an existing transmission device that does not have a function of transmitting identification information of its own device in an LED light emission signal, it is necessary to introduce a reception device for each transmission device. Therefore, it is expensive to introduce the device. Is required. Further, for example, the developer of the transmission device needs to design the transmission device so that identification information of the device itself can be included in the LED light emission signal and transmitted. In other words, this technique may not only increase the design cost but also increase the manufacturing cost due to the addition of functions.

さらに、係る技術では、係る識別情報や送信装置が送出する明滅パターンからなる発光信号（通信プロトコル）が表す意味を、送信装置毎に、その送信装置に対応する受信装置が事前に知っている必要がある。即ち、当該技術では、送信装置から送出される明滅パターンからなる発光信号が表す意味を、受信装置に予め登録する作業が必要となる。 Furthermore, in such a technique, for each transmitting device, the receiving device corresponding to the transmitting device needs to know in advance the identification information and the meaning represented by the light emission signal (communication protocol) including the blinking pattern transmitted by the transmitting device. There is. In other words, in this technique, it is necessary to register in advance in the receiving device the meaning represented by the light emission signal composed of the blinking pattern transmitted from the transmitting device.

また、上述した特許文献１乃至特許文献５に開示された技術は、送信装置と受信装置との間において予め取り決められた通信プロトコルを利用することによって、送信装置から送出された各種情報を、復号することが記載されている。従って、当該開示された技術では、送信装置毎に通信プロトコルが異なる場合には、送信装置から送出された明滅パターンからなる発光信号を復号することができない。 In addition, the techniques disclosed in Patent Document 1 to Patent Document 5 described above decode various information transmitted from the transmission apparatus by using a communication protocol determined in advance between the transmission apparatus and the reception apparatus. It is described to do. Therefore, in the disclosed technique, when the communication protocol is different for each transmission device, it is not possible to decode the light emission signal composed of the blinking pattern transmitted from the transmission device.

そして、特許文献１乃至特許文献５に開示された技術は、明滅パターンからなる発光信号を復号することにより得られる低レートの情報を、例えば、利用者に通知する。そのため、当該開示された技術では、明滅パターンからなる発光信号によって伝達可能な、例えば、単純なコード情報のみを通知することとなる。即ち、当該開示された技術は、利用者にとって不明瞭な情報を通知することとなる。 The techniques disclosed in Patent Documents 1 to 5 notify, for example, a user with low-rate information obtained by decoding a light emission signal having a blinking pattern. Therefore, in the disclosed technique, only simple code information that can be transmitted by a light emission signal having a blinking pattern, for example, is notified. That is, the disclosed technique notifies information that is unclear to the user.

本発明の主たる目的は、通信プロトコルが異なる１つ以上の送信装置から発光信号を受信する場合であっても、発光信号を送出した送信装置を容易に特定すると共に、その発光信号に基づく情報を通知することが可能な情報通知装置等を提供することを主たる目的とする。 The main object of the present invention is to easily identify a transmission device that has transmitted a light emission signal and to receive information based on the light emission signal even when the light emission signal is received from one or more transmission devices having different communication protocols. The main purpose is to provide an information notification device or the like that can be notified.

上記の課題を達成すべく、本発明に係る情報通知装置は、以下の構成を備えることを特徴とする。 In order to achieve the above object, an information notification apparatus according to the present invention has the following configuration.

即ち、本発明に係る情報通知装置は、
特定すべき対象である送信装置を表す画像を構成する情報を含む画像情報に基づき特徴量を抽出すると共に、その特徴量に基づいて、１つ以上の送信装置の中から、明滅パターンからなる発光信号を送出する送信装置を特定し、前記特定した送信装置から送出された明滅パターンを表す第１のパターン情報を、前記画像情報から求め、
前記１つ以上の送信装置から送出される１つ以上の明滅パターンを表す第２のパターン情報を含む明滅パターン情報から、前記特定した送信装置に関連付けられた第２のパターン情報を求め、
前記求めた第２のパターン情報に前記第１のパターン情報が含まれるか否かを判別し、前記第１のパターン情報が含まれると判別する場合には、前記第２のパターン情報を基に送信情報を復号する画像認識手段と、
前記復号した送信情報を通知する制御手段と、
を備えることを特徴とする。 That is, the information notification device according to the present invention is
A feature amount is extracted based on image information including information constituting an image representing a transmission device to be specified, and light emission including a blinking pattern is selected from one or more transmission devices based on the feature amount. Identifying a transmitting device that transmits a signal, and obtaining first pattern information representing a blinking pattern transmitted from the identified transmitting device from the image information;
Obtaining second pattern information associated with the identified transmission device from blinking pattern information including second pattern information representing one or more blinking patterns transmitted from the one or more transmission devices;
It is determined whether or not the first pattern information is included in the obtained second pattern information, and when it is determined that the first pattern information is included, the second pattern information is based on the second pattern information. Image recognition means for decoding transmission information;
Control means for notifying the decrypted transmission information;
It is characterized by providing.

或いは、同目的は、上記に示す情報通知装置を含む情報通知システムによっても達成される。 Alternatively, the object can be achieved by an information notification system including the information notification device described above.

また、同目的を達成すべく、本発明に係る情報通知方法は、以下の構成を備えることを特徴とする。 In order to achieve the object, an information notification method according to the present invention is characterized by having the following configuration.

即ち、本発明に係る情報通知方法は、
情報処理装置によって、
特定すべき対象である送信装置を表す画像を構成する情報を含む画像情報に基づき特徴量を抽出すると共に、その特徴量に基づいて、１つ以上の送信装置の中から、明滅パターンからなる発光信号を送出する送信装置を特定し、前記特定した送信装置から送出された明滅パターンを表す第１のパターン情報を、前記画像情報から求め、
前記１つ以上の送信装置から送出される１つ以上の明滅パターンを表す第２のパターン情報を含む明滅パターン情報から、前記特定した送信装置に関連付けられた第２のパターン情報を求め、
前記求めた第２のパターン情報に前記第１のパターン情報が含まれるか否かを判別し、前記第１のパターン情報が含まれると判別する場合には、前記第２のパターン情報を基に送信情報を復号し、
前記復号した送信情報を通知する
ことを特徴とする。 That is, the information notification method according to the present invention includes:
Depending on the information processing device,
A feature amount is extracted based on image information including information constituting an image representing a transmission device to be specified, and light emission including a blinking pattern is selected from one or more transmission devices based on the feature amount. Identifying a transmitting device that transmits a signal, and obtaining first pattern information representing a blinking pattern transmitted from the identified transmitting device from the image information;
Obtaining second pattern information associated with the identified transmission device from blinking pattern information including second pattern information representing one or more blinking patterns transmitted from the one or more transmission devices;
It is determined whether or not the first pattern information is included in the obtained second pattern information, and when it is determined that the first pattern information is included, the second pattern information is based on the second pattern information. Decrypt the transmitted information,
The decrypted transmission information is notified.

尚、同目的は、上記の各構成を有する情報通知装置及び情報通知方法を、コンピュータによって実現するコンピュータ・プログラム、及びそのコンピュータ・プログラムが格納されている、読み取り可能な記憶媒体によっても達成される。 This object is also achieved by a computer program for realizing the information notification apparatus and information notification method having the above-described configurations by a computer, and a readable storage medium in which the computer program is stored. .

本発明によれば、通信プロトコルが異なる１つ以上の送信装置から発光信号を受信する場合であっても、発光信号を送出した送信装置を容易に特定すると共に、その発光信号に基づく情報を通知することが可能な情報通知装置等を提供することができる。 According to the present invention, even when a light emission signal is received from one or more transmission devices having different communication protocols, the transmission device that has transmitted the light emission signal is easily identified and information based on the light emission signal is notified. An information notification device or the like that can be provided can be provided.

本発明の第１の実施形態における情報通知装置の構成を示すブロック図である。It is a block diagram which shows the structure of the information notification apparatus in the 1st Embodiment of this invention. 本発明の第１の実施形態における情報通知装置が画像情報に基づいて、送信装置を特定すると共に、その送信装置から送出された情報を通知する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which the information notification apparatus in the 1st Embodiment of this invention specifies the transmission apparatus based on image information, and notifies the information sent from the transmission apparatus. 本発明の第１の実施形態における情報通知装置が画像情報に基づいて、送信装置を特定すると共に、その送信装置から送出された情報を通知する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which the information notification apparatus in the 1st Embodiment of this invention specifies the transmission apparatus based on image information, and notifies the information sent from the transmission apparatus. 本発明の第２の実施形態における情報通知装置の構成を示すブロック図である。It is a block diagram which shows the structure of the information notification apparatus in the 2nd Embodiment of this invention. 本発明の第３の実施形態における情報通知装置を含む情報通知システムの構成を示すブロック図である。It is a block diagram which shows the structure of the information notification system containing the information notification apparatus in the 3rd Embodiment of this invention. 本発明の第３の実施形態における情報通知装置が画像情報に基づいて、送信装置を特定すると共に、その送信装置から送出された情報に基づきユーザフレンドリーな情報を通知する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which notifies a user friendly information based on the information which the information notification apparatus in the 3rd Embodiment of this invention specifies based on the image information, and transmits a transmission apparatus. 本発明の第３の実施形態における情報通知装置が画像情報に基づいて、送信装置を特定すると共に、その送信装置から送出された情報に基づきユーザフレンドリーな情報を通知する動作を示すフローチャートである。It is a flowchart which shows the operation | movement which notifies a user friendly information based on the information which the information notification apparatus in the 3rd Embodiment of this invention specifies based on the image information, and transmits a transmission apparatus. 本発明に係る各実施形態を実現可能な情報処理装置のハードウェア構成を例示的に説明するブロック図である。It is a block diagram explaining illustratively the hardware constitutions of the information processor which can realize each embodiment concerning the present invention.

以下、本発明の実施形態について図面を参照して詳細に説明する。 Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

＜第１の実施形態＞
図１は、本発明の第１の実施形態における情報通知装置１の構成を示すブロック図である。 <First Embodiment>
FIG. 1 is a block diagram showing a configuration of an information notification device 1 according to the first embodiment of the present invention.

図１において、情報通知装置１は、制御部２と、画像認識部３とを備える。 In FIG. 1, the information notification device 1 includes a control unit 2 and an image recognition unit 3.

より具体的に、まず、制御部２は、特定すべき対象である対象装置を表す画像（画像を構成する情報）を含む画像情報１０１を解析することによって、画像情報１０１に当該対象装置から送出された明滅パターンからなる発光信号が含まれているか否かを判別する。制御部２は、判別した結果、画像情報１０１に当該対象装置から送出された明滅パターンからなる発光信号が含まれていると判別する場合に、画像情報１０１を記憶するよう記憶部４を制御する。 More specifically, first, the control unit 2 analyzes the image information 101 including the image (information constituting the image) representing the target device that is the target to be specified, and sends the image information 101 to the image information 101 from the target device. It is determined whether or not a light emission signal having a blinking pattern is included. As a result of the determination, the control unit 2 controls the storage unit 4 to store the image information 101 when determining that the image information 101 includes a light emission signal composed of a blinking pattern transmitted from the target device. .

また、制御部２は、後述する画像認識部３により復号された送信情報を、例えば、利用者に対して通知する。 Further, the control unit 2 notifies the user of transmission information decoded by the image recognition unit 3 described later, for example.

ここで、明滅パターンからなる発光信号とは、例えば、不図示の送信装置（例えば、図４に示す送信装置２１）によって、送信情報を符号化すると共に、符号化された送信情報を、光の明滅パターンを用いて送出された信号である。 Here, the light emission signal having the blinking pattern is, for example, encoding transmission information by a transmission device (not illustrated) (for example, the transmission device 21 illustrated in FIG. 4), and converting the encoded transmission information to the light signal. It is a signal sent using a blinking pattern.

尚、以下の説明では、説明の便宜上、一例として、「明滅パターンからなる発光信号」を、単に「発光信号パターン」とも記す（以下、各実施形態においても同様）。 In the following description, for convenience of description, as an example, “light emission signal including a blinking pattern” is also simply referred to as “light emission signal pattern” (hereinafter, the same applies to each embodiment).

また、画像情報１０１とは、例えば、カメラ等の撮影機器によって撮像された対象装置を表す画像を含むところの、時系列な複数の画像フレームによって構成される動画像である。 The image information 101 is a moving image composed of a plurality of time-series image frames including an image representing a target device imaged by a photographing device such as a camera.

ここで、対象装置とは、画像情報１０１に含まれる明滅パターンからなる発光信号を送出する特定すべき送信装置である。 Here, the target device is a transmission device to be specified that transmits a light emission signal including a blinking pattern included in the image information 101.

尚、本実施形態では、説明の便宜上、一例として、画像情報１０１は、時系列な複数の画像フレームによって構成される動画像を例に説明した。しかしながら本発明に係る実施形態は、係る構成に限定されない。 In the present embodiment, for convenience of explanation, the image information 101 has been described by taking a moving image composed of a plurality of time-series image frames as an example. However, the embodiment according to the present invention is not limited to such a configuration.

画像情報１０１は、時系列な複数の画像フレームによって構成される画像を採用してもよい。また、例えば、画像情報１０１は、特定すべき対象である対象装置を表す画像から抽出された特徴量を採用してもよい。 The image information 101 may employ an image composed of a plurality of time-series image frames. Further, for example, the image information 101 may employ a feature amount extracted from an image representing a target device that is a target to be specified.

次に、画像認識部３は、記憶部４に記憶された画像情報１０１に基づく画像処理によって、所定の時間に亘って対象装置から送出された発光信号パターンを表す情報を求める。 Next, the image recognition unit 3 obtains information representing the light emission signal pattern transmitted from the target apparatus over a predetermined time by image processing based on the image information 101 stored in the storage unit 4.

ここで、画像認識部３が求めた発光信号パターンを表す情報とは、画像認識部３が画像情報１０１に基づき所定の時間に亘って求めた対象装置から送出された発光信号パターンを表す情報である。そのため、当該発光信号パターンを表す情報は、対象装置から送出される発光信号パターンの全部、または一部を表す情報を含む。 Here, the information representing the light emission signal pattern obtained by the image recognition unit 3 is information representing the light emission signal pattern transmitted from the target device obtained by the image recognition unit 3 over a predetermined time based on the image information 101. is there. Therefore, the information representing the light emission signal pattern includes information representing all or part of the light emission signal pattern transmitted from the target device.

尚、以下の説明では、説明の便宜上、一例として、「画像情報１０１に含まれる発光信号パターンを表す情報」を「第１のパターン情報」と称する（以下、各実施形態においても同様）。 In the following description, for convenience of description, as an example, “information indicating a light emission signal pattern included in the image information 101” is referred to as “first pattern information” (hereinafter, the same applies to each embodiment).

また、画像認識部３は、記憶部４に記憶された画像情報１０１を解析することによって、１つ以上の送信装置の中から、発光信号パターンを送出した対象装置を特定する。 Further, the image recognition unit 3 analyzes the image information 101 stored in the storage unit 4 to identify the target device that has transmitted the light emission signal pattern from one or more transmission devices.

より具体的に、画像認識部３は、画像情報１０１に基づいて、特定すべき対象である対象装置の特徴量を抽出する。画像認識部３は、抽出した特徴量に基づいて、記憶部４に記憶された特徴量情報１０２を参照する。そして、画像認識部３は、特徴量情報１０２の中から抽出した特徴量に関連付けられた対象装置を識別可能な情報である装置識別子（Ｉｄｅｎｔｉｆｉｅｒ：以降、「ＩＤ」と称する）を求める。 More specifically, the image recognition unit 3 extracts the feature amount of the target device that is the target to be specified based on the image information 101. The image recognition unit 3 refers to the feature amount information 102 stored in the storage unit 4 based on the extracted feature amount. Then, the image recognition unit 3 obtains a device identifier (Identifier: hereinafter referred to as “ID”) that is information that can identify the target device associated with the feature amount extracted from the feature amount information 102.

ここでは、特徴量情報１０２について、より具体的に説明する。 Here, the feature amount information 102 will be described more specifically.

特徴量情報１０２は、１つ以上の送信装置の装置ＩＤと、その送信装置毎に、送信装置の特徴量を表す情報とを含む。即ち、特徴量情報１０２は、送信装置毎に、管理ＩＤと、送信装置の特徴量を表す情報とが関連付けられた情報である。 The feature amount information 102 includes a device ID of one or more transmission devices and information representing the feature amount of the transmission device for each transmission device. That is, the feature amount information 102 is information in which a management ID and information representing the feature amount of the transmission device are associated with each transmission device.

画像認識部３は、求めた装置ＩＤに基づいて、特定すべき対象である対象装置から送出される明滅パターンを表す情報（第２のパターン情報）を求める。 Based on the obtained device ID, the image recognition unit 3 obtains information (second pattern information) representing the blinking pattern transmitted from the target device that is the target to be specified.

より具体的に、画像認識部３は、求めた装置ＩＤに基づいて、明滅パターン情報１０３を参照する。画像認識部３は、明滅パターン情報１０３の中から装置ＩＤに関連付けられた明滅パターンを表す情報（第２のパターン情報）を求める。 More specifically, the image recognition unit 3 refers to the blinking pattern information 103 based on the obtained device ID. The image recognition unit 3 obtains information (second pattern information) representing the blinking pattern associated with the device ID from the blinking pattern information 103.

ここで、明滅パターンを表す情報（第２のパターン情報）とは、対象装置から送出される発光信号パターンを表す情報である。 Here, the information indicating the blinking pattern (second pattern information) is information indicating the light emission signal pattern transmitted from the target device.

尚、以下の説明では、説明の便宜上、一例として、「特定すべき対象である対象装置から送出さる明滅パターンを表す情報」を「第２のパターン情報」と称する（以下、各実施形態においても同様）。 In the following description, for convenience of description, as an example, “information indicating a blinking pattern transmitted from a target device that is a target to be specified” is referred to as “second pattern information” (hereinafter, also in each embodiment). The same).

次に、画像認識部３は、求めた第２のパターン情報に第１のパターン情報が含まれるか否かを判別する。画像認識部３は、判別した結果、第２のパターン情報に第１のパターン情報が含まれると判別する場合には、求めた第２のパターン情報を基に送信情報を復号する。画像認識部３は、復号した送信情報を制御部２に与える。 Next, the image recognition unit 3 determines whether or not the first pattern information is included in the obtained second pattern information. When determining that the second pattern information includes the first pattern information as a result of the determination, the image recognition unit 3 decodes the transmission information based on the obtained second pattern information. The image recognition unit 3 gives the decoded transmission information to the control unit 2.

ここでは、明滅パターン情報１０３について、より具体的に説明する。 Here, the blinking pattern information 103 will be described more specifically.

明滅パターン情報１０３は、１つ以上の送信装置の装置ＩＤと、その送信装置から送出される１つ以上の明滅パターンを表す情報（第２のパターン情報）とを含む。即ち、明滅パターン情報１０３は、装置ＩＤと、第２のパターン情報とが関連付けられた情報を含む。 The blinking pattern information 103 includes device IDs of one or more transmission devices and information (second pattern information) representing one or more blinking patterns transmitted from the transmission device. That is, the blinking pattern information 103 includes information in which the device ID is associated with the second pattern information.

記憶部４は、画像情報１０１、特徴量情報１０２及び明滅パターン情報１０３を記憶する。 The storage unit 4 stores image information 101, feature amount information 102, and blinking pattern information 103.

ここで、記憶部４は、コンピュータによるデータの読み書きが可能な不揮発性の記憶デバイスである。より具体的に、一例として、記憶部４は、サーバ装置等の電子機器に搭載されたハードディスクドライブ（Ｈａｒｄ＿ｄｉｓｋ＿ｄｒｉｖｅ：以降、「ＨＤＤ」と称する）等の不揮発性の記憶装置を採用することができる。 Here, the storage unit 4 is a nonvolatile storage device that can read and write data by a computer. More specifically, as an example, the storage unit 4 may employ a nonvolatile storage device such as a hard disk drive (Hard_disk_drive: hereinafter referred to as “HDD”) mounted in an electronic device such as a server device.

また、一例として、記憶部４は、不図示の通信ネットワークに接続されたストレージデバイス（不図示）を採用してもよい。但し、本実施形態を例に説明する本発明は、前述した構成には限定されない（以下の実施形態においても同様）。 As an example, the storage unit 4 may employ a storage device (not shown) connected to a communication network (not shown). However, the present invention described using this embodiment as an example is not limited to the above-described configuration (the same applies to the following embodiments).

以下の説明において、より具体的に、本実施形態における情報通知装置１の動作について説明する。 In the following description, the operation of the information notification apparatus 1 in the present embodiment will be described more specifically.

図２Ａ及び図２Ｂは、本発明の第１の実施形態における情報通知装置１が画像情報１０１に基づいて、送信装置（例えば、図４に示す送信装置２１）を特定すると共に、その送信装置から送出された情報を通知する動作を示すフローチャートである。係るフローチャートに沿って情報通知装置１の動作手順を説明する。 2A and 2B, the information notification apparatus 1 according to the first embodiment of the present invention specifies a transmission apparatus (for example, the transmission apparatus 21 shown in FIG. 4) based on the image information 101, and from the transmission apparatus. It is a flowchart which shows the operation | movement which notifies the transmitted information. The operation procedure of the information notification apparatus 1 will be described along the flowchart.

以下の説明では、説明の便宜上、一例として、特定する対象装置である送信装置から明滅パターンからなる発光信号が送出されることとする。 In the following description, for convenience of description, as an example, a light emission signal having a blinking pattern is transmitted from a transmission device that is a target device to be identified.

尚、説明の便宜上、上述した構成を例に説明するが、本実施形態を例に説明する本発明は、前述した構成にはこれに限定されない。 For convenience of explanation, the above-described configuration will be described as an example. However, the present invention described by taking this embodiment as an example is not limited to the above-described configuration.

ステップＳ１：
制御部２は、画像情報１０１に基づいて、画像情報１０１に対象装置から送出された発光信号パターンが含まれているか否かを判別する。即ち、制御部２は、画像情報１０１に基づいて、その画像情報１０１に含まれる当該対象装置から送出された発光信号パターンを表す情報の有無を判別する。 Step S1:
Based on the image information 101, the control unit 2 determines whether or not the light emission signal pattern transmitted from the target device is included in the image information 101. That is, based on the image information 101, the control unit 2 determines the presence or absence of information representing the light emission signal pattern sent from the target device included in the image information 101.

より具体的に、一例として、制御部２は、画像情報１０１を構成する画像フレームを格子状にした複数の部分画像（グリッド）に分割する（或いは、分割された複数の部分画像として扱う）。そして、制御部２は、分割した特定のグリッドにおいて、光学情報に一定の閾値以上の時間的な変化があった場合に、画像情報１０１に当該対象装置から送出された発光信号パターンが含まれていると判別する。 More specifically, as an example, the control unit 2 divides an image frame constituting the image information 101 into a plurality of partial images (grids) in a grid pattern (or treats them as a plurality of divided partial images). Then, the control unit 2 includes the light emission signal pattern transmitted from the target device in the image information 101 when the optical information has a temporal change equal to or greater than a certain threshold in the divided specific grid. It is determined that there is.

尚、制御部２が画像情報１０１に基づき発光信号パターンの有無を判別する技術自体は、現在では一般的な技術を採用することができるので、本実施形態における詳細な説明は省略する（以下、各実施形態においても同様）。 Note that the technology itself for determining the presence / absence of the light emission signal pattern based on the image information 101 by the control unit 2 can now employ a general technology, and thus a detailed description in the present embodiment will be omitted (hereinafter, referred to as the following). The same applies to each embodiment).

ステップＳ１において「ＹＥＳ」：
制御部２は、画像情報１０１に当該対象装置から送出された発光信号パターンが含まれているか否かを判別した結果、画像情報１０１に当該発光信号パターンが含まれていると判別する場合に、処理をステップＳ２に進める。 "YES" in step S1:
When determining that the image information 101 includes the light emission signal pattern transmitted from the target device, the control unit 2 determines that the image information 101 includes the light emission signal pattern. The process proceeds to step S2.

ステップＳ１において「ＮＯ」：
制御部２は、画像情報１０１に当該対象装置から送出された発光信号パターンが含まれているか否かを判別した結果、画像情報１０１に当該発光信号パターンが含まれていないと判別する場合に、次の画像フレームの処理を進める。即ち、制御部２は、処理をステップＳ１に戻す。 "NO" in step S1:
When determining that the light emission signal pattern transmitted from the target device is included in the image information 101 as a result of determining whether the light emission signal pattern is not included in the image information 101, the control unit 2 Proceed with the next image frame. That is, the control unit 2 returns the process to step S1.

ステップＳ２：
制御部２は、画像情報１０１を記憶するよう記憶部４を制御する。 Step S2:
The control unit 2 controls the storage unit 4 to store the image information 101.

これにより、記憶部４は、画像情報１０１を記憶する。 As a result, the storage unit 4 stores the image information 101.

ステップＳ３：
画像認識部３は、記憶部４に記憶された画像情報１０１に基づく画像処理によって、所定の時間に亘って対象装置から送出された発光信号パターンを表す情報（第１のパターン情報）を求める。即ち、画像認識部３は、画像情報１０１に基づいて、所定の時間に亘って画像情報１０１に含まれる第１のパターン情報を求める。 Step S3:
The image recognition unit 3 obtains information (first pattern information) representing a light emission signal pattern sent from the target apparatus over a predetermined time by image processing based on the image information 101 stored in the storage unit 4. That is, the image recognition unit 3 obtains the first pattern information included in the image information 101 over a predetermined time based on the image information 101.

尚、画像認識部３が画像情報１０１に基づく画像処理によって、発光信号パターンを表す情報を求める技術自体は、現在では一般的な技術を採用することができるので、本実施形態における詳細な説明は省略する（以下の実施形態においても同様）。 Note that the technology itself for obtaining information representing the light emission signal pattern by the image processing based on the image information 101 by the image recognition unit 3 can currently employ a general technology. Omitted (the same applies to the following embodiments).

ステップＳ４：
画像認識部３は、画像情報１０１に基づいて、対象装置の特徴量を抽出する。 Step S4:
The image recognition unit 3 extracts the feature amount of the target device based on the image information 101.

尚、画像認識部３が画像情報１０１に基づいて、対象装置の特徴量を抽出する技術自体は、現在では一般的な技術を採用することができるので、本実施形態における詳細な説明は省略する（以下の実施形態においても同様）。 Note that, since the technology itself in which the image recognition unit 3 extracts the feature amount of the target device based on the image information 101 can be a general technology at present, detailed description in this embodiment is omitted. (The same applies to the following embodiments).

ステップＳ５：
画像認識部３は、抽出した特徴量に基づいて、記憶部４に記憶された特徴量情報１０２を参照する。画像認識部３は、特徴量情報１０２の中から抽出した特徴量に関連付けられた対象装置を識別可能な装置ＩＤを求める。 Step S5:
The image recognition unit 3 refers to the feature amount information 102 stored in the storage unit 4 based on the extracted feature amount. The image recognition unit 3 obtains a device ID that can identify the target device associated with the feature amount extracted from the feature amount information 102.

ステップＳ６：
画像認識部３は、求めた装置ＩＤに基づいて、明滅パターン情報１０３を参照する。画像認識部３は、明滅パターン情報１０３の中から装置ＩＤに関連付けられた発光信号パターンを表す情報（第２のパターン情報）を求める。 Step S6:
The image recognition unit 3 refers to the blinking pattern information 103 based on the obtained device ID. The image recognition unit 3 obtains information (second pattern information) indicating the light emission signal pattern associated with the device ID from the blinking pattern information 103.

ステップＳ７：
画像認識部３は、第２のパターン情報に第１のパターン情報が含まれるか否かを判別する。 Step S7:
The image recognition unit 3 determines whether or not the first pattern information is included in the second pattern information.

これにより、画像認識部３は、例えば、ステップＳ３において求めた第１のパターン情報が送信装置から送出された発光信号パターンの一部を表す情報であっても、発光信号パターンの全てを表す情報（第２のパターン情報）を求めることができる。 Thereby, for example, the image recognition unit 3 is information indicating all of the light emission signal pattern even if the first pattern information obtained in step S3 is information indicating a part of the light emission signal pattern transmitted from the transmission device. (Second pattern information) can be obtained.

ステップＳ７において「ＹＥＳ」：
画像認識部３は、第２のパターン情報に第１のパターン情報が含まれるか否かを判別した結果、第２のパターン情報に第１のパターン情報が含まれると判別する場合に、処理をステップＳ８に進める。 "YES" in step S7:
When the image recognition unit 3 determines whether or not the second pattern information includes the first pattern information, the image recognition unit 3 performs processing when determining that the second pattern information includes the first pattern information. Proceed to step S8.

ステップＳ７において「ＮＯ」：
画像認識部３は、第２のパターン情報に第１のパターン情報が含まれるか否かを判別した結果、第２のパターン情報に第１のパターン情報が含まれないと判別する場合に、処理をステップＳ９に進める。 “NO” in step S7:
When the image recognition unit 3 determines that the first pattern information is not included in the second pattern information as a result of determining whether the second pattern information includes the first pattern information, Advances to step S9.

ステップＳ８：
画像認識部３は、求めた発光信号パターンを表す情報（第２のパターン情報）を基に送信情報を復号する。画像認識部３は、復号した送信情報を制御部２に与える。 Step S8:
The image recognizing unit 3 decodes the transmission information based on information (second pattern information) representing the obtained light emission signal pattern. The image recognition unit 3 gives the decoded transmission information to the control unit 2.

ステップＳ９：
画像認識部３は、求めた装置ＩＤに基づいて、明滅パターン情報１０３を参照する。画像認識部３は、明滅パターン情報１０３の中から装置ＩＤに関連付けられた第２のパターン情報を求める。即ち、画像認識部３は、明滅パターン情報１０３の中から、ステップＳ７において判別に用いた第２のパターン情報と異なる他の第２のパターン情報を求める。画像認識部３は、処理をステップＳ７に戻す。 Step S9:
The image recognition unit 3 refers to the blinking pattern information 103 based on the obtained device ID. The image recognition unit 3 obtains second pattern information associated with the device ID from the blinking pattern information 103. That is, the image recognition unit 3 obtains other second pattern information different from the second pattern information used for the determination in step S7 from the blinking pattern information 103. The image recognition unit 3 returns the process to step S7.

尚、画像認識部３は、第２のパターン情報に第１のパターン情報が含まれると判別するまでの間、ステップＳ７及びＳ８において説明した処理を繰り返し実行する。また、画像認識部３は、明滅パターン情報１０３に含まれる装置ＩＤに関連付けられた第２のパターン情報のうち、全ての第２のパターン情報に第１のパターン情報が含まれないと判別する場合には、処理を終了する。 The image recognition unit 3 repeatedly executes the processes described in steps S7 and S8 until it is determined that the first pattern information is included in the second pattern information. When the image recognition unit 3 determines that all the second pattern information among the second pattern information associated with the device ID included in the blinking pattern information 103 does not include the first pattern information. Then, the process ends.

ステップＳ１０：
制御部２は、画像認識部３から得た送信情報を通知する。 Step S10:
The control unit 2 notifies the transmission information obtained from the image recognition unit 3.

尚、上述した本実施形態では、説明の便宜上、一例として、画像認識部３は、ステップＳ３、ステップＳ４、ステップＳ５及びステップＳ６の順に処理を実行する構成を例に説明した。しかしながら本発明に係る実施形態は、係る構成に限定されない。画像認識部３は、ステップＳ４乃至ステップＳ６に示す処理を実行後にステップＳ３に示す処理を実行する構成を採用してもよい。 In the above-described embodiment, for the sake of convenience of explanation, as an example, the image recognition unit 3 has been described with an example of a configuration in which processing is performed in the order of step S3, step S4, step S5, and step S6. However, the embodiment according to the present invention is not limited to such a configuration. The image recognition unit 3 may adopt a configuration in which the process shown in step S3 is executed after the process shown in steps S4 to S6 is executed.

また、上述した本実施形態では、説明の便宜上、一例として、記憶部４は、画像情報１０１、特徴量情報１０２及び明滅パターン情報１０３を記憶する構成を例に説明した。しかしながら本発明に係る実施形態は、係る構成に限定されない。記憶部４は、画像情報１０１と、特徴量情報１０２及び明滅パターン情報１０３の一部の情報とを記憶する構成を採用してもよい。 In the above-described embodiment, for the sake of convenience of explanation, the storage unit 4 has been described as an example of a configuration in which the image information 101, the feature amount information 102, and the blinking pattern information 103 are stored. However, the embodiment according to the present invention is not limited to such a configuration. The storage unit 4 may adopt a configuration in which the image information 101 and some information of the feature amount information 102 and the blinking pattern information 103 are stored.

その場合に、特徴量情報１０２及び明滅パターン情報１０３の他の情報は、例えば、記憶部４と異なる他の不揮発性の記憶装置や、ネットワークストレージデバイスなどに記憶する構成を採用してもよい。 In this case, a configuration may be adopted in which other information on the feature amount information 102 and the blinking pattern information 103 is stored in, for example, another nonvolatile storage device different from the storage unit 4 or a network storage device.

これにより、画像認識部３は、記憶部４に記憶された特徴量情報１０２及び明滅パターン情報１０３に所望の情報が含まれない場合には、例えば、記憶部４と異なる他の不揮発性の記憶装置に記憶された特徴量情報１０２及び明滅パターン情報１０３から所望の情報を求めることができる。 As a result, when the desired amount information is not included in the feature amount information 102 and the blinking pattern information 103 stored in the storage unit 4, the image recognition unit 3, for example, another nonvolatile storage different from the storage unit 4. Desired information can be obtained from the feature amount information 102 and the blinking pattern information 103 stored in the apparatus.

また、上述した本実施形態では、説明の便宜上、一例として、情報通知装置１は、１つの対象装置に対して上述した処理を実行する構成を例に説明した。しかしながら本発明に係る実施形態は、係る構成に限定されない。情報通知装置１は、１つ以上の対象装置に対して上述した処理を実行する構成を採用してもよい。その場合に、情報通知装置１は、対象装置毎に、上述した処理を実行する構成を採用してもよい。 Moreover, in this embodiment mentioned above, the information notification apparatus 1 demonstrated as an example the structure which performs the process mentioned above with respect to one object apparatus as an example for convenience of explanation. However, the embodiment according to the present invention is not limited to such a configuration. The information notification device 1 may adopt a configuration that executes the above-described processing on one or more target devices. In that case, the information notification device 1 may adopt a configuration that executes the above-described processing for each target device.

このように本実施の形態に係る情報通知装置１によれば、通信プロトコルが異なる１つ以上の送信装置から発光信号を受信する場合であっても、発光信号を送出した送信装置を容易に特定すると共に、その発光信号に基づく情報を通知することができる。その理由は、以下に述べる通りである。 As described above, according to the information notification device 1 according to the present embodiment, even when a light emission signal is received from one or more transmission devices having different communication protocols, the transmission device that has transmitted the light emission signal is easily identified. In addition, information based on the light emission signal can be notified. The reason is as described below.

即ち、情報通知装置１の画像認識部３は、発光信号を送出する対象装置を撮像した画像情報１０１に基づいて、対象装置の特徴量を抽出する。そして、画像認識部３は、抽出した特徴量によって対象装置を特定することができるからである。これにより、情報通知装置１は、送信装置の識別情報を、発光信号に含めて送出する機能を持たない既存の送信装置であっても、光通信を実現することができるからである。また、画像認識部３は、上述した処理を実行するに際して、自装置と異なる他の記憶部４に記憶された特徴量情報１０２及び明滅パターン情報１０３を参照すると共に、上述した処理を実行する。そのため、例えば、管理者は、情報通知装置１に対して通信プロトコルを予め取り決める必要がないからである。 That is, the image recognition unit 3 of the information notification device 1 extracts the feature amount of the target device based on the image information 101 obtained by imaging the target device that transmits the light emission signal. This is because the image recognition unit 3 can identify the target device based on the extracted feature amount. This is because the information notification device 1 can realize optical communication even with an existing transmission device that does not have a function of transmitting the identification information of the transmission device in the light emission signal. Further, when executing the above-described processing, the image recognizing unit 3 refers to the feature amount information 102 and the blinking pattern information 103 stored in another storage unit 4 different from its own device, and executes the above-described processing. Therefore, for example, the administrator does not need to negotiate a communication protocol for the information notification apparatus 1 in advance.

また、画像認識部３は、画像情報１０１に基づいて、第１のパターン情報を求める。そして、画像認識部３は、特定した対象装置の装置ＩＤに基づいて、明滅パターン情報１０３の中から送信装置から送出された第２のパターン情報を求める。そして、画像認識部３は、求めた第２のパターン情報を基に送信情報を復号する。さらに、制御部２は、画像認識部３から得られた送信情報を通知することができるからである。 In addition, the image recognition unit 3 obtains first pattern information based on the image information 101. And the image recognition part 3 calculates | requires the 2nd pattern information sent from the transmission apparatus from the blinking pattern information 103 based on apparatus ID of the specified target apparatus. Then, the image recognition unit 3 decodes the transmission information based on the obtained second pattern information. Furthermore, the control unit 2 can notify the transmission information obtained from the image recognition unit 3.

これにより、画像認識部３は、求めた第１のパターン情報が対象装置から送出された発光信号パターン（第２のパターン情報）の一部を表す情報であっても、第２のパターン情報を基に送信情報を復号することができる。また、制御部２は、復号された送信情報を通知することができる。 As a result, the image recognition unit 3 uses the second pattern information even if the obtained first pattern information is information representing a part of the light emission signal pattern (second pattern information) transmitted from the target device. The transmission information can be decoded based on this. In addition, the control unit 2 can notify the decoded transmission information.

＜第２の実施形態＞
次に、上述した本発明の第１の実施形態に係る情報通知装置１を基本とする第２の実施形態について説明する。以下の説明においては、本実施形態に係る特徴的な部分を中心に説明する。その際、上述した各実施形態と同様な構成については、同一の参照番号を付すことにより、重複する説明は省略する。 <Second Embodiment>
Next, a second embodiment based on the information notification apparatus 1 according to the first embodiment of the present invention described above will be described. In the following description, the characteristic part according to the present embodiment will be mainly described. At this time, the same reference numerals are assigned to the same configurations as those in the above-described embodiments, and duplicate descriptions are omitted.

本発明の第２の実施形態における情報通知装置１０について、図３を参照して説明する。 An information notification apparatus 10 according to a second embodiment of the present invention will be described with reference to FIG.

図３は、本発明の第２の実施形態における情報通知装置１０の構成を示すブロック図である。 FIG. 3 is a block diagram showing the configuration of the information notification device 10 according to the second embodiment of the present invention.

図３において、情報通知装置１０は、制御部１１と、画像認識部３とを備える。また、記憶部４は、さらに、通知情報１０４を記憶する。 In FIG. 3, the information notification device 10 includes a control unit 11 and an image recognition unit 3. The storage unit 4 further stores notification information 104.

本実施形態において、情報通知装置１０は、制御部１１が画像認識部３から得た送信情報を通知するのではなく、発光信号に基づく情報を、利用者にとって容易に識別可能なように通知する機能を、さらに備える点が第１の実施形態において説明した情報通知装置１０と異なる。 In the present embodiment, the information notification device 10 does not notify the transmission information obtained from the image recognition unit 3 by the control unit 11, but notifies information based on the light emission signal so that it can be easily identified by the user. The information notification device 10 described in the first embodiment is different from the information notification device 10 in that the functions are further provided.

制御部１１は、対象装置から発光信号により送出された通信情報を、利用者にとって容易に識別可能な通知情報に変換すると共に、変換した通知情報を通知する。即ち、制御部１１は、利用者にとってユーザフレンドリーな情報を提供する。 The control unit 11 converts the communication information transmitted from the target device as a light emission signal into notification information that can be easily identified by the user, and notifies the converted notification information. That is, the control unit 11 provides user-friendly information for the user.

より具体的に、制御部１１は、装置ＩＤと、明滅パターンを表す情報（第２のパターン情報）とに基づいて、通知情報１０４を参照する。制御部１１は、通知情報１０４の中から装置ＩＤと、第２のパターン情報とに関連付けられた通知情報を求める。 More specifically, the control unit 11 refers to the notification information 104 based on the device ID and information (second pattern information) indicating the blinking pattern. The control unit 11 obtains notification information associated with the device ID and the second pattern information from the notification information 104.

尚、以下の説明では、説明の便宜上、一例として、「制御部１１が求めた通知情報」を「第１の通知情報」と称する（以下、各実施形態においても同様）。 In the following description, for convenience of explanation, as an example, “notification information obtained by the control unit 11” is referred to as “first notification information” (hereinafter, the same applies to each embodiment).

ここでは、通知情報１０４について、より具体的に説明する。 Here, the notification information 104 will be described more specifically.

通知情報１０４は、１つ以上の送信装置の装置ＩＤと、その装置ＩＤ毎に、１つ以上の明滅パターンを表す情報と、送信装置及び明滅パターンを表す情報に対応する第１の通知情報とを含む。即ち、通知情報１０４は、装置ＩＤをキーとして、明滅パターンを表す情報と、第１の通知情報とが関連付けられた情報である。 The notification information 104 includes device IDs of one or more transmission devices, information representing one or more blink patterns for each device ID, and first notification information corresponding to information representing the transmission device and the blink pattern. including. That is, the notification information 104 is information in which information representing a blinking pattern is associated with the first notification information using the device ID as a key.

より具体的に、通知情報１０４の第１の通知情報は、例えば、復号された送信情報が「エラーコード」を含む場合に、その送信情報を、利用者にとって識別可能なように表したメッセージ「Ａ部の故障を検出しました」などの情報を含む構成を採用してもよい。または、例えば、第１の通知情報は、「エラーコード」に関するユーザーマニュアルなどの参考情報の実体を含む構成を採用してもよい。 More specifically, the first notification information of the notification information 104 is, for example, a message “a message that represents the transmission information that can be identified by the user when the decoded transmission information includes an“ error code ”. A configuration including information such as “A failure in part A has been detected” may be employed. Alternatively, for example, the first notification information may be configured to include an entity of reference information such as a user manual related to “error code”.

さらに、他の具体例として、第１の通知情報は、例えば、復号された送信情報が「ＵＲＬ」（Ｕｎｉｆｏｒｍ＿Ｒｅｓｏｕｒｃｅ＿Ｌｏｃａｔｏｒ）や「ＵＲＩ」（Ｕｎｉｆｏｒｍ＿Ｒｅｓｏｕｒｃｅ＿Ｉｄｅｎｔｉｆｉｅｒ）を含む場合には、その送信情報を、利用者にとって識別可能なように表した情報「ＵＲＬ」や「ＵＲＩ」を含む構成を採用してもよい。 As another specific example, the first notification information includes, for example, when the decoded transmission information includes “URL” (Uniform_Resource_Locator) or “URI” (Uniform_Resource_Identifier), A configuration including information “URL” and “URI” expressed so as to be identifiable may be adopted.

また、他の具体例として、第１の通知情報は、例えば、復号された送信情報が「店舗名」を含む場合には、その送信情報を、利用者にとって識別可能なように表した「Ｂ店では、セール中です」などの店舗に関連する情報や「クーポン」を表す情報を含む構成を採用してもよい。 As another specific example, the first notification information includes, for example, “B” that represents the transmission information that can be identified by the user when the decoded transmission information includes “store name”. A configuration including information related to the store such as “Sale at a store” and information indicating a “coupon” may be adopted.

そして、他の具体例として、第１の通知情報は、例えば、カスタマーセンターの連絡先を表す情報やエラーコードにより示された故障に対する作業の手順を表す情報を含む構成を採用してもよい。 As another specific example, the first notification information may include, for example, a configuration including information indicating a contact information of a customer center and information indicating a work procedure for a failure indicated by an error code.

このように、第１の通知情報は、復号された送信情報が意図する情報を、利用者にとって、よりわかりやすく表された情報を含むことが望ましい。
但し、本実施形態を例に説明する本発明は、前述した構成には限定されない（以下、各実施形態においても同様）。 As described above, it is desirable that the first notification information includes the information intended by the decrypted transmission information that is more easily expressed for the user.
However, the present invention described using this embodiment as an example is not limited to the configuration described above (hereinafter, the same applies to each embodiment).

次に、制御部１１は、求めた第１の通知情報に基づいて、ユーザフレンドリーな情報を通知する。即ち、制御部１１は、求めた第１の通知情報に基づいて、送信情報が意図する（関連する）情報を、利用者が容易に識別可能な態様よって通知する。 Next, the control unit 11 notifies user-friendly information based on the obtained first notification information. That is, based on the obtained first notification information, the control unit 11 notifies the information intended by the transmission information (related) in a manner that allows the user to easily identify the information.

ここで、より具体的に、制御部１１は、例えば、復号された送信情報が「エラーコード」を含む場合に、求めた第１の通知情報に基づいて、「エラーコード」を表すメッセージを含む情報を、利用者が識別可能な態様によって通知する構成を採用してもよい。または、制御部１１は、例えば、「エラーコード」に関するユーザーマニュアルなどの参考情報を提示することにより通知する構成を採用してもよい。 More specifically, for example, when the decoded transmission information includes “error code”, the control unit 11 includes a message indicating “error code” based on the obtained first notification information. You may employ | adopt the structure which notifies information by the aspect which a user can identify. Or the control part 11 may employ | adopt the structure which notifies by showing reference information, such as a user manual regarding "error code", for example.

さらに、他の具体例として、制御部１１は、例えば、復号された送信情報が「ＵＲＬ」や「ＵＲＩ」を含む場合には、求めた第１の通知情報に基づいて、「ＵＲＬ」や「ＵＲＩ」を含む情報を、利用者が識別可能な態様によって通知する構成を採用してもよい。または、制御部１１は、例えば、「ＵＲＬ」や「ＵＲＩ」が示すＷｅｂサイトに画面遷移した態様を表す情報を提示することにより通知する構成を採用してもよい。 Further, as another specific example, when the decoded transmission information includes “URL” or “URI”, for example, the control unit 11 determines “URL” or “URL” based on the obtained first notification information. A configuration may be employed in which information including “URI” is notified in a manner that the user can identify. Or the control part 11 may employ | adopt the structure which notifies by showing the information showing the aspect which changed the screen to the web site which "URL" or "URI" shows, for example.

また、他の具体例として、制御部１１は、例えば、復号された送信情報が「店舗名」を含む場合には、求めた第１の通知情報に基づいて、店舗に関連する情報を、利用者が識別可能な態様によって通知する構成を採用してもよい。または、制御部１１は、例えば、「クーポン」を提示することにより通知する構成を採用してもよい。 As another specific example, for example, when the decoded transmission information includes “store name”, the control unit 11 uses information related to the store based on the obtained first notification information. You may employ | adopt the structure which notifies by the aspect which a person can identify. Alternatively, for example, the control unit 11 may adopt a configuration in which notification is made by presenting a “coupon”.

このように本実施の形態に係る情報通知装置１０によれば、第１の実施形態において説明した効果を享受できると共に、さらに、発光信号に基づく情報を、利用者にとって容易に識別可能な態様によって通知することができる。 As described above, according to the information notification device 10 according to the present embodiment, the effect described in the first embodiment can be enjoyed, and further, information based on the light emission signal can be easily identified by the user. You can be notified.

その理由は、管理ＩＤと、第２のパターン情報とに基づき通知情報１０４の中から求めた情報に基づいて、利用者にとって容易に識別可能な情報を、利用者が識別可能な態様によって通知する制御部１１を備えたからである。 The reason is that information that can be easily identified for the user is notified in a manner that the user can identify based on information obtained from the notification information 104 based on the management ID and the second pattern information. This is because the control unit 11 is provided.

これにより、一般的に知られた明滅の間隔やＬＥＤにおける発色の差を、利用者が目視により識別すると共に、発光信号の表す意味が記載されたマニュアルを参照することにより情報伝達を実現するのに比べ、情報通知装置１０は、より多くの情報を、利用者にとって容易に認識可能なように伝達することができる。 As a result, the user can visually identify the blinking interval and the color difference in the LED that are generally known, and realize information transmission by referring to the manual in which the meaning of the light emission signal is described. In contrast, the information notification apparatus 10 can transmit more information so that the user can easily recognize the information.

＜第３の実施形態＞
次に、上述した本発明の第２の実施形態に係る情報通知装置１０を基本とする第３の実施形態について説明する。以下の説明においては、本実施形態に係る特徴的な部分を中心に説明する。その際、上述した各実施形態と同様な構成については、同一の参照番号を付すことにより、重複する説明は省略する。 <Third Embodiment>
Next, a third embodiment based on the information notification apparatus 10 according to the second embodiment of the present invention described above will be described. In the following description, the characteristic part according to the present embodiment will be mainly described. At this time, the same reference numerals are assigned to the same configurations as those in the above-described embodiments, and duplicate descriptions are omitted.

本発明の第３の実施形態における情報通知装置１０を含む情報通知システム２０について、図３、図４、図５Ａ及び図５Ｂを参照して説明する。 An information notification system 20 including an information notification device 10 according to a third embodiment of the present invention will be described with reference to FIGS. 3, 4, 5A, and 5B.

図４は、本発明の第３の実施形態における情報通知装置１０を含む情報通知システム２０の構成を示すブロック図である。 FIG. 4 is a block diagram showing the configuration of the information notification system 20 including the information notification device 10 according to the third embodiment of the present invention.

図４において、情報通知システム２０は、送信装置２１と、情報通知装置１０を含む受信装置２２と、記憶装置２３とを有する。受信装置２２と記憶装置２３とは、通信ネットワーク１１０を介して通信可能に接続する。 In FIG. 4, the information notification system 20 includes a transmission device 21, a reception device 22 including the information notification device 10, and a storage device 23. The receiving device 22 and the storage device 23 are communicably connected via the communication network 110.

また、情報通知装置１０（図４には、不図示）は、図３において説明した制御部１１と、画像認識部３とを備える。 The information notification device 10 (not shown in FIG. 4) includes the control unit 11 and the image recognition unit 3 described in FIG.

以下の説明では、説明の便宜上、一例として、本発明に係る情報通知装置１０を含む受信装置２２は、例えば、一般的に知られたスマートフォンやフィーチャーフォン等の移動端末である。また、受信装置２２は、静止画像及び動画像を撮像可能な不図示のカメラ装置（撮像部）と、各種情報を表示可能（つまり、通知可能）な通知部２４と、例えば、利用者により操作可能な操作部２５とを有する。 In the following description, for convenience of explanation, as an example, the receiving device 22 including the information notification device 10 according to the present invention is a generally known mobile terminal such as a smartphone or a feature phone. The receiving device 22 includes a camera device (image capturing unit) (not shown) that can capture still images and moving images, a notification unit 24 that can display (that is, can notify) various types of information, and a user operation, for example. And a possible operation unit 25.

送信装置２１は、送信情報を符号化すると共に、符号化した送信情報を明滅パターンからなる発光信号として送出する。送信装置２１は、発光信号を送出可能な、例えば、ＬＥＤなどにより構成されたインジケータ２６を有する。即ち、送信装置２１は、インジケータ２６を明滅させることにより発光信号を送出する。 The transmission device 21 encodes the transmission information and transmits the encoded transmission information as a light emission signal having a blinking pattern. The transmission device 21 includes an indicator 26 that can transmit a light emission signal and is configured by, for example, an LED. That is, the transmission device 21 transmits a light emission signal by blinking the indicator 26.

受信装置２２は、例えば、利用者が操作部２５を操作するのに応じて、カメラ装置を起動すると共に、インジケータ２６を含む送信装置２１の撮像を開始する。また、受信装置２２は、インジケータ２６を含む送信装置２１を撮像した画像情報を画像情報１０１として制御部１１に与える。 For example, when the user operates the operation unit 25, the reception device 22 activates the camera device and starts imaging the transmission device 21 including the indicator 26. In addition, the reception device 22 gives image information obtained by capturing the transmission device 21 including the indicator 26 to the control unit 11 as image information 101.

記憶装置２３は、画像情報１０１、特徴量情報１０２、明滅パターン情報１０３及び通知情報１０４を記憶する。 The storage device 23 stores image information 101, feature amount information 102, blinking pattern information 103, and notification information 104.

記憶装置２３は、例えば、通信ネットワーク１１０に接続されたストレージデバイスである。但し、本実施形態を例に説明する本発明は、前述した構成には限定されない（以下の実施形態においても同様）。 The storage device 23 is a storage device connected to the communication network 110, for example. However, the present invention described using this embodiment as an example is not limited to the above-described configuration (the same applies to the following embodiments).

通信ネットワーク１１０は、例えば、携帯電話事業者が所有する各種通信回線、インターネットサービスプロバイダ等が提供するインターネット等の一般的な通信回線である。但し、本実施形態を例に説明する本発明は、前述した構成には限定されない（以下、各実施形態においても同様）。 The communication network 110 is a general communication line such as, for example, various communication lines owned by a mobile phone operator, the Internet provided by an Internet service provider, or the like. However, the present invention described using this embodiment as an example is not limited to the configuration described above (hereinafter, the same applies to each embodiment).

以下の説明において、より具体的に、本実施形態における情報通知装置１０の動作について説明する。 In the following description, the operation of the information notification apparatus 10 in the present embodiment will be described more specifically.

図５Ａ及び図５Ｂは、本発明の第３の実施形態における情報通知装置１０が画像情報１０１に基づいて、送信装置２１を特定すると共に、その送信装置２１から送出された情報に基づきユーザフレンドリーな情報を通知する動作を示すフローチャートである。係るフローチャートに沿って情報通知装置１０の動作手順を説明する。その際、上述した図２Ａ及び図２Ｂに示すフローチャートと同様な構成については、同一の参照番号を付すことにより、重複する説明は省略する。 5A and 5B show that the information notification device 10 according to the third embodiment of the present invention specifies the transmission device 21 based on the image information 101 and is user-friendly based on the information sent from the transmission device 21. It is a flowchart which shows the operation | movement which notifies information. The operation procedure of the information notification apparatus 10 will be described along the flowchart. In this case, the same reference numerals are assigned to the same components as those in the flowcharts shown in FIGS. 2A and 2B described above, and redundant description is omitted.

ステップＳ２１：
制御部１１は、管理ＩＤと、明滅パターンを表す情報（第２のパターン情報）とに基づいて、通知情報１０４を参照する。制御部１１は、通知情報１０４の中から管理ＩＤと、第２のパターン情報とに関連付けられた通知情報（第１の通知情報）を求める。 Step S21:
The control unit 11 refers to the notification information 104 based on the management ID and information indicating the blinking pattern (second pattern information). The control unit 11 obtains notification information (first notification information) associated with the management ID and the second pattern information from the notification information 104.

ステップＳ２２：
制御部１１は、第１の通知情報に基づいて、送信情報が意図する情報を、利用者が容易に識別可能なように通知する。 Step S22:
Based on the first notification information, the control unit 11 notifies the information intended by the transmission information so that the user can easily identify the information.

より具体的に、制御部１１は、送信情報が意図する情報を、例えば、受信装置２２の通知部２４に表示することにより通知する。但し、通知（報知）の態様は、表示には限定されない。例えば、通知の態様は、音声によって通知する構成を採用してもよい。また、通知の態様は、振動などのバイブレータによって通知する構成を採用してもよい。 More specifically, the control unit 11 notifies the information intended by the transmission information by, for example, displaying the information on the notification unit 24 of the reception device 22. However, the mode of notification (notification) is not limited to display. For example, a configuration for notifying by voice may be adopted as the notification mode. Moreover, you may employ | adopt the structure notified by vibrators, such as a vibration, as the aspect of notification.

このように本実施の形態に係る情報通知装置１０によれば、各実施形態において説明した効果を享受できる。また、情報通知装置１０は、情報通知システムに適用して好適である。 Thus, according to the information notification device 10 according to the present embodiment, the effects described in the embodiments can be enjoyed. Moreover, the information notification apparatus 10 is suitable for application to an information notification system.

その理由は、情報通知装置１０は、例えば、カメラ機能と通信機能を備える移動端末に適用することにより実現することができるからである。即ち、情報通知装置１０は、専用の端末を設けることなく実現できるからである。 The reason is that the information notification device 10 can be realized by applying it to a mobile terminal having a camera function and a communication function, for example. That is, the information notification device 10 can be realized without providing a dedicated terminal.

（ハードウェア構成例）
上述した実施形態において図面に示した各部は、専用の装置（ハードウェアモジュール）によって実現してもよい。また、係る図面に示した制御部（制御部２、制御部１１）は、ソフトウェアプログラムの機能（処理）単位（ソフトウェアモジュール）と捉えることができる。但し、これらの図面に示した各部の区分けは、説明の便宜上の構成であり、実装に際しては、様々な構成が想定されうる。この場合のハードウェア環境の一例を、図６を参照して説明する。 (Hardware configuration example)
Each unit illustrated in the drawings in the above-described embodiment may be realized by a dedicated device (hardware module). Further, the control units (the control unit 2 and the control unit 11) illustrated in the drawings can be regarded as a function (processing) unit (software module) of the software program. However, the division of each part shown in these drawings is a configuration for convenience of explanation, and various configurations can be assumed in mounting. An example of the hardware environment in this case will be described with reference to FIG.

図６は、本発明の模範的な実施形態に係る情報通知装置を実行可能な情報処理装置３００（コンピュータ）の構成を例示的に説明する図である。即ち、図６は、図１に示した情報通知装置１、或いは、図３に示した情報通知装置１０、図４に示した情報通知装置１０、の全体または一部の情報通知装置を実現可能なサーバ等のコンピュータ（情報処理装置）の構成であって、上述した実施形態における各機能を実現可能なハードウェア環境を表す。 FIG. 6 is a diagram illustrating an exemplary configuration of an information processing apparatus 300 (computer) that can execute the information notification apparatus according to the exemplary embodiment of the present invention. That is, FIG. 6 can realize the information notification device 1 shown in FIG. 1, the information notification device 10 shown in FIG. 3, or the information notification device 10 shown in FIG. This is a configuration of a computer (information processing apparatus) such as a simple server, and represents a hardware environment capable of realizing each function in the above-described embodiment.

図６に示した情報処理装置３００は、ＣＰＵ（Ｃｅｎｔｒａｌ＿Ｐｒｏｃｅｓｓｉｎｇ＿Ｕｎｉｔ）３０１、ＲＯＭ（Ｒｅａｄ＿Ｏｎｌｙ＿Ｍｅｍｏｒｙ）３０２、ＲＡＭ（Ｒａｎｄｏｍ＿Ａｃｃｅｓｓ＿Ｍｅｍｏｒｙ）３０３並びに外部装置との通信インタフェース（Ｉｎｔｅｒｆａｃｅ：以降、「Ｉ／Ｆ」と称する）３０５、その通信Ｉ／Ｆに接続されたカメラ装置３０４を備え、これらの構成がバス３０６（通信線）を介して接続された一般的なコンピュータである。 An information processing apparatus 300 illustrated in FIG. 6 includes a CPU (Central_Processing_Unit) 301, a ROM (Read_Only_Memory) 302, a RAM (Random_Access_Memory) 303, and a communication interface (Interface: hereinafter referred to as “I / F”) 305. A general computer is provided with a camera device 304 connected to the communication I / F, and these components are connected via a bus 306 (communication line).

そして、上述した実施形態を例に説明した本発明は、図６に示した情報処理装置３００に対して、その説明において参照したブロック構成図（図１、図３、図４）或いはフローチャート（図２Ａ、図２Ｂ、図５Ａ、図５Ｂ）の機能を実現可能なコンピュータ・プログラムを供給した後、そのコンピュータ・プログラムを、当該ハードウェアのＣＰＵ３０１に読み出して実行することによって達成される。また、当該装置内に供給されたコンピュータ・プログラムは、読み書き可能な一時記憶メモリ（ＲＡＭ３０３）等の不揮発性の記憶デバイスに格納すれば良い。 The present invention described using the above-described embodiment as an example is a block diagram (FIGS. 1, 3, and 4) or a flowchart (FIG. 1) referred to in the description of the information processing apparatus 300 shown in FIG. This is achieved by supplying a computer program capable of realizing the functions of 2A, 2B, 5A, and 5B) to the CPU 301 of the hardware and executing the computer program. The computer program supplied to the apparatus may be stored in a non-volatile storage device such as a readable / writable temporary storage memory (RAM 303).

また、前記の場合において、当該ハードウェア内へのコンピュータ・プログラムの供給方法は、インターネット等の通信回線を介して外部よりダウンロードする方法等のように、現在では一般的な手順を採用することができる。そして、このような場合において、本発明は、係るコンピュータ・プログラムを構成するコード或いは、そのコードが格納された記憶媒体によって構成されると捉えることができる。 In the above case, the computer program can be supplied to the hardware by using a general procedure, such as a method of downloading from the outside via a communication line such as the Internet. it can. In such a case, the present invention can be regarded as being configured by a code constituting the computer program or a storage medium storing the code.

１情報通知装置
２制御部
３画像認識部
４記憶部
１０情報通知装置
１１制御部
２０情報通知システム
２１送信装置
２２受信装置
２３記憶装置
２４通知部
２５操作部
２６インジケータ
１０１画像情報
１０２特徴量情報
１０３明滅パターン情報
１１０通信ネットワーク
３００情報処理装置
３０１ＣＰＵ
３０２ＲＯＭ
３０３ＲＡＭ
３０４カメラ装置
３０５通信インタフェース
３０６バス DESCRIPTION OF SYMBOLS 1 Information notification apparatus 2 Control part 3 Image recognition part 4 Storage part 10 Information notification apparatus 11 Control part 20 Information notification system 21 Transmission apparatus 22 Reception apparatus 23 Storage apparatus 24 Notification part 25 Operation part 26 Indicator 101 Image information 102 Feature-value information 103 Blink pattern information 110 Communication network 300 Information processing device 301 CPU
302 ROM
303 RAM
304 Camera Device 305 Communication Interface 306 Bus

Claims

A feature amount is extracted based on image information including information constituting an image representing a transmission device to be specified, and light emission including a blinking pattern is selected from one or more transmission devices based on the feature amount. Identifying a transmitting device that transmits a signal, and obtaining first pattern information representing a blinking pattern transmitted from the identified transmitting device from the image information;
Obtaining second pattern information associated with the identified transmission device from blinking pattern information including second pattern information representing one or more blinking patterns transmitted from the one or more transmission devices;
It is determined whether or not the first pattern information is included in the obtained second pattern information, and when it is determined that the first pattern information is included, the second pattern information is based on the second pattern information. Image recognition means for decoding transmission information;
And a control means for notifying the decrypted transmission information.

The control means includes
Based on the second pattern information, the one or more identifiable device ID transmission device, and the second pattern information, the first notification information including information which the transmission information is intended 2. The information notification apparatus according to claim 1, wherein the first notification information is obtained from the associated notification information, and the obtained first notification information is notified in a manner that the user can identify. .

The image sure 識手 stage,
Based on the extracted feature quantity, the feature quantity information including the one or more transmission devices and the feature quantity of the transmission apparatus is referred to and associated with the extracted feature quantity from the feature quantity information. The information notification apparatus according to claim 1, wherein the apparatus ID is obtained.

The control means includes
It is determined whether or not the image information includes a light emission signal composed of a blinking pattern transmitted from the specified transmission device, and the image information is stored when it is determined that the light emission signal is included. The information notification apparatus according to claim 1, wherein the information notification apparatus is controlled so as to be stored in a unit.

The control means includes
When the first notification information includes information related to an error code, the information indicating either the message indicating the error code or the reference information regarding the error code is notified in a manner that can be identified by the user. The information notification device according to claim 2.

The control means includes
When the first notification information includes information related to a URL, either the information indicating the URL or the information indicating the mode of transition to the Web site indicated by the URL is notified in a mode that can be identified by the user. The information notification device according to claim 2.

A transmission device that transmits transmission information by a light emission signal having a blinking pattern, a reception device including the information notification device according to claim 1, and a storage device that is communicably connected to the reception device via a network communication network. An information notification system comprising:
The transmitter is
An indicator capable of transmitting the light emission signal;
The receiving device is:
An imaging unit that images the transmission device including the indicator and gives the captured image information to the control unit;
The storage device
Information notification system characterized by storing at least the image information and the prior SL blink pattern information.

Depending on the information processing device,
A feature amount is extracted based on image information including information constituting an image representing a transmission device to be specified, and light emission including a blinking pattern is selected from one or more transmission devices based on the feature amount. Identifying a transmitting device that transmits a signal, and obtaining first pattern information representing a blinking pattern transmitted from the identified transmitting device from the image information;
Obtaining second pattern information associated with the identified transmission device from blinking pattern information including second pattern information representing one or more blinking patterns transmitted from the one or more transmission devices;
It is determined whether or not the first pattern information is included in the obtained second pattern information, and when it is determined that the first pattern information is included, the second pattern information is based on the second pattern information. Decrypt the transmitted information,
An information notification method comprising notifying the decrypted transmission information.

A feature amount is extracted based on image information including information constituting an image representing a transmission device to be specified, and light emission including a blinking pattern is selected from one or more transmission devices based on the feature amount. Identifying a transmitting device that transmits a signal, and obtaining first pattern information representing a blinking pattern transmitted from the identified transmitting device from the image information;
Obtaining second pattern information associated with the identified transmission device from blinking pattern information including second pattern information representing one or more blinking patterns transmitted from the one or more transmission devices;
It is determined whether or not the first pattern information is included in the obtained second pattern information, and when it is determined that the first pattern information is included, the second pattern information is based on the second pattern information. A function for decoding transmission information;
A function of notifying the decrypted transmission information;
A computer program characterized in that a computer is realized.