[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2009111523A - 画像処理装置 - Google Patents

画像処理装置 Download PDF

Info

Publication number
JP2009111523A
JP2009111523A JP2007279473A JP2007279473A JP2009111523A JP 2009111523 A JP2009111523 A JP 2009111523A JP 2007279473 A JP2007279473 A JP 2007279473A JP 2007279473 A JP2007279473 A JP 2007279473A JP 2009111523 A JP2009111523 A JP 2009111523A
Authority
JP
Japan
Prior art keywords
imaging
imaging device
unit
power supply
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007279473A
Other languages
English (en)
Other versions
JP4922127B2 (ja
Inventor
Masayuki Hattori
真之 服部
Yoshihiko Sugimoto
義彦 杉本
Jun Nishijima
潤 西島
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Electric Works Co Ltd
Original Assignee
Panasonic Electric Works Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Electric Works Co Ltd filed Critical Panasonic Electric Works Co Ltd
Priority to JP2007279473A priority Critical patent/JP4922127B2/ja
Publication of JP2009111523A publication Critical patent/JP2009111523A/ja
Application granted granted Critical
Publication of JP4922127B2 publication Critical patent/JP4922127B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Studio Devices (AREA)

Abstract

【課題】撮像装置が接続されていないと撮像装置接続部に電源供給されないようにし、撮像装置を撮像装置接続部に接続したときに撮像装置に異常電流が流れるのを防止する。
【解決手段】画像処理装置1は、撮像対象を含む空間領域を撮像する撮像装置2が着脱可能に接続される撮像装置接続部11と、撮像装置接続部11を通して撮像装置2に電源を供給する電源部12と、撮像装置2から出力され撮像装置接続部11を通して入力される画像から撮像対象に関する特定情報を抽出する画像処理部10とを備える。さらに、画像処理装置1は、撮像装置2が撮像装置接続部11から分離されたことを検出する分離検出部18と、分離検出部18により撮像装置2の分離が検出されると電源部12から撮像装置接続部11への電源供給を停止させ撮像装置2が撮像装置接続部11に接続されるとともに撮像の有効が指示されるまで電源供給を禁止する電源制御部19とを備える。
【選択図】図1

Description

本発明は、撮像装置が着脱可能に接続される撮像装置接続部を備え、撮像装置接続部を通して撮像装置に電源が供給される画像処理装置に関するものである。
従来から、撮像対象を含む空間領域をTVカメラのような撮像装置により撮像し、撮像された画像にコンピュータ画像処理を施すことにより、撮像対象について形状、寸法、傷の有無などの特定情報を抽出する技術が知られている。画像に対してコンピュータ画像処理を施す画像処理装置には、監視カメラのように撮像装置と一体化されたものがあるが、撮像装置とは別体であってコネクタである撮像装置接続部に撮像装置を着脱可能に接続する形態の画像処理装置も知られている。この種の画像処理装置は、たとえば、物品の製造工程における検査用に用いられている。
この形態の画像処理装置では、撮像装置の動作に必要な電源や撮像装置の撮像条件(露光時間、絞り値など)を撮像装置接続部を通して撮像装置に与える構成のものがある(たとえば、特許文献1参照)。
特開平7−294445号公報
特許文献1に記載された画像処理装置のように、撮像装置接続部を通して撮像装置に電源を供給する構成では、画像処理装置の電源が投入されている間には撮像装置接続部にも電源が供給されている。
通常の使用にあたっては、画像処理装置の撮像装置接続部に撮像装置を接続した後に画像処理装置の電源が投入されるから、電源投入時には画像処理装置と撮像装置との間の電路が確立されており、撮像装置に電源の供給が開始されたときに撮像装置に突入電流などの異常電流が流れることはない。
しかしながら、画像処理装置の電源を投入することによって撮像装置接続部に電源が供給されている状態で撮像装置を撮像装置接続部に接続すると、撮像装置に異常電流が流れることがあり、場合によっては、異常電流により撮像装置が破損することがある。
本発明は上記事由に鑑みて為されたものであり、その目的は、撮像装置が接続されていない状態では撮像装置接続部に電源が供給されないようにすることで、撮像装置接続部に電源が供給された状態で撮像装置が接続されることに伴って生じる不都合を回避した画像処理装置を提供することにある。
請求項1の発明は、撮像対象を含む空間領域を撮像する撮像装置が着脱可能に接続される撮像装置接続部と、撮像装置接続部を通して撮像装置に電源を供給する電源部と、撮像装置から出力され撮像装置接続部を通して入力される画像からコンピュータ画像処理により撮像対象に関する特定情報を抽出する画像処理部と、撮像装置が撮像装置接続部から分離されたことを検出する分離検出部と、分離検出部により撮像装置の分離が検出されると電源部から撮像装置接続部への電源供給を停止させ撮像装置が撮像装置接続部に接続されるとともに撮像の有効が指示されるまで電源供給を禁止する電源制御部とを備えることを特徴とする。
請求項2の発明では、請求項1の発明において、前記撮像装置は前記電源部から電源が供給されているときに前記撮像装置接続部を通して前記分離検出部に同期信号を入力しており、分離検出部は撮像装置からの同期信号が入力されなくなったときに分離として検出することを特徴とする。
請求項3の発明では、請求項1または請求項2の発明において、使用者の操作により前記電源制御部に撮像の有効を指示する入力装置が付加されていることを特徴とする。
請求項4の発明では、請求項1ないし請求項3のいずれかの発明において、前記撮像装置は撮像条件に関するデータを保持する揮発性の条件記憶部を備え、条件記憶部は前記電源部から撮像装置への電源供給が行われている間に前記撮像装置接続部を通して撮像条件に関するデータを受け取ることを特徴とする。
請求項1の発明の構成によれば、撮像装置が撮像装置接続部から分離されたことが分離検出部により検出されると、撮像装置接続部から電源部への電源供給を停止させ、かつ次に撮像装置接続部に撮像装置が接続され撮像の有効が指示されるまでは電源供給を禁止するから、撮像装置が撮像装置接続部に接続されていない状態では、撮像装置接続部に対して電源部からの電源供給がなされず、撮像装置が接続されていない状態では撮像装置接続部に電源が供給されず、撮像装置接続部に電源が供給された状態で撮像装置が接続された場合に生じる可能性のある突入電流のような異常電流の発生を防止できる。その結果、撮像装置の着脱に伴って撮像装置が破損する可能性がなくなる。
請求項2の発明の構成によれば、分離検出部において撮像装置の動作時に発生する同期信号を監視し、同期信号が入力されないときに撮像装置が分離されたと判断するから、撮像装置の分離を検出するために機械スイッチのような構造物を別途に設ける必要がなく、撮像装置接続部の構成が複雑化することがない。しかも、撮像装置から同期信号が入力されなくなると分離として検出することにより、撮像装置を一旦分離して電源供給が停止した後には、再度接続しても撮像の有効が指示されるまでは電源が供給されることがないから、撮像装置に不用意に異常電流が流れることを確実に防止することができる。
請求項3の発明の構成によれば、使用者が入力装置を操作して撮像の有効を指示するから、撮像装置が分離された後には使用者が入力装置を操作しなければ撮像装置への電源供給が開始されることがなく、撮像装置に異常電流が流れる可能性を確実に回避することができる。
請求項4の発明の構成によれば、撮像条件(露光時間や絞り値)を保持するために撮像装置に設けられている揮発性の条件記憶部に対して、撮像装置に電源が供給されている間に撮像装置接続部を通して撮像条件が与えられるから、撮像装置が分離されることにより撮像装置への電源供給が停止し条件記憶部から撮像条件が消去されている場合でも、撮像装置の接続後に与えられる撮像条件で撮像装置を動作させることができる。
本実施形態の画像処理装置1は、図1に示すように、TVカメラのような撮像装置2が着脱可能に接続されるコネクタからなる撮像装置接続部11を備え、撮像装置2で撮像された画像が撮像装置接続部11を通して入力されるとともに、撮像装置接続部11を通して電源部12から撮像装置2に電源を供給するようにしてある。本実施形態では、画像処理装置1を物品の検査に用いる場合を例として示す。したがって、撮像装置2は検査対象となる物品を含む空間領域を撮像し、画像処理装置1では撮像された物品の画像から形状、寸法、傷の有無などの特定情報を抽出するものとする。
画像処理装置1は、撮像装置接続部11から入力される画像の取込タイミングを制御する取込制御部13と、取込制御部13を通して取り込んだ画像を記憶する画像メモリ14と、画像メモリ14に記憶した画像にコンピュータ画像処理を施して特定情報を抽出する画像処理部10とを備える。さらに、画像処理装置1は、画像処理部10において物品の特定情報を抽出する際に用いる検査用データ(物品に関する基準値やテンプレート)を保持するデータ保持部15と、画像処理部10において抽出した特定情報を出力したり外部装置からの指示を画像処理部10に入力するための入出力制御部16と、外部装置を接続するためのインターフェイス17とを備える。画像処理装置1は、マイクロコンピュータ(以下、「マイコン」と略称する)を主構成要素として構成される。
画像処理部10における画像の処理内容は、物品から抽出しようとする特定情報に応じて適宜に選択されるが、本発明の要旨ではないから説明を省略する。インターフェイス17にはパラレルインターフェイスを用いている。インターフェイス17には、画像処理装置1の処理内容を提示したり、画像処理装置1の動作を規定するためのプログラムやパラメータを与えるための外部装置が接続可能である。外部装置としては、たとえば、表示用のモニタ装置とともに操作用の入力装置(キーボード、マウス、スイッチ、タッチスイッチなどどのようなものでもよい)を有しGUI(Graphical User Interface)を実現する装置を用いることができる。この種の外部装置として、パーソナルコンピュータを用いてもよい。
ところで、撮像装置2が物品を撮像する際には、露光時間や絞り値、あるいは焦点距離などの撮像条件を設定する必要がある。この種の撮像条件は、撮像装置2の仕様、物品を配置している環境、物品から抽出しようとする特定情報の種類などにより異なる。したがって、撮像条件を記憶するための条件記憶部21を設けた撮像装置2が提供されている。条件記憶部21に記憶された撮像条件(撮像パラメータ)を用いて撮像するのである。
撮像条件の変更が容易になるように、条件記憶部21にはRAMのような揮発性の半導体メモリが用いられ、撮像装置2に電源が供給されている間にのみ条件記憶部21に撮像条件が保持されるようにしてある。また、撮像条件は、画像処理装置1から撮像装置接続部11を通して与えられる。
撮像装置2は、電源が供給されている間にはフレームの同期をとるための同期信号を出力している。この同期信号は撮像装置接続部11を通して画像処理装置1に入力される。本実施形態では、この同期信号の有無を判断することにより撮像装置2が画像処理装置1から分離されたことを検出する分離検出部18を画像処理装置1に設けている。
上述したように、撮像装置2へは撮像装置接続部11を通して電源部12から電源を供給しているから、撮像装置接続部11から撮像装置2が分離された状態(取り外された状態)では、撮像装置2には電源が供給されず、撮像装置2から同期信号は出力されない。すなわち、分離検出部18に同期信号が入力されないから、分離検出部18では撮像装置2が撮像装置接続部11に接続されていないことを検出することができる。
言い換えると、撮像装置2が撮像装置接続部11に接続され、電源部12から撮像装置2に電源が供給されている状態では、同期信号が分離検出部18に入力されているから、分離検出部18では撮像装置2が接続されていることを認識し、その後、撮像装置2が撮像装置接続部11から取り外されると、分離検出部18に同期信号が入力されなくなるから、分離検出部18では、撮像装置2が撮像装置接続部11から分離されたことを検出することができる。
なお、ノイズを考慮して同期信号の複数個分の時間で同期信号の有無を判断したとしても、判断に要する時間は1秒以下のごく短時間であるから、撮像装置2が撮像装置接続部11から分離されると実質的に同時と言える程度(つまり、無視できる程度)の短時間で分離検出部18は分離を検出する。
分離検出部18は、電源部12から撮像装置接続部11への電源供給を行うか否かを制御する電源制御部19に接続されており、撮像装置2が撮像装置接続部11から分離されたことを検出すると、電源制御部19に対して撮像装置接続部11への電源供給を停止する指示を行う。電源制御部19では撮像装置接続部11に対して電源を供給していた状態から電源の供給を一旦停止すると、次には撮像の有効が指示されるまで電源供給を禁止する。
撮像の有効が指示されるとは、撮像を開始するための指示であり、インターフェイス17に接続された外部装置のGUIを用いて使用者が与えるようにしてある。外部装置を用いる代わりに、画像処理装置1に別途のスイッチ等を設けて撮像の有効を指示するようにしてもよい。
撮像の有効の指示が与えられることにより、電源制御部19が電源部12から撮像装置接続部11への電源供給を開始したときに、撮像装置2が撮像装置接続部11に接続されていれば、分離検出部18に同期信号が入力されるから、電源部12から撮像装置2への電源供給が維持される。
また、撮像装置2を撮像装置接続部11から一旦分離した後には、撮像の有効の指示が与えられない限り撮像装置接続部11への電源供給が禁止されるから、撮像装置2を撮像装置接続部11から分離した後は、撮像装置2を撮像装置接続部11に接続する際に、撮像装置接続部11に電源が供給されていることはない。その結果、撮像装置2を画像処理装置1に接続する際に、撮像装置2に突入電流のような過大な異常電流が流れて撮像装置2が破損する可能性をなくすことができる。
一方、電源供給を開始したときに、撮像装置2が撮像装置接続部11に接続されていなければ、分離検出部18に同期信号が入力されないから、電源部12から撮像装置接続部11への電源供給はただちに停止される。つまり、撮像装置2が接続されていない状態であっても、使用者が撮像の有効の指示をGUIなどを通して行うと、撮像装置接続部11に電源供給がなされる期間が短時間だけ生じるが、上述したように、分離検出部18において同期信号の有無を判断する時間は無視できる程度の短時間である。したがって、撮像装置2を撮像装置接続部11に接続する前に誤って撮像の有効の指示を行ったとしても、撮像装置接続部11に電源が供給されている状態で撮像装置2が撮像装置接続部11に接続される可能性は実質的にないと言える。
ここにおいて、画像処理装置1の電源を投入した直後には電源部12の出力電圧や内部回路の動作が安定するまでに時間遅れがあるから、電源投入の直後には分離検出部18の動作を無効にする不感期間を設け、不安定な期間が経過する程度の所定時間が経過した後に分離検出部18の動作を有効にするのが望ましい。また、分離検出部18の動作を有効する直前に、電源部12から撮像装置接続部11への電源供給を開始するのが望ましい。
撮像装置2に設けた条件記憶部21は揮発性であり、撮像装置21が撮像装置接続部11から分離され電源が供給されなくなると、条件記憶部21から撮像条件が消失する。したがって、撮像装置2を撮像装置接続部11に接続し、撮像の有効の指示によって撮像装置2への電源供給が開始された後に、条件記憶部21に撮像条件を設定することになる。撮像条件の設定は、インターフェイス17に接続された外部装置のGUIの機能を用いて行う。
あるいはまた、画像処理装置1において撮像条件を記憶しておき、撮像の有効の指示によって撮像装置2に電源供給が開始されると、撮像条件を自動的に撮像装置2に転送する構成を採用してもよい。なお、条件記憶部21に不揮発性の半導体メモリを用いているときには、この処理は不要であるから、撮像装置1の構成に応じて撮像条件を自動的に転送するか、使用者の操作後に転送するかを選択する構成を採用してもよい。
上述の動作をまとめて図2に示す。まず、画像処理装置1の電源が投入され電源部12からの電源供給が開始されると(S1)、所定時間が経過した後に分離検出部18の動作が有効になり(S2)、分離検出部18では撮像装置2からの同期信号の有無を検出する(S3)。撮像装置2からの同期信号があれば電源部12から撮像装置接続部11への電源供給を継続するが、同期信号が検出されないときには撮像装置2が分離したと判断し、電源部12から撮像装置接続部11への電源供給を停止する(S4)。
撮像装置接続部11への電源供給が停止した状態でも画像処理装置1の内部回路への電源供給は継続される。このことにより、画像処理装置1の動作は安定動作状態に維持される。次に、外部装置などによって撮像の有効の指示がなされると(S5)、電源部12から撮像装置接続部11への電源供給が開始される(S6)。その後、ステップS3に戻ることによって、分離検出部18により撮像装置2からの同期信号の有無が監視される。
なお、上述のように画像処理装置1は、マイコンを主構成要素に用いているが、分離検出部18および電源制御部19は、通常はマイコンとは別のハードウェアにより構成されるから、撮像装置2が分離されたことを分離検出部18が検出するとマイコンに割込信号を与え、割込信号を受けたマイコンが電源制御部19に電源部12から撮像装置接続部11への電源供給の停止を指示する構成を採用するのが望ましい。つまり、電源制御部19はマイコンにより制御される。
上述の構成例では、分離検出部18において撮像装置2からの同期信号が検出されなくなることによって撮像装置接続部11から分離されたことを検出しているが、撮像装置接僕11に撮像装置2が分離されたことを検出する機械スイッチを設け、機械スイッチを分離検出部18に用いることも可能である。この場合、撮像装置2が撮像装置接続部11に接続された状態から分離されたことが機械スイッチにより検出されると、マイコンは電源制御部19に対して電源部12から撮像装置接続部11への電源供給の停止を指示し、その後、撮像の有効が指示されるまで電源供給を禁止する構成を採用すればよい。
実施形態を示すブロック図である。 同上の動作説明図である。
符号の説明
1 画像処理装置
2 撮像装置
10 画像処理部
11 撮像装置接続部
12 電源部
17 インターフェイス
18 分離検出部
19 電源制御部
21 条件記憶部

Claims (4)

  1. 撮像対象を含む空間領域を撮像する撮像装置が着脱可能に接続される撮像装置接続部と、撮像装置接続部を通して撮像装置に電源を供給する電源部と、撮像装置から出力され撮像装置接続部を通して入力される画像からコンピュータ画像処理により撮像対象に関する特定情報を抽出する画像処理部と、撮像装置が撮像装置接続部から分離されたことを検出する分離検出部と、分離検出部により撮像装置の分離が検出されると電源部から撮像装置接続部への電源供給を停止させ撮像装置が撮像装置接続部に接続されるとともに撮像の有効が指示されるまで電源供給を禁止する電源制御部とを備えることを特徴とする画像処理装置。
  2. 前記撮像装置は前記電源部から電源が供給されているときに前記撮像装置接続部を通して前記分離検出部に同期信号を入力しており、分離検出部は撮像装置からの同期信号が入力されなくなったときに分離として検出することを特徴とする請求項1記載の画像処理装置。
  3. 使用者の操作により前記電源制御部に撮像の有効を指示する入力装置が付加されていることを特徴とする請求項1または請求項2記載の画像処理装置。
  4. 前記撮像装置は撮像条件に関するデータを保持する揮発性の条件記憶部を備え、条件記憶部は前記電源部から撮像装置への電源供給が行われている間に前記撮像装置接続部を通して撮像条件に関するデータを受け取ることを特徴とする請求項1ないし請求項3のいずれか1項に記載の画像処理装置。
JP2007279473A 2007-10-26 2007-10-26 画像処理装置 Expired - Fee Related JP4922127B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007279473A JP4922127B2 (ja) 2007-10-26 2007-10-26 画像処理装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007279473A JP4922127B2 (ja) 2007-10-26 2007-10-26 画像処理装置

Publications (2)

Publication Number Publication Date
JP2009111523A true JP2009111523A (ja) 2009-05-21
JP4922127B2 JP4922127B2 (ja) 2012-04-25

Family

ID=40779578

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007279473A Expired - Fee Related JP4922127B2 (ja) 2007-10-26 2007-10-26 画像処理装置

Country Status (1)

Country Link
JP (1) JP4922127B2 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0385874A (ja) * 1989-08-29 1991-04-11 Nec Corp テレビカメラシステム
JPH07253604A (ja) * 1994-03-15 1995-10-03 Olympus Optical Co Ltd 振動検出装置
JPH08110485A (ja) * 1995-10-04 1996-04-30 Olympus Optical Co Ltd 電子内視鏡装置
JP2000102507A (ja) * 1998-09-30 2000-04-11 Asahi Optical Co Ltd 内視鏡装置
JP2000325293A (ja) * 1999-05-21 2000-11-28 Olympus Optical Co Ltd 内視鏡システム
JP2005055756A (ja) * 2003-08-06 2005-03-03 Olympus Corp 内視鏡装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0385874A (ja) * 1989-08-29 1991-04-11 Nec Corp テレビカメラシステム
JPH07253604A (ja) * 1994-03-15 1995-10-03 Olympus Optical Co Ltd 振動検出装置
JPH08110485A (ja) * 1995-10-04 1996-04-30 Olympus Optical Co Ltd 電子内視鏡装置
JP2000102507A (ja) * 1998-09-30 2000-04-11 Asahi Optical Co Ltd 内視鏡装置
JP2000325293A (ja) * 1999-05-21 2000-11-28 Olympus Optical Co Ltd 内視鏡システム
JP2005055756A (ja) * 2003-08-06 2005-03-03 Olympus Corp 内視鏡装置

Also Published As

Publication number Publication date
JP4922127B2 (ja) 2012-04-25

Similar Documents

Publication Publication Date Title
JP2016119615A (ja) 撮像装置、音声コマンド機能の設定方法、コンピュータプログラム、及び記憶媒体
JP2012109693A5 (ja)
JP2006203809A5 (ja)
US20180068423A1 (en) Image processing apparatus, image processing method, and storage medium
JP2017212682A5 (ja)
JP4922127B2 (ja) 画像処理装置
US9143676B2 (en) Imaging apparatus and control method for imaging apparatus for warning display control operation
JP6072382B2 (ja) 信号処理装置及び信号処理方法
US9742998B2 (en) Imaging apparatus
US20170034481A1 (en) Imaging apparatus, medium, and method for imaging
WO2006052978A8 (en) Camera with power supply voltage detector
JP2008311775A (ja) 情報処理装置およびカメラ入力映像制御方法
JP5821719B2 (ja) 表示装置及び接続機器のサーチ方法
JP2006004093A (ja) 切替装置
TW201112774A (en) Projector and control method thereof
JP6462197B2 (ja) 電源制御システム及び電源制御方法
JP4862740B2 (ja) 撮像装置、情報表示装置、および表示データ制御方法、並びにコンピュータ・プログラム
JP2016127525A (ja) 撮像装置およびその制御方法、並びにプログラム
TW201935238A (zh) 相機功能的自動測試及修復方法及其電子裝置
CN106415528B (zh) 翻译装置
JP2011062249A (ja) 外付けストロボ光源装置を利用した電子内視鏡システム
JP2011077743A (ja) Sdi中継システム
JP2008154895A (ja) X線画像撮影装置
JP2008170298A (ja) 外観検査装置及び外観検査方法
WO2015040809A1 (ja) 電子機器、電子機器の制御方法及び記憶媒体

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20091203

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20100816

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110414

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20110701

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20110701

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20110627

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120110

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120203

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150210

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150210

Year of fee payment: 3

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150210

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees