JP4844446B2 - 撮像装置及び撮像方法 - Google Patents
撮像装置及び撮像方法 Download PDFInfo
- Publication number
- JP4844446B2 JP4844446B2 JP2007082069A JP2007082069A JP4844446B2 JP 4844446 B2 JP4844446 B2 JP 4844446B2 JP 2007082069 A JP2007082069 A JP 2007082069A JP 2007082069 A JP2007082069 A JP 2007082069A JP 4844446 B2 JP4844446 B2 JP 4844446B2
- Authority
- JP
- Japan
- Prior art keywords
- imaging
- signal
- horizontal
- period
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000003384 imaging method Methods 0.000 title claims description 183
- 238000000034 method Methods 0.000 claims description 25
- 241000287463 Phalacrocorax Species 0.000 claims 1
- 239000000284 extract Substances 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
- H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
- H04N21/4334—Recording operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
Description
このため、ビデオカメラのイメージセンサで撮像を行う1画素単位の基本クロック周期については、どのフレーム周期でも同じとして、撮像された信号の処理で、規定されたフレーム周期の信号とするのが一般的である。
図6(a)は、撮像信号の1フレームのイメージを示したものである。1フレームの撮像信号については、水平方向と垂直方向がそれぞれ所定画素数の有効撮像領域d1が設定してある。有効撮像領域d1内の水平方向と垂直方向の画素数については、どのフレーム周期でも同じである。例えば、水平方向1920画素×垂直方向1080ラインとする。
図6(b)は、毎秒60フレームの映像信号を得る場合の、垂直同期信号Vと水平同期信号Hと有効領域の撮像信号を示したものである。毎秒60フレームの映像信号の場合には、撮像領域d2(即ち水平方向2200画素×垂直方向1125ライン)の撮像を、各フレーム周期で繰り返し行う。有効領域の撮像信号は、1125水平ラインの内の所定ライン(nライン)から1080ラインの信号である。1水平ラインの信号は、例えば図6(a)に破線Haで示した信号となる。
図6(c)は、毎秒50フレームの映像信号を得る場合の、垂直同期信号Vと水平同期信号Hと有効領域の撮像信号を示したものである。毎秒50フレームの映像信号の場合には、撮像領域d2+d3(即ち水平方向2640画素×垂直方向1125ライン)の撮像を、各フレーム周期で繰り返し行う。有効領域の撮像信号が、1125水平ラインの内の所定ライン(nライン)から1080ラインの信号である点は、毎秒60フレームの撮像を行う場合と同じであるが、各水平ラインの期間が毎秒60フレームよりも延長されているので、1水平ライン中の有効領域でない区間が長くなっている。この場合の1水平ラインの信号は、例えば図6(a)に破線Hbで示した信号となる。
図6(d)は、毎秒24フレームの映像信号を得る場合の、垂直同期信号Vと水平同期信号Hと有効領域の撮像信号を示したものである。毎秒24フレームの映像信号の場合には、撮像領域d2+d3+d4(即ち水平方向2750画素×垂直方向1125ライン)の撮像を、各フレーム周期で繰り返し行う。有効領域の撮像信号が、1125水平ラインの内の所定ライン(nライン)から1080ラインの信号である点は、毎秒60フレームや毎秒50フレームの撮像を行う場合と同じであるが、各水平ラインの期間が毎秒50フレームよりもさらに延長されているので、1水平ライン中の有効領域でない区間が非常に長くなっている。この場合の1水平ラインの信号は、例えば図6(a)に破線Hcで示した信号となる。
この図7に示す歪みは、線順次方式のイメージセンサが持つ問題を示したものであるが、図6に示すような水平クロック数の増減でフレーム周波数の変化に対応させると、低フレーム周波数での撮像時には、動体の歪がより顕著に現れてしまうという問題があった。特に、毎秒24フレームのフレーム周波数で撮像させた場合には、1水平ラインの長さが非常に長くなり、最初の水平ラインを撮像したタイミングと、最後の水平ラインを撮像したタイミングとの時間差が非常に増大して、動体の歪が顕著に現れてしまう。
このような動体歪の増大は好ましくなかった。
撮像処理としては、イメージセンサから撮像信号を取出す際に、設定したフレーム周期に応じて、垂直同期期間を可変設定し、撮像信号の水平同期期間を可変設定されるフレーム周期がいずれの場合でも一定にした上で、可変設定した垂直同期期間に応じて、有効撮像領域を含まない水平同期期間を付加して、フレーム周期を調整するフレーム周期設定処理を行う。そして、そのフレーム周期設定処理で得られた撮像信号の時間軸を補正して、有効撮像領域を含まない水平同期期間を除去する時間軸補正処理を行う。
図1は本実施の形態の例による撮像装置の構成例を示した図である。図1に従って構成を説明すると、レンズなどの光学系11を介してイメージセンサ12の撮像面に結像した像光を、イメージセンサ12で電気信号に変換して、その変換された電気信号を、センサ出力部13で読み出す。このセンサ出力部13で読み出される電気信号を、撮像信号と称する。本例では、イメージセンサ12として、線順次で撮像信号を読み出すセンサを使用する。線順次で撮像信号を読み出すセンサとしては、例えばCMOS型のイメージセンサを使用する。また、光学系11でプリズムを使用して色分解を行い、イメージセンサ12として、複数個のイメージセンサを備える構成としてもよい。イメージセンサ12での撮像処理と、センサ出力部13での撮像信号の出力処理は、タイミング生成部21により駆動され、タイミング生成部21から駆動用クロックが供給される。
本例での撮像モードとしては、毎秒60フレームで撮像を行う撮像モードと、毎秒50フレームで撮像を行う撮像モードと、毎秒24フレームで撮像を行う撮像モードの3種類のモードが用意されている。
このモードの設定に応じて、制御部20は、タイミング生成部21に対応した駆動信号やクロックの生成を指示して、モードに応じた各回路の駆動が行われるようにしてある。但し、本例の場合には、タイミング生成部21が生成させる基本クロックである画素クロックはどのモードでも同じとしてあり、さらに水平同期信号の周期を決める水平クロックについても、どのモードでも同じとしてある。イメージセンサ12で撮像を行う周期は、設定したモードに対応した周期とする。具体的な水平クロックなどについては後述する。
図2(a)は、本例での撮像信号の1フレームのイメージを示したものである。1フレームの撮像信号については、水平方向と垂直方向がそれぞれ所定画素数の有効撮像領域d11が設定してある。有効撮像領域d11内の水平方向と垂直方向の画素数については、どのフレーム周期でも同じである。例えば、水平方向1920画素×垂直方向1080水平ラインとする。
図2(b)は、毎秒60フレームの映像信号を得る場合の、垂直同期信号Vと水平同期信号Hと有効領域の撮像信号を示したものである。毎秒60フレームの映像信号の場合には、撮像領域d12(即ち水平方向2200画素×垂直方向1125ライン)の撮像を、各フレーム周期で繰り返し行う。有効領域の撮像信号は、1125水平ラインの内の所定水平ライン(n水平ライン)から1080水平ラインの信号である。
毎秒50フレームの撮像を行う際には、図2(a)に示すように、撮像領域d12の下の撮像領域d13を追加した領域(d12+d13)を、イメージセンサ12の読取り部から出力させる。撮像領域d13内の水平ラインは、有効撮像領域を含まない水平ラインである。有効撮像領域d11の設定範囲は、毎秒60フレームの映像信号の場合と同じである。撮像領域d12+d13の水平ライン数は、1350ラインである。
毎秒24フレームの撮像を行う際には、図2(a)に示すように、撮像領域d13のさらに下の撮像領域d14を追加した領域(d12+d13+d14)を、イメージセンサの読取り部から出力させる。撮像領域d13及びd14内の水平ラインは、有効撮像領域を含まない水平ラインである。有効撮像領域d11の設定範囲は、毎秒60フレームの映像信号の場合と同じである。撮像領域d12+d13+d14の水平ライン数は、2812.5ラインである。最後の2813水平ライン目は半分の期間として、フレーム周期を24フレームに合わせるようにしてある。
[水平ライン数]=[クロック周波数]/[フレームレート]/[水平クロック数]
従って、毎秒24フレームの映像信号の場合に上述した端数が出ている。
この状態で、FIFOメモリ16内では、有効撮像領域d11を含む領域d12の各水平ラインを伸張させて、付加した領域d13又は領域d13+d14を除去させる。この伸張と除去処理を行った撮像信号を、図3(c)に示すようにFIFOメモリ16から出力させる。
図4は、この2水平ライン同時読出しを行う場合の例を示したものである。図4(a)は、毎秒60フレームのモードの例であり、図4(b)は、毎秒50フレームのモードの例であり、図4(c)は、毎秒24フレームのモードの例である。
即ち、例えば図5に示すように、アナログ/デジタル変換器14の出力をFIFOメモリ16′に供給して時間軸補正及び付加領域の削除処理を行ってから、撮像処理部15′に供給して、各種撮像処理を行うようにしてもよい。この図5に示す処理構成とすることで、撮像処理部15′では、従来の複数フレーム周期対応の撮像処理部と全く同一の処理構成で処理が可能となる。図1の構成の場合には、入力信号に付加領域が含まれているので、そのための処理が必要である。
Claims (5)
- フレーム周期を複数段階に可変設定する制御部と、
線順次で水平ラインごとに撮像信号を読み出して撮像を行うイメージセンサと、
前記イメージセンサから撮像信号を取出す出力部と、
前記制御部が設定したフレーム周期に応じて、垂直同期期間を可変設定し、前記出力部が出力する撮像信号の水平同期期間を可変設定されるフレーム周期がいずれの場合でも一定にした上で、可変設定した垂直同期期間に応じて、有効撮像領域を含まない水平同期期間を付加して、フレーム周期を調整するタイミング設定部と、
前記撮像信号の時間軸を補正して、前記タイミング設定部で付加した有効撮像領域を含まない水平同期期間を除去する時間軸補正部と
を備える撮像装置。 - 前記出力部が出力した撮像信号に対して撮像信号処理を行う撮像信号処理部を備え、
前記撮像信号処理部が処理した撮像信号に対して、前記時間軸補正部が時間軸補正処理を行う
請求項1記載の撮像装置。 - 前記出力部は、複数の水平ラインを同時に出力する出力部であり、
前記撮像信号処理部で所定の順序で各水平ラインが並ぶよう合成した撮像信号とする
請求項1又は2記載の撮像装置。 - 前記時間軸補正部は、前記出力部が出力した撮像信号に対して補正を行い、
前記時間軸補正部が補正した出力に対して、撮像信号処理を行う撮像信号処理部を備える
請求項1記載の撮像装置。 - フレーム周期を複数段階に可変設定して撮像を行う撮像方法において、
線順次で水平ラインごとに撮像信号を読み出して撮像を行うイメージセンサから撮像信号を取出す際に、設定したフレーム周期に応じて、垂直同期期間を可変設定し、撮像信号の水平同期期間を可変設定されるフレーム周期がいずれの場合でも一定にした上で、可変設定した垂直同期期間に応じて、有効撮像領域を含まない水平同期期間を付加して、フレーム周期を調整するフレーム周期設定処理と、
前記フレーム周期設定処理で得られた撮像信号の時間軸を補正して、前記有効撮像領域を含まない水平同期期間を除去する時間軸補正処理と
を行う撮像方法。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007082069A JP4844446B2 (ja) | 2007-03-27 | 2007-03-27 | 撮像装置及び撮像方法 |
TW097105915A TWI379587B (en) | 2007-03-27 | 2008-02-20 | Image pickup apparatus and image pickup method |
EP08250982A EP1976272B1 (en) | 2007-03-27 | 2008-03-19 | Image pickup apparatus and method |
US12/054,722 US7825977B2 (en) | 2007-03-27 | 2008-03-25 | Image pickup apparatus and image pickup method |
KR1020080027792A KR101403132B1 (ko) | 2007-03-27 | 2008-03-26 | 촬상 장치 및 촬상 방법 |
CN2008100880326A CN101277384B (zh) | 2007-03-27 | 2008-03-27 | 摄像装置和摄像方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007082069A JP4844446B2 (ja) | 2007-03-27 | 2007-03-27 | 撮像装置及び撮像方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008244800A JP2008244800A (ja) | 2008-10-09 |
JP4844446B2 true JP4844446B2 (ja) | 2011-12-28 |
Family
ID=39537886
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007082069A Expired - Fee Related JP4844446B2 (ja) | 2007-03-27 | 2007-03-27 | 撮像装置及び撮像方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US7825977B2 (ja) |
EP (1) | EP1976272B1 (ja) |
JP (1) | JP4844446B2 (ja) |
KR (1) | KR101403132B1 (ja) |
CN (1) | CN101277384B (ja) |
TW (1) | TWI379587B (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5936323B2 (ja) * | 2011-09-26 | 2016-06-22 | キヤノン株式会社 | 画像記録装置およびその制御方法 |
CN116506712A (zh) * | 2019-02-20 | 2023-07-28 | 富士胶片株式会社 | 成像元件、摄像装置、成像元件的工作方法及计算机可读存储介质 |
WO2021164004A1 (en) * | 2020-02-21 | 2021-08-26 | Qualcomm Incorporated | Reduced display processing unit transfer time to compensate for delayed graphics processing unit render time |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0767070A (ja) * | 1993-06-30 | 1995-03-10 | Sony Corp | 電子スチルカメラ装置 |
US6580457B1 (en) * | 1998-11-03 | 2003-06-17 | Eastman Kodak Company | Digital camera incorporating high frame rate mode |
JP3914691B2 (ja) * | 2000-06-21 | 2007-05-16 | 松下電器産業株式会社 | Vtr一体型撮像装置 |
JP4761669B2 (ja) | 2001-08-24 | 2011-08-31 | 本田技研工業株式会社 | 燃料タンク用気液セパレータの製造方法 |
WO2003063472A1 (fr) * | 2002-01-22 | 2003-07-31 | Sony Corporation | Dispositif d'imagerie et technique afferente |
JP3979332B2 (ja) * | 2002-04-04 | 2007-09-19 | ソニー株式会社 | 撮像装置および撮像方法 |
JP2003324644A (ja) * | 2002-05-07 | 2003-11-14 | Canon Inc | 映像信号処理装置、画像表示制御方法、記憶媒体、及びプログラム |
JP3731589B2 (ja) * | 2003-07-18 | 2006-01-05 | ソニー株式会社 | 撮像装置と同期信号発生装置 |
JP4193628B2 (ja) * | 2003-07-18 | 2008-12-10 | ソニー株式会社 | 撮像装置 |
JP2006115413A (ja) * | 2004-10-18 | 2006-04-27 | Toshiba Corp | 撮像装置と撮像方法 |
JP4643407B2 (ja) * | 2005-09-29 | 2011-03-02 | オリンパス株式会社 | フレームレート変換装置および撮像装置 |
-
2007
- 2007-03-27 JP JP2007082069A patent/JP4844446B2/ja not_active Expired - Fee Related
-
2008
- 2008-02-20 TW TW097105915A patent/TWI379587B/zh not_active IP Right Cessation
- 2008-03-19 EP EP08250982A patent/EP1976272B1/en not_active Not-in-force
- 2008-03-25 US US12/054,722 patent/US7825977B2/en active Active
- 2008-03-26 KR KR1020080027792A patent/KR101403132B1/ko not_active IP Right Cessation
- 2008-03-27 CN CN2008100880326A patent/CN101277384B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
EP1976272B1 (en) | 2012-06-27 |
CN101277384A (zh) | 2008-10-01 |
JP2008244800A (ja) | 2008-10-09 |
US20080239089A1 (en) | 2008-10-02 |
CN101277384B (zh) | 2010-09-08 |
EP1976272A3 (en) | 2011-07-27 |
TW200849980A (en) | 2008-12-16 |
TWI379587B (en) | 2012-12-11 |
EP1976272A2 (en) | 2008-10-01 |
KR101403132B1 (ko) | 2014-06-03 |
KR20080087732A (ko) | 2008-10-01 |
US7825977B2 (en) | 2010-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9185308B2 (en) | Imaging apparatus and imaging method | |
JP2013223054A (ja) | 撮像素子、撮像素子の制御方法、および、撮像装置 | |
JP2000244823A (ja) | 撮像素子の欠陥画素補正装置 | |
JP5683858B2 (ja) | 撮像装置 | |
JP2006261789A (ja) | 撮像装置、撮像素子、及び撮像処理方法 | |
JP4844446B2 (ja) | 撮像装置及び撮像方法 | |
JP4320657B2 (ja) | 信号処理装置 | |
JP4697094B2 (ja) | 画像信号出力装置及びその制御方法 | |
JPH0918790A (ja) | カメラ装置 | |
JP2000023007A (ja) | 画像入力装置及び画像入力方法並びにメモリ媒体 | |
JP4292963B2 (ja) | 撮像装置 | |
JP2007243819A (ja) | 画像処理装置 | |
JP2003143491A (ja) | 撮像装置 | |
JPH10108207A (ja) | 撮像装置および縦縞除去方法 | |
JP2583648B2 (ja) | 固体撮像装置 | |
JP3733172B2 (ja) | 撮像装置 | |
JP2005080198A (ja) | 撮像装置 | |
JPH01130673A (ja) | 撮像装置 | |
JP2007336092A (ja) | 撮像装置、撮像方法 | |
JP2001177767A (ja) | 画像データ・フィルタリング装置および方法 | |
JP2009253615A (ja) | 撮像装置 | |
JP2006050308A (ja) | 撮像装置 | |
JP2007318635A (ja) | 撮像装置、撮像方法 | |
JP2015115877A (ja) | 撮像装置、その制御方法 | |
JP2000101935A (ja) | 撮像信号処理装置および撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100301 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110524 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110719 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110913 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110926 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141021 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4844446 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20141021 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |