JP5371920B2 - 内視鏡装置 - Google Patents
内視鏡装置 Download PDFInfo
- Publication number
- JP5371920B2 JP5371920B2 JP2010219282A JP2010219282A JP5371920B2 JP 5371920 B2 JP5371920 B2 JP 5371920B2 JP 2010219282 A JP2010219282 A JP 2010219282A JP 2010219282 A JP2010219282 A JP 2010219282A JP 5371920 B2 JP5371920 B2 JP 5371920B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- image
- unit
- imaging
- light source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 claims abstract description 102
- 238000003384 imaging method Methods 0.000 claims abstract description 93
- 210000004204 blood vessel Anatomy 0.000 claims description 29
- 238000001514 detection method Methods 0.000 claims description 18
- 230000008859 change Effects 0.000 claims description 16
- 230000002708 enhancing effect Effects 0.000 claims description 6
- 230000003595 spectral effect Effects 0.000 claims description 4
- 238000001228 spectrum Methods 0.000 claims description 3
- 210000001519 tissue Anatomy 0.000 description 29
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 19
- 235000005811 Viola adunca Nutrition 0.000 description 18
- 240000009038 Viola odorata Species 0.000 description 18
- 235000013487 Viola odorata Nutrition 0.000 description 18
- 235000002254 Viola papilionacea Nutrition 0.000 description 18
- 230000003287 optical effect Effects 0.000 description 17
- 210000004088 microvessel Anatomy 0.000 description 14
- 238000005286 illumination Methods 0.000 description 13
- 238000006243 chemical reaction Methods 0.000 description 12
- 238000000034 method Methods 0.000 description 11
- 239000002344 surface layer Substances 0.000 description 11
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 8
- 239000010410 layer Substances 0.000 description 8
- 230000003902 lesion Effects 0.000 description 7
- 238000012937 correction Methods 0.000 description 6
- 230000005284 excitation Effects 0.000 description 6
- 230000001678 irradiating effect Effects 0.000 description 6
- 210000004400 mucous membrane Anatomy 0.000 description 5
- 239000013307 optical fiber Substances 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000003780 insertion Methods 0.000 description 4
- 230000037431 insertion Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 238000010521 absorption reaction Methods 0.000 description 2
- 230000000875 corresponding effect Effects 0.000 description 2
- 239000006059 cover glass Substances 0.000 description 2
- 238000000295 emission spectrum Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 239000000945 filler Substances 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 201000011510 cancer Diseases 0.000 description 1
- 238000005253 cladding Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000004877 mucosa Anatomy 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 239000011241 protective layer Substances 0.000 description 1
- 239000011347 resin Substances 0.000 description 1
- 229920005989 resin Polymers 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 210000004876 tela submucosa Anatomy 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/045—Control thereof
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/063—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements for monochromatic or narrow-band illumination
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0653—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements with wavelength conversion
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0655—Control therefor
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0661—Endoscope light sources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/555—Constructional details for picking-up images in sites, inaccessible due to their dimensions or hazardous conditions, e.g. endoscopes or borescopes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/74—Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Surgery (AREA)
- Engineering & Computer Science (AREA)
- Radiology & Medical Imaging (AREA)
- Heart & Thoracic Surgery (AREA)
- Biophysics (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Optics & Photonics (AREA)
- Pathology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Endoscopes (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Description
すなわち、B光、G光、及びR光を照射して得られる各戻り光をCCD等の撮像センサによって受光して得られる画像信号は、それぞれ、主として表層組織の情報、主として中層組織及び表層組織の情報、及び主として深層組織及び中層組織の情報を含むことが知られている。
このため、狭帯域光による戻り光を撮像センサで受光して得られた2つのGB画像信号を表示部に疑似カラー表示するためのRGBカラー画像データに変換する狭帯域光モードにおける画像処理は、通常光による戻り光を撮像センサで受光して得られた3つのRGB画像信号を表示部にカラー表示するためのRGBカラー画像データに変換する通常光モードにおける画像処理とは異なるものとなっている。
この場合にも、画像処理において、同様に、G画像信号をR画像データに割り付け、B画像信号をG画像データ及びB画像データに割り付け、3chカラー画像データからなる疑似カラー画像を生成し、モニタ等に表示している。
その結果、いずれの場合にも、モニタ等に表示された疑似カラー画像は、主として表層組織の情報を含むB画像信号(B狭帯域データ)を多く含んでいるため、表層組織の微細血管や微細構造の状態がより詳細に表現されたものとなり、表層組織の微細血管や微細構造が観察しやすくなることが知られている(特許文献1及び2参照)。
また、前述のとおり病変組織と特殊光の照射位置との距離が変化し、被写体組織の拡大率が変更されることで、撮像素子に投影される血管の画素サイズが変化すると、表層微細血管を認識し難くなる問題が知られていた。
さらに、撮影位置が離れると、一本一本の表層微細血管ではなく、ブラウニッシュ領域と呼ばれる表層微細血管の密集した領域、そのひとつひとつの塊が観察対象となり、撮像画像に対して適用すべき画像処理が異なるが、これらの画像処理の切替は、一般的に手動で行われており、必ずしも適切な画像強調が行われないといった問題があった。
図1は、本発明の一実施形態の内視鏡装置の全体構成の一実施例を模式的に示すブロック図である。
同図に示すように、本発明の内視鏡装置10は、内視鏡12と、光源部14と、プロセッサ16と、入出力部18とを有する。ここで、光源部14及びプロセッサ16は、内視鏡12の制御装置を構成し、内視鏡12は、光源部14と光学的に接続され、プロセッサ16と電気的に接続される。また、プロセッサ16は、入出力部18と電気的に接続される。そして、入出力部18は、画像情報等を出力表示する表示部(モニタ)38、画像情報等を出力する記録部(記録装置)42(図3参照)、及び通常観察モード(通常光モードともいう)や特殊光観察モード(特殊光モードともいう)などのモード切替や機能設定等の入力操作を受け付けるUI(ユーザインタフェース)として機能する入力部(モード切替部)40を有する。
このようにして撮影倍率を求めることができるが、撮影倍率を求める方法は、これに限定されず、種々の方法を用いることができる。
例えば、特開2000−230807号に開示されるように、撮像光学系の光軸に平行な平行光を照明光学系からレーザ等によって被写体へ照射し、その戻り光によって撮像光学系で結像される実像の、撮像視野に対する長さを計測することで、撮像倍率を自動的に検出することができる。
さらに、対物レンズユニットは、撮像倍率を変えるために、光軸方向に移動可能な結像レンズ(図示せず)と、その結像レンズを移動させるレンズ駆動機構(図示せず)とを備える高倍率撮影機構を有していても良い。この場合、レンズ駆動機構は、例えば圧電素子で構成されたアクチュエータからなり、結像レンズを光軸方向に移動することで、撮像倍率を更に変更することができる。
なお、撮像素子26は、受光領域にカラーフィルタ(例えば、RGBカラーフィルタや補色フィルタ)を備えたカラー撮像センサや補色センサであるのが好ましいが、RGBカラー撮像センサがより好ましい。
これら各光源32、34の半導体発光素子からの発光は、光源制御部48(図3参照)により個別に制御されており、各光源32及び34の発光条件、すなわち青色レーザ光源32の出射光と、青紫色レーザ光源34の出射光の光量比(発光比率)は変更自在になっている。
青色レーザ光源32及び青紫色レーザ光源34は、ブロードエリア型のInGaN系レーザダイオードが利用でき、また、InGaNAs系レーザダイオードやGaNAs系レーザダイオードを用いることもできる。また、上記光源として、発光ダイオード等の発光体を用いた構成としてもよい。
中心波長445nmの青色レーザ光及び中心波長405nmの青紫色レーザ光が合波され、コネクタ部まで伝送されたレーザ光は、照明光学系を構成する光ファイバ22によって、それぞれ内視鏡12の先端部まで伝播される。そして、青色レーザ光は、内視鏡12の先端の、光ファイバ22の光出射端に配置された波長変換部材である蛍光体24を励起して蛍光を発光させる。また、一部の青色レーザ光は、そのまま蛍光体24を透過する。青紫色レーザ光は、蛍光体24を励起させることなく透過して、狭帯域波長の照明光(いわゆる狭帯域光)となる。
光ファイバ22は、マルチモードファイバであり、一例として、コア径105μm、クラッド径125μm、外皮となる保護層を含めた径がφ0.3〜0.5mmの細径なファイバケーブルを使用できる。
上記の蛍光体24は、レーザ光の可干渉性により生じるスペックルに起因して、撮像の障害となるノイズの重畳や、動画像表示を行う際のちらつきの発生を防止できる。また、蛍光体24は、蛍光体を構成する蛍光物質と、充填材となる固定・固化用樹脂との屈折率差を考慮して、蛍光物質そのものと充填剤に対する粒径を、赤外域の光に対して吸収が小さく、かつ散乱が大きい材料で構成することが好ましい。これにより、赤色や赤外域の光に対して光強度を落とすことなく散乱効果が高められ、光学的損失が小さくなる。
ここで、本発明でいう白色光とは、厳密に可視光の全ての波長成分を含むものに限定されず、例えば、上述した疑似白色光を始めとして、R、G、B等、特定の波長帯の光を含むものであればよく、例えば、緑色から赤色にかけての波長成分を含む光や、青色から緑色にかけての波長成分を含む光等も広義に含むものとする。
この内視鏡装置10では、プロファイルAとプロファイルBとの発光強度を光源制御部48により相対的に増減制御して、任意の輝度バランスの照射口を生成することができる。なお、本発明の内視鏡装置10において、通常光モードでは、プロファイルBの光のみが用いられ、特殊光モードでは、プロファイルA及びBが重畳された光が用いられる。
撮像後に撮像素子26から出力される撮像画像の画像信号は、スコープケーブル30を通じてプロセッサ16の画像処理システム36に入力される。
図3は、本発明の内視鏡装置のプロセッサの一実施例の詳細構成を含む各部の信号処理系を示すブロック図である。
同図に示すように、内視鏡装置10の信号処理系は、内視鏡12の信号処理系と、光源部14の信号処理系と、プロセッサ16の信号処理系(画像処理システム36)と、入出力部18のモニタ38、入力部(モード切替部)40及び記録装置42と、を有する。
また、光源部14の信号処理系は、青色レーザ光源(445LD)32及び青紫色レーザ光源(405LD)34のオンオフ制御及び光量制御を行う光源制御部48を有する。
光量算出部50は、内視鏡12のA/D変換器46からコネクタを介して入力されたデジタル画像信号を用いて、撮像素子26で受光した戻り光の光量、例えば、B光の光量及びG光の光量、すなわち画像のB光及びG光の光量等を算出する。そして、光量算出部50は、算出した画像のB光及びG光の光量を元に、撮像画像のB光とG光との光量比(B/G比)を算出する。
そして、光量算出部50は、算出された撮像画像のRGB値をもとに撮像画像の明るさ(輝度値)を算出し、445LD32及び405LD34の光量並びに光量比(405LD/445LDの発光比率)とともに、撮影情報検出部56へ出力する。
ここで、自動露光値(AE値)とは、撮像の際の露出を自動的に決定するためのパラメータであり、撮像素子26で検出される戻り光の光量(明るさ)を基準に決定される。動画撮影においても、撮像素子26の蓄積時間(RGBカラーフィルタに対応するCCDやCMOSの蓄積時間)に応じて定まる1フレーム当たりの撮影時間における戻り光の光量によって決定される。
また、被写体情報とは、遠景撮影における病変部等の表層微細血管が密集した領域、すなわち茶色がかったブラウニッシュ領域のサイズや拡大撮影や近景撮影における個々の血管太さ等の生体の構造・成分に関する情報である。ブラウニッシュ領域のサイズまたは血管太さは、撮像画像から茶色がかったブラウニッシュ領域を抽出したり、個々の血管を抽出することにより検出される。ブラウニッシュ領域の抽出は、色や形状を検出する種々の公知の方法を用いることができる。本発明においては、撮像画像における、検出されるブラウニッシュ領域のサイズまたは血管太さが変わると、撮像画像に適用される画像処理が変更されるのが好ましい。
これらの撮影情報が検出されると、必要光量比算出部58及び後述する特殊光画像処理部64へ出力される。
算出された405LD及び445LDの光量並びに光量比は、光源制御部48へ出力される。
なお、レーザの光量比が変わると、撮像画像のホワイトバランスも変化するため、405LD及び445LDの光量並びに光量比がCDS・AGC回路44へ出力され、この光量及び光量比の情報に基づいてホワイトバランスを取るためのCDS・AGC回路44のゲインも変更されて、撮像素子26の電気的なゲインが変更される。
ノイズ除去回路54は、DSP52でガンマ補正、色補正処理が施されたデジタル画像信号から、例えば、移動平均法やメディアンフィルタ法等の画像処理におけるノイズ除去方法を行ってノイズを除去する。
こうして、内視鏡12からプロセッサ16に入力されたデジタル画像信号は、DSP52及びノイズ除去回路54でガンマ補正、色補正処理及びノイズ除去等の前処理がなされる。
なお、本発明においては、区別のため、通常光画像処理部62及び特殊光画像処理部64による画像処理前のデジタル画像信号を画像信号といい、画像処理前後のデジタル画像信号を画像データと呼ぶことにする。
通常光画像処理部62は、通常光モードにおいて、445LD及び蛍光体26による白色光(プロファイルB)による前処理済デジタル画像信号に適した通常光用画像処理を施す部分であって、色変換部68と、色彩強調部70と構造強調部72とを有する。
色彩強調部70は、画面内の血管と粘膜との色味の差をつけて、血管を見易くなるように強調するためのものであって、色変換処理済RGB画像データに対して、画面を見ながらする処理、例えば、画面全体の平均の色味を見て、その色味を平均値より血管と粘膜との色味の差をつける方向に強調する処理を行う。
構造強調部72は、色彩強調処理済RGB画像データに対して、シャープネスや輪郭強調等の構造強調処理を行う。
構造強調部72で構造強調処理が施されたRGB画像データは、通常光用画像処理済RGB画像データとして通常光画像処理部62から画像表示信号生成部66に入力される。
特殊光色変換部74は、入力された前処理済のRGB3チャンネルのデジタル画像信号のG画像信号に所定係数をかけてR画像データに割り付け、同B画像信号にそれぞれ所定係数をかけてG画像データ及びB画像データに割り付け、RGB画像データを生成した後、生成されたRGB画像データに、色変換部68と同様に3×3マトリックス処理、階調変換処理、3次元LUT処理などの色変換処理を行う。
構造強調部78は、構造強調部72と同様に、色彩強調処理済RGB画像データに対して、シャープネスや輪郭強調等の構造処理を行う。
また、構造強調部72の構造処理に加えて、構造強調部78は、撮影情報検出部56からの撮影情報、例えば、AE値に基づき、前述の色彩強調処理済RGB画像データに対して、周波数強調処理を行う。
AE値が第1の所定値(α)より小さい場合、つまり、内視鏡先端が被写体に近づき、必要光量が少なくて良い拡大観察を想定している場合、表層微細血管を撮影対象として想定しており、細かい表層微細血管の構造が細い線として個々に分離できるように、図5(A)のように高周波の部分を強調できる周波数強調フィルタを前述のRGB画像データに適用する。
また、AE値が第1の所定値と第2の所定値との間の所定の範囲(αからβの範囲)にある場合、つまり、内視鏡先端が被写体から少し離れ、拡大観察より多少光量が必要な近景観察を想定している場合、表層微細血管の細かい構造を撮影対象とするよりももう少し大きな微細血管の1つ1つを撮影対象として想定しており、表層微細血管の雰囲気を強調できるように、図5(B)のように中周波の部分を強調できる周波数強調フィルタを前述のRGB画像データに適用する。
ブラウニッシュ領域と呼ばれる領域は、早期ガンで想定されるものであり、1mm程度のものが多いが、中には、2mm、3mmのものもある。この周波数帯域を強調しようとしてバンドパス特性のフィルタを用いると、このバンドパスの帯域から少しでも外れた場合、強調されないので、様々な大きさのブラウニッシュ領域全てを強調するには、ハイパス特性のフィルタを用いるのが良い。
これより、ブラウニッシュ領域を撮影対象として想定している場合には、図5(C)のように高周波数全体を強調できるハイパスフィルタを周波数強調フィルタとして前述のRGB画像データに適用するのが好ましい。
構造強調部72でAE値に基づいて最適な周波数強調処理が施されたRGB画像データは、特殊光用画像処理済RGB画像データとして特殊光画像処理部64から画像表示信号生成部66に入力される。
モニタ38は、通常光モードでは、白色光を照射して撮像素子26で得られ、プロセッサ16で前処理及び通常光画像処理がなされた表示画像信号に基づく通常観察用画像をソフトコピー画像として表示し、特殊光モードでは、白色光に加え、特殊光を照射して撮像素子26で得られ、プロセッサ16で前処理及び特殊光画像処理がなされた表示画像信号に基づく特殊光観察画像をソフトコピー画像として表示する。
記録装置42も、通常光モードでは、白色光を照射して得られた通常観察画像をハードコピー画像として出力し、特殊光モードでは、白色光及び特殊光を照射して得られた特殊光観察画像をハードコピー画像として出力する。
なお、必要に応じて、画像表示信号生成部66で生成された表示画像信号は、画像情報として、図示しないが、メモリやストレージ装置からなる記憶部に記憶されても良い。
本発明の内視鏡装置は、基本的に以上のように構成される。
本実施形態においては、まず最初に通常光モードで通常光観察が行われているものとする。445LD32が点灯され、白色光による撮像画像データについて、通常光画像処理部64で通常光画像処理が行われているものとする。
ここで、ユーザによって特殊光モードへの切替が行われる。ユーザがモード切替部40を操作することでモード切替信号(特殊光ON)が出力され、画像処理切替部60における画像処理が特殊光モードに切り替えられる(S10)。
また、AE値の代わりに、撮像における撮影倍率、または、被写体の情報(ブラウニッシュ領域のサイズ、または血管の太さ等)が検出されてもよい。
検出されたAE値は、必要光量比算出部58及び特殊光画像処理部64へ出力される。
445LD32及び405LD34からの照射光量が変化すると、それに合わせてホワイトバランスゲインも変化するため、ホワイトバランスゲインが一定値を保つようにCDS・AGCが調整される。また、CDS・AGCのホワイトバランスゲインを調整する代わりに、撮像時間または画像処理の色調調整を変更してもよい。
出力された該画像表示信号は、特殊光画像としてモニタ38で表示され、記録装置42で記録される(S32)。
12 内視鏡
14 光源部
16 プロセッサ
18 入出力部
22 光ファイバ
24 蛍光体
26 撮像素子
28A 照射口
28B 受光部
30 スコープケーブル
32 青色レーザ光源(445LD)
34 青紫色レーザ光源(405LD)
36 画像処理システム
38 表示部(モニタ)
40 入力部(モード切替部)
42 記録部(記録装置)
44 CDS・AGC回路
46 A/D変換器(A/Dコンバータ)
48 光源制御部
50 光量算出部
52 DSP(デジタルシグナルプロセッサ)
54 ノイズ除去回路
56 撮影情報検出部
58 必要光量比算出部
60 画像処理切替部(スイッチ)
62 通常光画像処理部
64 特殊光画像処理部
66 画像表示信号生成部
68 色変換部
70、76 色彩強調部
72、78 構造強調部
74 特殊光色変換部
Claims (18)
- 被写体とする生体の構造・成分の分光スペクトル特性に応じて狭帯域化された波長帯域幅を持つ狭帯域光を出射する第1の光源部と、
可視領域を含む広い波長帯域を持つ広帯域光を出射する第2の光源部と、
前記第1の光源部および前記第2の光源部から前記被写体に同時に照射される前記狭帯域光および前記広帯域光の、前記生体からの戻り光により、前記被写体の撮像画像を撮像し、撮像画像情報を出力する撮像手段と、
前記撮像画像情報に所定の画像処理を施す画像処理手段と、
前記撮像手段による前記被写体の撮像のための自動露光値もしくは撮像倍率、または前記撮像手段により撮影される前記被写体の前記生体の構造・成分に関する被写体情報を撮像情報として検出する撮影情報検出手段と、を有し、
前記第1の光源部から出射される前記狭帯域光は、前記第2の光源部から出射される前記広帯域光に比べて、前記被写体の前記生体の構造・成分の検出能が優れており、
前記撮影情報検出手段によって検出された前記撮影情報に基づいて、前記被写体の前記生体の構造・成分の検出および強調度を変化させるように、前記第1の光源部および第2の光源部の発光条件および前記画像処理部における画像処理条件を変更することを特徴とする内視鏡装置。 - さらに、前記第1の光源部および第2の光源部の発光条件を変更するために、前記第1の光源部からの前記狭帯域光と第2の光源部からの前記広帯域光との発光比率を変化させる発光比率変更手段を有する請求項1に記載の内視鏡装置。
- 前記撮像情報は、前記自動露光値であり、
前記発光比率変更手段は、前記自動露光値が小さいときには前記第1の光源部からの前記狭帯域光の発光比率を増加させ、前記自動露光値が大きいときには前記第2の光源部からの前記広帯域光の発光比率を増加させる請求項2に記載の内視鏡装置。 - 前記撮像情報は、前記撮像倍率であり、
前記発光比率変更手段は、前記撮像倍率が大きいときには前記第1の光源部からの前記狭帯域光の発光比率を増加させ、前記撮像倍率が小さいときには前記第2の光源部からの前記広帯域光の発光比率を増加させる請求項2に記載の内視鏡装置。 - 前記発光比率変更手段によって前記発光比率が変更された場合に、前記撮像画像のホワイトバランスが変化しないように、前記発光比率に基づいて、前記撮像手段の電気的なゲイン、撮像時間、および前記画像処理の色調調整の少なくとも1つを変更する請求項2〜4のいずれかに記載の内視鏡装置。
- 前記発光比率変更手段によって前記発光比率が変更された場合に、前記撮像画像の明るさが変化しないように、前記発光比率に基づいて、前記撮像手段の電気的なゲイン、撮像時間、および前記画像処理の色調調整の少なくとも1つを変更する請求項2〜5のいずれかに記載の内視鏡装置。
- 前記画像処理手段は、前記撮像情報に基づいて前記撮像画像の周波数強調特性を変更する画像強調手段を有する請求項1〜6のいずれかに記載の内視鏡装置。
- 前記画像強調手段は、前記撮像画像の少なくとも2つ以上の周波数帯域を強調する周波数帯域強調手段を有し、
該周波数帯域強調手段は、前記撮像情報に基づいて強調する前記周波数帯域を変化させることを含む周波数強調特性を変更する請求項7に記載の内視鏡装置。 - 前記撮像情報は、前記自動露光値であり、
前記周波数帯域強調手段は、前記自動露光値が大きくなるに従って、強調する前記周波数帯域を低い周波数に変更する請求項8に記載の内視鏡装置。 - 前記撮像情報は、前記自動露光値であり、
前記周波数帯域強調手段が強調する前記周波数帯域は、バンドパス特性であり、
前記周波数帯域強調手段は、前記自動露光値が第1の所定値を超えると、強調する前記周波数帯域の幅を増大させるように変更する請求項8または9に記載の内視鏡装置。 - 前記撮像情報は、前記自動露光値であり、
前記周波数帯域強調手段は、強調する前記周波数帯域を、前記自動露光値が第2の所定値以下の時はバンドパス特性にしておき、前記第2の所定値を超えるとハイパス特性に変更する請求項8〜10のいずれかに記載の内視鏡装置。 - 前記撮像情報は、前記撮像倍率であり、
前記周波数帯域強調手段は、前記撮像倍率が大きくなるに従って、強調する前記周波数帯域を高い周波数に変更する請求項8に記載の内視鏡装置。 - 前記撮像情報は、ブラウニッシュ領域のサイズ、または血管の太さに関連する前記被写体情報であり、
前記画像強調手段は、前記ブラウニッシュ領域のサイズ、または前記血管の太さに基づいて前記撮像画像の周波数強調特性を変更する請求項7に記載の内視鏡装置。 - 前記画像強調手段は、前記撮像画像の少なくとも2つ以上の周波数帯域を強調する周波数帯域強調手段を有し、
該周波数帯域強調手段は、前記ブラウニッシュ領域のサイズ、または前記血管の太さに基づいて強調する前記周波数帯域を変化させることを含む周波数強調特性を変更する請求項13に記載の内視鏡装置。 - 前記周波数帯域強調手段は、前記血管の太さが小さくなるに従って、強調する前記周波数帯域を高い周波数に変更する請求項14に記載の内視鏡装置。
- 前記周波数帯域強調手段は、前記ブラウニッシュ領域のサイズが所定サイズ以下の時は、強調する前記周波数帯域がバンドパス特性であり、前記ブラウニッシュ領域のサイズが前記所定サイズを超えると、強調する前記周波数帯域の幅を増大させるように変更する請求項14に記載の内視鏡装置。
- 前記撮影情報検出手段は、前記撮影画像から前記撮影情報を検出する請求項1〜16のいずれかに記載の内視鏡装置。
- 前記撮影情報検出手段は、前記撮影画像の明るさから、前記自動露光値を検出する請求項17に記載の内視鏡装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010219282A JP5371920B2 (ja) | 2010-09-29 | 2010-09-29 | 内視鏡装置 |
US13/244,421 US20120078044A1 (en) | 2010-09-29 | 2011-09-24 | Endoscope device |
EP11183047.7A EP2436304B1 (en) | 2010-09-29 | 2011-09-28 | Endoscope device |
CN2011103038064A CN102429625A (zh) | 2010-09-29 | 2011-09-28 | 内窥镜装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2010219282A JP5371920B2 (ja) | 2010-09-29 | 2010-09-29 | 内視鏡装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012071012A JP2012071012A (ja) | 2012-04-12 |
JP5371920B2 true JP5371920B2 (ja) | 2013-12-18 |
Family
ID=44720710
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2010219282A Active JP5371920B2 (ja) | 2010-09-29 | 2010-09-29 | 内視鏡装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20120078044A1 (ja) |
EP (1) | EP2436304B1 (ja) |
JP (1) | JP5371920B2 (ja) |
CN (1) | CN102429625A (ja) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5606120B2 (ja) * | 2010-03-29 | 2014-10-15 | 富士フイルム株式会社 | 内視鏡装置 |
JP5948203B2 (ja) * | 2011-10-12 | 2016-07-06 | 富士フイルム株式会社 | 内視鏡システム及びその作動方法 |
JP5996287B2 (ja) * | 2012-06-12 | 2016-09-21 | オリンパス株式会社 | 撮像装置、顕微鏡装置、内視鏡装置 |
JP5677378B2 (ja) * | 2012-07-25 | 2015-02-25 | 富士フイルム株式会社 | 内視鏡システム |
CN104507377B (zh) * | 2012-08-01 | 2016-09-21 | 奥林巴斯株式会社 | 内窥镜装置 |
CN103393391A (zh) * | 2013-06-20 | 2013-11-20 | 中国科学院苏州生物医学工程技术研究所 | 一种多功能消化道内窥手术医疗器械 |
JP5869541B2 (ja) * | 2013-09-13 | 2016-02-24 | 富士フイルム株式会社 | 内視鏡システム及びプロセッサ装置並びに内視鏡システムの作動方法 |
JP5931031B2 (ja) * | 2013-09-23 | 2016-06-08 | 富士フイルム株式会社 | 内視鏡システム及び内視鏡システムの作動方法 |
WO2015064435A1 (ja) | 2013-10-28 | 2015-05-07 | 富士フイルム株式会社 | 画像処理装置及びその作動方法 |
CN107113405B (zh) * | 2015-01-20 | 2019-01-15 | 奥林巴斯株式会社 | 图像处理装置、图像处理装置的工作方法、记录介质和内窥镜装置 |
JP6640866B2 (ja) * | 2015-09-29 | 2020-02-05 | 富士フイルム株式会社 | 画像処理装置、内視鏡システム、及び画像処理方法 |
CN107408562A (zh) * | 2015-09-30 | 2017-11-28 | 奥林巴斯株式会社 | 摄像元件以及摄像装置 |
US9936151B2 (en) * | 2015-10-16 | 2018-04-03 | Capsovision Inc | Single image sensor for capturing mixed structured-light images and regular images |
JP6577887B2 (ja) | 2016-03-14 | 2019-09-18 | 富士フイルム株式会社 | 画像処理装置、内視鏡システム、画像処理方法、画像処理プログラム、及び記録媒体 |
WO2018180249A1 (ja) * | 2017-03-28 | 2018-10-04 | 富士フイルム株式会社 | 計測支援装置、内視鏡システム、及びプロセッサ |
US10805553B2 (en) * | 2017-04-14 | 2020-10-13 | Canon Kabushiki Kaisha | Imaging apparatus and imaging method |
JP6791821B2 (ja) * | 2017-08-31 | 2020-11-25 | 富士フイルム株式会社 | 内視鏡システム |
WO2019053804A1 (ja) * | 2017-09-13 | 2019-03-21 | オリンパス株式会社 | 内視鏡装置、内視鏡装置の作動方法及びプログラム |
CN107981855B (zh) * | 2017-12-29 | 2024-06-25 | 深圳开立生物医疗科技股份有限公司 | 一种血流成像装置及内窥镜 |
CN115038375A (zh) | 2020-03-11 | 2022-09-09 | 富士胶片株式会社 | 内窥镜系统、控制方法及控制程序 |
JP2022070310A (ja) * | 2020-10-27 | 2022-05-13 | Hoya株式会社 | 光源装置、および内視鏡システム |
US11375141B1 (en) | 2021-02-09 | 2022-06-28 | Arthrex, Inc. | Endoscopic camera region of interest autoexposure |
Family Cites Families (51)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE2011450C3 (de) * | 1969-03-14 | 1975-04-17 | Kabushiki Kaisha Koparu, Tokio | Photographische Kamera mit Blitzlichteinrichtung |
US5749830A (en) * | 1993-12-03 | 1998-05-12 | Olympus Optical Co., Ltd. | Fluorescent endoscope apparatus |
JPH08313823A (ja) * | 1995-05-15 | 1996-11-29 | Olympus Optical Co Ltd | 内視鏡画像処理装置 |
JP3752272B2 (ja) * | 1995-07-07 | 2006-03-08 | オリンパス株式会社 | 電子内視鏡装置 |
US6293911B1 (en) * | 1996-11-20 | 2001-09-25 | Olympus Optical Co., Ltd. | Fluorescent endoscope system enabling simultaneous normal light observation and fluorescence observation in infrared spectrum |
US7179222B2 (en) * | 1996-11-20 | 2007-02-20 | Olympus Corporation | Fluorescent endoscope system enabling simultaneous achievement of normal light observation based on reflected light and fluorescence observation based on light with wavelengths in infrared spectrum |
JPH10290779A (ja) * | 1997-04-17 | 1998-11-04 | Olympus Optical Co Ltd | 電子内視鏡装置 |
EP1148810B1 (en) * | 1999-01-26 | 2005-11-16 | Newton Laboratories, Inc. | Autofluorescence imaging system for endoscopy |
JP2000230807A (ja) * | 1999-02-10 | 2000-08-22 | Micro Research:Kk | 平行光を利用した距離測定方法とその装置 |
JP4472130B2 (ja) * | 2000-07-14 | 2010-06-02 | オリンパス株式会社 | 内視鏡装置 |
EP2319390B1 (en) * | 2000-07-21 | 2016-04-20 | Olympus Corporation | Endoscope apparatus |
JP3607857B2 (ja) | 2000-07-27 | 2005-01-05 | オリンパス株式会社 | 内視鏡装置 |
JP3559755B2 (ja) | 2000-07-27 | 2004-09-02 | オリンパス株式会社 | 内視鏡装置 |
JP4321697B2 (ja) * | 2000-08-02 | 2009-08-26 | 富士フイルム株式会社 | 蛍光画像表示方法および装置 |
US20020151941A1 (en) * | 2001-04-16 | 2002-10-17 | Shinichi Okawa | Medical illuminator, and medical apparatus having the medical illuminator |
KR100411631B1 (ko) * | 2001-10-18 | 2003-12-18 | 주식회사 메디미르 | 형광 내시경 장치 및 그 장치를 이용한 진단부위 조상 방법 |
JP2003135393A (ja) * | 2001-10-30 | 2003-05-13 | Olympus Optical Co Ltd | 内視鏡システムの自動調整方法 |
JP4409166B2 (ja) * | 2002-12-05 | 2010-02-03 | オリンパス株式会社 | 画像処理装置 |
CN100500093C (zh) * | 2003-01-14 | 2009-06-17 | 株式会社森田制作所 | 诊断用摄影仪 |
KR100643516B1 (ko) * | 2003-05-06 | 2006-11-10 | 가부시키가이샤 모리타 세이사쿠쇼 | 의료용 광조사장치 |
US8371848B2 (en) * | 2003-12-08 | 2013-02-12 | J. Morita Manufacturing Corporation | Dental diagnostic and treatment apparatus |
EP1745736A1 (en) * | 2004-04-30 | 2007-01-24 | J. Morita Manufacturing Corporation | Living body observing apparatus, intraoral imaging system, and medical treatment appliance |
JP4611674B2 (ja) * | 2004-06-29 | 2011-01-12 | Hoya株式会社 | 電子内視鏡システム |
JP2006142004A (ja) * | 2004-10-20 | 2006-06-08 | Fuji Photo Film Co Ltd | シャープネス調整方法およびプログラム並びに電子内視鏡装置 |
US7798955B2 (en) * | 2004-10-26 | 2010-09-21 | Olympus Corporation | Image generating device for generating a fluorescence image |
JP2006141711A (ja) * | 2004-11-19 | 2006-06-08 | Olympus Corp | 内視鏡観察光学系 |
JP4598182B2 (ja) * | 2005-01-05 | 2010-12-15 | Hoya株式会社 | 電子内視鏡システム |
JP4772357B2 (ja) * | 2005-03-31 | 2011-09-14 | オリンパスメディカルシステムズ株式会社 | 光源装置及び撮像装置 |
CN101163438B (zh) * | 2005-05-11 | 2011-09-14 | 奥林巴斯医疗株式会社 | 生物体观测装置和用于生物体观测装置的信号处理装置 |
JP4644540B2 (ja) * | 2005-06-28 | 2011-03-02 | 富士通株式会社 | 撮像装置 |
JP2007037785A (ja) * | 2005-08-03 | 2007-02-15 | Olympus Medical Systems Corp | 内視鏡 |
JP4424292B2 (ja) * | 2005-09-28 | 2010-03-03 | ソニー株式会社 | 撮像装置、露出制御方法およびプログラム |
JP5057675B2 (ja) * | 2006-03-03 | 2012-10-24 | オリンパスメディカルシステムズ株式会社 | 生体観察装置 |
JP5186791B2 (ja) * | 2007-04-13 | 2013-04-24 | 住友電気工業株式会社 | 孔体内検査装置 |
US7767980B2 (en) * | 2007-07-17 | 2010-08-03 | Fujifilm Corporation | Image processing system, image processing method and computer readable medium |
JP2009034224A (ja) * | 2007-07-31 | 2009-02-19 | Olympus Medical Systems Corp | 医療装置 |
JP5184016B2 (ja) * | 2007-09-12 | 2013-04-17 | オンセミコンダクター・トレーディング・リミテッド | 撮像装置 |
JP5329177B2 (ja) * | 2007-11-07 | 2013-10-30 | 富士フイルム株式会社 | 撮像システムおよびプログラム |
US7667180B2 (en) * | 2007-11-07 | 2010-02-23 | Fujifilm Corporation | Image capturing system, image capturing method, and recording medium |
US8169471B2 (en) * | 2007-11-09 | 2012-05-01 | Fujifilm Corporation | Image capturing system, image capturing method, and computer readable medium |
US20090143671A1 (en) * | 2007-12-03 | 2009-06-04 | Fujifilm Corporation | Position identifying system, position identifying method, and computer readable medium |
JP5376206B2 (ja) * | 2007-12-05 | 2013-12-25 | 富士フイルム株式会社 | 位置特定システムおよびプログラム |
JP5257891B2 (ja) * | 2007-12-05 | 2013-08-07 | 富士フイルム株式会社 | 画像処理システムおよびプログラム |
JP5278854B2 (ja) * | 2007-12-10 | 2013-09-04 | 富士フイルム株式会社 | 画像処理システムおよびプログラム |
JP5246643B2 (ja) * | 2007-12-19 | 2013-07-24 | 富士フイルム株式会社 | 撮像システムおよびプログラム |
JP2009259703A (ja) * | 2008-04-18 | 2009-11-05 | Olympus Corp | 照明装置、画像取得装置 |
US8506478B2 (en) * | 2008-06-04 | 2013-08-13 | Fujifilm Corporation | Illumination device for use in endoscope |
JP2010075368A (ja) * | 2008-09-25 | 2010-04-08 | Fujifilm Corp | 電子内視鏡装置および方法並びにプログラム |
EP2179687B1 (en) * | 2008-10-22 | 2012-12-26 | FUJIFILM Corporation | Endoscope apparatus and control method therefor |
US20110037740A1 (en) * | 2008-12-15 | 2011-02-17 | Panasonic Corporation | Planar illumination device and liquid crystal display |
JP5258869B2 (ja) * | 2010-12-13 | 2013-08-07 | 富士フイルム株式会社 | 内視鏡装置 |
-
2010
- 2010-09-29 JP JP2010219282A patent/JP5371920B2/ja active Active
-
2011
- 2011-09-24 US US13/244,421 patent/US20120078044A1/en not_active Abandoned
- 2011-09-28 EP EP11183047.7A patent/EP2436304B1/en not_active Not-in-force
- 2011-09-28 CN CN2011103038064A patent/CN102429625A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
EP2436304B1 (en) | 2015-01-28 |
JP2012071012A (ja) | 2012-04-12 |
CN102429625A (zh) | 2012-05-02 |
EP2436304A2 (en) | 2012-04-04 |
US20120078044A1 (en) | 2012-03-29 |
EP2436304A3 (en) | 2013-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5371920B2 (ja) | 内視鏡装置 | |
JP5371921B2 (ja) | 内視鏡装置 | |
JP5258869B2 (ja) | 内視鏡装置 | |
JP5335017B2 (ja) | 内視鏡装置 | |
JP5460506B2 (ja) | 内視鏡装置の作動方法及び内視鏡装置 | |
JP5582948B2 (ja) | 内視鏡装置 | |
JP5460507B2 (ja) | 内視鏡装置の作動方法及び内視鏡装置 | |
CN109068945B (zh) | 图像处理装置、图像处理装置的工作方法及记录介质 | |
JP5606120B2 (ja) | 内視鏡装置 | |
JP5450527B2 (ja) | 内視鏡装置 | |
JP5757891B2 (ja) | 電子内視鏡システム、画像処理装置、画像処理装置の作動方法及び画像処理プログラム | |
JP5667917B2 (ja) | 内視鏡システム、内視鏡システムのプロセッサ装置、及び内視鏡システムの作動方法 | |
JP5485215B2 (ja) | 内視鏡装置 | |
JP5762344B2 (ja) | 画像処理装置及び内視鏡システム | |
JP2012050641A (ja) | 内視鏡システム | |
WO2013054817A1 (ja) | 内視鏡システム及び画像生成方法 | |
JP2016174976A (ja) | 内視鏡システム | |
JP5538143B2 (ja) | 内視鏡システム | |
JP5677555B2 (ja) | 内視鏡装置 | |
JP5965028B2 (ja) | 内視鏡システム | |
JP5897663B2 (ja) | 内視鏡装置 | |
JP5827720B2 (ja) | 内視鏡システム | |
JP6104419B2 (ja) | 内視鏡装置 | |
JP6386939B2 (ja) | 内視鏡光源装置、内視鏡システム、及び内視鏡光源装置の作動方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130111 |
|
TRDD | Decision of grant or rejection written | ||
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130830 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130903 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130917 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5371920 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |