JP2002253493A - 電子内視鏡装置の観察部位表示システム - Google Patents
電子内視鏡装置の観察部位表示システムInfo
- Publication number
- JP2002253493A JP2002253493A JP2001054048A JP2001054048A JP2002253493A JP 2002253493 A JP2002253493 A JP 2002253493A JP 2001054048 A JP2001054048 A JP 2001054048A JP 2001054048 A JP2001054048 A JP 2001054048A JP 2002253493 A JP2002253493 A JP 2002253493A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- search
- data
- display system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/042—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances characterised by a proximal camera, e.g. a CCD camera
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Engineering & Computer Science (AREA)
- Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Optics & Photonics (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Primary Health Care (AREA)
- Pathology (AREA)
- Epidemiology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Physics & Mathematics (AREA)
- Veterinary Medicine (AREA)
- Endoscopes (AREA)
- Closed-Circuit Television Systems (AREA)
- Processing Or Creating Images (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
Abstract
部位に対応した映像であるか素早く認識し得る観察部位
表示システムを電子内視鏡装置に組み込む。 【解決手段】 特定の臓器マップに従って構築された臓
器画像データベース(図4)には、臓器マップの個々の
部位を表す部位記号データと、この部位記号データによ
って表される被検索画像データとが互いに対応して格納
される。電子内視鏡装置で得られる動画から静止画像を
所定の時間間隔で検索元画像データとして取り込み、こ
の検索元画像データが被検索画像データのいずれかと一
致したとき、その被検索画像データに対応した部位記号
データに基づいて部位記号をTVモニタ14の表示画面
に表示する。
Description
み込まれる観察部位表示システムに関する。
プ (内視鏡)と、このスコープの遠位端に設けられた撮
像センサと、該スコープの近位側で着脱自在に接続させ
られる画像信号処理ユニットと、この画像信号処理ユニ
ットに接続されたTVモニタとから成る。スコープの撮
像センサで得られた内視鏡像の撮像信号は画像信号処理
ユニットで適宜処理した後にそこからビデオ信号として
出力され、TVモニタでは、そのビデオ信号に基づいて
内視鏡像が再現される。勿論、電子内視鏡装置は人体の
臓器の内部例えば代表的には食道の内部、胃の内部、気
管支の内部或いは肺臓の内部を観察したりするために用
いられる。
確にかつ速やかに行うためには、TVモニタで再現表示
されている内視鏡像が人体の臓器の内部のどの部位に対
応した映像であるかを素早く認識することが必要であ
る。しかしながら、一般的には、内視鏡像が臓器内部の
どの部位に対応した映像であるかを素早く認識すること
は難しく、特に電子内視鏡装置の操作に習熟していない
初心者にとっては非常に難しい。また、人体の臓器が複
雑な構造を持つ場合、例えば気管支の場合には、内視鏡
像が気管支の細部のどの部位に対応した映像であるかを
素早く認識することは電子内視鏡装置に習熟している熟
練者にとっても難しい。
は、上述したような電子内視鏡装置において、TVモニ
タ上で観察している内視鏡像が臓器内部のどの部位に対
応した映像であるか素早く認識し得るように構成された
観察部位表示システムを電子内視鏡装置に組み込むこと
である。
示システムは内視鏡像を動画として撮像してモニタに表
示する電子内視鏡装置に組み込まれるものであって、特
定の臓器マップに従って構築された臓器画像データベー
スを具備するものであり、臓器画像データベースには、
臓器マップの個々の部位を表す部位記号データと、この
部位記号データによって表される被検索画像データとが
互いに対応して格納されている。本発明による観察部位
表示システムは、更に、電子内視鏡装置で得られる動画
から静止画像を所定の時間間隔で検索元画像データとし
て取り込む画像データ取込み手段と、この画像データ取
込み手段によって検索元画像データが取り込まれたと
き、臓器画像データベースに格納されている個々の被検
索画像データを検索する検索手段と、この検索手段によ
って検索された個々の被検索画像データが画像取込み手
段によって取り込まれた検索元画像データと一致するか
否かを判別する判別手段と、この判別手段によって検索
元画像データと被検索画像データとが一致すると判別さ
れたとき、その被検索画像データに対応した部位記号デ
ータに基づいて部位記号をモニタに表示し、判別手段に
よって検索元画像データと被検索画像データとが不一致
であると判別されたとき、モニタでの部位記号表示を解
除する部位表示制御手段とを具備して成るものである。
される個々の被検索画像データには特徴抽出画像処理が
施され、画像データ取込み手段が電子内視鏡装置から取
り込まれた検索元画像データに該特徴抽出画像処理と同
じ処理を施すための特徴抽出画像処理手段を包含する。
に、検索手段による臓器画像データベースの検索範囲を
指定するための検索範囲指定手段を具備してもよく、こ
の場合には臓器画像データベースに対する検索処理を効
率的に行うことができる。
と検索元画像データとの一致度を数値化するための数値
化手段を包含し、該一致度が所定の一致度閾値以上であ
るときに被検索画像データと検索元画像データとが一致
すると判別手段により判別される。
に、一致度閾値を変更するための一致度閾値変更手段及
びモニタの部位記号の表示を強制的に解除するための部
位表示強制的解除手段のいずれか一方若しくは双方を具
備してもよい。また、本発明による観察部位表示システ
ムは、更に、判別手段によって検索元画像データと被検
索画像データとが一致すると判別されたとき、その検索
元画像データに基づいて臓器画像データベースを更改す
るための画像データベース更改手段を具備してもよく、
この場合には臓器画像データベースは観察部位表示シス
テムを使用すればする程一層充実したものとなる。
システムの一実施形態について添付図面を参照して説明
する。
表示システムを組み込んだ電子内視鏡装置がブロック図
として概略的に示される。電子内視鏡装置はスコープ
(内視鏡)10と、このスコープ10を着脱自在に接続
するようになった画像信号処理ユニット(所謂プロセッ
サ)12と、この画像信号処理ユニット12に接続され
たアナログカラーTVモニタ14とを具備する。
に対して着脱自在に接続されるようになっているのは、
スコープ10には種々のタイプのものがあるからであ
る。例えば、スコープ10の代用的なものとしては、気
管支スコープ、胃スコープ、大腸スコープ等が挙げられ
る。要するに、画像信号処理ユニット12は種々のタイ
プのスコープによって共用されることになる。
像センサ16を備え、この撮像センサ16は固体撮像素
子例えばCCD(charge-coupled device) 撮像素子から
構成される。本実施形態では、撮像センサ16はオン・
チップ・カラー・フィルタを持つCCDから構成され、
内視鏡像をフルカラー画像として撮像することができ
る。撮像センサ16にはCCDドライバ信号ライン18
と画像信号読出しライン20とが接続され、これら両ラ
イン18及び20はスコープ10内を挿通させられる。
また、スコープ10内には光ファイバー束から成る照明
用光ガイドケーブル22が挿通させられ、この光ガイド
ケーブル22は撮像センサ16の前方を照明すべくスコ
ープ10の遠位端面まで延び、該光ガイドケーブル22
の近位端には剛体となった光ガイドロッド24が延設さ
れる。
ントローラ26が設けられ、このシステムコントローラ
26はマイクロコンピュータから構成される。即ち、シ
ステムコントローラ26は中央処理ユニット(CP
U)、種々のルーチンを実行するためのプログラム、定
数等を格納する読出し専用メモリ(ROM)、データ等
を一時的に格納する書込み/読出し自在なメモリ(RA
M)、入出力インターフェース(I/O)を包含し、電
子内視鏡装置の作動全般を制御する。また、画像信号処
理ユニット12内にはタイミングコントローラ28が設
けられ、このタイミングコントローラ28はシステムコ
ントローラ26の制御下で動作させられる。タイミング
コントローラ28からは種々の周波数の制御クロックパ
ルスが出力され、これら制御クロックパルスに従って画
像信号処理ユニット12内での様々な動作タイミングが
後述するように制御される。
回路30を具備し、この画像信号処理回路30では、撮
像センサ16から読み出された画素信号が適宜処理され
た後にビデオ信号としてTVモニタ14に対して出力さ
れる。また、画像信号処理ユニット12には文字信号発
生回路32が設けられ、この文字信号発生回路からは文
字パターン信号が画像信号処理回路30に対して必要に
応じて出力される。文字パターン信号は上述のビデオ信
号に重畳させられ、これによりTVモニタ14の表示画
面には内視鏡像と共に文字パターン信号に基づく文字情
報が表示される。要するに、電子内視鏡装置において
は、TVモニタ14には内視鏡像の他に患者名、患者I
D番号、検査日時、医者名等、検査結果のコメント等の
文字情報データも表示されるようになっており、このよ
うな文字情報の表示ために、画像信号処理ユニット12
内には文字信号発生回路32が設けられる。なお、後で
詳述するにように、本発明においては、臓器マップに基
づく部位記号を文字情報としてTVモニタ14の表示画
面に必要に応じて表示することができる。
34を具備し、この光源装置34は例えばハロゲンラン
プ、キセノンランプ等の白色光源ランプと、この白色光
源ランプに対して給電を行うランプ電源回路と、白色光
源ランプから光ガイドロッド24の露出端面に入射され
る照明光の光量を調節するための絞り機構とを包含す
る。ランプ電源回路はシステムコントローラ26の制御
下で動作させられ、これにより白色光源ランプの点灯及
び消灯が制御される。また、絞り機構もシステムコント
ローラ26の制御下動作させられ、これによりTVモニ
タ14の表示画面の全体的な明るさが所定レベルに維持
される。
壁にはフロントパネル36が装着され、このフロントパ
ネル36には様々なスイッチや表示灯等が設けられる。
例えば、フロントパネル36には、画像信号処理ユニッ
ト12自体の主電源スイッチ、光源装置34の白色光源
ランプのオン/オフを行うランプ点灯スイッチが設けら
れる。フロントパネル36に設けられるスイッチのうち
特に本発明に関連するスイッチとしては、部位表示モー
ド選択スイッチが挙げられ、この部位表示モード選択ス
イッチの操作により、部位表示モードの選択及び非選択
が後述するように行われる。また、フロントパネル36
に設けられる表示灯のうち特に本発明い関連する表示灯
としては、部位表示モード選択スイッチにより、部位表
示モードが選択された際に点灯される表示灯が挙げられ
る。部位表示モード選択スイッチについては、フロント
パネル36だけでなくスコープ10の操作部側に設けて
もよく、図1では、部位表示モード選択スイッチが参照
符号38で示されている。
26にはキーボード40が接続され、このキーボード4
0を操作することにより、種々のデータや指令信号がシ
ステムコントローラ26に対して出力される。電子内視
鏡装置のスコープ10の操作者は医者であるが、キーボ
ード40の操作は医者の指示下で補助者例えば看護婦等
によって行われる。なお、必要に応じて、キーボード4
0上の所定の機能キーに対して、上述した部位表示モー
ド選択スイッチ同等な機能を割り当ててもよい。
に接続されると、CCDドライバ信号ライン18はタイ
ミングコントローラ28に接続され、また画像信号読出
しライン20は画像信号処理回路30に接続される。一
方、光ガイドロッド24は光源装置34の白色光源ラン
プに光学的に接続され、これにより白色光源ランプから
の白色光は光ガイドロッド24及び光ガイドケーブル2
2によって導かれ、スコープ10の遠位端面から射出さ
せられる。スコープ10の遠位端面からの射出光によっ
て撮像センサ16の前方が照明されると、該撮像センサ
16の受光面には被写体像即ち内視鏡像が結像され、こ
のとき内視鏡像は撮像センサ16によって1フレーム分
の三原色の画素信号に光電変換される。
1では、システムコントローラ26に対する部位表示モ
ード選択スイッチ38の接続ラインは図示されていない
が、画像信号処理ユニット12に対してスコープ10が
接続されたとき、部位表示モード選択スイッチ38とシ
ステムコントローラ26との間の電気的な接続も確立さ
れる。
御クロックパルスがCCDドライバ信号ライン18を通
して撮像センサ16に画像読出し信号として出力される
と、撮像センサ16からは1フレーム分の三原色の画素
信号が画像読出し信号に従って画像信号読出しライン2
0を通して順次読み出されて画像信号処理回路30に送
られる。
が詳細ブロック図として図示される。同図に示すよう
に、画像信号処理回路30には、プリアンプ42と、ビ
デオ信号作成回路44と、画像取込み回路46とが設け
られる。撮像センサ16から読み出された個々の画素信
号は先ずプリアンプ42によって所定レベルまで増幅さ
れた後にビデオ信号作成回路44と画像取込み回路46
とのそれぞれに対して出力される。
4には、前段信号処理回路48と、アナログ/デジタル
(A/D)変換器50と、フレームメモリ52R、52
G及び52Bと、デジタル/アナログ(D/A)変換器
54R、54G及び54Bと、後段信号処理回路56と
が設けられる。
の画素信号は先ず前段信号処理回路48で所定の画像処
理、例えばノイズ除去処理、ガンマ補正処理、ホワイト
バランス処理、クランプ処理等を受け、その後にA/D
変換器50によって三原色のデジタル画素信号に変換さ
れる。なお、図2にはその複雑化を避けるために図示さ
れていなが、前段信号処理回路48及びA/D変換器5
0はタイミングコントローラ28に接続され、前段信号
処理回路48での画像処理及びA/D変換器50での変
換処理はタイミングコントローラ28から出力される制
御クロックパルスに従って系統的に整然と行われ、これ
により撮像センサ16からの画素信号の読出しタイミン
グと前段信号処理回路48及びA/D変換器50でのそ
れぞれの処理タイミングとが互いに同期させられる。
デジタル画素信号はその色毎にフレームメモリ52R、
52G及び52Bのいずれかに一旦書き込まれる。即
ち、フレームメモリ52Rには赤色デジタル画素信号が
書き込まれ、フレームメモリ52Gには緑色画素信号が
書き込まれ、フレームメモリ52Bには青色画素信号が
書き込まれる。三原色のデジタル画素信号がフレームメ
モリ52R、52G及び52Bのそれぞれに順次書き込
まれている間、互いに関連した三原色のデジタル画素信
号がフレームメモリ52R、52G及び52Bから所定
のタイミングで同時に読み出されてデジタル・コンポー
ネント・ビデオ信号のうちの三原色のビデオ信号成分と
して出力される。
G、52B)へのデジタル画素信号の書込み及び各フレ
ームメモリからのデジタル画素信号の読出しについても
タイミングコントローラ28から出力される制御クロッ
クパルスに従って系統的に整然と行われる。
から出力されるデジタル・コンポーネント・ビデオ信号
の三原色のビデオ信号成分、即ち赤色デジタルビデオ信
号成分、緑色デジタル信号成分及び青色デジタル信号成
分はそれぞれD/A変換器54R、54G及び54Bに
よって赤色アナログビデオ信号成分、緑色アナログビデ
オ信号成分及び青色アナログビデオ信号成分に変換され
る。次いで、三原色の赤色アナログビデオ信号成分、緑
色アナログビデオ信号成分及び青色アナログビデオ信号
成分は後段信号処理回路56で適当な処理例えば高周波
ノイズ除去処理や増幅処理等を受ける。
コンポーネントビデオ信号のうちの複合同期信号成分が
造成され、この複合同期信号成分は後段映像信号処理回
路46に対して出力され、これにより後段信号処理回路
56では、赤色アナログビデオ信号成分(R)、緑色ア
ナログビデオ信号成分(G)、青色アナログビデオ信号
成分(B)及び複合同期信号成分(SYNC)とから成
るアナログ・コンポーネント・ビデオ信号が作成され
る。アナログ・コンポーネント・ビデオ信号はTVモニ
タ14に対して出力され、そこで撮像センサ16で撮ら
れた内視鏡像が再現表示される。
54B)での変換処理及び後段信号処理回路での処理に
ついてもタイミングコントローラ28から出力される制
御クロックパルスに従って系統的に整然と行われる。
6には、信号処理回路58と、アナログ/デジタル(A
/D)変換器60と、デジタル処理回路62と、メモリ
64とが設けられる。デジタル処理回路62はマイクロ
コンピュータから構成され、そこには、システムコント
ローラ26と同様に、中央処理ユニット(CPU)、種
々のルーチンを実行するためのプログラム、定数等を格
納する読出し専用メモリ(ROM)、データ等を一時的
に格納する書込み/読出し自在なメモリ(RAM)、入
出力インターフェース(I/O)が含まれる。また、メ
モリ64は不揮発性メモリ、例えばEEPROM(elect
rically erasable programmable read-only memory)か
ら成り、そこには特定の臓器マップ例えば気管支マップ
に基づく画像データベースが構築されている。
人体の特定の臓器についてはその臓器の特徴的な部位を
表すために臓器マップが作成されている。図3には、気
管支マップが例示的に図示されており、同図に示すよう
に、気管支は先ず左右に大きく分岐し、右側分岐部の特
徴的な分岐部位のそれぞれに対して部位記号B1ないしB
10が与えられ、同様に左側分岐部の特徴的な分岐部位の
それぞれに対しても部位記号B1ないしB10が与えられ
る。また、図3には図示されていなが、各部位記号
(B1、B2、…B9、B10)で示される分岐部位の更に奥ま
った特徴的な分岐部位にも副部位記号が与えられる。例
えば、分岐部位B6の更に奥まった特徴的な分岐部位に対
しては、副部位記号B6a、B6b、B6c等が与えられる。こ
のような部位記号及び副部位記号を用いることにより、
医者の間では、気管支の特徴的な分岐部位に対する特定
が行われる。例えば、「気管支の右側分岐部の分岐部位
B8或いはB8bに異常あり」というように部位記号が用い
られる。なお、図3に示す左側分岐部では、部位記号
B2、B7で示されるべき分岐部位は図3の紙面裏側となる
ために見ることができない。
て不揮発性メモリ即ちEEPROM64に構築された気
管支画像データベースが模式図として概念的に示されて
いる。同図に示すように、気管支画像データベースは右
側分岐部画像データベースと左側分岐部画像データベー
スとから成る。右側分岐部画像データベースにはその部
位記号の数に対応した数の画像データ書込み領域が用意
され、これら画像データ書込み領域のヘッダ領域には部
位記号(R-B1、R-B2、…R-B9、R-B10、…、R-B 6a、R-B6
b、R-B6c、…等)が文字コードデータとして格納され
る。なお、各部位記号に付された“R-”はその部位記号
が気管支の右側分岐部のものであることを示している。
同様に、左側分岐部画像データベースにもその部位記号
の数に対応した数の画像データ書込み領域が用意され、
これら画像データ書込み領域のヘッダ領域には部位記号
(L-B1、L-B2、…L-B9、L-B 10、…、L-B6a、L-B 6b、L
-B6c、…等)が文字コードデータとして格納される。な
お、各部位記号に付された“L-”はその部位記号が気管
支の左側分岐部のものであることを示している。各画像
データ書込み領域にはその部位記号に対応した画像デー
タが特徴抽出処理された後に特徴抽出画像データとして
格納される。
理の一例が示される。参照符号A1で示される内視鏡像即
ち原画像はビデオ信号作成回路44で作成されたビデオ
信号から静止画像として得られたものであって、気管支
の左側分岐部の部位記号B10に対応したものである。内
視鏡像A1は所定の閾値に基づく二階調化処理を受けて
二階調画A2とされ、次いで二階調画A2は輪郭エッジ抽出
処理を受けてエッジ抽出画A3とされる。即ち、本実施形
態では、エッジ抽出画A3が特徴抽出画として取り扱われ
る。続いて、エッジ抽出画即ち特徴抽出画A3は正規化処
理を受けて所定のサイズの画像A4として正規化される。
正規化画像A4は特徴抽出画像データとして部位記号デー
タ(B10)に対応した画像データ書込み領域に格納され
る。要するに、EEPROM(メモリ)64の各画像デ
ータ書込み領域にはその部位記号データに対応した特徴
抽出画像データが書き込まれる。なお、本実施形態で
は、各画像データ書込み領域には5つ分の特徴抽出画像
データが格納し得る容量が与えられる。
スは過去に記録された気管支の内視鏡データに基づいて
画像処理コンピュータによって作成され、次いでシステ
ムコントローラ26及びデジタル処理回路62を介して
EEPROM(メモリ)64に書き込まれる。なお、画
像処理コンピュータによて気管支画像データベースを作
成する際には、各部位記号データに対して少なくとも1
つの特徴抽出画像データが与えられる。
表示モード選択スイッチ38と関係するので、ここで部
位表示モード選択スイッチ38の機能について説明す
る。
帰式スイッチとして構成され、部位表示モード選択スイ
ッチ38が押下操作される度に高レベル信号がモード切
換信号としてシステムコントローラ26に対して出力さ
れる。フロントパネル36上の主電源スイッチがオンさ
れたとき、即ち画像信号処理ユニット12の立上げ時、
部位表示モードは選択されず、その後に部位表示モード
選択スイッチ38が押下操作されると、部位表示モード
が選択され、次いで部位っ表示モード選択スイッチ38
が再び押下操作されると、部位表示モードの選択は解消
される。即ち、部位表示モード選択スイッチ38が押下
操作される度毎に、部位表示モードの選択及び非選択が
交互に行われる。
イッチとして割り当てられた機能キー並びにフロントパ
ネル36上に設けられた部位表示モード選択スイッチに
ついても上述した部位表示モード選択スイッチ38と同
様な機能を持ち、これら3つの部位表示モード選択スイ
ッチ38は互いに関連した単一のスイッチとして機能す
る。即ち、例えば、部位表示選択スイッチ38の押下操
作により、部位表示モードを選択した後に、キーボード
40上に部位表示モード選択スイッチとして割り当てら
れた機能キー或いはフロントパネル36上に設けられた
部位表示モード選択スイッチが押下操作されると、部位
表示モードの選択は解消され、その後に3つの部位表示
モード選択スイッチのいずれかが押下操作されると、部
位表示モードが再び選択されることになる。
の画素信号は画像取込み回路46の信号処理回路58で
所定の画像処理、例えばノイズ除去処理、ガンマ補正処
理、ホワイトバランス処理、クランプ処理等を受け、そ
の後にA/D変換器60によって三原色のデジタル画素
信号に変換される。デジタル処理回路62では、部位表
示モード選択スイッチ38の操作によって部位表示モー
ドが選択されているときだけ、所定の時間間隔毎に例え
ば1秒経過毎に1フレーム分の三原色の画素信号が静止
画像データとしてA/D変換器60から取り込まれる
が、しかし部位表示モードの非選択時には、A/D変換
器60からの静止画像データの取込みは行われない。
色の画素信号が静止画像データとしてデジタル処理回路
62に取り込まれると、デジタル処理回路62では、静
止画像データは図5を参照して説明したような特徴抽出
画像処理を受けて特徴抽出画像データとされ、次いでそ
の特徴抽出画像データは検索元画像データとしてデジタ
ル処理回路62のRAMに一旦保存される。続いて、気
管支画像データベース(図4)に対する検索が行われ、
そこから個々の特徴抽出画像データが被検索画像データ
として読み出され、検索元画像データと被検索画像デー
タとが互いに一致するか否かが判断される。
双方が互いに一致するか否かの比較は例えばパターンマ
ッチング法により行われる。即ち、パターンマッチング
法では、例えば、双方の画像データ中の複数の線分の隣
接度や分岐点等がどの程度一致するかという構造解析が
行われ、これにより双方の画像データの一致度が数値化
される。双方の画像データの一致度については百分率で
表され、一致度が適宜設定された一致度閾値(例えば80
%)以上であるとき、双方の画像データは一致するもの
とされる。双方の画像データが互いに一致すると判断さ
れたとき、その被検索画像データの部位記号コードデー
タが気管支画像データベース(EEPROM64)から
読み出されてシステムコントローラ26に送信される。
システムコントローラ26がデジタル処理回路62から
部位記号コードデータを受信すると、システムコントロ
ーラ26は部位記号コードデータを文字信号発生回路3
2に対して出力し、文字信号発生回路32では、部位記
号コードデータに基づく部位記号をTVモニタ14に表
示するための処理が行われる。なお、本実施形態では、
上述の一致度閾値については後述するように変更可能と
される。
謂キャラクタジェネレータ)32は制御回路66及びキ
ャラクタROM68から成り、制御回路66はマイクロ
コンピュータとして構成され、そこにはビデオRAM7
0が設けられる。ビデオRAM70の所定アドレスに文
字コードデータが入力されると、制御回路66はその文
字コードデータをキャラクタROM68に出力する。キ
ャラクタROM68では、該文字コードデータに応じた
文字パターン信号が発生させられ、この文字パターン信
号には赤色文字パターン信号成分、緑色文字パターン信
号成分及び青色文字パターン信号成分が含まれ、これら
三原色の文字パターン信号はフレームメモリ52R、5
2G及び52Bから出力される三原色のビデオ信号成
分、即ち赤色デジタルビデオ信号成分、緑色デジタル信
号成分及び青色デジタル信号成分にそれぞれ重畳させら
れ、これによりTVモニタ14には内視鏡像と共に文字
情報が表示される。
の表示位置はビデオRAM70のアドレスに対応させら
れ、文字情報の表示位置に対応したアドレスにはその文
字情報の文字コードデータが保持されていることにな
る。本実施形態では、ビデオRAM70には上述した部
位記号(R-B1、R-B2、…R-B9、R-B10、…、R-B6a、R-B6
b、R-B6c、…等或いはL-B1、L-B2、…L-B9、L-B10、
…、L-B6a、L-B 6b、L-B6c、…等)の部位記号コードデ
ータを格納するための部位記号アドレスが割り当てられ
る。例えば、部位記号R-B10の部位記号コードデータが
ビデオRAM70の部位記号アドレスに格納されると、
TVモニタ14の表示画面上には図6に例示的に示すよ
うに部位記号R-B10が内視鏡像と共に表示され、このと
き該内視鏡像は部位記号R-B10によって表されるべき気
管支の部位に対応したものとなる。
6からの三原色の文字パターン信号の出力タイミングは
タイミングコントローラ28から出力される制御クロッ
クパターンに従って制御される。
26で実行される部位表示モード選択スイッチ監視ルー
チンのフローチャートが示される。なお、この部位表示
選択スイッチ監視ルーチンは適当な時間間隔例えば20ms
毎に実行される時間割込みルーチンとして構成されるも
のであり、その実行開始は画像信号処理ユニット12の
主電源スイッチがオンされた後であって、該画像信号処
理ユニット12の初期化処理の終了後となる。
スイッチ38がオンされたか否か、即ち部位表示モード
選択スイッチ38からモード切換信号(高レベル信号)
が出力されたか否かが判断される。モード切換信号の出
力が確認されないとき、本ルーチンは直ちに終了する。
本ルーチンは20ms毎に実行されるが、しかしモード切換
信号の出力が確認されない限り、何等の進展もない。な
お、ステップ701では、部位表示モード選択スイッチ
38からのモード切換信号の出力だけが監視されるので
はなく、フロントパネル36上の部位表示モード選択ス
イッチ或いはキーボード40に部位表示モード切換スイ
ッチとして割り当てられた機能キーボードからのモード
切換信号の出力も同様に監視される。
確認されると、ステップ702に進み、そこでモード切
換指示フラグMFが“0”であるか“1”であるかが判断さ
れる。モード切換表示フラグMFは部位表示モードが選択
されているか否かを指示するフラグであって、MF=0のと
き、部位表示モードが選択されていないことを指示し、
MF=1のとき、部位表示モードが選択されていることを指
示するものである。なお、上述した画像信号処理ユニッ
ト12の初期化処理時にモード切換指示フラグMFは
“0”に初期設定される。
示モードが選択されていないとき、ステップ703に進
み、そこでモード切換指示フラグMFは“1”に設定さ
れ、これにより部位表示モードが選択されたことが指示
され、このとき上述した表示灯、即ち部位表示モードが
選択されたことを示す表示灯が点灯される。次いで、ス
テップ704に進み、そこで画像取込みルーチンの実行
指令がシステムコントローラ26から画像取込み回路4
6のデジタル処理回路62に対して発せられる。続い
て、ステップ705では、部位表示ルーチンの実行指令
がシステムコントローラ26内で発せられる。
2及び図13を参照して、また部位表示ルーチンについ
ては図14を参照して後で詳しく説明する。
部位表示モードが選択されているとき、ステップ702
からステップ706に進み、そこでモード切換指示フラ
グMFは“0”に設定され、これにより部位表示モードの
選択が解除されたことが指示され、このとき上述した表
示灯、即ち部位表示モードが選択されたことを示す表示
灯が消灯される。次いで、ステップ707に進み、そこ
で画像取込みルーチンの実行停止指令がシステムコント
ローラ26から画像取込み回路46のデジタル処理回路
62に対して発せられる。続いて、ステップ708で
は、部位表示ルーチンの実行停止指令がシステムコント
ローラ26内で発せられる。
2のビデオRAM70の部位記号アドレスがクリアされ
る。即ち、部位表示ルーチンの実行停止指令が発せられ
たときに、ビデオRAM70の部位記号アドレスに文字
コードデータが格納されて所定の部位記号がTVモニタ
14の表示画面上に表示されていても、部位表示ルーチ
ンの実行停止指令が発せられると同時に該部位記号アド
レス内の文字コードデータがクリアされ、これによりT
Vモニタ14の表示画面上の部位記号の表示は消去され
ることになる。
26で実行される検索範囲指定処理ルーチンのフローチ
ャートが示され、この検索範囲指定処理ルーチンは気管
支画像データベースに対する検索を行う際にその検索範
囲を右側分岐部画像データベース及び左側分岐部画像デ
ータベースのいずれか一方だけに限定するのか或いは気
管支画像データベースの全体範囲とするのかを設定する
ためのものである。例えば、気管支スコープ10の遠位
端部が気管支の右側分岐部内に挿入されているとき、左
側分岐分画像データベースに対する検索は必要とされな
いので、検索範囲を右側分岐部画像データベースだけ限
定することにより検索処理を効率的に行うことが可能で
ある。なお、検索範囲指定処理ルーチンも部位表示選択
スイッチ監視ルーチンと同様に適当な時間間隔例えば20
ms毎に実行される時間割込みルーチンとして構成される
ものであり、その実行開始も画像信号処理ユニット12
の主電源スイッチがオンされた後であって、該画像信号
処理ユニット12の初期化処理の終了後となる。
ースに対する検索範囲が右側分岐部画像データベースに
指定されたか否かが監視される。検索範囲を右側分岐部
画像データベースに指定するために、キーボード40上
の機能キーの1つが割り当てられ、この機能キーが押下
されると、システムコントローラ26は検索範囲が右側
分岐部画像データベースに指定したことを認識する。ス
テップ801で右側分岐部画像データベースに対する指
定が確認されると、ステップ802に進み、そこで右側
分岐部指示フラグRFが“1”に設定され、これにより右
側分岐部画像データベースに対する指定が指示される。
次いで、ステップ803では、右側分岐部指示フラグRF
(=1)がフラグデータとしてシステムコントローラ26か
らデジタル処理回路62に送信される。なお、画像信号
処理ユニット12の初期化処理時に、右側分岐部指示フ
ラグRFは“0”として初期設定される。
ースに対する指定が確認されないとき、ステップ804
までスキップし、そこで検索範囲を右側分岐部画像デー
タベースとする指定が解除されたか否かが監視される。
検索範囲を右側分岐部画像データベースとする指定の解
除のために、キーボード40上の機能キーの1つが割り
当てられ、この機能キーが押下されると、システムコン
トローラ26は検索範囲を右側分岐部画像データベース
とする指定が解除されたことを認識する。ステップ80
4で右側分岐部画像データベースに対する指定解除が確
認されると、ステップ805に進み、そこで右側分岐部
指示フラグRFが“0”に設定され、これにより右側分岐
部画像データベースに対する指定解除が指示される。次
いで、ステップ806では、右側分岐部指示フラグRF(=
0)がフラグデータとしてシステムコントローラ26から
デジタル処理回路62に送信される。
ースに対する検索範囲が左側分岐部画像データベースに
指定されたか否かが監視される。検索範囲を左側分岐部
画像データベースに指定するために、キーボード40上
の機能キーの1つが割り当てられ、この機能キーが押下
されると、システムコントローラ26は検索範囲が左側
分岐部画像データベースに指定したことを認識する。ス
テップ807で左側分岐部画像データベースに対する指
定が確認されると、ステップ808に進み、そこで左側
分岐部指示フラグLFが“1”に設定され、これにより左
側分岐部画像データベースに対する指定が指示される。
次いで、ステップ809では、左側分岐部指示フラグLF
(=1)がフラグデータとしてシステムコントローラ26か
らデジタル処理回路62に送信される。なお、右側分岐
部指示フラグRFの場合と同様に、画像信号処理ユニット
12の初期化処理時に、左側分岐部指示フラグLFは
“0”として初期設定される。
ースに対する指定が確認されないとき、ステップ810
までスキップし、そこで検索範囲を左側分岐部画像デー
タベースとする指定が解除されたか否かが監視される。
検索範囲を左側分岐部画像データベースとする指定の解
除のために、キーボード40上の機能キーの1つが割り
当てられ、この機能キーが押下されると、システムコン
トローラ26は検索範囲を左側分岐部画像データベース
とする指定が解除されたことを認識する。ステップ81
0で左側分岐部画像データベースに対する指定解除が確
認されると、ステップ811に進み、そこで左側分岐部
指示フラグLFが“0”に設定され、これにより左側分岐
部画像データベースに対する指定解除が指示される。次
いで、ステップ812では、左側分岐部指示フラグLF(=
0)がフラグデータとしてシステムコントローラ26から
デジタル処理回路62に送信される。
26で実行される一致度閾値変更処理ルーチンのフロー
チャートが示され、この一致度閾値変更処理ルーチンは
上述したように検索元画像データと被検索画像データと
の双方が互いに一致するか否かの判断に際して用いられ
る一致度閾値の変更のために用意されているものであ
る。一致度閾値変更処理ルーチンの実行のために、キー
ボード40上の機能キーの1つが割り当てられ、この機
能キーが押下されると、一致度閾値変更処理ルーチンが
実行される。なお、一致度閾値は画像信号処理ユニット
12の初期化処理時に80%として初期設定される。
TVモニタ14に表示される。例えば、一致度閾値が初
期設定値80%とされていれば、TVモニタ14の表示画
面には図6に示すように“TH=80”として表示され、こ
れにより一致度閾値が80%であることが報知される。勿
論、“TH=80”の表示のためには、その文字コードデー
タが文字信号発生回路32のビデオRAM70の所定ア
ドレスに格納される。なお、“TH=80”の“TH=”は固定
文字情報であり、その“TH”は一致度閾値の変数を表
し、また“TH=80”の“80”は可変文字(数字)情報で
あり、この可変文字情報はキーボード40上の例えばテ
ンキーを操作することにより書き替えられる。
行キーが押下されたか否かが監視され、実行キーの押下
が確認されないとき、ステップ903に進み、そこで所
定時間例えば3分が経過したか否かが判断される。この
3分の時間経過中に、キーボード40の操作者はそのテ
ンキーを操作して一致度閾値の変更値例えば“85”を入
力することが求められ、更に変更値“85”の入力後に実
行キーを押下することが求められる。なお、もし3分経
過中(ステップ903)に実行キーの押下が確認されな
いとき、本ルーチンは終了し、このとき一致度閾値(変
数)THの変更は行われない。
れると(ステップ902)、ステップ904に進み、そ
こで変数THに変更値“85”が設定される。次いで、変数
THはシステムコントローラ26からデジタル処理回路6
2に送信され、本ルーチンは終了する。なお、変数THに
変更値“85”が設定されると、そのコードデータが文字
信号発生回路32のビデオRAM70の所定アドレスに
格納され、これによりTVモニタ14の一致度閾値の表
示は“TH=80”から“TH=85”に変更される。
ラ26で実行される一致度閾値初期化ルーチンのフロー
チャートが示される。なお、一致度閾値初期化ルーチン
は適当な時間間隔例えば20ms毎に実行される時間割込み
ルーチンとして構成されるものであり、その実行開始は
画像信号処理ユニット12の主電源スイッチがオンされ
た後であって、該画像信号処理ユニット12の初期化処
理の終了後となる。
の機能キーの1つに割り当てられたデフォルトキーが押
下された否かが監視される。デフォルトキーの押下が確
認されると、ステップ1002に進み、そこで変数THの
設定値に拘わらず、初期値“80”が強制的に設定され
る。次いで、ステップ1003では、変数THはシステム
コントローラ26からデジタル処理回路62に送信さ
れ、本ルーチンは終了する。なお、変数THに初期値“8
0”が設定されると、そのコードデータが文字信号発生
回路32のビデオRAM70の所定アドレスに格納さ
れ、これによりTVモニタ14の一致度閾値の表示は
“TH=80”に戻される。
ラ26で実行される部位表示解除処理ルーチンのフロー
チャートが示され、この部位表示解除処理ルーチンはT
Vモニタ14の表示画面に再現表示された内視鏡像の部
位とその表示画面上に表示された部位記号とが一致しな
い場合に(即ち、気管支画像データベース(図4)に対
する検索元画像データの検索が正しく行われなかった場
合)にその部位記号の表示を強制的に解除するために用
意されているものである。なお、部位表示解除処理ルー
チンも適当な時間間隔例えば20ms毎に実行される時間割
込みルーチンとして構成されるものであり、その実行開
始も画像信号処理ユニット12の主電源スイッチがオン
された後であって、該画像信号処理ユニット12の初期
化処理の終了後となる。
制的解除が行われたか否かが監視される。なお、部位記
号表示の強制的解除のためにキーボード40上の1つの
機能キーが割り当てられ、この機能キーが押下される
と、システムコントローラ26は部位記号表示の強制的
解除が行われたと認識する。
と、ステップ1102に進み、そこで部位表示解除フラ
グNFに“1”が設定される。部位表示解除フラグNFはT
Vモニタ14の表示画面上の部位記号表示を強制的に解
除するか否かを指示するフラグであって、NF=0のときに
部位記号表示の非解除を指示し、NF=1のときに部位記号
表示の強制的解除を指示するものである。なお、部位表
示解除フラグNFは画像信号処理ユニット12の初期化処
理時に初期値“0”に設定される。
グNF(=1)がフラグデータとしてシステムコントローラ2
6からデジタル処理回路62に送信され、次いでステッ
プ1104では、部位表示解除フラグNFが初期値“0”
に設定され、本ルーチンは一旦終了する。
チンでは、部位記号表示解除キーとして割り当てられた
キーボード40上の機能キーの押下操作が監視され、該
機能キーが押下される度毎に、フラグデータ(NF=1)がシ
ステムコントローラ26からデジタル処理回路62に対
して送信される。
ラ26で実行される画像データベース更改指令処理ルー
チンのフローチャートが示され、この画像データベース
更改指令処理ルーチンは検索元画像データと被検索画像
データとが所定の条件下で一致した際に該検索元画像デ
ータに基づいて気管支画像データベース(図4)の更改
が行われるべきか否かを選択するために用意されている
ものである。なお、画像データベース更改指令処理ルー
チンも適当な時間間隔例えば20ms毎に実行される時間割
込みルーチンとして構成されるものであり、その実行開
始も画像信号処理ユニット12の主電源スイッチがオン
された後であって、該画像信号処理ユニット12の初期
化処理の終了後となる。
ベース(図4)の更改指令が行われたか否かが監視され
る。なお、気管支画像データベースの更改指令のために
キーボード40上の1つの機能キーが割り当てられ、こ
の機能キーが押下されると、システムコントローラ26
は気管支画像データベースの更改指令が行われたと認識
する。
されると、ステップ1202に進み、そこで更改指令フ
ラグCFに“1”が設定され、次いでステップ1203で
更改指令フラグCF(=1)がフラグデータとしてシステムコ
ントローラ26からデジタル処理回路62に送信され
る。更改指令フラグCFは気管支画像データベースの更改
を指令するか否かを指示するフラグであって、CF=0のと
きに気管支画像データベースの更改指令の解除を指示
し、CF=1のときに気管支画像データベースの更改指令を
指示するものである。なお、更改指令フラグCFは画像信
号処理ユニット12の初期化処理時に初期値“0”に設
定される。
スの更改指令が確認されないとき、ステップ1204に
スキップし、気管支画像データベースの更改指令の解除
が行われたか否かが監視される。なお、気管支画像デー
タベースの更改指令の解除のためにキーボード40上の
1つの機能キーが割り当てられ、この機能キーが押下さ
れると、システムコントローラ26は気管支画像データ
ベースの更改指令の解除が行われたと認識する。
スの更改指令の解除が確認されると、ステップ1205
に進み、そこで更改指令フラグCFに“0”が設定され、
次いでステップ1206で更改指令フラグCF(=0)がフラ
グデータとしてシステムコントローラ26からデジタル
処理回路62に送信される。ステップ1204で気管支
画像データベースの更改指令の解除が確認されないと
き、本ルーチンは一旦終了する。
指令処理ルーチンでは、更改指令キー及び更改指令解除
キーとしてそれぞれ割り当てられたキーボード40上の
機能キーの押下操作が監視され、それら機能キーの押下
操作が確認されると、フラグデータ(CF=1或いは0)がシ
ステムコントローラ26からデジタル処理回路62に対
して送信される。
処理回路62で実行される画像取込みルーチンのフロー
チャートが示され、図7の部位表示モード選択スイッチ
監視ルーチンの説明から明らかなように、画像取込みル
ーチンの実行は部位表示モードの選択により開始され
(ステップ704)、部位表示モードの選択解除により
停止される(ステップ707)。なお、画像取込みルー
チンは適当な時間間隔例えば1秒毎に実行される時間割
込みルーチンとして構成されるものである。
器60から1フレーム分のデジタル画素信号がデジタル
処理回路62に取り込まれ、次いで、ステップ1302
でその1フレーム分のデジタル画素信号に図5に示すよ
うな特徴抽出画像処理が施される。なお、特徴抽出画像
処理により得られた特徴抽出画像データは検索元画像デ
ータとしてデジタル処理回路62のRAMに一旦保存さ
れる。
ラグRFが“1”でかつ左側分岐部指示フラグLFが“0”で
あるか否かが判断される。RF=1でかつLF=0のとき、ステ
ップ1304に進み、そこで気管支画像データベース
(図4)に対する検索範囲が右側分岐部画像データベー
スに指定される。
とき、ステップ1305に進み、そこで右側分岐部指示
フラグRFが“0”でかつ左側分岐部指示フラグLFが“1”
であるか否かが判断される。RF=0でかつLF=1のとき、ス
テップ1306に進み、そこで気管支画像データベース
(図4)に対する検索範囲が左側分岐部画像データベー
スに指定される。
とき、即ちRF=0でかつLF=0(左右分岐部画像データベー
スのいずれも指定されないとき)若しくはRF=1でかつLF
=1(左右分岐部画像データベースの双方が誤って指定さ
れたとき)であるとき、ステップ1307に進み、そこ
で気管支画像データベース(図4)の全範囲が検索範囲
として指定される。
気管支画像データベースの指定検索範囲に対する検索が
行われ、そこから個々の特徴抽出画像データが被検索画
像データとして読み出されて検索元画像データと比較さ
れ、このとき上述したパターンマッチング法により被検
索画像データと検索元画像データとの一致度が数値化さ
れる。
値THよりも大きいか否かが判断される。一致度が一致度
閾値TH未満であるとき、即ち被検索画像データと検索元
画像データとが一致しないと判断されたとき、ステップ
1310に進み、そこでデジタル処理回路62からクリ
ア指令がシステムコントローラ26に送信される。な
お、このクリア指令は文字信号発生回路32のビデオR
AM70の部位記号アドレスに格納されている部位記号
コードデータをクリアすることを指令するためのもので
あり、もし該部位記号アドレスに部位記号コードデータ
が格納されていてその部位記号がTVモニタ14の表示
画面に表示されている場合には、該部位記号の表示が後
述するように解除されることになる。
ベースの指定検索範囲に対する検索がすべて完了したか
否かが判断される。もし気管支画像データベースの指定
検索範囲に対する検索が完了していなければ、ステップ
1308に戻り、該指定検索範囲から特徴抽出画像デー
タが更に被検索画像データとして読み出され、被検索画
像データと検索元画像データとの一致度が数値化され、
その一致度が一致度閾値THよりも大きいか否かが判断さ
れる(ステップ1309)。
索元画像データとの一致度が一致度閾値THよりも大きい
と判断されたとき、即ち被検索画像データと検索元画像
データとが一致すると判断されたとき、ステップ131
2に進み、部位表示解除フラグNFが“1”であるか“0”
であるかが判断される。NF=0のとき、即ち部位記号表示
の強制的解除が指示されていないとき、ステップ131
3に進み、そこで被検出画像データの部位記号コードデ
ータがEEPROM(メモリ64)から読み出されてデ
ジタル処理回路62からシステムコントローラ26に送
信される。なお、後述するように、システムコントロー
ラ26がデジタル処理回路62から部位記号コードデー
タを受信すると、その部位コードデータは文字信号発生
回路32のビデオRAM70の部位記号アドレスに格納
され、これによりその部位記号がTVモニタ14の表示
画面に表示される。
が“1”であるか“0”であるかが判断される。CF=1のと
き,即ち検索元画像データに基づく気管支画像データベ
ースの更改指令が指示されているとき、ステップ131
5に進み、そこで一致度閾値THの設定数値が80%以上で
あるか否かが判断される。もしTH(80%であれば、ステ
ップ1316に進み、被検索画像データと検索元画像デ
ータとの一致度が90%以上であるか否かが判断される。
もし一致度が90%以上であれば、ステップ1317に進
み、そこで画像データベース更改処理ルーチンが実行さ
れ、検索元画像データに基づいて画像データベースの更
改処理が行われる。
は図16を参照して後で詳しく説明する。
元画像データに基づく気管支画像データベースの更改指
令が指示されていないとき、画像データベース更改処理
ルーチンは実行されることなく本ルーチンは一旦終了す
る。また、CF=1であっても、被検索画像データと検索
元画像データとの一致度が所定条件を満たしていない場
合にも、本ルーチンは一旦終了する。要するに、一致度
閾値THの設定値が80%以上(ステップ1315)でかつ
被検索画像データと検索元画像データとの一致度が90%
以上の場合に限って、検索元画像データに基づいて画像
データベースの更改処理が行われる。
記号表示の強制的解除が指示されているとき、ステップ
1312からステップ1318に進み、そこで部位表示
解除フラグNFを一旦初期値“0”に設定した後にステッ
プ1310に進み、そこでデジタル処理回路62からク
リア指令がシステムコントローラ26に送信されて、T
Vモニタ14の表示画面の部位記号の表示が強制的に解
除される。
る状況について簡単に説明すると、例えば一致度閾値TH
が低めに設定された場合(例えば、70%)、被検索画像
データと検索元画像データとが誤って一致すると判断さ
れることがあり、この場合にはTVモニタ14で再現表
示された内視鏡像の実際の部位とその表示画面上に表示
された部位記号とが不一致となり、このような不一致は
熟練した電子内視鏡装置の操作者にとっては認識可能で
あり、このとき部位記号表示解除キーとして割り当てら
れたキーボード40上の機能キーが押下操作されると、
部位表示解除フラグNFに“1”が設定され、これにより
TVモニタ14の表示画面上での部位記号表示が強制的
に解除される(図11)。
ラ26で実行される部位表示ルーチンのフローチャート
が示され、部位表示ルーチンの実行は図7の部位表示モ
ード選択スイッチ監視ルーチンの説明から明らかなよう
に部位表示モードの選択により開始され(ステップ70
5)、部位表示モードの選択解除により停止される(ス
テップ708)。なお、部位表示ルーチンも画像取込み
ルーチンと同様に適当な時間間隔例えば1秒毎に実行さ
れる時間割込みルーチンとして構成されるものである。
62から部位記号コードデータ(ステップ1313)が
受信されているか否かが監視される。もしデジタル処理
回路62からの部位記号コードデータの受信が確認され
ていないとき、ステップ1503にスキップし、そこで
デジタル処理回路52からクリア指令(ステップ131
0)が受信されているか否かが判断される。もしデジタ
ル処理回路62からのクリア指令の受信が確認されてい
ないとき、本ルーチンは一旦終了する。
からの部位記号コードデータの受信が確認されると、ス
テップ1502に進み、そこで部位記号コードデータが
文字信号発生回路32に対して出力されてそのビデオR
AM70の部位記号アドレスに格納され、これによりそ
の部位記号がTVモニタ14の表示画面に表示される。
路62からのクリア指令の受信が確認されると、ステッ
プ1504に進み、そこで文字信号発生回路32のビデ
オRAM70の部位記号アドレスに格納されている部位
記号コードデータがクリアされる。即ち、もし該部位記
号アドレスに部位記号コードデータが格納されていてそ
の部位記号がTVモニタ14の表示画面に表示されてい
る場合には、その部位記号の表示が解除される。
た内視鏡像の部位が気管支画像データベース(図4)の
いずれかの部位データに対応していれば、TVモニタ1
4の表示画面にはその部位記号が表示され、TVモニタ
14で再現表示された内視鏡像の部位が気管支画像デー
タベース(図4)のいずれの部位データにも対応してい
なければ、部位記号の表示が解除される。
2で実行される画像データベース更改処理ルーチンのフ
ローチャートが示され、この画像データベース更改処理
ルーチンは上述したように図13及び図14の画像取込
みルーチンのステップ1317で実行されるものであ
る。
と一致した被検索画像データが格納されている画像デー
タ書込み領域(図4)内の特徴抽出画像データの格納個
数が5つであるか否かが判断される。もし画像抽出画像
データの格納個数が5つのとき、ステップ1602に進
み、そこで検索元画像データが5つの画像抽出画像デー
タのそれぞれに画素単位で加算された後に各画素の平均
値が演算され、これにより各画像抽出画像データの更新
が行われる。なお、平均値を演算して各画像抽出データ
を更新する代わりに、5つの特徴抽出画像データのうち
の1つを検索元画像データと置き換えることにより、画
像抽出画像データの更新を行うようにしてもよい。
タの格納個数が5つ以下のときには、ステップ1603
に進み、そこで検索元画像データが特徴抽出画像データ
としてその該当画像データ書込み領域(図4)に追加さ
れる。
データベースの更改を適宜行うことにより、画像データ
ベースは一層充実したものとなり、本発明による観察部
位表示システムの信頼性が更に高められる。
合について説明されているが、その他の臓器スコープを
使用する場合には、気管支画像データベースと同様な臓
器画像データベースがその他の臓器マップに従ってEE
PROM(メモリ)64に構築され、これにより内視鏡
像の観察時にその内視鏡像の部位に対応した部位記号を
TVモニタ14の表示画面上に適宜表示させる得ること
は言うまでもない。
による観察部位表示システムによれば、TVモニタ上で
観察している内視鏡像が臓器内部のどの部位に対応した
映像であるか素早く認識し得るので、本発明による観察
部位表示システムは特に初心者が電子内視鏡装置を扱う
場合に診察診断を的確にかつ速やかに行うための大きな
助けとなり得る。
だ電子内視鏡装置の概略ブロック図である。
生回路の詳細ブロック図である。
OM)内に構築された気管支画像データベースを概念的
に示す模式図である。
で実行される特徴抽出画像処理の処理過程を概念的に示
す模式図である。
式図である。
行される部位表示モード選択スイッチ監視ルーチンのフ
ローチャートである。
行される検索範囲指定処理ルーチンのフローチャートで
ある。
行される一致度閾値変更処理ルーチンのフローチャート
である。
実行される一致度閾値初期化ルーチンのフローチャート
である。
実行される部位表示解除処理ルーチンのフローチャート
である。
実行される画像データベース更改指令処理ルーチンのフ
ローチャートである。
像取込みルーチンのフローチャートの一部分である。
像取込みルーチンのフローチャートの残りの部分であ
る。
実行される部位表示ルーチンのフローチャートである。
のステップ1317でサブルーチンとして実行される画
像データベース更改処理ルーチンのフローチャートであ
る。
0)
コンポーネントビデオ信号のうちの複合同期信号成分が
造成され、この複合同期信号成分は後段信号処理回路5
6に対して出力され、これにより後段信号処理回路56
では、赤色アナログビデオ信号成分(R)、緑色アナロ
グビデオ信号成分(G)、青色アナログビデオ信号成分
(B)及び複合同期信号成分(SYNC)とから成るア
ナログ・コンポーネント・ビデオ信号が作成される。ア
ナログ・コンポーネント・ビデオ信号はTVモニタ14
に対して出力され、そこで撮像センサ16で撮られた内
視鏡像が再現表示される。
理の一例が示される。参照符号A1で示される内視鏡像即
ち原画像は撮像センサ16から読み出されプリアンプ4
2で増幅された画素信号から静止画像として得られたも
のであって、気管支の左側分岐部の部位記号B10に対
応したものである。内視鏡像A1は所定の閾値に基づく
二階調化処理を受けて二階調画A2とされ、次いで二階調
画A2は輪郭エッジ抽出処理を受けてエッジ抽出画A3とさ
れる。即ち、本実施形態では、エッジ抽出画A3が特徴抽
出画として取り扱われる。続いて、エッジ抽出画即ち特
徴抽出画A3は正規化処理を受けて所定のサイズの画像A4
として正規化される。正規化画像A4は特徴抽出画像デー
タとして部位記号データ(B10)に対応した画像デー
タ書込み領域に格納される。要するに、EEPROM
(メモリ)64の各画像データ書込み領域にはその部位
記号データに対応した特徴抽出画像データが書き込まれ
る。なお、本実施形態では、各画像データ書込み領域に
は5つ分の特徴抽出画像データが格納し得る容量が与え
られる。
が“1”であるか“0”であるかが判断される。CF=1のと
き,即ち検索元画像データに基づく気管支画像データベ
ースの更改指令が指示されているとき、ステップ131
5に進み、そこで一致度閾値THの設定数値が80%以上で
あるか否かが判断される。もしTHが80%であれば、ステ
ップ1316に進み、被検索画像データと検索元画像デ
ータとの一致度が90%以上であるか否かが判断される。
もし一致度が90%以上であれば、ステップ1317に進
み、そこで画像データベース更改処理ルーチンが実行さ
れ、検索元画像データに基づいて画像データベースの更
改処理が行われる。
Claims (7)
- 【請求項1】 内視鏡像を動画として撮像してモニタに
表示する電子内視鏡装置に組み込まれる観察部位表示シ
ステムであって、 特定の臓器マップに従って構築された臓器画像データベ
ースを具備し、この臓器画像データベースには、該臓器
マップの個々の部位を表す部位記号データと、この部位
記号データによって表される被検索画像データとが互い
に対応して格納されており、 更に、前記電子内視鏡装置で得られる動画から静止画像
を所定の時間間隔で検索元画像データとして取り込む画
像データ取込み手段と、 前記画像データ取込み手段によって検索元画像データが
取り込まれたとき、前記臓器画像データベースに格納さ
れている個々の被検索画像データを検索する検索手段
と、 前記検索手段によって検索された個々の被検索画像デー
タが前記画像取込み手段によって取り込まれた検索元画
像データと一致するか否かを判別する判別手段と、 前記判別手段によって前記検索元画像データと前記被検
索画像データとが一致すると判別されたとき、その被検
索画像データに対応した部位記号データに基づいて部位
記号を前記モニタに表示し、前記判別手段によって前記
検索元画像データと前記被検索画像データとが不一致で
あると判別されたとき、前記モニタでの部位記号表示を
解除する部位表示制御手段とを具備して成る観察部位表
示システム。 - 【請求項2】 請求項1に記載の観察部位表示システム
において、前記臓器画像データベースに格納される個々
の被検索画像データには特徴抽出画像処理が施され、前
記画像データ取込み手段が前記電子内視鏡装置から取り
込まれた検索元画像データに前記特徴抽出画像処理と同
じ処理を施すための特徴抽出画像処理手段を包含するこ
とを特徴とする観察部位表示システム。 - 【請求項3】 請求項1または2に記載の観察部位表示
システムであって、更に、前記検索手段による前記臓器
画像データベースの検索範囲を指定するための検索範囲
指定手段を具備して成ることを特徴とする観察部位表示
システム。 - 【請求項4】 請求項1から3までのいずれか1項に記
載の観察部位表示システムにおいて、前記判別手段が前
記被検索画像データと前記検索元画像データとの一致度
を数値化するための数値化手段を包含し、前記一致度が
所定の一致度閾値以上であるときに前記被検索画像デー
タと前記検索元画像データとが一致すると前記判別手段
により判別されることを特徴とする観察部位表示システ
ム。 - 【請求項5】 請求項4に記載の観察部位表示システム
であって、更に、前記一致度閾値を変更するための一致
度閾値変更手段を具備して成ることを特徴とする観察部
位表示システム。 - 【請求項6】 請求項1から5までのいずれか1項に記
載の観察部位表示システムであって、更に、前記モニタ
の部位記号の表示を強制的に解除するための部位表示強
制的解除手段を具備して成ることを特徴とする観察部位
表示システム。 - 【請求項7】 請求項1から6までのいずれか1項に記
載の観察部位表示システムであって、更に、前記判別手
段によって前記検索元画像データと前記被検索画像デー
タとが一致すると判別されたとき、その検索元画像デー
タに基づいて前記臓器画像データベースを更改するため
の画像データベース更改手段を具備して成ることを特徴
とする観察部位表示システム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001054048A JP3958526B2 (ja) | 2001-02-28 | 2001-02-28 | 電子内視鏡装置の観察部位表示システム |
US10/082,210 US6930706B2 (en) | 2001-02-28 | 2002-02-26 | Organ-region-indication system incorporated in electronic endoscope system |
DE10208739A DE10208739B4 (de) | 2001-02-28 | 2002-02-28 | System zur Anzeige eines Organbereichs für ein elektronisches Endoskopsystem |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2001054048A JP3958526B2 (ja) | 2001-02-28 | 2001-02-28 | 電子内視鏡装置の観察部位表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002253493A true JP2002253493A (ja) | 2002-09-10 |
JP3958526B2 JP3958526B2 (ja) | 2007-08-15 |
Family
ID=18914436
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001054048A Expired - Fee Related JP3958526B2 (ja) | 2001-02-28 | 2001-02-28 | 電子内視鏡装置の観察部位表示システム |
Country Status (3)
Country | Link |
---|---|
US (1) | US6930706B2 (ja) |
JP (1) | JP3958526B2 (ja) |
DE (1) | DE10208739B4 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007111309A1 (ja) * | 2006-03-24 | 2007-10-04 | Olympus Corporation | 受信装置 |
JP2016189812A (ja) * | 2015-03-30 | 2016-11-10 | 富士フイルム株式会社 | 内視鏡撮影部位特定装置、方法、プログラム |
KR20210047057A (ko) * | 2019-10-21 | 2021-04-29 | 한국전기연구원 | 상부위장관 내시경 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체 |
KR20210047630A (ko) * | 2019-10-22 | 2021-04-30 | 한국전기연구원 | 상부위장관 내시경 이미지 분석 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체 |
WO2021144951A1 (ja) * | 2020-01-17 | 2021-07-22 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び、画像処理プログラム |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4409166B2 (ja) | 2002-12-05 | 2010-02-03 | オリンパス株式会社 | 画像処理装置 |
US20050245789A1 (en) | 2003-04-01 | 2005-11-03 | Boston Scientific Scimed, Inc. | Fluid manifold for endoscope system |
US20040199052A1 (en) | 2003-04-01 | 2004-10-07 | Scimed Life Systems, Inc. | Endoscopic imaging system |
US8118732B2 (en) | 2003-04-01 | 2012-02-21 | Boston Scientific Scimed, Inc. | Force feedback control system for video endoscope |
US7578786B2 (en) | 2003-04-01 | 2009-08-25 | Boston Scientific Scimed, Inc. | Video endoscope |
US7591783B2 (en) | 2003-04-01 | 2009-09-22 | Boston Scientific Scimed, Inc. | Articulation joint for video endoscope |
US8083671B2 (en) | 2004-09-30 | 2011-12-27 | Boston Scientific Scimed, Inc. | Fluid delivery system for use with an endoscope |
EP1799096A2 (en) | 2004-09-30 | 2007-06-27 | Boston Scientific Scimed, Inc. | System and method of obstruction removal |
CA2581079A1 (en) | 2004-09-30 | 2006-04-13 | Boston Scientific Scimed, Inc. | Multi-functional endoscopic system for use in electrosurgical applications |
WO2006039522A2 (en) | 2004-09-30 | 2006-04-13 | Boston Scientific Scimed, Inc. | Adapter for use with digital imaging medical device |
US7479106B2 (en) | 2004-09-30 | 2009-01-20 | Boston Scientific Scimed, Inc. | Automated control of irrigation and aspiration in a single-use endoscope |
US7241263B2 (en) | 2004-09-30 | 2007-07-10 | Scimed Life Systems, Inc. | Selectively rotatable shaft coupler |
JP4566754B2 (ja) * | 2005-01-12 | 2010-10-20 | Hoya株式会社 | 画像処理装置 |
JP4814529B2 (ja) * | 2005-02-16 | 2011-11-16 | Hoya株式会社 | 画像処理装置 |
US7846107B2 (en) | 2005-05-13 | 2010-12-07 | Boston Scientific Scimed, Inc. | Endoscopic apparatus with integrated multiple biopsy device |
US8097003B2 (en) | 2005-05-13 | 2012-01-17 | Boston Scientific Scimed, Inc. | Endoscopic apparatus with integrated variceal ligation device |
US8052597B2 (en) | 2005-08-30 | 2011-11-08 | Boston Scientific Scimed, Inc. | Method for forming an endoscope articulation joint |
JP4130457B2 (ja) * | 2005-09-14 | 2008-08-06 | ザイオソフト株式会社 | 画像処理方法および画像処理プログラム |
US7967759B2 (en) | 2006-01-19 | 2011-06-28 | Boston Scientific Scimed, Inc. | Endoscopic system with integrated patient respiratory status indicator |
US8016749B2 (en) | 2006-03-21 | 2011-09-13 | Boston Scientific Scimed, Inc. | Vision catheter having electromechanical navigation |
US8888684B2 (en) | 2006-03-27 | 2014-11-18 | Boston Scientific Scimed, Inc. | Medical devices with local drug delivery capabilities |
US8202265B2 (en) | 2006-04-20 | 2012-06-19 | Boston Scientific Scimed, Inc. | Multiple lumen assembly for use in endoscopes or other medical devices |
US7955255B2 (en) | 2006-04-20 | 2011-06-07 | Boston Scientific Scimed, Inc. | Imaging assembly with transparent distal cap |
US8237773B2 (en) * | 2007-04-20 | 2012-08-07 | Sony Corporation | Communication system and method, sending apparatus and method, receiving apparatus and method, and program |
JP2009000236A (ja) * | 2007-06-20 | 2009-01-08 | Olympus Medical Systems Corp | 画像生成装置 |
JP5259141B2 (ja) * | 2007-08-31 | 2013-08-07 | オリンパスメディカルシステムズ株式会社 | 被検体内画像取得システム、被検体内画像処理方法および被検体内導入装置 |
JP2013517909A (ja) * | 2010-01-28 | 2013-05-20 | ザ ペン ステイト リサーチ ファンデーション | 気管支鏡検査法ガイダンスに適用される画像ベースのグローバル登録 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
FR2595044B1 (fr) * | 1986-02-28 | 1990-08-03 | Beer Gabel Marc | Procede de reconnaissance automatique de formes pathologiques au cours d'endoscopies, et systeme de reconnaissance automatique correspondant |
US5019976A (en) * | 1987-06-08 | 1991-05-28 | New World Down Hole Tools | Method and system for retrieving text associated with a reference image correspondence to a selected patient image |
JP2940827B2 (ja) * | 1988-09-07 | 1999-08-25 | オリンパス光学工業株式会社 | 医療用画像ファイリング装置 |
JPH04176435A (ja) * | 1990-11-09 | 1992-06-24 | Olympus Optical Co Ltd | 内視鏡装置 |
JP3228622B2 (ja) * | 1993-12-20 | 2001-11-12 | オリンパス光学工業株式会社 | 内視鏡システム |
DE69819289T2 (de) * | 1997-06-23 | 2004-08-05 | Philips Intellectual Property & Standards Gmbh | Bildgeführtes chirurgisches system |
IL126727A (en) * | 1998-10-22 | 2006-12-31 | Given Imaging Ltd | A method of bringing a device to the goal |
-
2001
- 2001-02-28 JP JP2001054048A patent/JP3958526B2/ja not_active Expired - Fee Related
-
2002
- 2002-02-26 US US10/082,210 patent/US6930706B2/en not_active Expired - Fee Related
- 2002-02-28 DE DE10208739A patent/DE10208739B4/de not_active Expired - Fee Related
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007111309A1 (ja) * | 2006-03-24 | 2007-10-04 | Olympus Corporation | 受信装置 |
JP2007252683A (ja) * | 2006-03-24 | 2007-10-04 | Olympus Corp | 受信装置 |
US8279276B2 (en) | 2006-03-24 | 2012-10-02 | Olympus Corporation | Receiving apparatus |
JP2016189812A (ja) * | 2015-03-30 | 2016-11-10 | 富士フイルム株式会社 | 内視鏡撮影部位特定装置、方法、プログラム |
KR20210047057A (ko) * | 2019-10-21 | 2021-04-29 | 한국전기연구원 | 상부위장관 내시경 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체 |
KR102725164B1 (ko) * | 2019-10-21 | 2024-10-31 | 한국전기연구원 | 상부위장관 내시경 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체 |
KR20210047630A (ko) * | 2019-10-22 | 2021-04-30 | 한국전기연구원 | 상부위장관 내시경 이미지 분석 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체 |
KR102684605B1 (ko) * | 2019-10-22 | 2024-07-11 | 한국전기연구원 | 상부위장관 내시경 이미지 분석 시스템, 방법, 및 상기 방법을 실행시키기 위한 컴퓨터 판독 가능한 프로그램을 기록한 기록 매체 |
WO2021144951A1 (ja) * | 2020-01-17 | 2021-07-22 | オリンパス株式会社 | 画像処理装置、画像処理方法、及び、画像処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
DE10208739A1 (de) | 2002-09-05 |
DE10208739B4 (de) | 2012-05-24 |
JP3958526B2 (ja) | 2007-08-15 |
US6930706B2 (en) | 2005-08-16 |
US20020118278A1 (en) | 2002-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2002253493A (ja) | 電子内視鏡装置の観察部位表示システム | |
JP4493386B2 (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
EP1849402B1 (en) | Medical image processing device, lumen image processing device, lumen image processing method, and programs for them | |
EP2550909A1 (en) | Endoscope device | |
JP6774552B2 (ja) | プロセッサ装置、内視鏡システム及びプロセッサ装置の作動方法 | |
US11950760B2 (en) | Endoscope apparatus, endoscope operation method, and program | |
JP5455550B2 (ja) | 電子内視鏡用プロセッサ | |
JP2008073345A (ja) | 内視鏡装置 | |
JP2007236700A (ja) | カプセル内視鏡システム | |
US20010002842A1 (en) | Electronic endoscope system | |
JP2008149027A (ja) | 内視鏡装置 | |
KR20040069332A (ko) | 내시경 화상 처리 장치 | |
EP1743568B1 (en) | Image processing device | |
JP3574591B2 (ja) | 蛍光診断用電子内視鏡装置 | |
JP5581122B2 (ja) | 電子内視鏡装置 | |
JP2018139846A (ja) | 内視鏡システム及びその作動方法 | |
JPH10323326A (ja) | 内視鏡装置 | |
JP2018139848A (ja) | 内視鏡システム及びその作動方法 | |
JP2007307395A (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
JP5675496B2 (ja) | 医療機器及び医療用プロセッサ | |
JP4547401B2 (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
JP4547402B2 (ja) | 画像表示装置、画像表示方法および画像表示プログラム | |
JP2002177214A (ja) | 電子内視鏡装置の内視鏡像ファイリング装置 | |
JPH1198497A (ja) | 内視鏡装置 | |
JP2003210402A (ja) | 電子内視鏡装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050704 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061114 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070507 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070510 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110518 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120518 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120518 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130518 Year of fee payment: 6 |
|
LAPS | Cancellation because of no payment of annual fees |