[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP7143436B2 - 医療画像処理装置、医療画像処理装置の作動方法及びプログラム、診断支援装置 - Google Patents

医療画像処理装置、医療画像処理装置の作動方法及びプログラム、診断支援装置 Download PDF

Info

Publication number
JP7143436B2
JP7143436B2 JP2020553888A JP2020553888A JP7143436B2 JP 7143436 B2 JP7143436 B2 JP 7143436B2 JP 2020553888 A JP2020553888 A JP 2020553888A JP 2020553888 A JP2020553888 A JP 2020553888A JP 7143436 B2 JP7143436 B2 JP 7143436B2
Authority
JP
Japan
Prior art keywords
area
medical image
attention area
superimposes
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020553888A
Other languages
English (en)
Other versions
JPWO2020090731A1 (ja
Inventor
稔宏 臼田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Publication of JPWO2020090731A1 publication Critical patent/JPWO2020090731A1/ja
Application granted granted Critical
Publication of JP7143436B2 publication Critical patent/JP7143436B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/20—ICT specially adapted for the handling or processing of medical images for handling medical images, e.g. DICOM, HL7 or PACS
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00004—Operational features of endoscopes characterised by electronic signal processing
    • A61B1/00009—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope
    • A61B1/000094—Operational features of endoscopes characterised by electronic signal processing of image signals during a use of endoscope extracting biological structures
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/00002—Operational features of endoscopes
    • A61B1/00043—Operational features of endoscopes provided with output arrangements
    • A61B1/00045—Display arrangement
    • A61B1/0005—Display arrangement combining images e.g. side-by-side, superimposed or tiled
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
    • A61B1/045—Control thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141—Control of illumination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143—Sensing or illuminating at different wavelengths
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
    • G06V10/449—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
    • G06V10/451—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
    • G06V10/454—Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/56—Extraction of image or video features relating to colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/60—Extraction of image or video features relating to illumination properties, e.g. using a reflectance or lighting model
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H30/00—ICT specially adapted for the handling or processing of medical images
    • G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
    • G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/03—Recognition of patterns in medical or anatomical images
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • Surgery (AREA)
  • Biomedical Technology (AREA)
  • Evolutionary Computation (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • Software Systems (AREA)
  • Pathology (AREA)
  • Databases & Information Systems (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Optics & Photonics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Computing Systems (AREA)
  • Primary Health Care (AREA)
  • Epidemiology (AREA)
  • Signal Processing (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Data Mining & Analysis (AREA)
  • Endoscopes (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Description

本発明は医療画像処理装置、医療画像処理方法及びプログラム、診断支援装置に係り、特に医療画像の注目領域を報知する技術に関する。
医療画像から病変等の注目領域を検出し、Bounding Box（領域を囲む矩形）等を表示して、医師に注目領域が検出されたことを報知する技術が知られている。
特許文献１には、内視鏡検査時に画像から病変が検出された場合に、モニタに表示されている画像中の病変領域を枠で囲むことで、病変を報知することが記載されている。また、特許文献２には、モニタに表示される観察画像とは別の場所に、病変位置を示す情報を表示する方法が記載されている。
国際公開第２０１７／０７３３３８号 国際公開第２０１７／１１５４４２号
医師が視線移動をすることなく病変位置を認知するためには、医師が画像を観察しているモニタに病変領域を表示させることが必要である。一方で、病変領域とその周辺の正常粘膜とを見比べる際には、病変領域の境界のコントラストが判断材料になるため、できる限り病変領域の境界の観察の邪魔にならないように表示する必要がある。
特許文献１に記載されているように、病変領域を囲う図形を表示すると、病変領域の境界が視認しにくくなるという危険性がある。また、病変領域の境界に重ならないように病変領域を囲う図形を表示すると、図形が病変領域から大きくはみ出してしまい、正常粘膜の観察を妨げ、さらには病変の見落としにつながる危険性がある。
本発明はこのような事情に鑑みてなされたもので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知する医療画像処理装置、医療画像処理方法及びプログラム、診断支援装置を提供することを目的とする。
上記目的を達成するために医療画像処理装置の一の態様は、医療画像に含まれる注目領域を報知する図形を医療画像に重畳する重畳処理部を有し、重畳処理部は、注目領域の内側に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にする医療画像処理装置である。
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
医療画像を取得する画像取得部と、医療画像から注目領域情報を取得する注目領域情報取得部と、を備えることが好ましい。これにより、医療画像を適切に取得し、注目領域情報を適切に取得することができる。
重畳処理部は、境界を指示する図形を注目領域に重畳することが好ましい。これにより、ユーザに注目領域と非注目領域との境界を認識させることができる。
重畳処理部は、注目領域の重心を示す図形を注目領域に重畳することが好ましい。これにより、ユーザに注目領域を報知することができる。
重畳処理部は、注目領域の面積に応じたサイズの図形を重畳することが好ましい。これにより、注目領域の面積によらずに医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
重畳処理部は、注目領域の面積が第１面積以上の場合は一定の第１サイズの図形を重畳することが好ましい。これにより、注目領域の面積が第１面積以上の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
重畳処理部は、注目領域の面積が第２面積以下の場合は一定の第２サイズの図形を重畳することが好ましい。これにより、注目領域の面積が第２面積以下の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
重畳処理部は、注目領域の面積に応じた形状の図形を重畳することが好ましい。これにより、注目領域の面積によらずに医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
重畳処理部は、注目領域の面積が第３面積以上の場合は注目領域の内側から境界を指示する図形を重畳し、かつ注目領域の面積が第３面積未満の場合は注目領域の内側の座標を示す図形を重畳することが好ましい。これにより、注目領域の面積が第３面積未満の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
重畳処理部は、注目領域の面積が第４面積以上の場合は注目領域の内側から境界を指示する図形を重畳し、かつ注目領域の面積が第４面積未満の場合は注目領域の外側に図形を重畳することが好ましい。これにより、注目領域の面積が第４面積未満の場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
図形を生成する図形生成部を備えることが好ましい。これにより、注目領域に重畳するための図形を生成することができる。
図形が重畳された医療画像を表示部に表示させる表示制御部を備えることが好ましい。これにより、ユーザは図形が重畳された医療画像を表示部によって視認することができる。
上記目的を達成するために診断支援装置の一の態様は、上記に記載の医療画像処理装置と、表示部と、を備えた診断支援装置である。
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
上記目的を達成するために医療画像処理方法の一の態様は、医療画像に含まれる注目領域を報知する図形を医療画像に重畳する重畳処理工程を有し、重畳処理工程は、注目領域の内側に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にする医療画像処理方法である。
本態様によれば、医療画像に含まれる注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にするようにしたので、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。上記の医療画像処理方法をコンピュータに実行させるためのプログラムも本態様に含まれる。
本発明によれば、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
図１は、医療画像処理装置を含む内視鏡システムの全体構成を示す概略図である。 図２は、医療画像処理装置の電気的構成の一例を示すブロック図である。 図３は、医療画像処理方法の各処理の一例を示すフローチャートである。 図４は、表示器の表示の一例を示す図である。 図５は、表示器の表示の一例を示す図である。 図６は、表示器の表示の一例を示す図である。 図７は、表示器の表示の一例を示す図である。 図８は、図形の他の例を示す図である。 図９は、図形の他の例を示す図である。 図１０は、注目領域の重心を示す図である。 図１１は、注目領域に外接する矩形の中心を示す図である。 図１２は、表示器の表示の一例を示す図である。 図１３は、表示器の表示の一例を示す図である。 図１４は、表示器の表示の一例を示す図である。 図１５は、表示器の表示の一例を示す図である。 図１６は、表示器の表示の一例を示す図である。 図１７は、表示器の表示の一例を示す図である。 図１８は、注目領域を囲う４つの図形を示す図である。 図１９は、注目領域を囲う４つの図形を示す図である。 図２０は、注目領域を囲う４つの図形を示す図である。 図２１は、表示器の表示の一例を示す図である。
以下、添付図面に従って本発明の好ましい実施形態について詳説する。
＜内視鏡システムの全体構成＞
図１は、本実施形態に係る医療画像処理装置を含む内視鏡システム９の全体構成を示す概略図である。図１に示すように、内視鏡システム９は、電子内視鏡である内視鏡スコープ１０と、光源装置１１と、内視鏡プロセッサ装置１２と、表示装置１３と、医療画像処理装置１４と、操作部１５と、表示器１６と、を備える。
内視鏡スコープ１０は、時系列の医療画像を撮像するためのものであり、例えば軟性内視鏡である。この内視鏡スコープ１０は、被検体内に挿入され且つ先端と基端とを有する挿入部２０と、挿入部２０の基端側に連設され且つユーザ（医師）が把持して各種操作を行う手元操作部２１と、手元操作部２１に連設されたユニバーサルコード２２と、を有する。
挿入部２０は、全体が細径で長尺状に形成されている。挿入部２０は、その基端側から先端側に向けて順に可撓性を有する軟性部２５と、手元操作部２１の操作により湾曲可能な湾曲部２６と、不図示の撮像光学系（対物レンズ）及び撮像素子２８等が内蔵される先端部２７と、が連設されて構成される。
撮像素子２８は、ＣＭＯＳ（complementary metal oxide semiconductor）型又はＣＣＤ（charge coupled device）型の撮像素子である。撮像素子２８の撮像面には、先端部２７の先端面に開口された不図示の観察窓、及びこの観察窓の後方に配置された不図示の対物レンズを介して、被観察部位の像光が入射する。撮像素子２８は、その撮像面に入射した被観察部位の像光を撮像（電気信号に変換）して、撮像信号を出力する。
手元操作部２１には、ユーザによって操作される各種操作部材が設けられている。具体的に、手元操作部２１には、湾曲部２６の湾曲操作に用いられる２種類の湾曲操作ノブ２９と、送気送水操作用の送気送水ボタン３０と、吸引操作用の吸引ボタン３１と、が設けられている。また、手元操作部２１には、被観察部位の静止画３９の撮像指示を行うための静止画撮像指示部３２と、挿入部２０内を挿通している処置具挿通路（不図示）内に処置具（不図示）を挿入する処置具導入口３３と、が設けられている。
ユニバーサルコード２２は、内視鏡スコープ１０を光源装置１１に接続するための接続コードである。このユニバーサルコード２２は、挿入部２０内を挿通しているライトガイド３５、信号ケーブル３６、及び流体チューブ（不図示）を内包している。また、ユニバーサルコード２２の端部には、光源装置１１に接続されるコネクタ３７ａと、このコネクタ３７ａから分岐され且つ内視鏡プロセッサ装置１２に接続されるコネクタ３７ｂと、が設けられている。
コネクタ３７ａを光源装置１１に接続することで、ライトガイド３５及び流体チューブ（不図示）が光源装置１１に挿入される。これにより、ライトガイド３５及び流体チューブ（不図示）を介して、光源装置１１から内視鏡スコープ１０に対して必要な照明光と水と気体とが供給される。その結果、先端部２７の先端面の照明窓（不図示）から被観察部位に向けて照明光が照射される。また、前述の送気送水ボタン３０の押下操作に応じて、先端部２７の先端面の送気送水ノズル（不図示）から先端面の観察窓（不図示）に向けて気体又は水が噴射される。
コネクタ３７ｂを内視鏡プロセッサ装置１２に接続することで、信号ケーブル３６と内視鏡プロセッサ装置１２とが電気的に接続される。これにより、信号ケーブル３６を介して、内視鏡スコープ１０の撮像素子２８から内視鏡プロセッサ装置１２へ被観察部位の撮像信号が出力されるとともに、内視鏡プロセッサ装置１２から内視鏡スコープ１０へ制御信号が出力される。
光源装置１１は、コネクタ３７ａを介して、内視鏡スコープ１０のライトガイド３５へ照明光を供給する。照明光は、白色光（白色の波長帯域の光又は複数の波長帯域の光）、或いは１又は複数の特定の波長帯域の光、或いはこれらの組み合わせ等の観察目的に応じた各種波長帯域の光が選択される。なお、特定の波長帯域は、白色の波長帯域よりも狭い帯域である。
特定の波長帯域の第１例は、例えば可視域の青色帯域又は緑色帯域である。この第１例の波長帯域は、３９０ｎｍ以上４５０ｎｍ以下又は５３０ｎｍ以上５５０ｎｍ以下の波長帯域を含み、且つ第１例の光は、３９０ｎｍ以上４５０ｎｍ以下又は５３０ｎｍ以上５５０ｎｍ以下の波長帯域内にピーク波長を有する。
特定の波長帯域の第２例は、例えば可視域の赤色帯域である。この第２例の波長帯域は、５８５ｎｍ以上６１５ｎｍ以下又は６１０ｎｍ以上７３０ｎｍ以下の波長帯域を含み、且つ第２例の光は、５８５ｎｍ以上６１５ｎｍ以下又は６１０ｎｍ以上７３０ｎｍ以下の波長帯域内にピーク波長を有する。
特定の波長帯域の第３例は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域を含み、且つ第３例の光は、酸化ヘモグロビンと還元ヘモグロビンとで吸光係数が異なる波長帯域にピーク波長を有する。この第３例の波長帯域は、４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、又は６００ｎｍ以上７５０ｎｍ以下の波長帯域を含み、且つ第３例の光は、上記４００±１０ｎｍ、４４０±１０ｎｍ、４７０±１０ｎｍ、又は６００ｎｍ以上７５０ｎｍ以下の波長帯域にピーク波長を有する。
特定の波長帯域の第４例は、生体内の蛍光物質が発する蛍光の観察（蛍光観察）に用いられ且つこの蛍光物質を励起させる励起光の波長帯域（３９０ｎｍから４７０ｎｍ）である。
特定の波長帯域の第５例は、赤外光の波長帯域である。この第５例の波長帯域は、７９０ｎｍ以上８２０ｎｍ以下又は９０５ｎｍ以上９７０ｎｍ以下の波長帯域を含み、且つ第５例の光は、７９０ｎｍ以上８２０ｎｍ以下又は９０５ｎｍ以上９７０ｎｍ以下の波長帯域にピーク波長を有する。
内視鏡プロセッサ装置１２は、コネクタ３７ｂ及び信号ケーブル３６を介して、内視鏡スコープ１０の動作を制御する。また、内視鏡プロセッサ装置１２は、コネクタ３７ｂ及び信号ケーブル３６を介して内視鏡スコープ１０の撮像素子２８から取得した撮像信号に基づき、時系列のフレーム画像３８ａ（図２参照）からなる時系列の医療画像である動画３８を生成する。動画３８のフレームレートは、例えば３０ｆｐｓ（frame per second）である。
更に、内視鏡プロセッサ装置１２は、内視鏡スコープ１０の手元操作部２１にて静止画撮像指示部３２が操作された場合、動画３８の生成と並行して、動画３８中の１枚のフレーム画像３８ａを撮像指示のタイミングに応じて取得し、静止画３９とする。
動画３８及び静止画３９は、被検体内、即ち生体内を撮像した医療画像である。更に動画３８及び静止画３９が、上述の特定の波長帯域の光（特殊光）により得られた画像である場合、両者は特殊光画像である。そして、内視鏡プロセッサ装置１２は、生成した動画３８及び静止画３９を、表示装置１３と医療画像処理装置１４とにそれぞれ出力する。
なお、内視鏡プロセッサ装置１２は、上述の白色光により得られた通常光画像に基づいて、上述の特定の波長帯域の情報を有する特殊光画像を生成（取得）してもよい。この場合、内視鏡プロセッサ装置１２は、特殊光画像取得部として機能する。そして、内視鏡プロセッサ装置１２は、特定の波長帯域の信号を、通常光画像に含まれる赤（Red）、緑（Green）、及び青（Blue）のＲＧＢ色情報、或いはシアン（Cyan）、マゼンタ（Magenta）、及びイエロー（Yellow）のＣＭＹ色情報に基づく演算を行うことで得る。
また、内視鏡プロセッサ装置１２は、例えば、上述の白色光により得られた通常光画像と、上述の特定の波長帯域の光（特殊光）により得られた特殊光画像との少なくとも一方に基づいて、公知の酸素飽和度画像等の特徴量画像を生成してもよい。この場合、内視鏡プロセッサ装置１２は、特徴量画像生成部として機能する。なお、上記の生体内画像、通常光画像、特殊光画像、及び特徴量画像を含む動画３８又は静止画３９は、いずれも画像による診断、検査の目的で人体を撮像し、又は計測した結果を画像化した医療画像である。
表示装置１３は、内視鏡プロセッサ装置１２に接続されており、この内視鏡プロセッサ装置１２から入力された動画３８及び静止画３９を表示する。ユーザは、表示装置１３に表示される動画３８を確認しながら、挿入部２０の進退操作等を行い、被観察部位に病変等を発見した場合には静止画撮像指示部３２を操作して被観察部位の静止画撮像を実行し、また、診断、生検等を行う。
医療画像処理装置１４は、注目領域である病変の自動認識及び自動鑑別が可能な装置である。また、医療画像処理装置１４は、医療画像に含まれる注目領域をユーザに報知し、かつ注目領域と注目領域以外の非注目領域との境界（デマルケーションライン）の観察を容易にする装置である。医療画像処理装置１４は、例えばパーソナルコンピュータが用いられる。また、操作部１５は、パーソナルコンピュータに有線接続又は無線接続されるキーボード及びマウス等が用いられ、表示器１６（報知部の一例）はパーソナルコンピュータに接続可能な液晶モニタ等の各種モニタが用いられる。
医療画像処理装置１４と表示器１６（第１表示部の一例）とによって、動画３８及び動画３８に含まれる注目領域を報知する図形を表示器１６に表示する診断支援装置として機能する。
＜医療画像処理装置の構成＞
図２は、医療画像処理装置１４の電気的構成の一例を示すブロック図である。図２に示す医療画像処理装置１４は、主として時系列画像取得部４０と、注目領域検出部４２と、座標算出部４４と、面積算出部４６と、図形生成部４８と、制御部５０と、表示制御部５２と、記憶部５４と、から構成されている。
制御部５０は、記憶部５４に記憶されたプログラム（医療画像処理プログラム）５６に基づき、時系列画像取得部４０、注目領域検出部４２、座標算出部４４、面積算出部４６、図形生成部４８、及び表示制御部５２を統括制御し、また、これらの各部の一部として機能する。
記憶部５４は、ハードディスク装置等のストレージ装置である。記憶部５４は、注目領域検出部４２による検出結果及び撮像された静止画３９を記憶するとともに、プログラム５６及び医療画像処理装置１４の各種制御に係る情報等を記憶する。
時系列画像取得部４０は、医療画像の一例である内視鏡画像を順次取得する。ここでは、時系列画像取得部４０は、内視鏡プロセッサ装置１２（図１参照）に有線接続又は無線接続された不図示の画像入出力インターフェースを用いて、内視鏡プロセッサ装置１２から時系列のフレーム画像３８ａからなる動画３８（本例では、内視鏡スコープ１０により撮像される動画３８）を取得する。また、内視鏡スコープ１０にて動画３８の撮像途中に前述の静止画３９の撮像が行われた場合、時系列画像取得部４０は、内視鏡プロセッサ装置１２から動画３８及び静止画３９を取得する。
なお、時系列画像取得部４０は、内視鏡プロセッサ装置１２から動画３８を直接取得する代わりに、メモリーカード、ハードディスク装置等の各種情報記憶媒体を介して動画３８を取得してもよい。また、時系列画像取得部４０は、インターネット上のサーバ或いはデータベース等にアップロードされた動画３８をインターネット経由で取得してもよい。
注目領域検出部４２は、医療画像から注目領域情報を取得する注目領域情報取得部の一例であり、被検体内の観察中に撮像された動画３８から注目領域を検出する。注目領域検出部４２は、動画３８の各フレーム画像３８ａ（又は間引かれた一定間隔のフレーム画像３８ａ）の特徴量を算出し、画像内の注目領域の認識処理を行う畳み込みニューラルネットワーク（ＣＮＮ：Convolutional Neural Network）を含む。
注目領域の例としては、ポリープ、癌、大腸憩室、炎症、ＥＭＲ（Endoscopic Mucosal Resection）瘢痕、ＥＳＤ（Endoscopic Submucosal Dissection）瘢痕、クリップ箇所、出血点、穿孔、血管異型性、処置具等がある。
注目領域検出部４２は、検出された注目領域が、「腫瘍性」、「非腫瘍性」、「その他」といった病変に関する複数のカテゴリのうちのいずれのカテゴリに属するかのカテゴリ分類等の認識結果を取得することも可能である。
なお、注目領域検出部４２は、ＣＮＮにより注目領域を検出するものに限らず、画像内の色、画素値の勾配、形状、大きさ等の特徴量を画像処理により解析して注目領域を検出するものでもよい。
座標算出部４４は、注目領域情報取得部の一例であり、注目領域検出部４２が検出した注目領域のフレーム画像３８ａ内の位置を示す座標を算出する。ここでは、座標算出部４４は、注目領域を報知する図形を重畳する位置の座標を算出する。重畳する位置の座標とは、一例として、注目領域と注目領域以外の非注目領域との境界の座標、注目領域の内側の位置であって境界に沿った位置の座標、又は注目領域の重心の座標である。
面積算出部４６は、注目領域情報取得部の一例であり、注目領域検出部４２によって検出された注目領域の画像上の面積を算出する。注目領域の面積は、注目領域そのものの面積であってもよいし、注目領域が内接する矩形、多角形又は円の面積であってもよい。面積算出部４６は、注目領域の面積に代えて注目領域の外周長を算出してもよい。
図形生成部４８は、注目領域をユーザに報知するための図形を生成する。図形生成部４８が生成する図形については、後述する。
表示制御部５２は、医療画像に図形を重畳する重畳処理部の一例であり、図形が重畳された医療画像を表示器１６に表示させる。表示制御部５２は、画像表示制御部５２Ａ及び報知情報表示制御部５２Ｂを備えている。
画像表示制御部５２Ａは、時系列画像取得部４０が取得した動画３８を表示器１６に出力し、動画３８を表示器１６に表示させる。即ち、表示器１６には、複数のフレーム画像３８ａが順次表示される。
報知情報表示制御部５２Ｂは、表示器１６に表示されたフレーム画像３８ａの座標算出部４４が算出した座標の位置に、図形生成部４８が生成した図形を重畳する。これにより、報知情報表示制御部５２Ｂは、注目領域の内側に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を重畳しない、即ち非重畳にする。
ここでは、報知情報表示制御部５２Ｂは、境界の少なくとも５０％は図形を非重畳にする。報知情報表示制御部５２Ｂは、好ましくは境界の９５％は図形を非重畳にし、より好ましくは境界の１００％に図形を非重畳にする。
このように、注目領域の内側に図形を重畳することで注目領域を報知し、かつ注目領域と非注目領域との境界の少なくとも一部は図形によって隠れることがないため、境界をユーザに視認させることができる。
＜医療画像処理方法＞
続いて、本実施形態に係る医療画像処理方法について説明する。医療画像処理方法は、記憶部５４に記憶されたプログラム５６を制御部５０が実行することで実施される。
図３は、医療画像処理方法の各処理の一例を示すフローチャートである。医療画像処理方法は、画像取得工程（ステップＳ１）と、注目領域検出工程（ステップＳ２）と、座標算出工程（ステップＳ３）と、面積算出工程（ステップＳ４）と、図形生成工程（ステップＳ５）と、重畳処理工程（ステップＳ６）と、を含む。
ステップＳ１では、時系列画像取得部４０は、動画３８のフレーム画像３８ａを取得する。ステップＳ２では、注目領域検出部４２は、ステップＳ１で取得したフレーム画像３８ａから注目領域を検出する。
ステップＳ３では、座標算出部４４は、ステップＳ２で検出した注目領域の画像内の位置を示す座標を算出する。ステップＳ４では、面積算出部４６は、ステップＳ２で検出した注目領域の画像上の面積を算出する。
ステップＳ５では、図形生成部４８は、ステップＳ２で検出した注目領域をユーザに報知するための図形を生成する。図形生成部４８は、ステップＳ４で算出した面積よりも小さい面積の図形を生成する。
ステップＳ６では、表示制御部５２は、ステップＳ１で取得したフレーム画像３８ａのステップＳ３で算出した座標の位置にステップＳ５で生成した図形を重畳し、図形が重畳されたフレーム画像３８ａを表示器１６に表示させる。これにより、ステップＳ２で検出した注目領域の内側に図形が重畳される。この図形は、ステップＳ４で算出した注目領域の面積よりも小さい図形であるため、注目領域と非注目領域との境界の少なくとも一部は図形が非重畳になる。
以上のように、医療画像処理方法によれば、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
＜図形の態様＞
注目領域に重畳する図形の詳細について説明する。なお、注目領域に重畳する図形は、図形生成部４８において生成するのではなく、予め記憶部５４に記憶させておいてもよい。
〔境界を指示する態様〕
注目領域に重畳する図形は、注目領域と非注目領域との境界の位置をユーザに指示する図形であることが好ましい。なお、以下において注目領域と非注目領域との境界を、単に注目領域の境界と表記する。
図４及び図５は、表示器１６の表示の一例を示す図である。この例では、注目領域Ｒ１を含むフレーム画像３８ａが表示されている。また、注目領域Ｒ１の内側には、４つの図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４が重畳されている。
図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ同じ矢印の形状を有する図形である。図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ注目領域Ｒ１の面積より小さい面積を有する。図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ同じ色を有する。
また、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ矢印の先端において注目領域Ｒ１の境界を指示する向きを有する。ここでは、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４は、それぞれ矢印の向きが、矢印の延長線と境界との接点における境界の接線方向とが垂直に交わる向きを有する。
図４は、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４が、それぞれ矢印の先端が注目領域Ｒ１の境界に接していない位置に配置される例を示している。この場合は、座標算出部４４は、注目領域Ｒ１の内側の位置であって注目領域Ｒ１の境界に沿った位置の座標を算出する。図形生成部４８は、矢印の形状を有する図形であって、算出された座標に応じた向きの図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を生成する。報知情報表示制御部５２Ｂは、それぞれ矢印の先端を算出された座標に一致するように、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を注目領域Ｒ１に重畳する。
また、図５は、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４が、それぞれ矢印の先端が注目領域Ｒ１の境界に接する位置に配置される例を示している。この場合は、座標算出部４４は、注目領域Ｒ１の境界の座標を算出する。図形生成部４８は、矢印の形状を有する図形であって、算出された座標に応じた向きの図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を生成する。報知情報表示制御部５２Ｂは、それぞれ矢印の先端が算出された座標に一致するように、図形Ｆ１、図形Ｆ２、図形Ｆ３、及び図形Ｆ４を注目領域Ｒ１の内側に重畳する。
図４及び図５のように、注目領域に図形を重畳し、かつ注目領域と非注目領域との境界の少なくとも一部は図形を非重畳にすることで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。したがって、ユーザは注目領域である病変部と病変部以外の正常粘膜部との境界の観察が容易になる。
なお、重畳する図形は矢印に限定されず、注目領域と非注目領域との境界をわかりやすく指示する図形であればよい。図６は、表示器１６の表示の一例を示す図である。この例では、フレーム画像３８ａに含まれる注目領域Ｒ１の内側に、４つの図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳されている。
図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ同じ二等辺三角形の形状を有する図形である。二等辺三角形は、２本の等辺よりも等辺以外の底辺の方が短い。図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ同じ大きさ及び色を有し、それぞれ異なる向きを有する。
図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ２本の等辺が共有する二等辺三角形の頂点において注目領域Ｒ１の境界を指示する向きを有する。ここでは、図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８は、それぞれ二等辺三角形の頂点を通る底辺の垂線の向きが、垂線の延長線と注目領域Ｒ１の境界との接点における境界の接線方向とが垂直に交わる向きを有する。
座標算出部４４は、注目領域Ｒ１の内側の位置であって注目領域Ｒ１の境界に沿った位置の座標を算出する。図形生成部４８は、二等辺三角形の形状を有する図形であって、算出された座標に応じた向きの図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８を生成する。報知情報表示制御部５２Ｂは、それぞれ二等辺三角形の頂点が算出された座標に一致するように、図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８を注目領域Ｒ１に重畳する。
このように注目領域に図形を重畳した場合であっても、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。したがって、ユーザは注目領域である病変部と正常粘膜部との境界の観察が容易になる。
〔内側の座標を表す態様〕
注目領域に重畳する図形は、境界を指示する図形に限定されず、注目領域の内側の座標を表す図形であってもよい。例えば、注目領域の内側のある座標と図形の中心が一致するように配置してもよい。
図７は、表示器１６の表示の一例を示す図である。この例では、注目領域Ｒ１を含むフレーム画像３８ａが表示されている。また、注目領域Ｒ１の内側には、１つの図形Ｆ９が重畳されている。
図形Ｆ９は、円形の形状を有する図形である。図形Ｆ９は、注目領域Ｒ１の面積より小さい面積を有する。また、図形Ｆ９は、図形Ｆ９の中心が注目領域Ｒ１の内側のある座標に合わせて配置される。
座標算出部４４は、注目領域Ｒ１の内側の位置であって注目領域Ｒ１のある位置の座標を算出する。図形生成部４８は、円形の形状を有する図形Ｆ９を生成する。報知情報表示制御部５２Ｂは、図形Ｆ９の重心が算出された座標に一致するように、図形Ｆ９を注目領域Ｒ１に重畳する。
このように注目領域に図形を重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。したがって、ユーザは注目領域である病変部と正常粘膜部との境界の観察が容易になる。
図７に示す例では円形の図形Ｆ９を重畳しているが、ある位置の座標に重畳する図形の形状は円形に限定されない。図８及び図９は、図形の他の例を示す図である。図８に示すように、斜十字形状の図形Ｆ１０、十字形状の図形Ｆ１１、斜方形状の図形Ｆ１２、四頂点星形状の図形Ｆ１３、五頂点星形状の図形Ｆ１４、円と十字の組み合わせ形状の図形Ｆ１５、矩形と十字の組み合わせ形状の図形Ｆ１６、及び感嘆符形状の図形Ｆ１７等であってもよい。その他の記号、又は文字であってもよい。これらの図形の重心を注目領域の内側のある位置の座標と一致させて重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
また、図９に示すように、それぞれ先端Ｔを有する矢印形状の図形Ｆ１８、ドロップ形状の図形Ｆ１９、ピン形状の図形Ｆ２０であってもよい。この場合、図形の先端Ｔを注目領域の内側のある位置の座標と一致させて重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
ある位置の座標としては、注目領域の重心（図心）の座標、又は注目領域に外接する矩形の中心の座標等を用いることができる。図１０は、注目領域Ｒ２の重心Ｃ１を示す図である。また、図１１は、注目領域Ｒ２に外接する矩形ＳＱ１の中心Ｃ２を示す図である。
このように、注目領域Ｒ２の重心Ｃ１又は中心Ｃ２に図形を重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
〔注目領域の大きさに応じてサイズを変更する態様〕
注目領域に重畳する図形のサイズは、常に一定でなくてもよい。例えば、図形生成部４８は、注目領域の画像内の大きさに応じて生成する図形のサイズを変化させてもよい。ここで、図形のサイズとは、図形の面積に比例する指標である。
図１２は、表示器１６の表示の一例を示す図である。図１２に示す１０１２Ａ、１０１２Ｂ、及び１０１２Ｃでは、それぞれ注目領域Ｒ３Ａ、注目領域Ｒ３Ｂ、及び注目領域Ｒ３Ｃを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ３Ａの面積＞注目領域Ｒ３Ｂの面積＞注目領域Ｒ３Ｃの面積、の関係を有している。
注目領域Ｒ３Ａ、注目領域Ｒ３Ｂ、及び注目領域Ｒ３Ｃには、それぞれ四頂点星形状の図形Ｆ１３Ａ、図形Ｆ１３Ｂ、及び図形Ｆ１３Ｃが重畳されている。ここでは、図形Ｆ１３Ａのサイズ＞図形Ｆ１３Ｂのサイズ＞図形Ｆ１３Ｃのサイズ、の関係を有している。
このように、注目領域の面積が相対的に大きいほど重畳する図形のサイズを相対的に大きくすることで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
なお、注目領域が著しく大きい場合は、ユーザが注目領域を詳しく観察している可能性が高い。このため、注目領域の面積に合わせた相対的に大きいサイズの図形を注目領域に重畳すると、重畳した図形はユーザにとって煩わしい可能性がある。したがって、図形生成部４８は、注目領域の面積が第１面積以上の場合は、図形のサイズをそれ以上大きくさせずに、一定の第１サイズの図形を生成する。
図１３は、表示器１６の表示の一例を示す図である。図１３に示す１０１３Ａ、及び１０１３Ｂでは、それぞれ注目領域Ｒ３Ｄ、及び注目領域Ｒ３Ｅを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ３Ａの面積＜第１面積＜注目領域Ｒ３Ｄの面積＜注目領域Ｒ３Ｅの面積、の関係を有している。
注目領域Ｒ３Ｄ、及び注目領域Ｒ３Ｅには、それぞれ四頂点星形状の図形Ｆ１３Ｄ、及び図形Ｆ１３Ｅが重畳されている。ここでは、図形Ｆ１３Ａのサイズ＜図形Ｆ１３Ｄのサイズ＝図形Ｆ１３Ｅのサイズ、の関係を有している。
このように、注目領域の面積が第１面積以上の場合は重畳する図形のサイズを変化させずに一定とすることで、注目領域が著しく大きい場合であっても注目領域を適切に報知することができる。
また、図形のサイズを注目領域の面積に合わせて変化させた場合、注目領域が著しく小さい場合には図形のサイズが小さくなりすぎ、ユーザに報知する能力が低下する。したがって、図形生成部４８は、注目領域の面積が第２面積以下の場合は図形のサイズをそれ以上小さくさせずに、一定の第２サイズの図形を生成する。
図１４は、表示器１６の表示の一例を示す図である。図１４に示す１０１４Ａ、及び１０１４Ｂでは、それぞれ注目領域Ｒ３Ｆ、及び注目領域Ｒ３Ｇを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ３Ｃの面積＞第２面積＞注目領域Ｒ３Ｆの面積＞注目領域Ｒ３Ｇの面積、の関係を有している。
注目領域Ｒ３Ｆ、及び注目領域Ｒ３Ｇには、それぞれ四頂点星形状の図形Ｆ１３Ｆ、及び図形Ｆ１３Ｇが重畳されている。ここでは、図形Ｆ１３Ｃのサイズ＞図形Ｆ１３Ｆのサイズ＝図形Ｆ１３Ｇのサイズ、の関係を有している。
このように、注目領域の面積が第２面積以下の場合は重畳する図形のサイズを一定とすることで、注目領域が著しく小さい場合であっても注目領域を適切に報知することができる。
〔注目領域の大きさに応じて形状を変更する態様〕
図１５は、表示器１６の表示の一例を示す図である。図１５に示す１０１５Ａ、及び１０１５Ｂでは、それぞれ注目領域Ｒ４Ａ、及び注目領域Ｒ４Ｂを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ４Ａの面積＞注目領域Ｒ４Ｂの面積、の関係を有している。
また、注目領域Ｒ４Ａ、及び注目領域Ｒ４Ｂには、それぞれ図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳されている。
１０１５Ｂに示すように、注目領域Ｒ４Ｂのように画像内の面積が小さい場合には、注目領域Ｒ４Ｂに重畳された図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が互いに重なり合ってしまい、逆に注目領域の視認性を低下させてしまう。
これを防止するため、注目領域に重畳する図形の形状は、常に一定でなくてもよい。例えば、図形生成部４８は、注目領域の画像内の大きさに応じて生成する図形の形状を変化させてもよい。ここでは、注目領域の面積がある一定の第３面積を閾値として図形の形状を変化させる例について説明する。
図１６は、表示器１６の表示の一例を示す図である。図１６に示す１０１６Ａ、１０１６Ｂ、及び１０１６Ｃでは、それぞれ注目領域Ｒ５Ａ、注目領域Ｒ５Ｂ、及び注目領域Ｒ５Ｃを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ５Ａの面積＞注目領域Ｒ５Ｂの面積＞第３面積＞注目領域Ｒ５Ｃの面積、の関係を有している。
図１６に示すように、面積が第３面積以上である注目領域Ｒ５Ａ、及び注目領域Ｒ５Ｂには、それぞれ図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳される。一方、面積が第３面積未満である注目領域Ｒ５Ｃには、図形Ｆ１３が重畳される。
このように、注目領域がある一定の第３面積以上の場合は、注目領域の内側に配置される注目領域の境界を指示する図形を表示し、注目領域が第３面積未満の場合は、注目領域の内側の座標を表す図形を表示する。このように表示することで、注目領域が相対的に大きい場合は、注目領域の中心と注目領域の境界付近の正常粘膜を観察しやすくなる。また、注目領域が相対的に小さい場合は、よりシンプルな図形を表示することで、ユーザの観察を阻害しなくなる。
また、図形生成部４８は、注目領域の面積がある一定の第４面積未満の場合には、注目領域を囲う図形を生成してもよい。
図１７は、表示器１６の表示の一例を示す図である。図１７に示す１０１７Ａ、及び１０１７Ｂでは、それぞれ注目領域Ｒ５Ｂ、及び注目領域Ｒ５Ｃを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ５Ｂの面積＞第４面積＞注目領域Ｒ５Ｃの面積、の関係を有している。
図１７に示すように、面積が第４面積以上である注目領域Ｒ５Ｂには、図形Ｆ５、図形Ｆ６、図形Ｆ７、及び図形Ｆ８が重畳される。一方、面積が第４面積未満である注目領域Ｒ５Ｃには、注目領域Ｒ５Ｃを囲う矩形の図形Ｆ２１が重畳される。
注目領域を囲うことによって注目領域の境界、及び注目領域周辺の正常粘膜の視認性は低下する。しかしながら、注目領域の面積が著しく小さい場合は、注目領域周辺の視認性を向上させることよりも、ユーザに注目領域の存在を知らせることのほうが重要である。したがって、図１７に示すような表示方法をとることが望ましい。このように表示することで、注目領域が相対的に大きい場合は、注目領域の中心と注目領域の境界付近の正常粘膜を観察しやすくなる。また、注目領域が相対的に小さい場合は、ユーザに注目領域を認識させることができる。
なお、注目領域を囲う図形は矩形に限定されず、注目領域が存在する範囲を注目領域の外側から指示する図形であればよい。
図１８は、注目領域Ｒ６を囲う４つの図形Ｆ２２、図形Ｆ２３、図形Ｆ２４、及び図形Ｆ２５を示す図である。図形Ｆ２２は、水平方向の線分と垂直方向の線分とからなるＬ字状の図形である。図形Ｆ２３、図形Ｆ２４、及び図形Ｆ２５は、それぞれ図形Ｆ２２と同じ形状を有しており、図形Ｆ２２とは向きが異なる図形である。図形Ｆ２２、図形Ｆ２３、図形Ｆ２４、及び図形Ｆ２５は、注目領域Ｒ６を囲う矩形の枠ＦＲ１の四隅に、それぞれ水平方向の線分と垂直方向の線分とを矩形の枠ＦＲ１に重ねて配置される。
また、図１９は、注目領域Ｒ６を囲う４つの図形Ｆ２６、図形Ｆ２７、図形Ｆ２８、及び図形Ｆ２９を示す図である。図形Ｆ２６、図形Ｆ２７、図形Ｆ２８、及び図形Ｆ２９は、それぞれ同じ二等辺三角形の形状を有し、互いに向きが異なる図形である。図形Ｆ２６、図形Ｆ２７、図形Ｆ２８、及び図形Ｆ２９は、注目領域Ｒ６を囲う矩形の枠ＦＲ２の四隅に、それぞれ二等辺三角形の頂点を注目領域Ｒ６の重心に向けて配置される。
また、図２０は、注目領域Ｒ６を囲う４つの図形Ｆ３０、図形Ｆ３１、図形Ｆ３２、及び図形Ｆ３３を示す図である。図形Ｆ３０、図形Ｆ３１、図形Ｆ３２、及び図形Ｆ３３は、それぞれ同じ二等辺三角形の形状を有し、互いに向きが異なる図形である。図形Ｆ３０、図形Ｆ３１、図形Ｆ３２、及び図形Ｆ３３は、注目領域Ｒ６を囲う楕円の枠ＦＲ３上の各位置に、それぞれ二等辺三角形の頂点を注目領域Ｒ６の重心に向けて配置されている。
このように図形を重畳することで、注目領域が相対的に小さい場合であっても、ユーザに注目領域を認識させることができる。
〔注目領域の大きさに応じて数を変更する態様〕
注目領域に重畳させる図形の数は、常に一定でなくてもよい。例えば、図形生成部４８は、注目領域の面積がある一定の第５面積を閾値として、生成する図形の数を変化させてもよい。
図２１は、表示器１６の表示の一例を示す図である。図２１に示す１０２１Ａ、及び１０２１Ｂでは、それぞれ注目領域Ｒ７Ａ、及び注目領域Ｒ７Ｂを含むフレーム画像３８ａが表示されている。ここでは、注目領域Ｒ７Ａの面積＞第５面積＞注目領域Ｒ７Ｂの面積、の関係を有している。
図２１に示すように、面積が第５面積以上である注目領域Ｒ７Ａには、８つの図形Ｆ３４、図形Ｆ３５、図形Ｆ３６、図形Ｆ３７、図形Ｆ３８、図形Ｆ３９、図形Ｆ４０、及び図形Ｆ４１が重畳される。一方、面積が第５面積未満である注目領域Ｒ７Ｂには、４つの図形Ｆ４２、図形Ｆ４３、図形Ｆ４４、及び図形Ｆ４５が重畳される。
このように、注目領域の面積が相対的に大きいほど相対的に多くの数の図形を重畳することで、医療画像の注目領域と非注目領域との境界の観察を妨げずに注目領域を報知することができる。
＜その他＞
上記の医療画像処理方法は、各工程をコンピュータに実現させるためのプログラムとして構成し、このプログラムを記憶したＣＤ－ＲＯＭ（Compact Disk-Read Only Memory）等の非一時的な記録媒体を構成することも可能である。
ここでは内視鏡画像に図形を重畳する例を説明したが、図形を重畳する医療画像は内視鏡画像に限定されず、超音波画像、ＣＴ（Computed Tomography）画像、ＭＲＩ（Magnetic Resonance Imaging）画像等に適用することができる。
ここまで説明した実施形態において、内視鏡プロセッサ装置１２及び医療画像処理装置１４は、それぞれ異なる装置として説明したが、内視鏡プロセッサ装置１２及び医療画像処理装置１４を一体の装置として構成し、医療画像処理装置１４の機能を有する内視鏡プロセッサ装置１２としてもよい。
内視鏡プロセッサ装置１２及び医療画像処理装置１４の各種の処理を実行する処理部（processing unit）のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の処理部として機能する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）、画像処理に特化したプロセッサであるＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（Field Programmable Gate Array）等の製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が含まれる。
１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、或いはＣＰＵとＦＰＧＡの組み合わせ、又はＣＰＵとＧＰＵの組み合わせ）で構成されてもよい。また、複数の処理部を１つのプロセッサで構成してもよい。複数の処理部を１つのプロセッサで構成する例としては、第１に、サーバ及びクライアント等のコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の処理部として機能する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）等に代表されるように、複数の処理部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の処理部は、ハードウェア的な構造として、各種のプロセッサを１つ以上用いて構成される。
更に、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路（circuitry）である。
本発明の技術的範囲は、上記の実施形態に記載の範囲には限定されない。各実施形態における構成等は、本発明の趣旨を逸脱しない範囲で、各実施形態間で適宜組み合わせることができる。
９…内視鏡システム
１０…内視鏡スコープ
１１…光源装置
１２…内視鏡プロセッサ装置
１３…表示装置
１４…医療画像処理装置
１５…操作部
１６…表示器
２０…挿入部
２１…手元操作部
２２…ユニバーサルコード
２５…軟性部
２６…湾曲部
２７…先端部
２８…撮像素子
２９…湾曲操作ノブ
３０…送気送水ボタン
３１…吸引ボタン
３２…静止画撮像指示部
３３…処置具導入口
３５…ライトガイド
３６…信号ケーブル
３７ａ…コネクタ
３７ｂ…コネクタ
３８…動画
３８ａ…フレーム画像
３９…静止画
４０…時系列画像取得部
４２…注目領域検出部
４４…座標算出部
４６…面積算出部
４８…図形生成部
５０…制御部
５２…表示制御部
５２Ａ…画像表示制御部
５２Ｂ…報知情報表示制御部
５４…記憶部
５６…プログラム
ＦＲ１～ＦＲ３…枠
Ｆ１～Ｆ４５…図形
Ｒ１～Ｒ７Ｂ…注目領域
ＳＱ１…矩形
Ｓ１～Ｓ６…医療画像処理方法の各ステップ

Claims (21)

  1. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有し、
    前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理部は、前記注目領域の面積に応じたサイズの前記図形を重畳し、
    前記重畳処理部は、前記注目領域の面積が第１面積以上の場合は一定の第１サイズの前記図形を重畳する医療画像処理装置。
  2. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有し、
    前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理部は、前記注目領域の面積に応じたサイズの前記図形を重畳し、
    前記重畳処理部は、前記注目領域の面積が第２面積以下の場合は一定の第２サイズの前記図形を重畳する医療画像処理装置。
  3. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有し、
    前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理部は、前記注目領域の面積に応じた形状の前記図形を重畳し、
    前記重畳処理部は、前記注目領域の面積が第３面積以上の場合は前記注目領域の内側から前記境界を指示する図形を重畳し、かつ前記注目領域の面積が第３面積未満の場合は前記注目領域の内側の座標を示す図形を重畳する医療画像処理装置。
  4. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有し、
    前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理部は、前記注目領域の面積に応じた形状の前記図形を重畳し、
    前記重畳処理部は、前記注目領域の面積が第４面積以上の場合は前記注目領域の内側から前記境界を指示する前記図形を重畳し、かつ前記注目領域の面積が第４面積未満の場合は前記注目領域の外側に前記図形を重畳する医療画像処理装置。
  5. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有
    し、
    前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注
    目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理部は、前記注目領域の面積に応じた数の前記図形を重畳する医療画像処理装置。
  6. 前記重畳処理部は、前記境界を指示する図形を前記注目領域に重畳する請求項１から５のいずれか１項に記載の医療画像処理装置。
  7. 前記注目領域は、病変領域である請求項１から６のいずれか１項に記載の医療画像処理装置。
  8. 医療画像に含まれる注目領域を報知する図形であって、前記注目領域と非注目領域との境界を指示する図形を前記医療画像に重畳する重畳処理部を有し、
    前記重畳処理部は、前記注目領域の内側に前記図形を重畳し、かつ前記境界の少なくとも一部は前記図形を非重畳にし、
    前記注目領域は、病変領域である医療画像処理装置。
  9. 前記医療画像を取得する画像取得部と、
    前記医療画像から注目領域情報を取得する注目領域情報取得部と、
    を備えた請求項１から８のいずれか１項に記載の医療画像処理装置。
  10. 前記重畳処理部は、前記注目領域の重心を示す図形を前記注目領域に重畳する請求項１から９のいずれか１項に記載の医療画像処理装置。
  11. 前記図形を生成する図形生成部を備えた請求項１から１０のいずれか１項に記載の医療画像処理装置。
  12. 前記図形が重畳された前記医療画像を表示部に表示させる表示制御部を備えた請求項１から１１のいずれか１項に記載の医療画像処理装置。
  13. 請求項１２に記載の医療画像処理装置と、
    前記表示部と、
    を備えた診断支援装置。
  14. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有する医療画像処理装置の作動方法であって、
    前記重畳処理部が医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理工程を有し、
    前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理工程は、前記注目領域の面積に応じたサイズの前記図形を重畳し、
    前記重畳処理工程は、前記注目領域の面積が第１面積以上の場合は一定の第１サイズの前記図形を重畳する医療画像処理装置の作動方法。
  15. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有する医療画像処理装置の作動方法であって、
    前記重畳処理部が医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理工程を有し、
    前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理工程は、前記注目領域の面積に応じたサイズの前記図形を重畳し、
    前記重畳処理工程は、前記注目領域の面積が第２面積以下の場合は一定の第２サイズの前記図形を重畳する医療画像処理装置の作動方法。
  16. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有する医療画像処理装置の作動方法であって、
    前記重畳処理部が医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理工程を有し、
    前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理工程は、前記注目領域の面積に応じた形状の前記図形を重畳し、
    前記重畳処理工程は、前記注目領域の面積が第３面積以上の場合は前記注目領域の内側から前記境界を指示する図形を重畳し、かつ前記注目領域の面積が第３面積未満の場合は前記注目領域の内側の座標を示す図形を重畳する医療画像処理装置の作動方法。
  17. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有する医療画像処理装置の作動方法であって、
    前記重畳処理部が医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理工程を有し、
    前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理工程は、前記注目領域の面積に応じた形状の前記図形を重畳し、
    前記重畳処理工程は、前記注目領域の面積が第４面積以上の場合は前記注目領域の内側から前記境界を指示する前記図形を重畳し、かつ前記注目領域の面積が第４面積未満の場合は前記注目領域の外側に前記図形を重畳する医療画像処理装置の作動方法。
  18. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有する医療画像処理装置の作動方法であって、
    前記重畳処理部が医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理工程を有し、
    前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記注目領域と非注目領域との境界の少なくとも一部は前記図形を非重畳にし、
    前記重畳処理工程は、前記注目領域の面積に応じた数の前記図形を重畳する医療画像処理装置の作動方法。
  19. 医療画像に含まれる注目領域を報知する図形を前記医療画像に重畳する重畳処理部を有する医療画像処理装置の作動方法であって、
    前記重畳処理部が医療画像に含まれる注目領域を報知する図形であって、前記注目領域と非注目領域との境界を指示する図形を前記医療画像に重畳する重畳処理工程を有し、
    前記重畳処理工程は、前記注目領域の内側に前記図形を重畳し、かつ前記境界の少なくとも一部は前記図形を非重畳にし、
    前記注目領域は、病変領域である医療画像処理装置の作動方法。
  20. 請求項１４から１９のいずれか１項に記載の医療画像処理装置の作動方法をコンピュータに実行させるプログラム。
  21. 非一時的かつコンピュータ読取可能な記録媒体であって、前記記録媒体に格納された指令がコンピュータによって読み取られた場合に請求項２０に記載のプログラムをコンピュータに実行させる記録媒体。
JP2020553888A 2018-11-01 2019-10-28 医療画像処理装置、医療画像処理装置の作動方法及びプログラム、診断支援装置 Active JP7143436B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018206759 2018-11-01
JP2018206759 2018-11-01
PCT/JP2019/042160 WO2020090731A1 (ja) 2018-11-01 2019-10-28 医療画像処理装置、医療画像処理方法及びプログラム、診断支援装置

Publications (2)

Publication Number Publication Date
JPWO2020090731A1 JPWO2020090731A1 (ja) 2021-09-30
JP7143436B2 true JP7143436B2 (ja) 2022-09-28

Family

ID=70464444

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020553888A Active JP7143436B2 (ja) 2018-11-01 2019-10-28 医療画像処理装置、医療画像処理装置の作動方法及びプログラム、診断支援装置

Country Status (5)

Country Link
US (1) US11481944B2 (ja)
EP (1) EP3875022B1 (ja)
JP (1) JP7143436B2 (ja)
CN (1) CN112969404B (ja)
WO (1) WO2020090731A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7374224B2 (ja) * 2021-01-14 2023-11-06 コ，ジファン 内視鏡を用いた大腸検査ガイド装置
US11978209B2 (en) 2021-06-28 2024-05-07 Fujifilm Corporation Endoscope system, medical image processing device, and operation method therefor
WO2023018685A1 (en) * 2021-08-10 2023-02-16 Intuitive Surgical Operations, Inc. Systems and methods for a differentiated interaction environment

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013000403A (ja) 2011-06-17 2013-01-07 Olympus Corp 内視鏡装置および内視鏡装置の作動方法
WO2016199273A1 (ja) 2015-06-11 2016-12-15 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
WO2017073338A1 (ja) 2015-10-26 2017-05-04 オリンパス株式会社 内視鏡画像処理装置
WO2017115442A1 (ja) 2015-12-28 2017-07-06 オリンパス株式会社 画像処理装置、画像処理方法および画像処理プログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090202179A1 (en) * 2008-02-13 2009-08-13 General Electric Company method and system for providing region based image modification
JP5658873B2 (ja) * 2009-11-13 2015-01-28 オリンパス株式会社 画像処理装置、電子機器、内視鏡システム及びプログラム
JP6231885B2 (ja) * 2011-03-16 2017-11-15 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 頸部を検査する医療機器
JP6404713B2 (ja) * 2011-06-17 2018-10-17 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． 内視鏡手術におけるガイド下注入のためのシステム及び方法
US20150173619A1 (en) * 2012-04-17 2015-06-25 Collage Medical Imaging Ltd. Organ mapping system using an optical coherence tomography probe
US11188285B2 (en) * 2014-07-02 2021-11-30 Covidien Lp Intelligent display
WO2016130424A1 (en) * 2015-02-09 2016-08-18 The Arizona Board Of Regents Of Regents On Behalf Of The University Of Arizona Augmented stereoscopic microscopy
WO2017098503A1 (en) * 2015-12-07 2017-06-15 M.S.T. Medical Surgery Technologies Ltd. Database management for laparoscopic surgery
US11357575B2 (en) * 2017-07-14 2022-06-14 Synaptive Medical Inc. Methods and systems for providing visuospatial information and representations

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013000403A (ja) 2011-06-17 2013-01-07 Olympus Corp 内視鏡装置および内視鏡装置の作動方法
WO2016199273A1 (ja) 2015-06-11 2016-12-15 オリンパス株式会社 内視鏡装置及び内視鏡装置の作動方法
WO2017073338A1 (ja) 2015-10-26 2017-05-04 オリンパス株式会社 内視鏡画像処理装置
WO2017115442A1 (ja) 2015-12-28 2017-07-06 オリンパス株式会社 画像処理装置、画像処理方法および画像処理プログラム

Also Published As

Publication number Publication date
EP3875022B1 (en) 2024-10-02
US20210233298A1 (en) 2021-07-29
WO2020090731A1 (ja) 2020-05-07
EP3875022A4 (en) 2021-10-20
US11481944B2 (en) 2022-10-25
CN112969404A (zh) 2021-06-15
JPWO2020090731A1 (ja) 2021-09-30
EP3875022A1 (en) 2021-09-08
CN112969404B (zh) 2024-04-12

Similar Documents

Publication Publication Date Title
US11607109B2 (en) Endoscopic image processing device, endoscopic image processing method, endoscopic image processing program, and endoscope system
JP7143436B2 (ja) 医療画像処理装置、医療画像処理装置の作動方法及びプログラム、診断支援装置
JP7125479B2 (ja) 医療画像処理装置、医療画像処理装置の作動方法及び内視鏡システム
JP7170050B2 (ja) 医療画像処理装置、医療画像処理装置の作動方法及びプログラム、内視鏡システム
JP7315576B2 (ja) 医療画像処理装置、医療画像処理装置の作動方法及びプログラム、診断支援装置、ならびに内視鏡システム
WO2019130868A1 (ja) 画像処理装置、プロセッサ装置、内視鏡システム、画像処理方法、及びプログラム
US20210174557A1 (en) Medical image processing apparatus, medical image processing method, program, and endoscope system
US12131513B2 (en) Medical image processing apparatus and medical image processing method for utilizing a classification result relating to a medical image
WO2019087969A1 (ja) 内視鏡システム、報知方法、及びプログラム
WO2020059445A1 (ja) 画像処理装置及び画像処理方法
WO2019088008A1 (ja) 画像処理装置、画像処理方法、プログラム、及び内視鏡システム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210525

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220425

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220823

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220914

R150 Certificate of patent or registration of utility model

Ref document number: 7143436

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150