[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2006292999A - スライド画像データ作成装置およびスライド画像データ - Google Patents

スライド画像データ作成装置およびスライド画像データ Download PDF

Info

Publication number
JP2006292999A
JP2006292999A JP2005113354A JP2005113354A JP2006292999A JP 2006292999 A JP2006292999 A JP 2006292999A JP 2005113354 A JP2005113354 A JP 2005113354A JP 2005113354 A JP2005113354 A JP 2005113354A JP 2006292999 A JP2006292999 A JP 2006292999A
Authority
JP
Japan
Prior art keywords
image
image data
slide
magnification
microscope
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2005113354A
Other languages
English (en)
Inventor
Terumasa Takamatsu
輝賢 高松
Tatsushi Sato
達資 佐藤
Tomitomo Miura
富智 三浦
Hiroyoshi Nosaka
大喜 野坂
Hidekatsu Yasuike
秀且 安池
Hiromi Miura
宏美 三浦
Zheng Zhongxi
チェン チョンシー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
DIRECT COMMUNICATIONS KK
Direct Communications Inc
Original Assignee
DIRECT COMMUNICATIONS KK
Direct Communications Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by DIRECT COMMUNICATIONS KK, Direct Communications Inc filed Critical DIRECT COMMUNICATIONS KK
Priority to JP2005113354A priority Critical patent/JP2006292999A/ja
Priority to US11/241,942 priority patent/US7426345B2/en
Publication of JP2006292999A publication Critical patent/JP2006292999A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • G02B21/367Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N1/00Sampling; Preparing specimens for investigation
    • G01N1/28Preparing specimens for investigation including physical details of (bio-)chemical methods covered elsewhere, e.g. G01N33/50, C12Q
    • G01N1/30Staining; Impregnating ; Fixation; Dehydration; Multistep processes for preparing samples of tissue, cell or nucleic acid material and the like for analysis
    • G01N1/31Apparatus therefor
    • G01N1/312Apparatus therefor for samples mounted on planar substrates

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Immunology (AREA)
  • General Health & Medical Sciences (AREA)
  • Biochemistry (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Molecular Biology (AREA)
  • Optics & Photonics (AREA)
  • Microscoopes, Condenser (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Image Processing (AREA)
  • Television Signal Processing For Recording (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

【課題】試料の必要部分を顕微鏡により撮影したスライド画像データを高速かつ自動的に生成することができるスライド画像データ作成装置を提供すること。
【解決手段】スライド画像データ作成装置は、顕微鏡10に備え付けられたカメラ11、スライドガラス17を保持し、3次元方向に移動可能な試料搬送機構21〜27、試料をX、Y、Z軸方向に順次移動させながらカメラ11を制御して複数の高倍率画像を撮影し、複数画像の貼り合わせ情報を生成して、1つのファイルに格納するパソコン13を備える。外部のデジタルカメラ12を備えてもよい。本発明によれば、顕微鏡画像を高速に撮影することが可能であり、画像データを1つのファイルに格納することによって閲覧時に多数の画像ファイルを開いて処理する必要がなく、多量のメモリも不要で、高速に処理や表示ができる。また、試料の3次元の構造が判別可能である。
【選択図】 図1

Description

本発明は、スライド画像データ作成装置およびスライド画像データに関し、特に病理組織学検査や血液学検査、遺伝子検査、細胞学検査等において、試料を入れたプレパラート(スライドガラス)を顕微鏡にセッティングして高倍率で撮影し、スライド画像データを生成して管理するスライド画像データ作成装置および生成されるスライド画像データに関する。
近年、病理組織学、血液学、遺伝子検査学の顕微鏡検査等においては、採取した病理組織や細胞や血液等の試料を顕微鏡に装備した撮像装置によって撮影し、その画像をコンピュータに取り込んで、ディスプレイ上で観察できる画像データを作成することが行われている。例えば、下記特許文献1には、上記したような技術が開示されている。
特開2003−222801号公報
上記した従来のシステムにおいては、試料の顕微鏡による画像を撮影するのに時間がかかり、画像の撮影時や閲覧時に多数の画像ファイルを開いて処理するために多量のメモリが必要であり、かつ処理時間がかかるなどの問題点があった。また、基本的に2次元の画像情報しか撮影できないので、撮影した画像から顕微鏡の光軸と並行なZ軸方向の試料の構造を判別することはできないという問題点もあった。
本発明は、前記したような従来技術における問題点を解消し、試料の必要部分を顕微鏡により高倍率で撮影した複数の画像を含むスライド画像データを高速かつ自動的に生成することができるスライド画像データ作成装置および生成されるスライド画像データを提供することを目的とする。
本発明のスライド画像データ作成装置は、顕微鏡に備え付けられ、高倍率画像を撮影するデジタル撮影手段と、試料を保持し、3次元方向に移動可能な試料搬送手段と、前記試料搬送手段を制御して、画像が他の画像と重なる部分であるのりしろ部が存在するように試料を顕微鏡の光軸と垂直方向に順次移動させながら前記デジタル撮影手段を制御して複数の高倍率画像を撮影する撮影制御手段と、複数の高倍率画像から画像処理により前記のりしろ部を認識し、複数の高倍率画像の貼り合わせ情報を生成する貼り合わせ情報生成手段と、複数の高倍率画像を前記貼り合わせ情報と共に1つのファイルに格納する画像ファイル生成手段とを備えたことを主要な特徴とする。
また、前記したスライド画像データ作成装置において、顕微鏡の光軸と並行な方向にも微細に移動させながら、所定間隔で複数の画像を撮影する点にも特徴がある。また、前記したスライド画像データ作成装置において、顕微鏡の光軸と並行な方向において顕微鏡の焦点が合う位置を検出するフォーカス位置検出手段を備えている点にも特徴がある。
また、前記したスライド画像データ作成装置において、更に、高倍率画像を貼り合わせた全体画像の縮小画像であるサムネイル画像を生成するサムネイル画像生成手段を備えた点にも特徴がある。また、前記したスライド画像データ作成装置において、更に、外部デジタルカメラ手段を備えた点にも特徴がある。また、前記したスライド画像データ作成装置において、前記外部デジタルカメラにより撮影された画像、前記複数の高倍率画像および前記貼り合わせ情報が1つの動画ファイルにまとめて収納されている点にも特徴がある。
また、前記したスライド画像データ作成装置において、更に、前記外部デジタルカメラにより撮影された画像から高倍率画像を撮影する領域を自動的に決定する撮影領域自動認識手段を備えた点にも特徴がある。また、前記したスライド画像データ作成装置において、更に、複数のスライドガラスについて前記外部デジタルカメラにより撮影された画像を前記撮影領域自動認識手段により認識された撮影領域と共に一覧表示し、使用者が前記撮影領域を修正可能な撮影領域半自動認識手段を備えた点にも特徴がある。
また、前記したスライド画像データ作成装置において、更に、撮像された画像のファイルをデータベースに登録し、ネットワークを介して画像の検索および参照ができる画像公開手段を備えた点にも特徴がある。
本発明のスライド画像データは複数の高倍率画像データおよび画像の貼り合わせ情報が1つの動画ファイルにまとめて収納されていることを主要な特徴とする。
本発明によれば、顕微鏡による撮影の必要な領域のみを高速に撮影することが可能であり、画像データを1つのファイルに格納することによって閲覧時に多数の画像ファイルを開いて処理する必要がなく、多量のメモリも不要で、高速に処理や表示ができるという効果がある。また、本発明によれば、焦点位置をZ軸方向にもスキャンして撮影することにより、試料の3次元の構造が判別可能である。例えば診断に必要な細胞の核の形状が真球か楕円球かというような判別が可能となる。更に、画像データをデータベースにより管理し、ネットワークやWebを通して、バーチャルスライド画像とその属性情報を閲覧することができる。
以下、図面を参照しながら実施例について説明する。
図1は、本発明のスライド画像データ作成装置を含むシステム全体の構成を示すブロック図である。本発明のスライド画像データ作成装置は、大きく分けて顕微鏡10を含むスライドガラス撮影装置とパソコン13からなる。また、パソコン13はLAN54を介してDB、Webサーバ50、DB(データベース)51、端末(PC)52と接続され、更にDB、Webサーバ50はルータ53、インターネット55を介して外部の端末(PC)56と接続されている。
図3は、本発明のスライドガラス撮影装置の構成を示す平面図である。スライドガラス撮影装置は、基台20の上に固定された顕微鏡10およびデジタル(外部)カメラ12、スライドガラス収納マガジン30の駆動装置31、スライドガラスを保持し、移動させる3次元移動機構21〜28、モータ駆動装置16等を備えている。
顕微鏡10は、試料を肉眼で観察する双眼の接眼レンズを有していると共に、パソコン13から制御可能なデジタル顕微鏡カメラ11を内蔵しており、顕微鏡カメラ11で撮影した試料の高倍率画像をデジタルデータとしてパソコン13に取り込み、後述するように画像データを編集してデータベース化し、所望の部分を表示装置14に表示できる。
顕微鏡10は、基台20上に取り付けられた固定アタッチメントによって所定位置に固定されるようになっており、固定アタッチメントは、複数の製造メーカーの顕微鏡に適合できるように形状の異なる複数種類のものが用意されている。なお、この実施例においては、顕微鏡10の光軸は垂直方向である。
デジタル(外部)カメラ12は、やはり基台20の上に固定されており、パソコン13からの制御に基づき、通常のカラー静止画像データをパソコン13に出力する。スライドガラス17の試料部分の全体画像であるルーペ画像の撮影および2次元バーコード42などの読み取りに使用される。
3次元移動機構21〜28は、ステッピングモータ22により前後方向に移動可能な第1の可動フレーム23、ステッピングモータ24により左右方向に移動可能な第2の可動フレーム25、ステッピングモータ26により上下方向に移動可能な第3の可動フレーム27、第3の可動フレーム27に固着されたスライドガラス保持ハンド28を備える。
そして、パソコン13からの制御に基づいてモータ駆動装置16によって各ステッピングモータが駆動されることにより、スライドガラス17をスライドガラス保持ハンド28で保持し、前後、左右および上下方向の任意の位置に移動可能に構成されている。
3次元移動機構21〜28は、スライドガラス17をスライドガラス収納マガジン30から取り出して、デジタルカメラ12の下方および顕微鏡10の対物レンズ18と下方のコンデンサレンズ(図示せず)との間に移動させ、また、元のスライドガラス収納マガジン30内に戻す動作を自動的に行う。
高倍率画像の撮影時には1枚の試料を多数の画像に分割して撮影する必要があるので、撮影すべき前後、左右方向の位置を合わせると共に、ピントの合う位置を中心とした上下方向の所定範囲についても第3の可動フレーム27を微小な長さだけ移動させながら複数枚の画像を撮影する。上下の移動は対物レンズ18との衝突が起こらないよう、可動範囲を2ミリメートル以内とし、その範囲内でフォーカスの調整を行う。
スライドガラス収納マガジン30の駆動装置31は、パソコン13からの制御に基づいてモータ駆動装置16によってステッピングモータ32が駆動されることにより、スライドガラス収納マガジン30を上下に移動させる。駆動装置31にはスライドガラス収納マガジン30が着脱自在に装着されている。スライドガラス収納マガジン30には、スライドガラス保持溝が複数平行に並んで設けられており、複数のスライドガラス17を棚状に並べて収容できるように構成されている。
パソコン13は、周知の標準的ハードウェアを備えたパソコンであり、表示装置14、キーボード15、マウス、LAN54等と接続されている。また、例えばUSBインターフェイスによって、顕微鏡カメラ11、デジタルカメラ12、モータ駆動装置16等と接続されている。パソコン13は、使用者の指示に基づき、後述する処理を実行する。
図4は、本発明による全自動スライド作成処理の内容を示すフローチャートである。この処理はパソコン13により実行される。この処理を行う場合には、まず画像を撮影すべきスライドガラスをスライドガラス収納マガジン30に下から詰めてセットしておく。S10においては、使用者によって入力されたスライドガラス枚数情報を読み込む。S11においては、3次元移動機構21〜28を制御して未処理のスライドガラスを1枚取り出し、デジタルカメラ12の下へセットする。
図2は、本発明において使用するスライドガラスの例を示す平面図である。スライドガラス17とカバーガラス45の間には標本が挟まれており、スライドガラス17の左上には、例えばスライドガラスの識別番号が記録されたQRコードなどの2次元バーコード42が貼付されている。S12においては、デジタルカメラ12を使用して2次元バーコード42を読み取る。
S13においては、デジタルカメラ12を使用してルーペ画像を撮影する。ルーペ画像とは図2に点線46で示す範囲の画像であり、標本の領域全てを含んでいる。図2の右側にはルーペ画像を抜き出して表示してある。
S14においては、撮影エリアを自動認識する。高倍率の顕微鏡カメラ11は撮影領域が狭いので、標本の領域全てを1枚の画像で撮影することはできない。そこで、図2の右側に示すように、ルーペ画像を格子状に複数の領域47に分割(図2では6×6)し、分割したそれぞれの領域47より少しだけ広い領域を高倍率の顕微鏡カメラ11によって撮影する。
そして、スライドガラス上に標本組織が点在している場合には、処理の高速化とファイル容量を低減するために、必要な部分のみを自動的に抽出したマーク領域のみの撮影を行う。例えば図2右側の図において画像処理によって左端の列の分割画像には標本がないことを認識した場合には、左端の列の撮影を行わないようにする。あるいは、ルーペ画像から標本のある領域のみを抽出し、抽出した領域をカバーする範囲のみを高倍率の顕微鏡カメラ11によって撮影するようにしてもよい。
S15においては、3次元移動機構21〜28を制御して、スライドガラス17を顕微鏡10の対物レンズ18の下に移動する。S16においては、後述する高倍率画像撮影処理を行う。この際に、高倍率画像を貼り合わせた全体画像の縮小画像であるサムネイル画像も生成される。
S17においては、ルーペ画像+サムネイル画像+高倍率画像を1つの動画像ファイルにまとめ、スライドガラスの識別番号と共にDB、Webサーバ50に備えられているDB50に登録、保存する。なお、DB50にはスライドガラスの識別番号と対応して対応する患者名などのその他の情報がすでに登録されているものとする。
図8は、ファイルの構造および表示される画像の例を示す説明図である。動画像ファイル60は複数のフレームデータからなり、第1フレームには情報フレーム61が格納されている。情報フレーム61には、システム情報、マシン名、バージョン情報、撮影倍率、システム構成、カメラ名などの情報が格納されている。第2フレームにはルーペ画像63が格納されており、このフレームにはフレーム間の撮影位置情報も格納されている。最終フレームにはサムネイル画像70が格納されており、第3フレームから最終フレームの1つ前のフレームまでに高倍率画像が格納されている。
図4に戻って、S18においては、3次元移動機構21〜28を制御してスライドガラスを元の位置に収納する。S19においては、未処理のスライドが有るか否かが判定され、判定結果が肯定の場合にはS11に移行するが、否定の場合には処理を終了する。
図5は、S16の高倍率画像撮影処理の内容を示すフローチャートである。S30においては、顕微鏡カメラ11に露光時間、シャッタースピード、カラーバランス等について所望のパラメータを設定する。S31においては、Y軸(左右方向)の初期位置に移動させる。例えばルーペ画像の全ての領域を撮影する場合にはルーペ画像の最上段の分割画像が顕微鏡カメラ11の撮影領域に入る位置にスライドガラス17を移動させる。
S32においては、X軸の初期位置に移動させる。例えばルーペ画像の全ての領域を撮影する場合にはルーペ画像の最左列の分割画像が顕微鏡カメラ11の撮影領域に入る位置にスライドガラス17を移動させる。S33においては、後述するZ軸位置調整処理を行い、焦点のZ軸位置を検出する。
S34においては、Z軸の初期位置に移動させる。本発明においては、Z軸方向にも焦点の位置を中心とした所定の範囲について等間隔に位置を変えながら高倍率画像を撮影する。従って、S34においては、焦点位置から所定の長さだけ下方にスライドガラス17を移動させる。
S35においては、顕微鏡カメラ11によって高倍率のカラー画像を撮影し、画像データを読み込む。S36においては、上下左右(XY軸方向)に他の高倍率画像がある場合には、それらの画像との重なり情報を生成する。重なり情報とは例えば他の画像と何画素分重なっているか、即ちどのピクセルを貼り合わせるのかを示す情報である。重なり情報は例えば重なる画素数を変えながら端部の画像の相関を取ることにより得られる。
得られた重なり情報は画像データに付加して保存される。保存するファイルの形式は例えばJPEG2000に準拠した動画ファイル形式であってもよい。なお、重なり情報は高倍率画像自体に組み込む形をとっている。組み込まれている情報としては、重なり情報の他、AF(オートフォーカス)情報、ハードウェアの識別情報や撮影ソフトウェアのバージョン情報、X,Y,Zの位置情報などのシステム情報が格納されている。1枚の高倍率画像の画素数は例えば1280×1024であってもよい。更に、この際に高画質画像をつなぎ合わせたマーク領域全体の縮小画像であるサムネイル画像も生成する。
S37においては、Z軸を1ステップ移動させる。1ステップの幅は例えば0.5ミクロンであってもよい。S38においては、Z軸が最終位置に達したか否かによりZ軸の処理が完了したか否かが判定され、判定結果が否定の場合にはS35に移行するが、肯定の場合にはS39に移行する。
S39においては、X軸を1ステップ移動させる。1ステップの幅は倍率によって変化し、例えば40倍では0.18ミリメートル程度となる。S40においては、X軸が最終位置に達したか否かによりX軸の処理が完了したか否かが判定され、判定結果が否定の場合にはS35に移行するが、肯定の場合にはS39に移行する。
S41においては、Y軸を1ステップ移動させる。S42においては、Y軸が最終位置に達したか否かによりY軸の処理が完了したか否かが判定され、判定結果が否定の場合にはS35に移行するが、肯定の場合には処理を終了する。
図6は、S33のZ軸位置調整処理の内容を示すフローチャートである。S50においては、Z軸位置調整処理の実行が初回か否かが判定され、判定結果が否定の場合にはS51に移行するが、肯定の場合にはS55に移行する。S51においては、前回のZ軸中心位置において高倍率画像を読み込む。S52においては、FFT(高速フーリエ変換)処理が行われ、画像の周波数スペトラムが算出される。
S53においては、周波数スペトラムのピークパワー値を記憶値と比較する。S54においては、ピークパワー値が記憶値の例えば90%未満か否かが判定され、判定結果が否定の場合にはZ軸位置は変更せず前回の焦点位置をそのまま使用するので、処理を終了するが、肯定の場合にはS55に移行して焦点位置を再検出する。
S55においては、Z軸方向の所定の範囲をスキャンしながら高倍率画像を順次読み込む。S56においては、全ての画像についてFFT(高速フーリエ変換)処理が行われ、画像の周波数スペトラムが算出される。S57においては、ピークパワー値が最大のZ位置を検出する。S58においては、ピークパワー値を記憶し、このZ位置をZ軸中心位置とする。S59においては、中心および任意に指定した上下位置の3枚の画像を取得する。
図7は、本発明によるビューア処理の内容を示すフローチャートである。この処理は例えばパソコン13あるいは端末(PC)52において実行される。S70においては、使用者が入力操作した表示すべきスライド選択情報を入力する。使用者は患者名等のキーワードに基づきDB51を検索してもよい。S71においては、DBから要求に該当する動画像ファイルおよび診断情報保存用テキストファイル、マーキング情報およびコメント情報保存用テキストファイル等の付加情報テキストファイルを読み出す。S72においては、スライドの全体画像であるルーペ画像を表示する。
図8は、ファイルの構造および表示される画像の例を示す説明図である。ルーペ画像63はスライドガラスの試料の全体を含んでおり、ルーペ画像63には自動または手動で設定され、高倍率画像が撮影されているマーク領域64、65が表示されている。使用者はここで例えばマーク領域64内をクリックする。
S73においては、マーク領域部分全体の縮小画像であるサムネイル画像70を表示する。図8中段のサムネイル画像70は例えば4×4=16枚の高倍率画像を貼り合わせて縮小したものであり、点線71、72は表示はされない高倍率画像の境界である。使用者はここで例えばサムネイル画像70の見たい部分(領域73の中心)をクリックする。
S74においては、指定位置を使用者が指定した任意の倍率で表示するために必要な複数の高倍率画像を決定し、その画像を読み出す。例えば領域73を表示するためには4枚の高倍率画像が必要である。S75においては、読み出した高倍率画像を埋め込まれている重なり情報に基づき貼り合わせる。
S76においては、貼り合わせた高倍率画像75およびマーキング情報、コメント、診断情報を画面サイズに合わせて整形して表示する。なお、高倍率画像75が表示された状態で表示領域を上下左右に移動させることができる。また、Z軸方向の移動は上(画面手前側)または下(画面奥側)への移動指示に基づき、移動後の画像が貼り合わされて表示される。
S77においては、マーキングの要求があるか否かが判定され、判定結果が否定の場合にはS79に移行するが、肯定の場合にはS78に移行する。S78においては、マーキング情報記録処理が行われる。マーキングとは画像上へのマーキング(色、形などは自由)を可能とする機能である。マーキング情報の内容は例えばマーキング番号、X軸位置、Y軸位置、Z軸位置、マーキングの形、色、線の太さ等からなる。マーキング情報は原画像には手を加えず、レイヤー情報として保存する。
S79においては、コメントの要求があるか否かが判定され、判定結果が否定の場合にはS81に移行するが、肯定の場合にはS80に移行する。S80においては、コメント情報記録処理が行われる。使用者は別画面上に表示されるコメントボックスにコメントを記載する。コメント情報もレイヤー情報として保存する。
S81においては、全体画像の表示に戻るか否かが判定され、判定結果が否定の場合にはS82に移行するが、肯定の場合にはS73あるいはS72に移行する。S82においては、処理を終了するか否かが判定され、判定結果が否定の場合にはS77に移行するが、肯定の場合には処理を終了する。
インターネットを介して外部の端末56からアクセスする場合には、端末56に上記したビューアプログラムをインストールし、DB51から必要なファイルをダウンロードしてもよいが、ビューアプログラムと同じ機能をWebサーバ50において実行し、端末56においては周知のWebブラウザを起動してWebサーバにアクセスするようにしてもよい。Webサーバ50においてはブラウザからの操作情報に基づき、表示すべき画面データを生成して端末56に送信する。このようにすれば、専用のプログラムをインストールする必要がなく、インターネットに接続された任意の端末から画像の閲覧が可能である。
図9は、本発明の第2実施例の半自動スライド作成処理の内容を示すフローチャートである。第1実施例においては、高倍率画像を撮影するマーク領域を自動的に認識する例を開示したが、試料の全ての領域を高倍率で撮影すると非常に時間がかかり、データ量も非常に多くなってしまう。そこで、まず全てのスライドガラスについてルーペ画像のみを撮影して一覧表示し、それぞれのルーペ画像について高倍率画像が必要な部分のみを使用者がマークすることができるようにすることにより、撮影時間が短縮でき、データ量も削減できる。
S100においては、使用者によって入力されたスライドガラス枚数情報を読み込む。S101においては、3次元移動機構21〜28を制御して未処理のスライドガラス17を1枚取り出し、デジタルカメラ12の下へセットする。S102においては、デジタルカメラ12を使用して2次元バーコードを読み取る。
S103においては、デジタルカメラ12を使用してルーペ画像を撮影し、スライドガラスを元の収納位置に格納する。S104においては、撮影エリアを自動認識する。S105においては、未処理のスライドが有るか否かが判定され、判定結果が肯定の場合にはS101に移行するが、否定の場合にはS106に移行する。
S106においては、全てのスライドガラスのルーペ画像と自動認識エリアを表示する。使用者はここで自動認識エリアを変更したいルーペ画像について、高倍率画像の撮影が必要な部分のみをマークする。S107においては、使用者による変更操作が有ったか否かが判定され、判定結果が肯定の場合にはS108に移行するが、否定(変更操作完了)の場合にはS109に移行する。S108においては、入力された撮影エリア情報を読み込み、撮影エリア情報を更新してS106に移行する。
S109においては、3次元移動機構21〜28を制御して、未処理のスライドガラス17を1枚取り出し、デジタルカメラ12の下へセットする。S110においては、デジタルカメラ12を使用して2次元バーコードを読み取る。S111においては、デジタルカメラ12を使用してルーペ画像を撮影する。
S112においては、読み取った2次元バーコードをチェックしてスライドガラスを確認すると共に、S103において撮影したルーペ画像とS111において撮影したルーペ画像の位置のずれを検出し、検出値に基づき3次元移動機構21〜28による移動位置を補正する。
S113においては、スライドガラスを顕微鏡10の対物レンズ18の下に移動する。S114においては、前述した高倍率画像撮影処理を行う。この際に、高倍率画像を貼り合わせた全体画像の縮小画像であるサムネイル画像も生成される。S115においては、ルーペ画像+サムネイル画像+高倍率画像を1つの動画像ファイルにまとめてDB50に登録、保存する。
S116においては、3次元移動機構21〜28を制御してスライドガラスを元の位置に収納する。S117においては、未処理のスライドガラスが有るか否かが判定され、判定結果が否定の場合には処理を終了するが、肯定の場合にはS109に移行する。
以上実施例を説明したが、本発明には以下のような変形例も考えられる。実施例においては、画像の傾き、回転が考慮されていないが、ルーペ画像と高倍率画像の間、あるいは隣接する高倍率画像の間において画像の相対的な傾き(回転)を検出し、補正するようにしてもよい。また、レンズ収差補正や色補正等を行ってもよい。
本発明のスライド画像データ作成装置は、医学(病理学・血液学・寄生虫学等)・農学・薬学・理学・教育など顕微鏡を利用する全分野において広く利用することができる。
本発明のスライド画像データ作成装置を含むシステム全体の構成を示すブロック図である。 本発明において使用するスライドガラスの例を示す平面図である。 本発明のスライドガラス撮影装置の構成を示す平面図である。 本発明による全自動スライド作成処理の内容を示すフローチャートである。 S16の高倍率画像撮影処理の内容を示すフローチャートである。 S33のZ軸位置調整処理の内容を示すフローチャートである。 本発明によるビューア処理の内容を示すフローチャートである。 ファイルの構造および表示される画像の例を示す説明図である。 本発明の第2実施例の半自動スライド作成処理の内容を示すフローチャートである。
符号の説明
10 顕微鏡
11 顕微鏡カメラ
12 デジタルカメラ
13 パソコン
16 モータ駆動装置
17 スライドガラス
18 対物レンズ
20 基台
21〜28 3次元移動機構
30 スライドガラス収納マガジン

Claims (10)

  1. 顕微鏡に備え付けられ、高倍率画像を撮影するデジタル撮影手段と、
    試料を保持し、3次元方向に移動可能な試料搬送手段と、
    前記試料搬送手段を制御して、画像が他の画像と重なる部分であるのりしろ部が存在するように試料を顕微鏡の光軸と垂直方向に順次移動させながら前記デジタル撮影手段を制御して複数の高倍率画像を撮影する撮影制御手段と、
    複数の高倍率画像から画像処理により前記のりしろ部を認識し、複数の高倍率画像の貼り合わせ情報を生成する貼り合わせ情報生成手段と、
    複数の高倍率画像を前記貼り合わせ情報と共に1つのファイルに格納する画像ファイル生成手段と
    を備えたことを特徴とするスライド画像データ作成装置。
  2. 顕微鏡の光軸と並行な方向にも微細に移動させながら、所定間隔で複数の画像を撮影することを特徴とする請求項1記載のスライド画像データ作成装置。
  3. 顕微鏡の光軸と並行な方向において顕微鏡の焦点が合う位置を検出するフォーカス位置検出手段を備えていることを特徴とする請求項1記載のスライド画像データ作成装置。
  4. 更に、高倍率画像を貼り合わせた全体画像の縮小画像であるサムネイル画像を生成するサムネイル画像生成手段を備えたことを特徴とする請求項1記載のスライド画像データ作成装置。
  5. 更に、外部デジタルカメラ手段を備えたことを特徴とする請求項1記載のスライド画像データ作成装置。
  6. 前記外部デジタルカメラにより撮影された画像、前記複数の高倍率画像および前記貼り合わせ情報が1つの動画ファイルにまとめて収納されていることを特徴とする請求項5記載のスライド画像データ作成装置。
  7. 更に、前記外部デジタルカメラにより撮影された画像から高倍率画像を撮影する領域を自動的に決定する撮影領域自動認識手段を備えたことを特徴とする請求項5記載のスライド画像データ作成装置。
  8. 更に、複数のスライドガラスについて前記外部デジタルカメラにより撮影された画像を前記撮影領域自動認識手段により認識された撮影領域と共に一覧表示し、使用者が前記撮影領域を修正可能な撮影領域半自動認識手段を備えたことを特徴とする請求項7記載のスライド画像データ作成装置。
  9. 更に、撮像された画像のファイルをデータベースに登録し、ネットワークを介して画像の検索および参照ができる画像公開手段を備えたことを特徴とする請求項1記載のスライド画像データ作成装置。
  10. 複数の高倍率画像データおよび画像の貼り合わせ情報が1つの動画ファイルにまとめて収納されていることを特徴とするスライド画像データ。

JP2005113354A 2005-04-11 2005-04-11 スライド画像データ作成装置およびスライド画像データ Pending JP2006292999A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005113354A JP2006292999A (ja) 2005-04-11 2005-04-11 スライド画像データ作成装置およびスライド画像データ
US11/241,942 US7426345B2 (en) 2005-04-11 2005-10-04 Slide photograph data creation system, and slide photograph data

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005113354A JP2006292999A (ja) 2005-04-11 2005-04-11 スライド画像データ作成装置およびスライド画像データ

Related Child Applications (2)

Application Number Title Priority Date Filing Date
JP2009187923A Division JP2010061129A (ja) 2009-08-14 2009-08-14 スライド画像データ
JP2009187922A Division JP5059816B2 (ja) 2009-08-14 2009-08-14 スライド画像データ作成装置

Publications (1)

Publication Number Publication Date
JP2006292999A true JP2006292999A (ja) 2006-10-26

Family

ID=37083265

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005113354A Pending JP2006292999A (ja) 2005-04-11 2005-04-11 スライド画像データ作成装置およびスライド画像データ

Country Status (2)

Country Link
US (1) US7426345B2 (ja)
JP (1) JP2006292999A (ja)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009113647A1 (ja) * 2008-03-14 2009-09-17 株式会社ニコン 顕微鏡システム
JP2010203949A (ja) * 2009-03-04 2010-09-16 Nec Corp 画像診断支援装置、画像診断支援方法、画像診断支援プログラム、及びその記憶媒体
WO2010106927A1 (ja) 2009-03-17 2010-09-23 ソニー株式会社 焦点情報生成装置及び焦点情報生成方法
WO2010106928A1 (ja) 2009-03-17 2010-09-23 ソニー株式会社 画像生成装置及び画像生成方法
US7912267B2 (en) 2008-11-26 2011-03-22 Olympus Corporation Virtual-slide specimen image acquisition apparatus
JP2012078156A (ja) * 2010-09-30 2012-04-19 Olympus Corp 検査装置
JP2012098351A (ja) * 2010-10-29 2012-05-24 Canon Inc 画像取得装置および画像取得システム
JP2012173391A (ja) * 2011-02-18 2012-09-10 Canon Inc 画像生成装置、及び、画像生成方法
WO2013114817A1 (en) * 2012-01-30 2013-08-08 Canon Kabushiki Kaisha Image processing apparatus, image processing system, image processing method, and program
JP2014002166A (ja) * 2007-09-21 2014-01-09 Aperio Technologies Inc デジタルスライド画像を表示する方法
JP2014526712A (ja) * 2011-09-09 2014-10-06 ベンタナ メディカル システムズ, インコーポレイテッド イメージングシステム、カセッテ、およびこれを使用する方法
JP2016050874A (ja) * 2014-09-01 2016-04-11 東洋紡株式会社 有形成分分析装置及び有形成分分析方法
US9323037B2 (en) 2009-04-01 2016-04-26 Sony Corporation Biological image presentation device, biological image presentation method, program, and biological image presentation system
JP2018116259A (ja) * 2016-11-22 2018-07-26 サクラ ファインテック ユー.エス.エー., インコーポレイテッド スライド管理システム
WO2020066041A1 (ja) * 2018-09-28 2020-04-02 オリンパス株式会社 顕微鏡システム
JP2021502551A (ja) * 2017-11-30 2021-01-28 ライカ バイオシステムズ イメージング インコーポレイテッドLeica Biosystems Imaging, Inc. スライドラッククランプ装置
CN112596226A (zh) * 2020-12-18 2021-04-02 佳贺斯(浙江)生物医药科技有限公司 一种医用细胞检测的载片装置
US11594051B2 (en) 2018-09-28 2023-02-28 Evident Corporation Microscope system and projection unit
US11662565B2 (en) 2018-09-28 2023-05-30 Evident Corporation Microscope system, projection unit, and image projection method
US11869166B2 (en) 2018-09-28 2024-01-09 Evident Corporation Microscope system, projection unit, and image projection method

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4504824B2 (ja) * 2005-01-13 2010-07-14 オリンパス株式会社 顕微鏡用カメラ
JP4923541B2 (ja) * 2005-11-30 2012-04-25 株式会社ニコン 顕微鏡
EP2204686B9 (en) * 2008-12-30 2012-11-14 Cellavision AB Analyser for optical analysis of a biological specimen
DK2406679T3 (da) 2009-03-11 2017-04-18 Sakura Finetek Usa Inc Autofokusfremgangsmåde og autofokusanordning
EP2557446B1 (en) * 2010-04-05 2019-09-04 Olympus Corporation Microscope controller and microscope system comprising the microscope controller
JP2011221188A (ja) * 2010-04-07 2011-11-04 Sony Corp ステージ制御装置、ステージ制御方法及び顕微鏡
JP2012013954A (ja) * 2010-06-30 2012-01-19 Sony Corp 搬送装置及び搬送方法並びに顕微鏡システム
JP5696396B2 (ja) * 2010-08-16 2015-04-08 ソニー株式会社 顕微鏡及びゴースト除去方法
US10139613B2 (en) 2010-08-20 2018-11-27 Sakura Finetek U.S.A., Inc. Digital microscope and method of sensing an image of a tissue sample
AU2015201450B2 (en) * 2011-09-09 2016-11-03 Ventana Medical Systems, Inc. Imaging systems, cassettes, and methods of using the same
JP5881356B2 (ja) * 2011-09-27 2016-03-09 オリンパス株式会社 顕微鏡システム
JP6053327B2 (ja) * 2012-05-23 2016-12-27 オリンパス株式会社 顕微鏡システム、標本画像生成方法及びプログラム
DE102013103971A1 (de) 2013-04-19 2014-11-06 Sensovation Ag Verfahren zum Erzeugen eines aus mehreren Teilbildern zusammengesetzten Gesamtbilds eines Objekts
US20150022880A1 (en) * 2013-07-22 2015-01-22 Arcs Precision Technology Co., Ltd. Image measuring apparatus with automated control of variable-power nose wheel rotation and 3d displacement
CN103353670A (zh) * 2013-08-01 2013-10-16 陈松 一种全自动电控显微镜样品台
US10007102B2 (en) 2013-12-23 2018-06-26 Sakura Finetek U.S.A., Inc. Microscope with slide clamping assembly
EP3455664A1 (en) * 2016-05-12 2019-03-20 Life Technologies Corporation Systems, methods, and apparatuses for image capture and display
CN109491066B (zh) * 2018-12-27 2021-02-05 湖南友哲科技有限公司 全自动显微扫描设备
CN110208939B (zh) * 2019-05-27 2024-05-28 平湖莱顿光学仪器制造有限公司 一种载玻片夹持装置及显微镜系统
TR202102274A2 (tr) * 2021-02-18 2021-03-22 Fatih Tas Akilli preparatlardan oluşan eği̇ti̇m seti̇
TR2021016867A2 (tr) * 2021-10-29 2021-11-22 Fatih Tas Mi̇kroskop kullanim beceri̇si̇ni̇ geli̇şti̇rmek amaçli di̇ji̇tal lam-lamel

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5776649A (en) * 1980-10-31 1982-05-13 Toshiba Corp Picture information display device
GB8317407D0 (en) * 1983-06-27 1983-07-27 Rca Corp Image transform techniques
US4818169A (en) * 1985-05-17 1989-04-04 Schram Richard R Automated wafer inspection system
US5963368A (en) * 1995-09-15 1999-10-05 Accumed International, Inc. Specimen management system
US6249316B1 (en) * 1996-08-23 2001-06-19 Flashpoint Technology, Inc. Method and system for creating a temporary group of images on a digital camera
JPH10336705A (ja) * 1997-06-02 1998-12-18 Canon Inc 複眼カメラ
US6331860B1 (en) * 1999-11-24 2001-12-18 Xerox Corporation Method and apparatus for stitching scanned image segments together to form an oversized document
IL138123A0 (en) 2000-08-28 2001-10-31 Accuramed 1999 Ltd Medical decision support system and method
EP1199542A3 (de) * 2000-10-13 2003-01-15 Leica Microsystems Imaging Solutions Ltd. Verfahren und Vorrichtung zur optischen Vermessung eines Oberflächenprofils eines Objektes
SE517626C3 (sv) 2001-04-12 2002-09-04 Cellavision Ab Förfarande vid mikroskopering för att söka av och positionera ett objekt, där bilder tas och sammanfogas i samma bildkoordinatsystem för att noggrant kunna ställa in mikroskopbordet
US6847481B1 (en) * 2001-10-26 2005-01-25 Ludl Electronics Products, Ltd. Automated slide loader cassette for microscope
GB2383487B (en) * 2001-12-18 2006-09-27 Fairfield Imaging Ltd Method and apparatus for acquiring digital microscope images
US6588605B1 (en) * 2002-01-30 2003-07-08 Cardinal Cg Company Planar article rack having closeable holding members
US6924929B2 (en) * 2002-03-29 2005-08-02 National Institute Of Radiological Sciences Microscope apparatus
US7119816B2 (en) * 2003-03-31 2006-10-10 Microsoft Corp. System and method for whiteboard scanning to obtain a high resolution image

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014002166A (ja) * 2007-09-21 2014-01-09 Aperio Technologies Inc デジタルスライド画像を表示する方法
WO2009113647A1 (ja) * 2008-03-14 2009-09-17 株式会社ニコン 顕微鏡システム
US7912267B2 (en) 2008-11-26 2011-03-22 Olympus Corporation Virtual-slide specimen image acquisition apparatus
JP2010203949A (ja) * 2009-03-04 2010-09-16 Nec Corp 画像診断支援装置、画像診断支援方法、画像診断支援プログラム、及びその記憶媒体
US8787636B2 (en) 2009-03-04 2014-07-22 Nec Corporation Diagnostic imaging support in which image data of high magnification is generated to image data of low magnification for classification thereof
WO2010106927A1 (ja) 2009-03-17 2010-09-23 ソニー株式会社 焦点情報生成装置及び焦点情報生成方法
WO2010106928A1 (ja) 2009-03-17 2010-09-23 ソニー株式会社 画像生成装置及び画像生成方法
JP2010217554A (ja) * 2009-03-17 2010-09-30 Sony Corp 焦点情報生成装置及び焦点情報生成方法
US8710412B2 (en) 2009-03-17 2014-04-29 Sony Corporation Focus information generating device and focus information generating method
US10410083B2 (en) 2009-04-01 2019-09-10 Sony Corporation Biological image presentation device, biological image presentation method, program, and biological image presentation system
US9323037B2 (en) 2009-04-01 2016-04-26 Sony Corporation Biological image presentation device, biological image presentation method, program, and biological image presentation system
US10963729B2 (en) 2009-04-01 2021-03-30 Sony Corporation Biological image presentation device, biological image presentation method, program, and biological image presentation system
JP2012078156A (ja) * 2010-09-30 2012-04-19 Olympus Corp 検査装置
US8836779B2 (en) 2010-09-30 2014-09-16 Olympus Corporation Inspection device
JP2012098351A (ja) * 2010-10-29 2012-05-24 Canon Inc 画像取得装置および画像取得システム
JP2012173391A (ja) * 2011-02-18 2012-09-10 Canon Inc 画像生成装置、及び、画像生成方法
JP2014526712A (ja) * 2011-09-09 2014-10-06 ベンタナ メディカル システムズ, インコーポレイテッド イメージングシステム、カセッテ、およびこれを使用する方法
WO2013114817A1 (en) * 2012-01-30 2013-08-08 Canon Kabushiki Kaisha Image processing apparatus, image processing system, image processing method, and program
JP2016050874A (ja) * 2014-09-01 2016-04-11 東洋紡株式会社 有形成分分析装置及び有形成分分析方法
JP2018116259A (ja) * 2016-11-22 2018-07-26 サクラ ファインテック ユー.エス.エー., インコーポレイテッド スライド管理システム
US11280803B2 (en) 2016-11-22 2022-03-22 Sakura Finetek U.S.A., Inc. Slide management system
JP2021502551A (ja) * 2017-11-30 2021-01-28 ライカ バイオシステムズ イメージング インコーポレイテッドLeica Biosystems Imaging, Inc. スライドラッククランプ装置
CN112703440A (zh) * 2018-09-28 2021-04-23 奥林巴斯株式会社 显微镜系统
JPWO2020066041A1 (ja) * 2018-09-28 2021-08-30 オリンパス株式会社 顕微鏡システム
WO2020066041A1 (ja) * 2018-09-28 2020-04-02 オリンパス株式会社 顕微鏡システム
JP7150867B2 (ja) 2018-09-28 2022-10-11 株式会社エビデント 顕微鏡システム
US11594051B2 (en) 2018-09-28 2023-02-28 Evident Corporation Microscope system and projection unit
US11662565B2 (en) 2018-09-28 2023-05-30 Evident Corporation Microscope system, projection unit, and image projection method
US11869166B2 (en) 2018-09-28 2024-01-09 Evident Corporation Microscope system, projection unit, and image projection method
US12130418B2 (en) 2018-09-28 2024-10-29 Evident Corporation Microscope system
CN112596226A (zh) * 2020-12-18 2021-04-02 佳贺斯(浙江)生物医药科技有限公司 一种医用细胞检测的载片装置

Also Published As

Publication number Publication date
US7426345B2 (en) 2008-09-16
US20060228107A1 (en) 2006-10-12

Similar Documents

Publication Publication Date Title
JP2006292999A (ja) スライド画像データ作成装置およびスライド画像データ
JP6462763B2 (ja) デジタル顕微鏡を備えたシステム及びこれを用いた試料の検査方法
JP4600395B2 (ja) 顕微鏡システムおよび画像処理方法
JP4970869B2 (ja) 観察装置および観察方法
JP4937850B2 (ja) 顕微鏡システム、そのvs画像生成方法、プログラム
JP5059816B2 (ja) スライド画像データ作成装置
US7865007B2 (en) Microscope system, observation method and observation program
US20190294317A1 (en) Interface for display of multi-layer images in digital microscopy
EP4063932A1 (en) Microscopic apparatus and image processing apparatus
JP2010061129A (ja) スライド画像データ
JP6333318B2 (ja) 画像処理方法、画像処理装置、および撮像装置
JP5343762B2 (ja) 制御装置、およびその制御装置を用いた顕微鏡システム
JP2005266718A (ja) 顕微鏡画像撮影システム
JP4346888B2 (ja) 顕微鏡装置
JP6545457B2 (ja) プレパラート、透明プレート、プレパラートの作製方法、スライドガラス、画像撮影装置、画像撮影方法、プレパラート作製装置、およびプレパラート部品セット
JP4046161B2 (ja) 標本画像データ処理方法及び標本検査システム
KR100897674B1 (ko) 표본 검사 시스템 및 표본 검사 방법
EP1912090B1 (en) Slide photograph data creation system
JP2004150896A (ja) 標本検査方法及びシステム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061003

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20090219

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20090310

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090312

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090422

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090519

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7426

Effective date: 20090811

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090814

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20090811

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20091002

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20091127