[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2007135828A - Diagnostic imaging support system and image display method - Google Patents

Diagnostic imaging support system and image display method Download PDF

Info

Publication number
JP2007135828A
JP2007135828A JP2005332899A JP2005332899A JP2007135828A JP 2007135828 A JP2007135828 A JP 2007135828A JP 2005332899 A JP2005332899 A JP 2005332899A JP 2005332899 A JP2005332899 A JP 2005332899A JP 2007135828 A JP2007135828 A JP 2007135828A
Authority
JP
Japan
Prior art keywords
image
tomographic
spect
display
subject
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005332899A
Other languages
Japanese (ja)
Other versions
JP4794993B2 (en
Inventor
Hiroyuki Horikoshi
浩幸 堀越
Katsunori Yoshioka
克則 吉岡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm RI Pharma Co Ltd
Original Assignee
Fujifilm RI Pharma Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm RI Pharma Co Ltd filed Critical Fujifilm RI Pharma Co Ltd
Priority to JP2005332899A priority Critical patent/JP4794993B2/en
Publication of JP2007135828A publication Critical patent/JP2007135828A/en
Application granted granted Critical
Publication of JP4794993B2 publication Critical patent/JP4794993B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Apparatus For Radiation Diagnosis (AREA)
  • Magnetic Resonance Imaging Apparatus (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To support a medical doctor in a diagnostic imaging by providing images having information that a functional image has and also information that a morphic image has. <P>SOLUTION: The diagnostic imaging support system is provided with a CT read part for reading CT image data including a plurality of tomographic images and a SPECT (Single Photon Emission Computed Tomography) read part for reading SPECT image data. Then, the diagnostic imaging support system selects one tomographic image from the plurality of tomographic images and displays a display image 100 having a display area 110 for the selected tomographic image and a display area 120 for a SPECT image. The display image 100 is further provided with an area 130 for receiving the selection of a first position on the tomographic image and a second position on the SPECT image by intersections 115A and 125A of line cursors 115 and 125 and superimposing and displaying the tomographic image and the SPECT image so that the first position and the second position match. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、被験者を撮影した画像を用いた診断を支援するための技術に関し、特に、異なる手法で撮影された同一被験者の画像を重ねて表示させて、診断支援のための技術に関する。   The present invention relates to a technique for supporting diagnosis using an image obtained by photographing a subject, and more particularly, to a technique for assisting diagnosis by superimposing and displaying images of the same subject photographed by different methods.

従来、被験者を撮影した画像を用いて、医師による診断を支援する画像診断支援システムが知られている。ここで用いられる被験者を撮影した画像には、さまざまな種類がある。   2. Description of the Related Art Conventionally, an image diagnosis support system that supports diagnosis by a doctor using an image obtained by photographing a subject is known. There are various types of images taken of the subject used here.

例えば、被験者の生理機能や代謝情報に基づく、被験者の機能を可視可した機能画像である、核医学(Radio Isotope、RI)画像が用いられている。RI画像としては、被験者体内に放射性同位元素を導入し、その放射性同位元素から発せられるγ線を利用する単光子放出コンピュータ断層撮影(Single Photon Emission Computed Tomography、SPECT)および陽電子放出断層撮影(Positron Emission Tomography、PET)が、それぞれ利用されている(例えば特許文献1)。   For example, a nuclear medicine (Radio Isotope, RI) image, which is a functional image that visualizes the function of the subject based on the physiological function and metabolic information of the subject, is used. As RI images, single photon emission computed tomography (SPECT) and positron emission tomography (gamma rays emitted from the radioisotope are introduced into the subject's body). Tomography, PET) is used (for example, Patent Document 1).

また、臓器の解剖学的な形態及び位置を3次元的に高精度で把握するためには、X線CT(Computed Tomography)あるいはMRI(Magnetic Resonance Imaging)による断層画像が用いられている(例えば特許文献2,3)。
特開2005−137558号公報 特開2003−290173号公報 特開2005−40465号公報
In addition, in order to grasp the anatomical form and position of an organ three-dimensionally with high accuracy, a tomographic image by X-ray CT (Computed Tomography) or MRI (Magnetic Resonance Imaging) is used (for example, a patent). References 2, 3).
JP 2005-137558 A JP 2003-290173 A Japanese Patent Laying-Open No. 2005-40465

ところで、RI画像は機能画像であるから、着目している生理機能や代謝情報とは無関係な臓器は写らないという特徴がある。従って、RI画像では、解剖学的な臓器の形態及び位置情報が少なくなる。   By the way, since the RI image is a functional image, there is a feature that an organ unrelated to the physiological function or metabolic information of interest is not captured. Therefore, in the RI image, the anatomical organ morphology and position information are reduced.

これとは反対に、CT画像及びMRI画像では、臓器の詳細な形態及び位置情報を得ることができるが、RI画像とは異なり臓器の機能に基づく情報は画像に現れてこない。つまり、撮像方法が異なれば、それぞれから得られる情報も異なる。   On the other hand, in the CT image and the MRI image, it is possible to obtain the detailed form and position information of the organ, but unlike the RI image, information based on the function of the organ does not appear in the image. That is, the information obtained from each differs depending on the imaging method.

このことから、異なる撮像方法で撮影された画像を組み合わせることにより、医師にとって有益な情報を提供することができる。例えば、機能に関する情報及び臓器の形態等の情報の双方を兼ね備えた画像を得ることができれば、医師による画像診断の精度の向上が見込まれ、臨床的な意義は大きい。   Therefore, useful information for the doctor can be provided by combining images taken by different imaging methods. For example, if an image having both information regarding functions and information such as organ morphology can be obtained, improvement in the accuracy of image diagnosis by a doctor is expected, and clinical significance is great.

そこで、本発明の目的は、異なる撮像方法で撮影された画像を用いて、それぞれの画像が有する情報のいずれも兼ね備えた画像を提供し、医師による画像診断を支援するための技術を提供することである。   Therefore, an object of the present invention is to provide a technique for supporting image diagnosis by a doctor by providing an image having both of the information of each image using images taken by different imaging methods. It is.

本発明の一実施態様に従う画像診断支援装置は、第1の撮像手段で被験者を断層撮影して得られた、複数枚の第1の断層画像を含む断層画像データを読み込む手段と、第2の撮像手段で前記被験者を撮影した、第2の画像の画像データを読み込む手段と、前記複数枚の第1の断層画像から一枚の第1の断層画像を選択する選択手段と、前記選択された第1の断層画像と、前記第2の画像とを表示装置に並べて表示させる第1の表示手段と、前記第1の断層画像上の第1の位置及び前記第2の画像上の第2の位置の選択を受け付ける受付手段と、前記選択された第1の位置と第2の位置とが合致するように、前記第1の断層画像と前記第2の画像とを重ねて前記表示装置に表示させる第2の表示手段と、を備える。   An image diagnosis support apparatus according to an embodiment of the present invention includes means for reading tomographic image data including a plurality of first tomographic images obtained by tomographic imaging of a subject with a first imaging means; Means for reading image data of a second image obtained by imaging the subject by the imaging means; selection means for selecting one first tomographic image from the plurality of first tomographic images; and the selected A first display means for displaying the first tomographic image and the second image side by side on a display device; a first position on the first tomographic image; and a second position on the second image. The first tomographic image and the second image are superimposed and displayed on the display device so that the receiving means for receiving the selection of the position matches the selected first position and the second position. Second display means to be provided.

これにより、第1の撮像手段による第1の断層画像が有する情報及び第2の撮像手段による第2の画像が有する情報の双方を兼ね備えた画像を提供し、画像診断を支援することができる。   Thereby, an image having both the information of the first tomographic image by the first imaging unit and the information of the second image by the second imaging unit can be provided, and image diagnosis can be supported.

好適な実施形態では、前記選択を受け付ける手段が、前記第1の位置が選択された後、所定の入力装置に対する単一の入力操作により前記第2の位置の選択を受け付けると、前記第1の表示手段は、第1の断層画像の表示領域での前記第1の位置と、第2の画像の表示領域内での前記第2の位置とが、同じ位置になるように第1の断層画像または第2の画像の表示位置を変更するようにしてもよい。   In a preferred embodiment, when the means for accepting the selection accepts the selection of the second position by a single input operation on a predetermined input device after the first position is selected, the first position is selected. The display means includes the first tomographic image so that the first position in the display area of the first tomographic image is the same as the second position in the display area of the second image. Alternatively, the display position of the second image may be changed.

これにより、第1の位置及び第2の位置の位置合わせが容易になる。   This facilitates the alignment of the first position and the second position.

好適な実施形態では、前記表示装置に表示したときに、前記断層画像及び前記機能画像の前記被験者の表示倍率が一致するように調整する手段をさらに備えてもよい。   In a preferred embodiment, there may be further provided means for adjusting the display magnification of the subject of the tomographic image and the functional image so as to match when displayed on the display device.

これにより、元々の画像の倍率が異なるときでも、それを一致させて画像を重ね合わせることができる。   Thereby, even when the magnifications of the original images are different, the images can be overlapped with each other.

好適な実施形態では、前記断層画像は、CT画像またはMRI画像であってもよい。   In a preferred embodiment, the tomographic image may be a CT image or an MRI image.

好適な実施形態では、前記第2の画像は、前記被験者を正面及び背面から撮影した、前記被験者の生理機能ないしは代謝情報に基づく機能画像であってもよい。さらには、前記機能画像はRI画像であってもよい。   In a preferred embodiment, the second image may be a functional image based on physiological function or metabolic information of the subject obtained by photographing the subject from the front and back. Furthermore, the functional image may be an RI image.

以下、本発明の一実施形態に係る画像診断支援装置について、図面を参照して説明する。   Hereinafter, an image diagnosis support apparatus according to an embodiment of the present invention will be described with reference to the drawings.

図1は、本実施形態に係る画像診断支援装置の機能構成を示す図である。   FIG. 1 is a diagram illustrating a functional configuration of an image diagnosis support apparatus according to the present embodiment.

本実施形態に係る画像診断支援装置1は、画像診断支援装置本体10に、ポインティングデバイス及びキーボードなどの入力装置7と液晶ディスプレイなどの表示装置8とプリンタ9とが接続されている。そして、画像診断支援装置1は、断層撮影して得られた被験者の形態を示す断層画像と、被験者の生体機能を示す機能画像とを、表示装置8に重ねて表示させ、被験者の診断に役立てるものである。   In the diagnostic imaging support apparatus 1 according to this embodiment, an imaging diagnostic support apparatus main body 10 is connected to an input device 7 such as a pointing device and a keyboard, a display device 8 such as a liquid crystal display, and a printer 9. The diagnostic imaging support apparatus 1 displays a tomographic image showing the form of the subject obtained by tomography and a functional image showing the biological function of the subject superimposed on the display device 8 to help diagnosis of the subject. Is.

画像診断支援装置1は、例えば汎用的なコンピュータシステムにより構成され、以下に説明する画像診断支援装置1内の個々の構成要素または機能は、例えば、コンピュータプログラムを実行することにより実現される。   The image diagnosis support apparatus 1 is configured by, for example, a general-purpose computer system, and each component or function in the image diagnosis support apparatus 1 described below is realized by executing a computer program, for example.

画像診断支援装置本体10は、CT画像記憶部11と、SPECT画像記憶部12と、CT読み出し部13と、SPECT読み出し部14と、バッファ15,16と、表示処理部17と、UI画面データを記憶する画面データ記憶部18とを備える。   The diagnostic imaging support apparatus body 10 includes a CT image storage unit 11, a SPECT image storage unit 12, a CT readout unit 13, a SPECT readout unit 14, buffers 15 and 16, a display processing unit 17, and UI screen data. And a screen data storage unit 18 for storage.

CT画像記憶部11は、X線CTを用いて撮影したCT画像の画像データを記憶する。例えば、CT画像記憶部11には、被験者を所定の方向に断層撮影して得られる複数枚の断層画像を含むCT画像ファイルが格納される。CT画像ファイルは、あらゆる形式でCT画像記憶部11に格納することができるが、例えば、各断層画像は512×512画素のDICOMフォーマットでCT画像記憶部11に格納されていてもよい。   The CT image storage unit 11 stores image data of CT images taken using X-ray CT. For example, the CT image storage unit 11 stores a CT image file including a plurality of tomographic images obtained by tomographic imaging of a subject in a predetermined direction. The CT image file can be stored in the CT image storage unit 11 in any format. For example, each tomographic image may be stored in the CT image storage unit 11 in a 512 × 512 pixel DICOM format.

なお、本実施形態では、X線CTによる断層画像を用いているが、MRIによる断層画像などの他の断層画像を用いることもできる。   In the present embodiment, a tomographic image by X-ray CT is used, but other tomographic images such as a tomographic image by MRI can also be used.

SPECT画像記憶部12は、SPECT画像の画像データを記憶する。本実施形態のSPECT画像は、γ線を被験者の正面(Anterior)から捉えたAnt画像と被験者の背面(Posterior)から捉えたPost画像とを含む。Ant画像及びPost画像は、いずれも被験者の全身画像であり、WB(Whole Body)画像とも呼ばれる。SPECT画像は、臓器などの形態を明らかにするCTによる断層画像と異なり、被験者の代謝情報に基づく生体機能を反映した機能画像である。SPECT画像記憶部12に格納されるSPECT画像ファイルは、あらゆる形式をとることができる。例えば、Ant画像とPost画像とが連結されたマルチイメージファイルであってもよいし、Ant画像とPost画像とがそれぞれ独立のイメージファイルであってもよい。   The SPECT image storage unit 12 stores image data of a SPECT image. The SPECT image of the present embodiment includes an Ant image obtained by capturing γ rays from the subject's front (Anterior) and a Post image obtained from the subject's back (Posterior). Each of the Ant image and the Post image is a whole body image of the subject and is also called a WB (Whole Body) image. The SPECT image is a functional image reflecting a biological function based on the subject's metabolic information, unlike a CT tomographic image that reveals the form of an organ or the like. The SPECT image file stored in the SPECT image storage unit 12 can take any format. For example, a multi-image file in which an Ant image and a Post image are connected may be used, or an Ant image and a Post image may be independent image files.

なお、本実施形態では、SPECTによる機能画像を用いているが、PETによる機能画像を用いることもできる。   In this embodiment, a functional image by SPECT is used, but a functional image by PET can also be used.

CT読み出し部13は、ユーザにより指定されたCT画像ファイルをCT画像記憶部11から読み出して、バッファ15に格納する。さらに、画像のサイズが後述するCT画像の表示領域110(図2参照、以下同様)の画素数と一致しないときは、表示領域110に対応する所定の領域を自動的に選択して、バッファ15に格納するようにしてもよいし、後述する 画面200を用いてユーザによる選択を受け付けて、バッファ15に格納するようにしてもよい。   The CT readout unit 13 reads out the CT image file designated by the user from the CT image storage unit 11 and stores it in the buffer 15. Furthermore, when the image size does not match the number of pixels in the CT image display area 110 (see FIG. 2; hereinafter the same) described later, a predetermined area corresponding to the display area 110 is automatically selected and the buffer 15 Alternatively, it may be stored in the buffer 15, or may be selected by the user using a screen 200 described later and stored in the buffer 15.

SPECT読み出し部14は、ユーザにより指定されたSPECT画像ファイルをSPECT画像記憶部12から読み出して、バッファ16に格納する。その際に、後述するように、読み出した画像の解像度に応じてSPECT画像の倍率を変換する。   The SPECT reading unit 14 reads the SPECT image file designated by the user from the SPECT image storage unit 12 and stores the SPECT image file in the buffer 16. At that time, as described later, the magnification of the SPECT image is converted in accordance with the resolution of the read image.

表示処理部17は、バッファ15に格納されているCT画像データに基づいて、CT表示領域110に断層画像を表示する。本実施形態では、CT画像の一画素をCT表示領域110の一画素に対応させて表示させる。   The display processing unit 17 displays a tomographic image in the CT display area 110 based on the CT image data stored in the buffer 15. In the present embodiment, one pixel of the CT image is displayed in correspondence with one pixel of the CT display area 110.

さらに、表示処理部17は、バッファ16に格納されているSPECT画像データに基づいて、Ant画像またはPost画像をSPECT表示領域120(図2参照、以下同様)に表示させる。本実施形態では、SPECT表示領域120に表示したときの倍率がCT画像と一致するように倍率調整済みのSPECT画像をバッファ16から取得し、SPECT表示領域120に表示させる。   Further, the display processing unit 17 displays an Ant image or a Post image in the SPECT display area 120 (see FIG. 2, the same applies hereinafter) based on the SPECT image data stored in the buffer 16. In the present embodiment, a SPECT image whose magnification has been adjusted so that the magnification when displayed in the SPECT display area 120 matches the CT image is acquired from the buffer 16 and displayed in the SPECT display area 120.

また、表示処理部17は、CT表示領域110に表示されている断層画像と、SPECT表示領域120に表示されているAnt画像またはPost画像とを重ねた重畳画像を、重畳表示領域130(図2参照)に表示させる。   The display processing unit 17 also displays a superimposed image obtained by superimposing the tomographic image displayed in the CT display area 110 and the Ant image or the Post image displayed in the SPECT display area 120 on the superimposed display area 130 (FIG. 2). Display).

画面データ記憶部18は、以下に説明する各ユーザインタフェース画面を表示するためのデータを記憶する。表示処理部17が、ユーザの入力操作に応じて、画面データ記憶部18から所定の画面データを取得して、以下に説明する各ユーザインタフェース画面を表示装置8に表示させる。   The screen data storage unit 18 stores data for displaying each user interface screen described below. The display processing unit 17 acquires predetermined screen data from the screen data storage unit 18 in accordance with a user input operation, and displays each user interface screen described below on the display device 8.

次に、図2には、表示装置8に表示されるCT画像、MRI画像及び重畳画像の表示画面の例を示す。   Next, FIG. 2 shows an example of a display screen of CT images, MRI images and superimposed images displayed on the display device 8.

画像表示画面100は、CTによる断層画像の表示領域110と、SPECTによるAnt画像またはPost画像の表示領域120と、断層画像とAnt画像またはPost画像とを重ねて表示する重畳表示領域130とを有する。さらに、画像表示画面100は、CT画像読み出しボタン111と、SPECT画像(WB画像)読み出しボタン121とを備える。   The image display screen 100 includes a CT tomographic image display area 110, a SPECT Ant image or Post image display area 120, and a tomographic image and an Ant image or Post image superimposed display area 130. . Further, the image display screen 100 includes a CT image read button 111 and a SPECT image (WB image) read button 121.

表示領域110,120,130は、いずれも、横256画素×縦512画素の表示領域を有する。   Each of the display areas 110, 120, and 130 has a display area of 256 pixels wide × 512 pixels high.

さらに、画像表示画面100は、スライドバー112、135、チェックボックス113、134、Ant/Post選択ボタン122、カーソル移動ボタン123、ドローボタン132、出力ボタン133等を備える。そして、これらがユーザによる操作を受け付けることにより、表示領域110,120,130に所定の画像を表示させることができる。以下、画像表示画面100が受け付ける操作に応じて、画像診断支援装置1が実行する処理について説明する。   The image display screen 100 further includes slide bars 112 and 135, check boxes 113 and 134, an Ant / Post selection button 122, a cursor movement button 123, a draw button 132, an output button 133, and the like. And when these receive operation by a user, a predetermined image can be displayed on the display area 110,120,130. Hereinafter, a process executed by the image diagnosis support apparatus 1 according to an operation received by the image display screen 100 will be described.

まず、CT画像読み出しボタン111が押されると、図示しないファイル選択画面などが表示される。これにより、ユーザがCT画像記憶部11に格納されている一つのCT画像ファイルを選択する。   First, when the CT image read button 111 is pressed, a file selection screen (not shown) or the like is displayed. As a result, the user selects one CT image file stored in the CT image storage unit 11.

CT画像ファイルが選択されると、CT読み出し部13が選択されたCT画像ファイルをCT画像記憶部11から読み出してバッファ15に格納する。   When the CT image file is selected, the CT reading unit 13 reads the selected CT image file from the CT image storage unit 11 and stores it in the buffer 15.

このとき、CT画像ファイルに含まれる各断層画像(原画像)の画像サイズが、横256画素×縦512画素であるときは、そのままバッファ15に格納する。一方、画像サイズが横256画素×縦512画素よりも大きいときは、CT読み出し部13は、原画像から横256画素×縦512画素の領域を選択する。この領域選択は、例えば、CT読み出し部13が原画像の中心部の256×512画素の領域を自動的に抽出するようにしてもよいし、以下に説明するように、ユーザが指定した領域を抽出するようにしてもよい。   At this time, if the image size of each tomographic image (original image) included in the CT image file is 256 pixels wide × 512 pixels high, it is stored in the buffer 15 as it is. On the other hand, when the image size is larger than 256 horizontal pixels × 512 vertical pixels, the CT readout unit 13 selects an area of 256 horizontal pixels × 512 vertical pixels from the original image. In this area selection, for example, the CT reading unit 13 may automatically extract an area of 256 × 512 pixels in the center of the original image, or an area designated by the user as described below. You may make it extract.

図3は、ユーザがCT画像の領域を指定するための領域指定画面200の一例を示す。   FIG. 3 shows an example of an area designation screen 200 for the user to designate an area of the CT image.

領域指定画面200には、CT画像記憶部11から読み出されたCT画像ファイルのうちの1枚の断層画像(原画像)210が表示されている。ここで、複数枚の断層画像のうちのどの断層画像を表示させるかは、ユーザが入力装置7を用いてスライドバー250を操作することにより選択可能である。   The area designation screen 200 displays one tomographic image (original image) 210 of the CT image files read from the CT image storage unit 11. Here, which tomographic image of the plurality of tomographic images is displayed can be selected by the user operating the slide bar 250 using the input device 7.

原画像210上には、横256×縦512画素の領域を選択するための選択枠220が表示されている。選択枠220は、ユーザが入力装置7を操作することにより移動可能である。そこで、ユーザが選択枠220を移動させて、領域を選択する。そして、OKボタン230が押されると、選択枠220で選択された領域が確定する。   On the original image 210, a selection frame 220 for selecting an area of 256 × 512 pixels is displayed. The selection frame 220 can be moved by the user operating the input device 7. Therefore, the user moves the selection frame 220 to select an area. When the OK button 230 is pressed, the area selected in the selection frame 220 is confirmed.

このとき、選択された領域は、選択枠220の大きさが予め定められているので、選択枠220上の基準点Aの位置により特定できる。従って、CT画像ファイルに含まれる各断層画像データの、基準点Aにより定まる選択領域の画像データがバッファ15に格納される。   At this time, since the size of the selection frame 220 is determined in advance, the selected region can be specified by the position of the reference point A on the selection frame 220. Accordingly, the image data of the selected area determined by the reference point A of each tomographic image data included in the CT image file is stored in the buffer 15.

再び図2を参照して説明を続ける。   The description will be continued with reference to FIG.

SPECT画像読み出しボタン121が押されると、CT画像の場合と同様に、所定のファイル選択画面などが表示され、ユーザがSPECT画像記憶部12に格納されている一つのSPECT画像ファイルを選択する。   When the SPECT image read button 121 is pressed, a predetermined file selection screen or the like is displayed as in the case of the CT image, and the user selects one SPECT image file stored in the SPECT image storage unit 12.

SPECT画像ファイルが選択されると、SPECT読み出し部14が選択されたファイルをSPECT画像記憶部12から読み出して、以下に説明する倍率調整及び補間を行った後、バッファ16に格納する。このとき、Ant画像とPost画像のファイルが独立しているときは、それぞれのファイルの選択を受け付けてSPECT画像記憶部12から読み込むようにしてもよいし、いずれか一方のみの指定を受け付けて読み込んでもよい。   When the SPECT image file is selected, the SPECT reading unit 14 reads the selected file from the SPECT image storage unit 12, performs magnification adjustment and interpolation described below, and stores them in the buffer 16. At this time, if the Ant image and Post image files are independent, the selection of each file may be accepted and read from the SPECT image storage unit 12, or only one of the designations may be accepted and read. But you can.

SPECT読み出し部14は、CT画像の解像度を基準とし、Ant画像とPost画像をSPECT表示領域120に表示したときに、CT表示領域110に表示されているCT画像と同じ倍率になるように、SPECT画像の倍率を調整する。   The SPECT reading unit 14 uses the resolution of the CT image as a reference so that when the Ant image and the Post image are displayed in the SPECT display area 120, the SPECT reading unit 14 has the same magnification as the CT image displayed in the CT display area 110. Adjust the image magnification.

まず、CT画像の解像度とSPECT画像の解像度とに基づいて、CT画像に対するSPECT画像の拡大率を決定する。すなわち、CT画像の解像度をp1、SPECT画像の解像度をp2とすると、拡大率Wは、以下のようになる。
W=p2/p1
ここで、SPECT表示領域120は、横256×縦512画素であるから、SPECT画像から選択されるべき画素数は、横が(256/W)画素であり、縦が(512/W)画素となる。従って、SPECT読み出し部14は、上記の画素数の領域を選択されたSPECT画像ファイルから自動的に切り出してもよいし、図3の選択画面と同様にしてユーザに選択させてもよい。
First, the enlargement ratio of the SPECT image with respect to the CT image is determined based on the resolution of the CT image and the resolution of the SPECT image. That is, when the resolution of the CT image is p1 and the resolution of the SPECT image is p2, the enlargement ratio W is as follows.
W = p2 / p1
Here, since the SPECT display area 120 is 256 × 512 pixels in the horizontal direction, the number of pixels to be selected from the SPECT image is (256 / W) pixels in the horizontal direction and (512 / W) pixels in the vertical direction. Become. Therefore, the SPECT reading unit 14 may automatically cut out the area having the number of pixels from the selected SPECT image file, or may cause the user to select the area in the same manner as the selection screen in FIG.

さらに、SPECT読み出し部14は、横の画素数が256、縦の画素数が512に満たない場合、それぞれを256画素及び512画素とするべく、所定の方法で補間処理を行う。   Furthermore, when the number of horizontal pixels is less than 256 and the number of vertical pixels is less than 512, the SPECT reading unit 14 performs interpolation processing by a predetermined method so that the number of pixels becomes 256 pixels and 512 pixels, respectively.

図4は、以上の処理により、選択された画像がCT表示領域110とSPECT表示領域120とにそれぞれ表示された状態である。   FIG. 4 shows a state in which the selected image is displayed in the CT display area 110 and the SPECT display area 120 by the above processing.

ここで、スライドバー112は、図3の場合と同様に、複数の断層画像の中から、ユーザがCT表示領域110に表示させる断層画像を選択するために利用される。Ant/Post選択ボタン122は、SPECT表示領域120にAnt画像及びPost画像のいずれを表示させるかの選択を受け付ける。従って、ユーザが、スライドバー112とAnt/Post選択ボタン122を操作することにより、次に説明する重畳画像を生成するための、CT画像とSPECT画像の最適な組み合わせを選択することができる。   Here, as in the case of FIG. 3, the slide bar 112 is used for the user to select a tomographic image to be displayed in the CT display area 110 from a plurality of tomographic images. The Ant / Post selection button 122 accepts selection of whether to display an Ant image or a Post image in the SPECT display area 120. Therefore, by operating the slide bar 112 and the Ant / Post selection button 122, the user can select an optimal combination of a CT image and a SPECT image for generating a superimposed image described below.

ここで、重畳画像を生成する前に、以下に説明するように、ユーザが入力装置7を操作して病変部位の位置合わせを行う。   Here, before generating a superimposed image, as will be described below, the user operates the input device 7 to align the lesion site.

まず、カーソル選択のチェックボックス113にチェックが入れられると、CT表示領域110にラインカーソル115、116が表示され、SPECT表示領域120上にラインカーソル125、126が表示される。ここで、ラインカーソル115、125は横ライン、ラインカーソル116、126は縦ラインである。   First, when a check box 113 for cursor selection is checked, line cursors 115 and 116 are displayed in the CT display area 110, and line cursors 125 and 126 are displayed in the SPECT display area 120. Here, the line cursors 115 and 125 are horizontal lines, and the line cursors 116 and 126 are vertical lines.

ユーザは、入力装置7を用いてCT表示領域110のラインカーソル115及び116を移動させることができる。ラインカーソル115及び116が移動すると、SPECT表示領域120のラインカーソル125及び126が、それぞれ連動して移動する。これにより、横ライン及び縦ラインのそれぞれの交点115A、125Aを移動させることができる。   The user can move the line cursors 115 and 116 in the CT display area 110 using the input device 7. When the line cursors 115 and 116 move, the line cursors 125 and 126 in the SPECT display area 120 move in conjunction with each other. Thereby, each intersection 115A, 125A of a horizontal line and a vertical line can be moved.

ここで、ユーザが、交点115AをCT表示領域110に表示されているCT画像の病変部位に一致するように移動させた場合、SPECT表示領域120のSPECT画像の病変部位と交点125Aとが一致していなければ、これを一致させるように、さらに以下の要領で修正をすることができる。   Here, when the user moves the intersection 115A so as to coincide with the lesion part of the CT image displayed in the CT display area 110, the lesion part of the SPECT image in the SPECT display area 120 coincides with the intersection 125A. If not, you can make further modifications to make them consistent:

すなわち、ユーザが、SPECT表示領域120のSPECT画像における病変部位を特定するように、入力装置7に対する単一の操作(例えば入力装置7がマウスであれば右ボタンのワンクリックなど)で入力する。表示処理部17は、この入力により特定された位置が、交点125Aと一致するようにSPECT画像を移動させる。ここで、さらに微調整が必要なときは、カーソル移動ボタン123により、交点125Aを、その中心に表示された画素数単位で上下左右に移動させることができる。   That is, the user inputs a single operation on the input device 7 (for example, one click of the right button if the input device 7 is a mouse) so as to specify a lesion site in the SPECT image of the SPECT display area 120. The display processing unit 17 moves the SPECT image so that the position specified by this input coincides with the intersection 125A. Here, when further fine adjustment is necessary, the intersection 125A can be moved up, down, left and right by the number of pixels displayed at the center thereof by the cursor movement button 123.

これにより、ユーザは、CT画像上の病変部位を交点115A、SPECT画像上の病変部位を交点125Aに、それぞれ一致させることにより位置合わせを行う。   Accordingly, the user performs alignment by matching the lesion site on the CT image with the intersection 115A and the lesion site on the SPECT image with the intersection 125A.

位置合わせを行われた後にドローボタン132が押されると、交点115Aと交点125Aとが一致するように、CT表示領域110及びSPECT表示領域120に表示されているCT画像及びSPECT画像を重畳させた重畳画像を、重畳表示領域130に表示させる。   When the draw button 132 is pressed after the alignment is performed, the CT image and the SPECT image displayed in the CT display area 110 and the SPECT display area 120 are superimposed so that the intersection point 115A and the intersection point 125A coincide with each other. The superimposed image is displayed in the superimposed display area 130.

図5は、重畳画像が重畳表示領域130に表示された状態を示す。   FIG. 5 shows a state in which the superimposed image is displayed in the superimposed display area 130.

この状態でも、ユーザは所定の操作によりラインカーソル115,125を移動させることが可能である。ラインカーソル115,125を移動させた後、再度ドローボタン132が押されると、ラインカーソル115,125を移動させた後の状態で、交点115A、125Aが合致するように、重畳表示領域130に表示されている重畳画像が修正される。   Even in this state, the user can move the line cursors 115 and 125 by a predetermined operation. When the draw button 132 is pressed again after the line cursors 115 and 125 are moved, the intersections 115A and 125A are displayed in the superimposed display area 130 so that the intersection points 115A and 125A coincide with each other after the line cursors 115 and 125 are moved. The superimposed image being corrected is corrected.

さらに、図5において、ダイナミック表示のチェックボックス134にチェックが入れられた状態でラインカーソル115,125が移動させられると、上記のようにドローボタン132が押されなくても、ラインカーソル115,125の移動が即座に反映されて、重畳表示領域130の画像が更新される。   Further, in FIG. 5, if the line cursors 115 and 125 are moved in a state where the dynamic display check box 134 is checked, the line cursors 115 and 125 can be moved even if the draw button 132 is not pressed as described above. Is immediately reflected, and the image of the superimposed display area 130 is updated.

また、スライドバー135により、CT画像及びSPECT画像の強調レベルの調整が可能である。つまり、スライドバー135右にシフトされるとCT画像が強調され、左にシフトされるとSPECT画像が強調される。   Further, the enhancement level of the CT image and SPECT image can be adjusted by the slide bar 135. That is, the CT image is emphasized when shifted to the right of the slide bar 135, and the SPECT image is emphasized when shifted to the left.

重畳画像が重畳表示領域130に表示されているときに、出力ボタン133が押されると、ユーザの選択に応じて、CT表示領域110、SPECT表示領域120及び重畳表示領域130に表示されている各画像が、プリンタ9により印刷されるか、または、JPEGなどのファイル形式で重畳画像記憶部19に格納される。   When the output button 133 is pressed while the superimposed image is displayed in the superimposed display area 130, each of the CT display area 110, the SPECT display area 120, and the superimposed display area 130 displayed according to the user's selection. The image is printed by the printer 9 or stored in the superimposed image storage unit 19 in a file format such as JPEG.

本実施形態によれば、CT画像などのような形態画像が有する情報、及びSPECT画像のような機能画像が有する情報の両方を兼ね備えた画像を提供することができる。医師に対してこの画像を提供することにより、画像診断の精度向上が期待できる。   According to the present embodiment, it is possible to provide an image having both information possessed by a morphological image such as a CT image and information possessed by a functional image such as a SPECT image. By providing this image to a doctor, it can be expected to improve the accuracy of image diagnosis.

さらに本実施形態に係る画像診断支援装置を医師自らが操作することにより、CT画像及びSPECT画像における病変部位を医師が特定し、これに基づいて重畳画像を生成することができる。この結果、医師の知識と経験に基づく正確な診断を行うことができる。   Furthermore, when the doctor himself / herself operates the diagnostic imaging support apparatus according to the present embodiment, the doctor can specify a lesion site in the CT image and the SPECT image, and a superimposed image can be generated based on this. As a result, accurate diagnosis based on the knowledge and experience of the doctor can be performed.

上述した本発明の実施形態は、本発明の説明のための例示であり、本発明の範囲をそれらの実施形態にのみ限定する趣旨ではない。当業者は、本発明の要旨を逸脱することなしに、他の様々な態様で本発明を実施することができる。   The above-described embodiments of the present invention are examples for explaining the present invention, and are not intended to limit the scope of the present invention only to those embodiments. Those skilled in the art can implement the present invention in various other modes without departing from the gist of the present invention.

例えば、本実施形態では、3次元断層画像のうちの一枚であるCT画像と2次元断層画像であるSPECT画像とを重畳表示させているが、本発明はこれ以外の撮像手段により撮像された画像の組み合わせにも適用可能である。すなわち、3次元断層画像のうちの一枚と2次元断層画像との組み合わせであるCT画像とSPECT以外のRI画像、MRI画像とRI画像(SPECTを含む)、及び3次元断層画像のうちの一枚同士の組み合わせであるCT画像とMRI画像、CT画像とマージドSPECT画像及びMRI画像とマージドSPECT画像などの組み合わせも適用できる。   For example, in the present embodiment, a CT image that is one of three-dimensional tomographic images and a SPECT image that is a two-dimensional tomographic image are superimposed and displayed, but the present invention is captured by other imaging means. It can also be applied to a combination of images. That is, a CT image that is a combination of one of the three-dimensional tomographic images and the two-dimensional tomographic image, an RI image other than SPECT, an MRI image and an RI image (including SPECT), and one of the three-dimensional tomographic images. A combination of a CT image and an MRI image, a CT image and a merged SPECT image, and an MRI image and a merged SPECT image, which are combinations of sheets, can also be applied.

本発明の一実施形態に係る画像診断支援装置の機能構成を示す。1 shows a functional configuration of an image diagnosis support apparatus according to an embodiment of the present invention. 画像表示画面の一例を示す。An example of an image display screen is shown. 領域指定画面の一例を示す。An example of an area designation screen is shown. CT画像とSPECT画像が表示された画像表示画面の一例を示す。An example of an image display screen on which a CT image and a SPECT image are displayed is shown. 重畳画像が表示された画像表示画面の一例を示す。An example of the image display screen on which the superimposed image is displayed is shown.

符号の説明Explanation of symbols

1 画像診断支援装置
10 画像診断支援装置本体
11 CT画像記憶部
12 SPECT画像記憶部
13 CT読み出し部
14 SPECT読み出し部
15,16 バッファ
17 表示処理部
18 画面データ記憶部
19 重畳画像記憶部
100 画像表示画面
110 CT表示領域
120 SPECT表示領域
130 重畳表示領域
DESCRIPTION OF SYMBOLS 1 Image diagnosis assistance apparatus 10 Image diagnosis assistance apparatus main body 11 CT image memory | storage part 12 SPECT image memory | storage part 13 CT reading part 14 SPECT reading part 15, 16 Buffer 17 Display processing part 18 Screen data memory | storage part 19 Superimposed image memory | storage part 100 Image display Screen 110 CT display area 120 SPECT display area 130 Superimposed display area

Claims (8)

第1の撮像手段で被験者を断層撮影して得られた、複数枚の第1の断層画像を含む断層画像データを読み込む手段と、
第2の撮像手段で前記被験者を撮影した、第2の画像の画像データを読み込む手段と、
前記複数枚の第1の断層画像から一枚の第1の断層画像を選択する選択手段と、
前記選択された第1の断層画像と、前記第2の画像とを表示装置に並べて表示させる第1の表示手段と、
前記第1の断層画像上の第1の位置及び前記第2の画像上の第2の位置の選択を受け付ける受付手段と、
前記選択された第1の位置と第2の位置とが合致するように、前記第1の断層画像と前記第2の画像とを重ねて前記表示装置に表示させる第2の表示手段と、を備える画像診断支援装置。
Means for reading tomographic image data including a plurality of first tomographic images obtained by tomographic imaging of the subject with the first imaging means;
Means for reading image data of a second image obtained by photographing the subject with a second imaging means;
Selecting means for selecting one first tomographic image from the plurality of first tomographic images;
First display means for displaying the selected first tomographic image and the second image side by side on a display device;
Receiving means for receiving selection of a first position on the first tomographic image and a second position on the second image;
Second display means for causing the display device to display the first tomographic image and the second image so that the selected first position coincides with the second position. A diagnostic imaging support apparatus.
前記選択を受け付ける手段が、前記第1の位置が選択された後、所定の入力装置に対する単一の入力操作により前記第2の位置の選択を受け付けると、前記第1の表示手段は、第1の断層画像の表示領域での前記第1の位置と、第2の画像の表示領域内での前記第2の位置とが、同じ位置になるように第1の断層画像または第2の画像の表示位置を変更することを特徴とする請求項1記載の画像診断支援装置。   When the means for accepting the selection accepts the selection of the second position by a single input operation to a predetermined input device after the first position is selected, the first display means Of the first tomographic image or the second image such that the first position in the tomographic image display area and the second position in the second image display area are the same position. The image diagnosis support apparatus according to claim 1, wherein the display position is changed. 前記表示装置に表示したときに、前記断層画像及び前記機能画像の前記被験者の表示倍率が一致するように調整する手段をさらに備える請求項1記載の画像診断支援装置。   The image diagnosis support apparatus according to claim 1, further comprising means for adjusting the display magnification of the subject of the tomographic image and the functional image so as to match when displayed on the display device. 前記第1の断層画像は、CT画像またはMRI画像である請求項1記載の画像診断支援装置。   The image diagnosis support apparatus according to claim 1, wherein the first tomographic image is a CT image or an MRI image. 前記第2の画像は、前記被験者を正面及び背面から撮影した、前記被験者の生理機能ないしは代謝情報に基づく機能画像であることを特徴とする請求項1記載の画像診断支援装置。   The image diagnosis support apparatus according to claim 1, wherein the second image is a functional image based on physiological function or metabolic information of the subject taken from the front and back of the subject. 前記第2の画像はRI画像である請求項5記載の画像診断支援装置。   The image diagnosis support apparatus according to claim 5, wherein the second image is an RI image. 第1の撮像手段で被験者を断層撮影して得られた、複数枚の第1の断層画像を含む断層画像データを読み込むステップと、
第2の撮像手段で前記被験者を撮影した、第2の画像の画像データを読み込むステップと、
前記複数枚の第1の断層画像から一枚の第1の断層画像を選択するステップと、
前記選択された第1の断層画像と、前記第2の画像とを表示装置に並べて表示させるステップと、
前記第1の断層画像上の第1の位置及び前記第2の画像上の第2の位置の選択を受け付けるステップと、
前記選択された第1の位置と第2の位置とが合致するように、前記第1の断層画像と前記第2の画像とを重ねて前記表示装置に表示させるステップと、を有する画像表示方法。
Reading tomographic image data including a plurality of first tomographic images obtained by tomographic imaging of the subject with the first imaging means;
Reading image data of a second image obtained by photographing the subject with a second imaging means;
Selecting a first tomographic image from the plurality of first tomographic images;
Displaying the selected first tomographic image and the second image side by side on a display device;
Receiving a selection of a first position on the first tomographic image and a second position on the second image;
An image display method comprising: displaying the first tomographic image and the second image on the display device so that the selected first position and the second position coincide with each other. .
コンピュータに実行されると、
第1の撮像手段で被験者を断層撮影して得られた、複数枚の第1の断層画像を含む断層画像データを読み込むステップと、
第2の撮像手段で前記被験者を撮影した、第2の画像の画像データを読み込むステップと、
前記複数枚の第1の断層画像から一枚の第1の断層画像を選択するステップと、
前記選択された第1の断層画像と、前記第2の画像とを表示装置に並べて表示させるステップと、
前記第1の断層画像上の第1の位置及び前記第2の画像上の第2の位置の選択を受け付けるステップと、
前記選択された第1の位置と第2の位置とが合致するように、前記第1の断層画像と前記第2の画像とを重ねて前記表示装置に表示させるステップと、が行われる画像表示のためのコンピュータプログラム。
When executed on a computer,
Reading tomographic image data including a plurality of first tomographic images obtained by tomographic imaging of the subject with the first imaging means;
Reading image data of a second image obtained by photographing the subject with a second imaging means;
Selecting a first tomographic image from the plurality of first tomographic images;
Displaying the selected first tomographic image and the second image side by side on a display device;
Receiving a selection of a first position on the first tomographic image and a second position on the second image;
And displaying the first tomographic image and the second image on the display device so that the selected first position and the second position coincide with each other. Computer program for.
JP2005332899A 2005-11-17 2005-11-17 Image diagnosis support apparatus and image display method Active JP4794993B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005332899A JP4794993B2 (en) 2005-11-17 2005-11-17 Image diagnosis support apparatus and image display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005332899A JP4794993B2 (en) 2005-11-17 2005-11-17 Image diagnosis support apparatus and image display method

Publications (2)

Publication Number Publication Date
JP2007135828A true JP2007135828A (en) 2007-06-07
JP4794993B2 JP4794993B2 (en) 2011-10-19

Family

ID=38199395

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005332899A Active JP4794993B2 (en) 2005-11-17 2005-11-17 Image diagnosis support apparatus and image display method

Country Status (1)

Country Link
JP (1) JP4794993B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011123045A (en) * 2009-11-12 2011-06-23 Nippon Medical School Image display device, image display program, and image diagnostic apparatus
CN101366634B (en) * 2007-08-17 2011-07-06 上海西门子医疗器械有限公司 Medical image display process
JP2014171656A (en) * 2013-03-08 2014-09-22 Toshiba Corp Medical image analysis result display device
JP2016106781A (en) * 2014-12-04 2016-06-20 キヤノン株式会社 Image processing system, and control method and program for image processing system
JP2016162117A (en) * 2015-02-27 2016-09-05 株式会社吉田製作所 Cursor control method, cursor control program, scroll control method, scroll control program, cursor display system, and medical device

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001291088A (en) * 2000-04-07 2001-10-19 Ge Yokogawa Medical Systems Ltd Medical image display device
JP2002065613A (en) * 2000-08-29 2002-03-05 Fuji Photo Film Co Ltd Method and system for displaying image
WO2004089218A1 (en) * 2003-04-04 2004-10-21 Hitachi Medical Corporation Function image display method and device
JP2005106507A (en) * 2003-09-29 2005-04-21 Hitachi Ltd Image processing method
JP2005518916A (en) * 2002-03-04 2005-06-30 シーメンス コーポレイト リサーチ インコーポレイテツド System GUI for object correspondence identification and synchronized display in CT volume image sets
WO2005059831A1 (en) * 2003-12-11 2005-06-30 Philips Intellectual Property & Standards Gmbh Elastic image registration

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001291088A (en) * 2000-04-07 2001-10-19 Ge Yokogawa Medical Systems Ltd Medical image display device
JP2002065613A (en) * 2000-08-29 2002-03-05 Fuji Photo Film Co Ltd Method and system for displaying image
JP2005518916A (en) * 2002-03-04 2005-06-30 シーメンス コーポレイト リサーチ インコーポレイテツド System GUI for object correspondence identification and synchronized display in CT volume image sets
WO2004089218A1 (en) * 2003-04-04 2004-10-21 Hitachi Medical Corporation Function image display method and device
JP2005106507A (en) * 2003-09-29 2005-04-21 Hitachi Ltd Image processing method
WO2005059831A1 (en) * 2003-12-11 2005-06-30 Philips Intellectual Property & Standards Gmbh Elastic image registration
JP2007516744A (en) * 2003-12-11 2007-06-28 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ Elastic image alignment

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101366634B (en) * 2007-08-17 2011-07-06 上海西门子医疗器械有限公司 Medical image display process
JP2011123045A (en) * 2009-11-12 2011-06-23 Nippon Medical School Image display device, image display program, and image diagnostic apparatus
JP2014171656A (en) * 2013-03-08 2014-09-22 Toshiba Corp Medical image analysis result display device
JP2016106781A (en) * 2014-12-04 2016-06-20 キヤノン株式会社 Image processing system, and control method and program for image processing system
JP2016162117A (en) * 2015-02-27 2016-09-05 株式会社吉田製作所 Cursor control method, cursor control program, scroll control method, scroll control program, cursor display system, and medical device

Also Published As

Publication number Publication date
JP4794993B2 (en) 2011-10-19

Similar Documents

Publication Publication Date Title
JP4820680B2 (en) Medical image display device
JP6208731B2 (en) System and method for generating 2D images from tomosynthesis data sets
JP5775244B2 (en) System and method for 3D graphical prescription of medical imaging volume
EP1336376B1 (en) Image processing device and image processing method
US7796835B2 (en) Computer readable medium for image processing and image processing method
US20100171682A1 (en) Medical image display apparatus and computer readable medium
JP2007117739A (en) Method and device for supporting image diagnosis
JP6173783B2 (en) Medical image processing apparatus, magnetic resonance imaging apparatus, and medical image processing program
WO2006107801A2 (en) System and method for reducing artifacts in motion corrected dynamic image sequences
JP2008188177A (en) Image processor
JP2004230001A (en) Medical image processor and medical image processing method
JP4794993B2 (en) Image diagnosis support apparatus and image display method
JP2008043435A (en) Medical image processor and medical image processing method
JP2010104771A (en) Radiation image diagnosing system
JP5622546B2 (en) Medical image display device, medical image photographing device, and medical image display program
JP5398791B2 (en) Medical image display device
JP2016202329A (en) Exposure dose calculation device, exposure dose management system, and control method and program thereof
JP2007072649A (en) Interpretation report creation device
JP4595594B2 (en) Image processing apparatus and program
JP4661209B2 (en) Medical image output system
JP2010029283A (en) Program, portable storage medium, and information processor
US7684598B2 (en) Method and apparatus for the loading and postprocessing of digital three-dimensional data
JP2007007307A (en) Image-processing method and medical image-processing system
JP2007125102A (en) Medical image display device and medical image diagnostic apparatus
JP2007275295A (en) Method and device of displaying mamma image

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20081105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110517

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110630

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110726

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110727

R150 Certificate of patent or registration of utility model

Ref document number: 4794993

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140805

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250