CN106999131A - 用于生成患者的图像的成像设备和方法 - Google Patents
用于生成患者的图像的成像设备和方法 Download PDFInfo
- Publication number
- CN106999131A CN106999131A CN201580064882.0A CN201580064882A CN106999131A CN 106999131 A CN106999131 A CN 106999131A CN 201580064882 A CN201580064882 A CN 201580064882A CN 106999131 A CN106999131 A CN 106999131A
- Authority
- CN
- China
- Prior art keywords
- image information
- patient
- image
- imaging device
- wave length
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 42
- 238000000034 method Methods 0.000 title claims description 19
- 238000001429 visible spectrum Methods 0.000 claims abstract description 7
- 210000004204 blood vessel Anatomy 0.000 claims description 15
- 238000002329 infrared spectrum Methods 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 4
- 230000033001 locomotion Effects 0.000 claims description 3
- 230000004927 fusion Effects 0.000 claims description 2
- 238000001228 spectrum Methods 0.000 description 13
- 238000010586 diagram Methods 0.000 description 9
- 238000012545 processing Methods 0.000 description 4
- 238000000701 chemical imaging Methods 0.000 description 3
- 238000002059 diagnostic imaging Methods 0.000 description 3
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 230000002349 favourable effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 206010028980 Neoplasm Diseases 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 239000008280 blood Substances 0.000 description 1
- 210000004369 blood Anatomy 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000000875 corresponding effect Effects 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- NJPPVKZQTLUDBO-UHFFFAOYSA-N novaluron Chemical compound C1=C(Cl)C(OC(F)(F)C(OC(F)(F)F)F)=CC=C1NC(=O)NC(=O)C1=C(F)C=CC=C1F NJPPVKZQTLUDBO-UHFFFAOYSA-N 0.000 description 1
- 230000009017 pursuit movement Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000007430 reference method Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0033—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room
- A61B5/0035—Features or image-related aspects of imaging apparatus classified in A61B5/00, e.g. for MRI, optical tomography or impedance tomography apparatus; arrangements of imaging apparatus in a room adapted for acquisition of images from more than one imaging mode, e.g. combining MRI and optical tomography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
- A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
- A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
- A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/44—Constructional features of apparatus for radiation diagnosis
- A61B6/4429—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units
- A61B6/4435—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure
- A61B6/4441—Constructional features of apparatus for radiation diagnosis related to the mounting of source units and detector units the source unit and the detector unit being coupled by a rigid structure the rigid structure being a C-arm or U-arm
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5235—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from the same or different ionising radiation imaging techniques, e.g. PET and CT
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B6/00—Apparatus or devices for radiation diagnosis; Apparatus or devices for radiation diagnosis combined with radiation therapy equipment
- A61B6/52—Devices using data or image processing specially adapted for radiation diagnosis
- A61B6/5211—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data
- A61B6/5229—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image
- A61B6/5247—Devices using data or image processing specially adapted for radiation diagnosis involving processing of medical diagnostic data combining image data of a patient, e.g. combining a functional image with an anatomical image combining images from an ionising-radiation diagnostic technique and a non-ionising radiation diagnostic technique, e.g. X-ray and ultrasound
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Public Health (AREA)
- Physics & Mathematics (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Surgery (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Computer Vision & Pattern Recognition (AREA)
- High Energy & Nuclear Physics (AREA)
- Optics & Photonics (AREA)
- Physiology (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Dentistry (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Abstract
本发明涉及一种用于生成患者(P)的图像的成像设备(100),所述成像系统(100)包括:相机装置(10),其被配置为使用第一波长带来提供患者(P)的第一图像信息(I1),并且其被配置为使用第二波长带来提供患者(P)的第二图像信息(I2)。所述第一波长带和所述第二组波长带是不同的;并且所述第一图像信息和/或第二图像信息包括患者(P)的界标(M)的界标信息。通过在可见谱之外的至少一个波长带导出界标信息。另外,提供数据处理器(30),其被配置为基于所述第一图像信息(I1)和所述第二图像信息(I2)生成融合图像(IE),并且其被配置为探测所述融合图像(IE)中的所述界标(M)。
Description
技术领域
本发明涉及使用患者的医学成像和关于界标的处理信息的图像处理。具体地,本发明涉及一种用于生成患者的图像的成像设备和方法。
背景技术
图像引导微创治疗正在多数介入和微创治疗中获得其动力。该途径的主要前提是:对患者的创伤小、快速的恢复时间、更少的血液流失和改善临床结果。当执行微创介入治疗时为了提供增强的图像引导,成像和导航必须被硬件和软件地无缝结合和集成。
发明内容
需要改善用于对患者进行成像和跟踪的成像装置和方法。
这些需要可以通过独立权利要求的主题来满足。其他范例性实施例从从属权利要求和以下描述中是显而易见的。
本发明的第一方面涉及一种用于生成患者的图像的成像设备。所述成像设备包括相机装置,其被配置为使用第一波长带来提供患者的第一图像信息,并且其被配置为使用第二波长带来提供患者的第二图像信息,其中,第一波长带和第二波长带是不同的。第一图像信息和/或第二图像信息包括作为自然标记的患者的血管或皮肤中的其他浅层组织结构的界标信息。另外,所述设备包括数据处理器,其被配置为基于第一图像信息和第二图像信息来生成示出对比度在预定义阈值以上的自然标记的融合图像。数据处理器还被配置为探测融合图像中的自然标记。
在范例中,数据处理器被配置为光学地解析融合图像中的界标。
本发明有利地允许通过相机装置以谱解析自然位置标记,其标记例如被呈现在患者的皮肤上,但是其通过RGB相机可以是不可见的,即,以谱解析。
例如,可以提供改进的成像设备,其允许增强的患者跟踪,优选地不使用人工标记,即,使用已经存在但可见性差的自然位置标记或界标。
例如,提供一种医学成像系统,其可以被用于介入流程,并且其使用被集成到探测器外壳的相机用于增强的图像引导。
本发明基于由于皮肤组织的不足的对比度分辨率以及在患者表面(即皮肤)本身上的不同解剖标记的缺乏,在根本上需要标记的概念。另一方面,血管或皮肤中的其他浅层组织结构能够是自然解剖标记的良好候选,但是血管或皮肤中的其他浅层组织结构使用可见谱的正规光学相机是不完全可见的。
根据本发明的成像设备/成像系统以及方法通过组合来自不同波长带的图像数据来提供使用血管或其他浅层组织结构作为自然标记的选项。在范例中,第一波长带和第二波长带被选择以便提供针对融合图像中的自然标记的相对高的对比度。优选地,波长带包含在可见范围内的一个带以及在不可见范围的一个带,例如红外或紫外。根据来自每个带的两个图像可以创建融合图像,其示出了高对比度的血管或皮肤中的其他浅层组织结构。图像融合优选地包括部分减法或其他数据操作。
例如,根据在对比阈值-对比血管图像以上方面的高-高,即来自不同观察位置的两个图像,探测特征点,根据所述特征点来创建解剖组织结构或甚至整个患者的三维模型。通过本发明能够精确地跟踪在三维模型内的组织结构的位移,并且时间相关模型可以精确地表示患者自身的任何位移。
本发明有利地允许通过皮肤的图像获得血管的高对比度图像,其被记录在至少两个波长带中,可以以包括从第二图像部分地减去第一图像的步骤的方式根据两个被记录的图像来创建融合图像。可以实时执行减法。
根据本发明的又一第二方面,医学成像系统包括根据第一方面的成像设备或如提供的第一方面的任何实施形式。所述医学成像系统还包括用于显示融合图像的显示设备,以及用于提供患者的X-射线图像信息的X-射线设备。数据处理器被配置为基于第一图像信息和第二图像信息以及X-射线图像信息来生成融合图像。
根据本发明的又一第三方面,提供了一种用于生成患者的图像的方法。所述方法包括以下步骤:
a)由相机装置使用第一波长带来提供患者的第一图像信息;
b)由相机装置使用第二波长带来提供患者的第二图像信息;其中,所述第一波长带和所述第二波长带是不同的;并且其中,第一图像信息和/或第二图像信息包括作为自然标记(M)的患者(P)的血管或皮肤中的其他浅层组织结构的界标信息;以及
c)由数据处理器基于第一图像信息和第二图像信息来生成示出对比度在预定义阈值以上的自然标记的融合图像,并且探测融合图像中的自然标记。
如以下提出的通过本发明的从属权利要求表示本发明的优点和实施例。
根据本发明的范例性实施例,所述相机装置被配置为记录在关于患者的第一位置中的第一图像信息,并且记录在关于患者的第二位置中的第二图像信息。这有利地允许改进的三角测量,并且因此改进的三维建模或患者跟踪。来自两个不同位置的图像信息有利地实现基于图像信息和其中识别的界标而获得的深度和三维(3D)结构的确定。
根据本发明的又一范例性实施例,所述相机装置包括相机设备,其被配置为提供第一图像信息和第二图像信息两者。这有利地允许自然标记的(例如皮肤下面的血管)改进的成像和光学解析。相机设备也可以被称为主相机或集成相机或双图像相机。
根据本发明的又一范例性实施例,所述相机设备被配置为沿着包括第一位置和第二位置的预定义轨道被移动。这有利地允许使用单相机设备来提供三维空间内的组织结构的位移的三角测量或三维建模的信息。
根据本发明的又一范例性实施例,所述相机设备被配置为使用在作为第一波长带的红外谱内的波长带来提供患者的第一图像信息。这有利地允许自然位置标记的改进的谱解析。
根据本发明的又一范例性实施例,相机装置包括第一相机设备,其被配置为提供第一图像信息,以及第二相机设备,其被配置为提供第二图像信息;所述第一相机设备被配置为记录在第一位置中的第一图像信息,以及第二相机设备被配置为记录在第二位置中的第二图像信息。这有利地允许建立患者的改进的三维模型或患者的结构的三维模型。
根据本发明的又一范例性实施例,第一相机设备被配置为使用在作为第一波长带的红外谱内的波长带来提供患者的第一图像信息。这有利地允许界标的改进的谱解析。
根据本发明的又一范例性实施例,第二相机设备被配置为使用在作为第二波长带的红外谱内的波长带来提供患者的第二图像信息。这提供了界标的改进探测。
根据本发明的又一范例性实施例,数据处理器被配置为生成通过对界标进行光学解析而识别的结构的三维模型。
根据本发明的又一范例性实施例,成像设备可以包括用于显示融合图像的显示设备。这改进了通过图像信息处理执行的数据处理的结果的数据通信。
根据本发明的又一范例性实施例,成像设备被配置为基于由相机装置的连续记录和由数据处理器的融合图像的连续生成来探测患者的运动,导致融合视频数据流。这有利地允许改进的患者跟踪,即,患者的任何移动的跟踪。
执行本发明的方法的计算机程序可以被存储在计算机可读介质中。计算机可读介质可以是软盘、硬盘、CD、DVD、USB(通用串行总线)存储设备、RAM(随机存取存储器)、ROM(只读存储器)和EPROM(可编程只读存储器)。计算机可读介质也可以是数据通信网络,例如因特网,其允许下载程序代码。
本文描述的方法、系统和设备可以被实施为在数字信号处理器(DSP)中,在微控制器或在任何其他端处理器中的软件,或在专用集成电路(ASIC)内的医疗设备的硬件电路。
本发明能够被实施在数字电子电路中,或在计算机硬件、固件、软件中或其组合中,例如,在医学成像设备的可用硬件中或在专用于处理本文描述的方法的新硬件中。
参考下文描述的实施例,本发明的这些和其他方面将显而易见并得以阐述。
附图说明
参考以下示意图将更清晰地理解本发明的更完整理解和其优点,其未按比例绘制,其中:
图1示出了根据本发明的范例性实施例的用于生成患者的图像的成像设备的示意图;
图2示出了根据本发明的范例性实施例的用于生成患者的图像的方法的流程示意图;
图3示出了根据本发明的范例性实施例的医学成像系统的示意图;
图4示出了根据本发明的范例性实施例的医学成像系统的示意图;
图5示出了用于解释本发明的生成融合图像的处理的示意图;
图6示出了用于解释本发明的由相机设备记录的图像的示意图;
图7示出了用于解释本发明的由第二相机设备记录的图像;以及
图8示出了根据本发明的范例性实施的如由医学成像系统生成的图像。
具体实施方式
附图中的图示仅仅是图示性的,并且不旨在提供比例关系或尺寸信息。在不同绘图或附图中,相似或相同的元件被提供具有相同的参考数字。一般地,相同的部分、单元、实体或步骤被提供具有在描述中的相同参考符号。
图1示出了根据本发明的范例性实施例的用于生成患者的图像的成像设备100。图1示出了包括相机装置10和数据处理器30的成像设备100。
成像设备100还可以包括X-射线设备40,其用于提供患者P的X-射线图像I3。成像系统100还可以包括显示设备50,其用于显示融合图像IE。
相机装置10可以被配置为使用第一波长带来提供患者P的第一图像信息I1,并且使用第二波长带来提供患者P的第二图像信息I2。第一波长带和第二组波长带是不同的,并且第一图像信息和/或第二图像信息包括患者P的界标M的界标信息。具体地,至少一个波长带可以在可见谱之外,并且更具体地在红外谱内。
根据本发明的范例性实施例,相机装置10可以包括一个相机设备10-0,其被配置为提供第一图像信息I1和第二图像信息I2两者。
根据本发明的范例性实施例,如例如关于图4随后示出和描述的,相机装置10可以包括第一相机设备10-1,其被配置为提供第一图像信息I1,以及第二相机设备10-2,其被配置为提供第二图像信息I2。第一相机设备10-1被配置为记录在第一位置中的第一图像信息I1,并且第二相机设备10-2被配置为记录在第二位置中的第二图像信息I2。
相机装置10的第一波长带和/或第二波长带可以是包括例如以下的若干波长带的可见或不可见光谱:
(1)蓝色:0.450-0.520μm(微米)
(2)绿色:0.515-0.600μm
(3)红色:0.60-0.69μm
(4)可见:0.45-0.7μm
(5)红外线:0.7-1.0μm
(6)近红外线:1.0-3.0μm
(7)中红外线:3.0-50.0μm
(8)远红外线:50.0-1000.0μm
在不可见光谱中,血管可以更好地进行光学解析,即在预定义阈值以上的对比度,其允许更精确地跟踪位置标记。
根据本发明的范例性实施例,通过三角测量和使用两个不同的相机位置,可以改进结构的三维模型或整个患者的三维模型的生成。
根据本发明的范例性实施例,数据处理器设备30可以被配置为使用由融合图像IE中探测到的界标M识别的结构的三维模型、基于第一图像信息I1和第二图像信息I2来生成融合图像IE。
对用作位置标记的界标M的探测和谱解析允许结构的三维定位,其与位置标记M有关。换言之,如果记录时间相关图像序列,位置标记中的每个被分配给允许跟踪运动的某结构部分,或允许在三维空间内定位分配的结构。
根据本发明的范例性实施例,相机设备10-0、10-1、10-2可以是高谱或多谱滤片相机,其用于利用400到1000nm(纳米)或从1000到1700nm或从500到1700nm的谱范围进行高谱或多谱成像,具有各种(例如6或8或甚至更多)可互换滤波器,具有1392x1040像素分辨率或在光栅图像中的物理点的电荷耦合设备CCD,或例如具有砷化铟镓(InGaAs)或具有640x512像素分辨率的任何其他半导体,或具有任何其他像素分辨率的传感器。
如本发明使用的术语“高谱成像”是指收集和处理来自在可见范围外延伸的电磁谱的范围上的信息。
如本发明使用的术语“多谱成像”是指获取在电磁谱上在体频率处的图像数据。波长可以通过滤波器或通过对具体波长敏感的仪器的使用来分离,即,使用多谱,其是术语“多谱成像”的原因。这可以包括来自在可见光范围之外的频率的光,诸如红外,然后其也可以通过前述术语“高谱成像”的术语“高”来定义。
谱-是其多谱或高谱-成像可以允许从图像中提取额外的信息,尤其人类眼睛不能够用其针对红、绿和蓝的接收器捕捉的信息。
根据本发明的范例性实施例,相机装置10可以具有10fps(每秒帧数)或16fps或20fps或任何其他的帧率,例如更快的帧率。
根据本发明的范例性实施例,成像系统100还可以包括X-射线设备40。X-射线设备40可以被用于以患者P的X-射线图像形式记录X-射线图像信息I3。当生成融合图像IE或当生成结构的三维模型时,还可以使用X-射线图像信息I3。
根据本发明的范例性实施例,成像系统100还可以包括被配置为显示融合图像IE的显示设备50。
图2示出了根据本发明的范例性实施例的用于生成患者的图像的方法的流程示意图。用于生成患者的图像的方法可以包括以下步骤:
作为所述方法的第一步骤,执行由相机装置10使用第一波长带来提供S1所述患者P的第一图像信息I1。
作为所述方法的第二步骤,执行由相机装置10使用第二波长带来提供S2所述患者P的第二图像信息I2;其中,所述第一波长带和第二波长带是不同的;并且其中,所述第一图像信息和/或第二图像信息包括患者P的界标M的界标信息,其中,通过在可见谱之外的至少一个波长带来导出界标信息。
作为所述方法的第三步骤,执行由数据处理器30基于第一图像信息I1和第二图像信息I2来生成S3融合图像IE,并且执行探测融合图像IE中的界标M。
图3示意性地示出了包括根据本发明的范例性实施例的用于提供患者的内部的X-射线图像的X-射线设备104的医学成像设备400。见图3,X-射线设备104具有通过轮108支撑的基架106、可移动C-臂110和用于支撑患者114的手术台112(也被称为参考P),在该具体范例中其患者114是人类。
C-臂110关于主轴116可旋转,其主轴116具有对应于手术台112的主要取向的方向,并且C-臂110关于第二轴118可旋转,其第二轴118垂直于主轴116并且平行于手术台112。优选为矩形和平板探测器的X-射线源120和X-射线探测器122被安装在C-臂110上,使得X-射线源和X-射线探测器驻留在关于第二轴118的彼此的对侧。
被提供为第一相机设备10-1用于提供患者的外部的相机图像流的第一相机124被安装在X-射线探测器122旁边的C-臂110上。在该具体范例中,第一相机124可以对可见谱中的波长敏感。第一相机124也可以被提供为获取不同时间点处的图像流或单一图像。
被提供为第二相机设备10-2用于提供患者的外部的相机图像流的第二相机126被安装在X-射线探测器122旁边的C-臂110上。在该具体范例中,第二相机126可以对可见谱中的波长敏感。第二相机126也可以被提供为获取不同时间点处的图像流或单一图像。
参考图3,数据处理器128、30基于由可移动标记提供的空间相关性将X-射线图像和相机图像流绘制成复合图像流。复合图像流在几何重叠意义上显示患者的内部和患者的外部,以及可移动标记、手术场、肿瘤和患者的身体轮廓。
图4示出了根据本发明的又一范例性实施例的医学成像系统200的示意图。
医学成像系统200可以包括成像设备100的范例、显示设备50的范例,以及X-射线设备40的范例。显示设备50可以被配置为显示融合图像IE。X-射线设备40可以被配置为提供患者P的X-射线图像信息I3。所述数据处理器30可以被配置为基于第一图像信息I1和第二图像信息I2以及X-射线图像信息I3来生成融合图像IE。相机装置10可以包括第一相机设备10-1,其被配置为提供第一图像信息I1,以及第二相机设备10-2,其被配置为提供第二图像信息I2。
根据本发明的范例性实施例,成像系统200可以通过将光学相机与高谱相机组合来提供使用血管作为自然标记的选项。优选地,多谱或高谱相机的波长带包含可见光范围中的一个带以及不可见光范围中的一个带。根据来自每个带的两个图像可以创建融合图像,其示出了高对比度的血管。例如,图像融合可以包括部分减法。
图5示出了用于进一步解释本发明的生成融合图像的处理的示意图。
融合图像IE可以使用识别的结构(例如血管或皮肤中的其他浅层组织结构)的三维模型,基于合并第一图像信息I1和第二图像信息I2。如由数据处理器30执行的,解析的界标M可以用作位置标记用于进一步处理。
作为用于生成融合图像IE的又一基础,数据处理器30也可以使用X-射线图像信息I3。
图6示出了用于解释本发明的又一图像。
例如由第一相机设备10-1可以记录图像。图像可以获取患者P的手。为了记录图像,可以使用具有10nm带宽的838nm滤波器。
图7示出了例如由第二相机设备10-2记录的在具有10nm带宽的482nm滤波器上采集的患者P的手的图像。系数0.7指示滤波器衰减0.7系数的强度。
备选地,代替两个相机设备,可以使用单一多谱相机设备10-0。在成像期间,例如,可以以交替的方式采用例如838nm和482nm的滤波器。
图8示出了使用融合滤波器的图像,其是如在图6和7中描述的图像的组合。如在图8的图像中示出的组合可以是,例如,结合如在图6和7中描述的两个图像执行的部分减法或任何其他类型的计算。
在又一实施例中,可以采用执行在多于两个波长的成像的多谱相机。例如,可以添加通过680nm附近波长的光的第三滤波器。在该实施例中,例如,融合图像基于在不同波长带采集的图像的加权组合。权重优选地被调整以便显现出根据本发明足够用于图像跟踪的对比度水平的感兴趣的自然标记。
必须注意,参考不同主题描述本发明的实施例。尤其,参考方法类型权利要求描述一些实施例,而参考设备类型权利要求描述其他实施例。
然而,本领域技术人员将从以上和前述描述中获悉,除非另作说明,除属于一个类型主题的特征的任意组合之外,涉及不同主题的特征之间的任意组合也被认为是这个申请内的公开。然而,能够组合所有特征,提供比特征的简单总和更多的协同效果。
尽管已经在附图和前述描述中详细图示并描述了本发明,这样的图示和描述被认为是图示性或范例性的而非限制性的;本发明不限于所公开的实施例。
通过研究附图、说明书和权利要求书,本领域技术人员在实践所主张的本发明时,能够理解并实现对所公开实施例的其他变型。
在权利要求中,“包括”一词不排除其他要素或步骤,并且不定冠词“一”或“一个”不排除复数。单个处理器或控制器或其他单元可以实现在权利要求中列举的若干项的功能。
在互不相同的从属权利要求中记载的特定措施并不表示不能有利地使用这些措施的组合。在权利要求中的任何附图标记不应被解释为对范围的限制。
Claims (15)
1.一种用于生成患者(P)的图像的成像设备(100),所述成像系统(100)包括:
-相机装置(10),其被配置为使用第一波长带来提供所述患者(P)的第一图像信息(I1),以及其被配置为使用第二波长带来提供所述患者(P)的第二图像信息(I2);其中,所述第一波长带和所述第二波长带是不同的;其中,所述第一图像信息和/或第二图像信息包括作为自然标记(M)的患者(P)的血管或皮肤中的其他浅层组织结构的界标信息;以及
-数据处理器(30),其被配置为基于所述第一图像信息(I1)和所述第二图像信息(I2)生成示出对比度在预定义阈值以上的所述自然标记的融合图像(IE),并且其被配置为探测在所述融合图像(IE)中的所述自然标记(M)。
2.根据权利要求1所述的成像设备(100),
其中,所述相机装置(10)被配置为记录在关于所述患者(P)的第一位置中的所述第一图像信息(I1),并且记录在关于所述患者(P)的第二位置中的所述第二图像信息(I2)。
3.根据权利要求1或2所述的成像设备(100),
其中,所述相机装置(10)包括相机设备(10-0),其被配置为提供所述第一图像信息(I1)和所述第二图像信息(I2)两者。
4.根据权利要求2和3所述的成像设备(100),
其中,所述相机设备(10-0)被配置为沿着包括所述第一位置和所述第二位置的预定义轨道被移动。
5.根据权利要求3所述的成像设备(100),
其中,所述相机设备(10-0)包括多谱相机,其被配置为使用红外谱内的波长带作为所述第一波长带来提供所述患者(P)的所述第一图像信息(I1),并且使用可见谱内的波长带作为所述第二波长带来提供所述患者(P)的所述第二图像信息(I2)。
6.根据权利要求2所述的成像设备(100),
其中,所述相机装置(10)包括:第一相机设备(10-1),其被配置为提供所述第一图像信息(I1);以及,第二相机设备(10-2),其被配置为提供所述第二图像信息(I2);并且
其中,所述第一相机设备(10-1)被配置为记录所述第一位置中的所述第一图像信息(I1),并且所述第二相机设备(10-2)被配置为记录所述第二位置中的所述第二图像信息(I2)。
7.根据权利要求6所述的成像设备(100),
其中,所述第一相机设备(10-1)被配置为使用红外谱内的波长带作为所述第一波长带来提供所述患者(P)的所述第一图像信息(I1)。
8.根据权利要求6或7所述的成像设备(100),
其中,所述第二相机设备(10-2)被配置为使用可见谱内的波长带作为所述第二波长带来提供所述患者(P)的所述第二图像信息(I2)。
9.根据前述权利要求中的一项所述的成像设备(100),
其中,所述数据处理器(30)被配置为根据所述自然标记(M)生成结构的三维模型。
10.根据前述权利要求中的一项所述的成像设备(100),
还包括显示设备(50),其用于显示所述融合图像(IE)。
11.根据前述权利要求中的一项所述的成像设备(100),
其中,所述成像设备(100)被配置为基于由所述相机装置(10)的连续记录和由所述数据处理器(30)的所述融合图像(IE)的连续生成来探测所述患者(P)的运动,形成融合视频数据流。
12.一种医学成像系统(200),包括:
-根据前述权利要求中的一项所述的成像设备(100);
-显示设备(50),其用于显示所述融合图像(IE);以及
-X-射线设备(40),其用于提供所述患者(P)的X-射线图像信息(I3);
其中,所述数据处理器(30)被配置为基于所述第一图像信息(I1)和所述第二图像信息(I2)以及所述X-射线图像信息(I3)来生成所述融合图像(IE)。
13.一种用于生成患者(P)的图像的方法,所述方法包括以下步骤:
a)由相机装置(10)使用第一波长带来提供(S1)所述患者(P)的第一图像信息(I1);
b)由所述相机装置(10)使用第二波长带来提供(S2)所述患者(P)的第二图像信息(I2);
其中,所述第一波长带和所述第二波长带是不同的;其中,所述第一图像信息和/或所述第二图像信息包括作为自然标记(M)的患者(P)的血管或皮肤中的其他浅层组织结构的界标信息;以及
c)由数据处理器(30)基于所述第一图像信息(I1)和所述第二图像信息(I2)来生成(S3)示出对比度在预定义阈值以上的所述自然标记的融合图像(IE),并且探测在所述融合图像(IE)中的所述自然标记(M)。
14.一种用于控制根据权利要求1至12中的一项所述的装置的计算机程序单元,当由处理单元执行所述计算机程序单元时,所述计算机程序单元适于执行根据权利要求13所述的方法的步骤。
15.一种计算机可读介质,已经在其上存储根据权利要求14所述的程序单元。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14195180 | 2014-11-27 | ||
EP14195180.6 | 2014-11-27 | ||
PCT/EP2015/077707 WO2016083483A1 (en) | 2014-11-27 | 2015-11-26 | Imaging device and method for generating an image of a patient |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106999131A true CN106999131A (zh) | 2017-08-01 |
Family
ID=52103029
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580064882.0A Pending CN106999131A (zh) | 2014-11-27 | 2015-11-26 | 用于生成患者的图像的成像设备和方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11033188B2 (zh) |
EP (1) | EP3223685A1 (zh) |
JP (1) | JP2018501839A (zh) |
CN (1) | CN106999131A (zh) |
WO (1) | WO2016083483A1 (zh) |
Families Citing this family (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SG11201809829UA (en) | 2016-05-13 | 2018-12-28 | Smith & Nephew | Sensor enabled wound monitoring and therapy apparatus |
CN109564675B (zh) * | 2016-07-25 | 2023-12-19 | 日本电气株式会社 | 信息处理设备、信息处理方法以及记录介质 |
WO2018162732A1 (en) | 2017-03-09 | 2018-09-13 | Smith & Nephew Plc | Apparatus and method for imaging blood in a target region of tissue |
US11690570B2 (en) | 2017-03-09 | 2023-07-04 | Smith & Nephew Plc | Wound dressing, patch member and method of sensing one or more wound parameters |
SG11201909449TA (en) | 2017-04-11 | 2019-11-28 | Smith & Nephew | Component positioning and stress relief for sensor enabled wound dressings |
WO2018210693A1 (en) | 2017-05-15 | 2018-11-22 | Smith & Nephew Plc | Negative pressure wound therapy system using eulerian video magnification |
WO2018210692A1 (en) | 2017-05-15 | 2018-11-22 | Smith & Nephew Plc | Wound analysis device and method |
EP3641627B1 (en) | 2017-06-23 | 2023-05-31 | Smith & Nephew PLC | Positioning of sensors for sensor enabled wound monitoring or therapy |
GB201804502D0 (en) | 2018-03-21 | 2018-05-02 | Smith & Nephew | Biocompatible encapsulation and component stress relief for sensor enabled negative pressure wound therapy dressings |
GB201809007D0 (en) | 2018-06-01 | 2018-07-18 | Smith & Nephew | Restriction of sensor-monitored region for sensor-enabled wound dressings |
EP3664859A2 (en) | 2017-08-10 | 2020-06-17 | Smith & Nephew plc | Positioning of sensors for sensor enabled wound monitoring or therapy |
GB201718870D0 (en) | 2017-11-15 | 2017-12-27 | Smith & Nephew Inc | Sensor enabled wound therapy dressings and systems |
GB201804971D0 (en) | 2018-03-28 | 2018-05-09 | Smith & Nephew | Electrostatic discharge protection for sensors in wound therapy |
WO2019048624A1 (en) | 2017-09-10 | 2019-03-14 | Smith & Nephew Plc | ENCAPSULATION INSPECTION SYSTEMS AND METHODS AND COMPONENTS IN SENSOR EQUIPMENT DRESSINGS |
GB201718859D0 (en) | 2017-11-15 | 2017-12-27 | Smith & Nephew | Sensor positioning for sensor enabled wound therapy dressings and systems |
JP7282079B2 (ja) | 2017-09-27 | 2023-05-26 | スミス アンド ネフュー ピーエルシー | センサが使用可能な陰圧創傷監視および療法装置のph感知 |
US11839464B2 (en) | 2017-09-28 | 2023-12-12 | Smith & Nephew, Plc | Neurostimulation and monitoring using sensor enabled wound monitoring and therapy apparatus |
US11559438B2 (en) | 2017-11-15 | 2023-01-24 | Smith & Nephew Plc | Integrated sensor enabled wound monitoring and/or therapy dressings and systems |
GB2592508B (en) | 2018-09-12 | 2022-08-31 | Smith & Nephew | Device, apparatus and method of determining skin perfusion pressure |
GB201820927D0 (en) | 2018-12-21 | 2019-02-06 | Smith & Nephew | Wound therapy systems and methods with supercapacitors |
WO2020187851A1 (en) | 2019-03-18 | 2020-09-24 | Smith & Nephew Plc | Design rules for sensor integrated substrates |
GB201914443D0 (en) | 2019-10-07 | 2019-11-20 | Smith & Nephew | Sensor enabled negative pressure wound monitoring apparatus with different impedances inks |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6496594B1 (en) * | 1998-10-22 | 2002-12-17 | Francine J. Prokoski | Method and apparatus for aligning and comparing images of the face and body from different imagers |
US20040236229A1 (en) * | 1999-07-02 | 2004-11-25 | Freeman Jenny E. | Integrated imaging apparatus |
US20060062448A1 (en) * | 2004-09-09 | 2006-03-23 | Raphael Hirsch | Method of assessing localized shape and temperature of the human body |
JP2006102360A (ja) * | 2004-10-08 | 2006-04-20 | Matsushita Electric Ind Co Ltd | 生体情報提示装置 |
WO2008130903A1 (en) * | 2007-04-17 | 2008-10-30 | Mikos, Ltd. | System and method for using three dimensional infrared imaging for libraries of standardized medical imagery |
CN101301222A (zh) * | 2007-05-08 | 2008-11-12 | 株式会社日立制作所 | 成像装置 |
CN101763461A (zh) * | 2009-12-31 | 2010-06-30 | 上海量科电子科技有限公司 | 结合血管取像安排针头的方法及系统 |
CN102300498A (zh) * | 2008-12-11 | 2011-12-28 | 生物医学临床研究基金会 | 用于解剖结构的红外显示设备及其信号处理方法 |
US20120071765A1 (en) * | 2010-09-17 | 2012-03-22 | Optimum Technologies, Inc. | Digital Mapping System and Method |
JP2012107942A (ja) * | 2010-11-16 | 2012-06-07 | Olympus Corp | 撮像装置 |
CN101984928B (zh) * | 2010-09-29 | 2012-06-13 | 北京大学 | 一种多模态分子层析成像系统 |
CN102663355A (zh) * | 2012-03-27 | 2012-09-12 | 天津理工大学 | 基于手背静脉与手形结合的识别系统与方法 |
CN102783962A (zh) * | 2011-05-16 | 2012-11-21 | 西门子公司 | 提供受抑制的超出测量场伪影的图像数据组的方法及设备 |
CN103027699A (zh) * | 2011-09-30 | 2013-04-10 | 西门子公司 | 用于x射线设备的运动控制的方法和x射线系统 |
CN103345735A (zh) * | 2013-07-16 | 2013-10-09 | 上海交通大学 | 一种基于Kalman滤波器的压缩时空多传感器融合跟踪方法 |
JP2013244343A (ja) * | 2012-05-29 | 2013-12-09 | Mitsubishi Electric Engineering Co Ltd | 生体情報提示装置および生体情報提示方法 |
US20140031668A1 (en) * | 2010-09-08 | 2014-01-30 | Disruptive Navigational Technologies, Llc | Surgical and Medical Instrument Tracking Using a Depth-Sensing Device |
US20140161307A1 (en) * | 2012-12-11 | 2014-06-12 | Xerox Corporation | Methods and Systems for Vascular Pattern Localization Using Temporal Features |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0889501A (ja) * | 1994-09-21 | 1996-04-09 | Hitachi Medical Corp | 医用画像診断装置 |
US8494616B2 (en) * | 2000-01-19 | 2013-07-23 | Christie Medical Holdings, Inc. | Method and apparatus for projection of subsurface structure onto an object's surface |
US8548570B2 (en) * | 2004-11-29 | 2013-10-01 | Hypermed Imaging, Inc. | Hyperspectral imaging of angiogenesis |
US8270689B2 (en) * | 2006-09-12 | 2012-09-18 | Carestream Health, Inc. | Apparatus for caries detection |
US20090318815A1 (en) | 2008-05-23 | 2009-12-24 | Michael Barnes | Systems and methods for hyperspectral medical imaging |
RU2564079C2 (ru) | 2008-12-11 | 2015-09-27 | Конинклейке Филипс Электроникс Н.В. | Система и способ формирования изображения внутренней и наружной областей пациента |
RU2556518C2 (ru) | 2009-05-13 | 2015-07-10 | Конинклейке Филипс Электроникс Н.В. | Система для обнаружения глобального перемещения у пациента во время процедур визуализации |
AU2010339972B2 (en) * | 2009-12-15 | 2015-04-30 | Emory University | System and method for providing real-time anatomical guidance in a diagnostic or therapeutic procedure |
JP5800175B2 (ja) | 2010-02-05 | 2015-10-28 | ソニー株式会社 | 画像処理装置、画像処理方法、プログラム、及び電子機器 |
JP5615940B2 (ja) | 2010-03-10 | 2014-10-29 | イーエルシー マネージメント エルエルシー | スペクトル画像データを用いて3drgbモデルを生成する肌手入れ分析システム |
WO2012026597A1 (ja) * | 2010-08-27 | 2012-03-01 | ソニー株式会社 | 画像処理装置および方法 |
US8761476B2 (en) | 2011-11-09 | 2014-06-24 | The Johns Hopkins University | Hyperspectral imaging for detection of skin related conditions |
CN104470458B (zh) | 2012-07-17 | 2017-06-16 | 皇家飞利浦有限公司 | 用于手术仪器引导的增强现实成像系统 |
-
2015
- 2015-11-26 CN CN201580064882.0A patent/CN106999131A/zh active Pending
- 2015-11-26 WO PCT/EP2015/077707 patent/WO2016083483A1/en active Application Filing
- 2015-11-26 US US15/531,019 patent/US11033188B2/en active Active
- 2015-11-26 JP JP2017527856A patent/JP2018501839A/ja not_active Ceased
- 2015-11-26 EP EP15813703.4A patent/EP3223685A1/en not_active Withdrawn
Patent Citations (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6496594B1 (en) * | 1998-10-22 | 2002-12-17 | Francine J. Prokoski | Method and apparatus for aligning and comparing images of the face and body from different imagers |
US20030108223A1 (en) * | 1998-10-22 | 2003-06-12 | Prokoski Francine J. | Method and apparatus for aligning and comparing images of the face and body from different imagers |
US20040236229A1 (en) * | 1999-07-02 | 2004-11-25 | Freeman Jenny E. | Integrated imaging apparatus |
US20060062448A1 (en) * | 2004-09-09 | 2006-03-23 | Raphael Hirsch | Method of assessing localized shape and temperature of the human body |
JP2006102360A (ja) * | 2004-10-08 | 2006-04-20 | Matsushita Electric Ind Co Ltd | 生体情報提示装置 |
WO2008130903A1 (en) * | 2007-04-17 | 2008-10-30 | Mikos, Ltd. | System and method for using three dimensional infrared imaging for libraries of standardized medical imagery |
CN101301222A (zh) * | 2007-05-08 | 2008-11-12 | 株式会社日立制作所 | 成像装置 |
CN102300498A (zh) * | 2008-12-11 | 2011-12-28 | 生物医学临床研究基金会 | 用于解剖结构的红外显示设备及其信号处理方法 |
CN101763461A (zh) * | 2009-12-31 | 2010-06-30 | 上海量科电子科技有限公司 | 结合血管取像安排针头的方法及系统 |
US20140031668A1 (en) * | 2010-09-08 | 2014-01-30 | Disruptive Navigational Technologies, Llc | Surgical and Medical Instrument Tracking Using a Depth-Sensing Device |
US20120071765A1 (en) * | 2010-09-17 | 2012-03-22 | Optimum Technologies, Inc. | Digital Mapping System and Method |
CN101984928B (zh) * | 2010-09-29 | 2012-06-13 | 北京大学 | 一种多模态分子层析成像系统 |
JP2012107942A (ja) * | 2010-11-16 | 2012-06-07 | Olympus Corp | 撮像装置 |
CN102783962A (zh) * | 2011-05-16 | 2012-11-21 | 西门子公司 | 提供受抑制的超出测量场伪影的图像数据组的方法及设备 |
CN103027699A (zh) * | 2011-09-30 | 2013-04-10 | 西门子公司 | 用于x射线设备的运动控制的方法和x射线系统 |
CN102663355A (zh) * | 2012-03-27 | 2012-09-12 | 天津理工大学 | 基于手背静脉与手形结合的识别系统与方法 |
JP2013244343A (ja) * | 2012-05-29 | 2013-12-09 | Mitsubishi Electric Engineering Co Ltd | 生体情報提示装置および生体情報提示方法 |
US20140161307A1 (en) * | 2012-12-11 | 2014-06-12 | Xerox Corporation | Methods and Systems for Vascular Pattern Localization Using Temporal Features |
CN103345735A (zh) * | 2013-07-16 | 2013-10-09 | 上海交通大学 | 一种基于Kalman滤波器的压缩时空多传感器融合跟踪方法 |
Also Published As
Publication number | Publication date |
---|---|
US20170319075A1 (en) | 2017-11-09 |
EP3223685A1 (en) | 2017-10-04 |
US11033188B2 (en) | 2021-06-15 |
WO2016083483A1 (en) | 2016-06-02 |
JP2018501839A (ja) | 2018-01-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106999131A (zh) | 用于生成患者的图像的成像设备和方法 | |
KR102562252B1 (ko) | 환자에게 부착된 광학 코드를 사용하여 환자의 이미지 데이터를 환자의 실제 시야와 정렬하는 방법 | |
CN104470458B (zh) | 用于手术仪器引导的增强现实成像系统 | |
US10362941B2 (en) | Method and apparatus for performing registration of medical images | |
Olesen et al. | Motion tracking for medical imaging: a nonvisible structured light tracking approach | |
US8542903B2 (en) | Method and system for delineation of vasculature | |
Clausner et al. | Photogrammetry-based head digitization for rapid and accurate localization of EEG electrodes and MEG fiducial markers using a single digital SLR camera | |
CN104739510B (zh) | 一种新的构建序列影像与呼吸信号对应关系的方法 | |
Taberna et al. | Spatial localization of EEG electrodes using 3D scanning | |
CN107016717A (zh) | 用于患者的透视视图的系统和方法 | |
CN104545969A (zh) | 借助解剖学标志来确定拍摄参数的值 | |
WO2013163211A1 (en) | Method and system for non-invasive quantification of biological sample physiology using a series of images | |
JP2018501839A5 (zh) | ||
KR102233966B1 (ko) | 의료 영상 정합 방법 및 그 장치 | |
US9763636B2 (en) | Method and system for spine position detection | |
KR101909125B1 (ko) | 컴퓨터 기반 진단 방법 및 그에 따른 컴퓨터 기반 진단 장치 | |
CN110446453A (zh) | 从光学图像导出的心脏运动信号 | |
Vema Krishna Murthy et al. | Faster and improved 3-D head digitization in MEG using Kinect | |
WO2015040547A1 (en) | Method and system for spine position detection | |
CN107111881A (zh) | 对应性概率图驱动的可视化 | |
CN104285240B (zh) | 基于立体x射线管的对体外的高对比物体的抑制 | |
Richey et al. | Soft tissue monitoring of the surgical field: detection and tracking of breast surface deformations | |
US10402991B2 (en) | Device and method for registration of two images | |
Furukawa et al. | Wide-area shape reconstruction by 3D endoscopic system based on CNN decoding, shape registration and fusion | |
JP6852545B2 (ja) | 画像表示システム及び画像処理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170801 |
|
RJ01 | Rejection of invention patent application after publication |