JP6696912B2 - マルチスペクトルイメージングのための方法及び手段 - Google Patents
マルチスペクトルイメージングのための方法及び手段 Download PDFInfo
- Publication number
- JP6696912B2 JP6696912B2 JP2016571099A JP2016571099A JP6696912B2 JP 6696912 B2 JP6696912 B2 JP 6696912B2 JP 2016571099 A JP2016571099 A JP 2016571099A JP 2016571099 A JP2016571099 A JP 2016571099A JP 6696912 B2 JP6696912 B2 JP 6696912B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- intensity
- image
- substance
- spectral
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 37
- 238000000701 chemical imaging Methods 0.000 title description 17
- 230000003595 spectral effect Effects 0.000 claims description 120
- 238000005286 illumination Methods 0.000 claims description 76
- 239000000126 substance Substances 0.000 claims description 68
- 238000003384 imaging method Methods 0.000 claims description 63
- 230000005284 excitation Effects 0.000 claims description 44
- 238000001228 spectrum Methods 0.000 claims description 30
- 238000009826 distribution Methods 0.000 claims description 21
- 230000002238 attenuated effect Effects 0.000 claims description 20
- 238000002073 fluorescence micrograph Methods 0.000 claims description 20
- 239000007850 fluorescent dye Substances 0.000 claims description 19
- 239000000463 material Substances 0.000 claims description 18
- 230000035945 sensitivity Effects 0.000 claims description 9
- 239000006096 absorbing agent Substances 0.000 claims description 7
- 238000001454 recorded image Methods 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 claims description 3
- 238000007689 inspection Methods 0.000 claims description 3
- 230000000750 progressive effect Effects 0.000 description 36
- 238000001514 detection method Methods 0.000 description 24
- 230000005540 biological transmission Effects 0.000 description 23
- 210000001519 tissue Anatomy 0.000 description 23
- 230000003287 optical effect Effects 0.000 description 14
- 238000012545 processing Methods 0.000 description 13
- 206010028980 Neoplasm Diseases 0.000 description 12
- 238000000295 emission spectrum Methods 0.000 description 11
- 238000000926 separation method Methods 0.000 description 11
- KSFOVUSSGSKXFI-GAQDCDSVSA-N CC1=C/2NC(\C=C3/N=C(/C=C4\N\C(=C/C5=N/C(=C\2)/C(C=C)=C5C)C(C=C)=C4C)C(C)=C3CCC(O)=O)=C1CCC(O)=O Chemical compound CC1=C/2NC(\C=C3/N=C(/C=C4\N\C(=C/C5=N/C(=C\2)/C(C=C)=C5C)C(C=C)=C4C)C(C)=C3CCC(O)=O)=C1CCC(O)=O KSFOVUSSGSKXFI-GAQDCDSVSA-N 0.000 description 9
- 238000013459 approach Methods 0.000 description 9
- 239000000975 dye Substances 0.000 description 9
- 238000000695 excitation spectrum Methods 0.000 description 9
- 239000011159 matrix material Substances 0.000 description 9
- 229950003776 protoporphyrin Drugs 0.000 description 9
- 102000001554 Hemoglobins Human genes 0.000 description 7
- 108010054147 Hemoglobins Proteins 0.000 description 7
- 238000000799 fluorescence microscopy Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 238000002189 fluorescence spectrum Methods 0.000 description 6
- 210000001525 retina Anatomy 0.000 description 6
- 238000000411 transmission spectrum Methods 0.000 description 6
- 238000010521 absorption reaction Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 5
- 239000003086 colorant Substances 0.000 description 5
- 239000002872 contrast media Substances 0.000 description 5
- 239000000835 fiber Substances 0.000 description 5
- MOFVSTNWEDAEEK-UHFFFAOYSA-M indocyanine green Chemical compound [Na+].[O-]S(=O)(=O)CCCCN1C2=CC=C3C=CC=CC3=C2C(C)(C)C1=CC=CC=CC=CC1=[N+](CCCCS([O-])(=O)=O)C2=CC=C(C=CC=C3)C3=C2C1(C)C MOFVSTNWEDAEEK-UHFFFAOYSA-M 0.000 description 5
- 229960004657 indocyanine green Drugs 0.000 description 5
- 238000001356 surgical procedure Methods 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 5
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 4
- 201000011510 cancer Diseases 0.000 description 4
- 230000000295 complement effect Effects 0.000 description 4
- 238000005094 computer simulation Methods 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 4
- 229910052760 oxygen Inorganic materials 0.000 description 4
- 239000001301 oxygen Substances 0.000 description 4
- 230000010287 polarization Effects 0.000 description 4
- 230000016776 visual perception Effects 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 3
- 210000004027 cell Anatomy 0.000 description 3
- 230000004456 color vision Effects 0.000 description 3
- 201000010099 disease Diseases 0.000 description 3
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- MHMNJMPURVTYEJ-UHFFFAOYSA-N fluorescein-5-isothiocyanate Chemical compound O1C(=O)C2=CC(N=C=S)=CC=C2C21C1=CC=C(O)C=C1OC1=CC(O)=CC=C21 MHMNJMPURVTYEJ-UHFFFAOYSA-N 0.000 description 3
- 230000008595 infiltration Effects 0.000 description 3
- 238000001764 infiltration Methods 0.000 description 3
- 238000004020 luminiscence type Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 230000001575 pathological effect Effects 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 238000012800 visualization Methods 0.000 description 3
- ZGXJTSGNIOSYLO-UHFFFAOYSA-N 88755TAZ87 Chemical compound NCC(=O)CCC(O)=O ZGXJTSGNIOSYLO-UHFFFAOYSA-N 0.000 description 2
- 101100248200 Arabidopsis thaliana RGGB gene Proteins 0.000 description 2
- XUMBMVFBXHLACL-UHFFFAOYSA-N Melanin Chemical compound O=C1C(=O)C(C2=CNC3=C(C(C(=O)C4=C32)=O)C)=C2C4=CNC2=C1C XUMBMVFBXHLACL-UHFFFAOYSA-N 0.000 description 2
- 238000000862 absorption spectrum Methods 0.000 description 2
- 238000009825 accumulation Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 239000008280 blood Substances 0.000 description 2
- 210000004369 blood Anatomy 0.000 description 2
- 210000004204 blood vessel Anatomy 0.000 description 2
- 210000004556 brain Anatomy 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 2
- 230000006378 damage Effects 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 2
- 238000002059 diagnostic imaging Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 238000012880 independent component analysis Methods 0.000 description 2
- 230000003902 lesion Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000006862 quantum yield reaction Methods 0.000 description 2
- 230000000171 quenching effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000002432 robotic surgery Methods 0.000 description 2
- 239000000523 sample Substances 0.000 description 2
- 238000003860 storage Methods 0.000 description 2
- 230000008685 targeting Effects 0.000 description 2
- 238000013334 tissue model Methods 0.000 description 2
- 229910052724 xenon Inorganic materials 0.000 description 2
- FHNFHKCVQCLJFQ-UHFFFAOYSA-N xenon atom Chemical compound [Xe] FHNFHKCVQCLJFQ-UHFFFAOYSA-N 0.000 description 2
- RBTBFTRPCNLSDE-UHFFFAOYSA-N 3,7-bis(dimethylamino)phenothiazin-5-ium Chemical compound C1=CC(N(C)C)=CC2=[S+]C3=CC(N(C)C)=CC=C3N=C21 RBTBFTRPCNLSDE-UHFFFAOYSA-N 0.000 description 1
- 102000008186 Collagen Human genes 0.000 description 1
- 108010035532 Collagen Proteins 0.000 description 1
- 102000016942 Elastin Human genes 0.000 description 1
- 108010014258 Elastin Proteins 0.000 description 1
- 206010061218 Inflammation Diseases 0.000 description 1
- ACFIXJIJDZMPPO-NNYOXOHSSA-N NADPH Chemical compound C1=CCC(C(=O)N)=CN1[C@H]1[C@H](O)[C@H](O)[C@@H](COP(O)(=O)OP(O)(=O)OC[C@@H]2[C@H]([C@@H](OP(O)(O)=O)[C@@H](O2)N2C3=NC=NC(N)=C3N=C2)O)O1 ACFIXJIJDZMPPO-NNYOXOHSSA-N 0.000 description 1
- XUIMIQQOPSSXEZ-UHFFFAOYSA-N Silicon Chemical compound [Si] XUIMIQQOPSSXEZ-UHFFFAOYSA-N 0.000 description 1
- 238000012896 Statistical algorithm Methods 0.000 description 1
- 241000700605 Viruses Species 0.000 description 1
- 230000033115 angiogenesis Effects 0.000 description 1
- 238000010420 art technique Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 239000000090 biomarker Substances 0.000 description 1
- 230000017531 blood circulation Effects 0.000 description 1
- 230000008081 blood perfusion Effects 0.000 description 1
- 230000004087 circulation Effects 0.000 description 1
- 229920001436 collagen Polymers 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000004163 cytometry Methods 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- BFMYDTVEBKDAKJ-UHFFFAOYSA-L disodium;(2',7'-dibromo-3',6'-dioxido-3-oxospiro[2-benzofuran-1,9'-xanthene]-4'-yl)mercury;hydrate Chemical compound O.[Na+].[Na+].O1C(=O)C2=CC=CC=C2C21C1=CC(Br)=C([O-])C([Hg])=C1OC1=C2C=C(Br)C([O-])=C1 BFMYDTVEBKDAKJ-UHFFFAOYSA-L 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 229920002549 elastin Polymers 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000005281 excited state Effects 0.000 description 1
- 230000001747 exhibiting effect Effects 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 150000002211 flavins Chemical class 0.000 description 1
- 239000013305 flexible fiber Substances 0.000 description 1
- GNBHRKFJIUUOQI-UHFFFAOYSA-N fluorescein Chemical compound O1C(=O)C2=CC=CC=C2C21C1=CC=C(O)C=C1OC1=CC(O)=CC=C21 GNBHRKFJIUUOQI-UHFFFAOYSA-N 0.000 description 1
- 238000001917 fluorescence detection Methods 0.000 description 1
- 238000011010 flushing procedure Methods 0.000 description 1
- 230000004907 flux Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000005714 functional activity Effects 0.000 description 1
- 210000000609 ganglia Anatomy 0.000 description 1
- 239000007789 gas Substances 0.000 description 1
- 208000005017 glioblastoma Diseases 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000004054 inflammatory process Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 210000001165 lymph node Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 208000037819 metastatic cancer Diseases 0.000 description 1
- 208000011575 metastatic malignant neoplasm Diseases 0.000 description 1
- 229960000907 methylthioninium chloride Drugs 0.000 description 1
- 244000005700 microbiome Species 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 210000005036 nerve Anatomy 0.000 description 1
- 229930027945 nicotinamide-adenine dinucleotide Natural products 0.000 description 1
- 230000009022 nonlinear effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000012634 optical imaging Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000006213 oxygenation reaction Methods 0.000 description 1
- 230000007170 pathology Effects 0.000 description 1
- 238000002428 photodynamic therapy Methods 0.000 description 1
- 238000004886 process control Methods 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 238000010791 quenching Methods 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 230000002207 retinal effect Effects 0.000 description 1
- 210000001210 retinal vessel Anatomy 0.000 description 1
- 229910052710 silicon Inorganic materials 0.000 description 1
- 239000010703 silicon Substances 0.000 description 1
- 230000002269 spontaneous effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000007847 structural defect Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/04—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances
- A61B1/043—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor combined with photographic or television appliances for fluorescence imaging
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B1/00—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
- A61B1/06—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements
- A61B1/0638—Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor with illuminating arrangements providing two or more wavelengths
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0071—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by measuring fluorescence emission
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
- A61B5/1455—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters
- A61B5/14551—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue using optical sensors, e.g. spectral photometrical oximeters for measuring blood gases
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/10—Arrangements of light sources specially adapted for spectrometry or colorimetry
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/30—Measuring the intensity of spectral lines directly on the spectrum itself
- G01J3/32—Investigating bands of a spectrum in sequence by a single detector
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/44—Raman spectrometry; Scattering spectrometry ; Fluorescence spectrometry
- G01J3/4406—Fluorescence spectrometry
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6428—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/91—Investigating the presence of flaws or contamination using penetration of dyes, e.g. fluorescent ink
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/10—Arrangements of light sources specially adapted for spectrometry or colorimetry
- G01J2003/102—Plural sources
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/02—Details
- G01J3/10—Arrangements of light sources specially adapted for spectrometry or colorimetry
- G01J2003/102—Plural sources
- G01J2003/106—Plural sources the two sources being alternating or selectable, e.g. in two ranges or line:continuum
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N2021/6417—Spectrofluorimetric devices
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6428—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
- G01N2021/6439—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes" with indicators, stains, dyes, tags, labels, marks
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/75—Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated
- G01N21/77—Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated by observing the effect on a chemical indicator
- G01N21/78—Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated by observing the effect on a chemical indicator producing a change of colour
- G01N21/80—Indicating pH value
Landscapes
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Health & Medical Sciences (AREA)
- Pathology (AREA)
- Surgery (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Veterinary Medicine (AREA)
- Animal Behavior & Ethology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Immunology (AREA)
- Biochemistry (AREA)
- Analytical Chemistry (AREA)
- Optics & Photonics (AREA)
- Radiology & Medical Imaging (AREA)
- Chemical Kinetics & Catalysis (AREA)
- Plasma & Fusion (AREA)
- Ophthalmology & Optometry (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Instruments For Viewing The Inside Of Hollow Bodies (AREA)
- Microscoopes, Condenser (AREA)
- Endoscopes (AREA)
Description
いくつかのマルチスペクトル画像化システムは、単一の画像センサを有し、反射率画像モード(reflectance imaging mode)と蛍光画像モード(fluorescence imaging mode)との間での高速切替メカニズムを実行する。これは、バンドパス励起フィルタ(bandpass excitation filter)及びバンドパス発光フィルタ(bandpass emission filter)の複数のセットを用いることによって実現されうる。上記バンドパス励起フィルタ及びバンドパス発光フィルタは、反射率画像及び蛍光画像を高周波数で交互に記録するために、高速で交換される、フィルタ輪(filter wheels)又はフィルタキューブ(filter cubes)に取り付けられている。このアプローチは、容易で光の最も高いスループットを可能とするが、フィルタ輪のような機械的に動くパーツを必要とする。さらに、フィルタの構成に基づいて、一度に1つの蛍光色素分子(fluorophore)だけの強度を記録することができる。近い複数のビデオレート周波数で複数のフィルタを切り替えることは、技術的に複雑であり、カメラのフレーム取り込みシーケンスとの正確な機械的同期を必要とする。
マルチスペクトル画像化に対する代わりのアプローチは、複数のセンサを用いることである。各センサの前には、対応する発光フィルタを配設する。上記光は、単一の対物レンズを通過することにより又は各センサに上記光を供給するために光学的なビームスプリッタ配置を用いることにより、各センサに到達する。又は、各センサは、分離した対物レンズを有していてもよい。いずれの場合も、各センサは、励起波長(excitation wavelengths)をブロックすることができ且つ1つの蛍光色素分子から上記放出を記録することができる、フィルタとペアになっている[Lucia M.A. Crane et al., et al. J Vis Exp. 2010; (44): 2225]。追加的なセンサは、異なるイメージングパス(imaging path)の上記反射像(reflection image)を記録することができる。このコンセプトはシンプルであるが、複数のセンサ、複数のビームスプリッタ、及び複数の対物レンズを用いるので、デザインのサイズ及び複雑性並びにコストが増大する。
マルチスペクトル画像化のための他の解決方法は、異なる複数の励起光の間の切替を用いる。そこでは、上記物質は、複数のフィルタによって1つ又は複数のカメラに入ることをブロックされる特定の励起スペクトルを有する複数の励起ビームで交互に照らされる。米国特許出願公開第20130286176号明細書において、単一カラーセンサ、蛍光を励起するためのレーザ励起、及び、オンオフで切り替わるブロードバンド照明光源(broadband illumination source)が用いられる。上記レーザ励起光源がオンのときだけ、上記センサは、上記放出された蛍光を捕らえることができ、上記ブロードバンド照明がオンのとき、上記センサは、上記反射像(reflected image)を捕らえることができる。このシステムは、反射率画像(reflectance image)及び蛍光画像を生成するが、観測者は、異なる複数の光源のオンオフ切替に起因した邪魔なちらつきを視覚的に体験する可能性がある。
また、他のアプローチは、モノクロのセンサと組み合わせて、複数のマルチバンドパス領域を持つ複数のフィルタを用いる。このアプローチでは、モノクロセンサの前のフィルタは、上記複数の励起波長が上記モノクロセンサに入ることをブロックする。異なる複数の蛍光色素分子は、励起スキャンによって個別に画像化される。代わりに、フィルタ処理した多成分蛍光の光(multi-component fluorescent light)は、波長に依存した複数のパスへ分配されてもよい。上記複数のパスは、モノクロセンサの異なる空間領域に結像される。このアプローチでは、モノクロセンサで一度に複数のチャネルを記録することができる。
図1は、本発明の大まかなコンセプトを示す図である。上記進歩的なシステムは、図示されたシステム100を有する。システム100は、物質400を照らすために、スペクトル及び時間の多重化特性を有する光を生成して案内する。物質400から生じる光は、イメージングシステム200によって、収集され、検出され、又は、画像化される。イメージングシステム200は、レンズ群、フィルタ群、及び、光センサ/ディテクタ配列(例えばカメラ)等のような要素群を有している。上記照明システム100及び上記検出システム200の両方は、制御処理ユニット(300)に接続されている。制御処理ユニット300は、照明システム100の働きを制御し、その働きを同期させ、検出システム200から上記複数の画像を取り込む。そして、制御処理ユニット300は、さらに評価、表示、及び記憶するために、その画像を処理する。最後に、表示/視覚化システム500は、上記分解された複数の画像を、個別に、又は、同時に/重ねて、表示する。
図3には、より好ましい実施形態の1つが示されている。ここでは、2つのブロードバンド白色光源(111,121)が用いられ、これらは、交互にオンオフを切り替えることができる。1つは、マルチバンドパスフィルタ122によってフィルタリングされる。2つの光源111,121から発せられた2つのビームは、マルチバンドパスポリクロイックミラー(multiple bandpass polychroic mirror)101によって、混ぜ合わされる。これらの要素間には、画像化されるべきエリアへより多くの光を導くために、複数のコリメータレンズがオプションとして配設されてもよい。物質400から放出された光は、検出システム200において対物レンズ201(又は、対物レンズとして機能するレンズ群のシステム)で、収集される。直視下手術で用いられる対物レンズ201(又は、対物レンズとして機能するレンズ群のシステム)は、好ましくは、200mmのフォーカス距離を有している。上記フィルタ122を補完するマルチバンドパスフィルタ213は、上記ビームを減衰させる。そして、減衰された光は、マルチチャネル又はマルチカラーのセンサ配列211によって画像化される。上記の処理/制御ユニット300は、複数の画像501,…,507…を生成するために、フレーム取り込み部(frame grabber)301、制御ユニット302、及び処理ユニット303を有している。オプションの複数のレンズ212,214は、上記センサへ上記画像を中継するために、上記種々の要素間において用いることができる。上記のマルチバンドパスフィルタ213は、好ましくは、光学的無限遠補正画像空間(optically infinity corrected imaging space)に配置される。
a)吸収分布(Absorber distribution):上記反射光のスペクトルは、物質400の組織における上記吸収スペクトル及び上記透過スペクトルによって形成され、これは、上記カラーセンサ信号に記録される。組織吸収のシステム及び組織モデリング、及び/又は、既知の濃度の吸収体についてのシステムキャリブレーションによって、含酸素ヘモグロビン、非酸素ヘモグロビン、メラニン等のような固有の組織の吸収体の濃度、又は、例えばメチレンブルーのような外部から投与された吸収造影剤の濃度を導き出すことができる。
b)酸素飽和度(Oxygen saturation):含酸素ヘモグロビンの分布及び非酸素ヘモグロビンの分布のマップから、酸素飽和度マップ、及び、関連する生理的パラメータ又は病理学パラメータを算出することができる。
c)蛍光色素分布(Fluorochrome distribution):蛍光は、内生の蛍光色素によって、又は、外部から投与された蛍光造影剤によって、生じる。上記蛍光信号は、上記カラーセンサによって記録され、システム及び組織モデリング、及び/又は、システムキャリブレーションによって、上記蛍光分布を導き出すことができる。さらに、複数の蛍光マップ間の割合を算出することができ、これは、癌についてのより詳しい情報を与える。以下では、上記複数の蛍光成分を算出するための画像処理の基本を記述する。反射率吸収分布(reflectance absorption distribution)のような値及び微分値(derivative values)が同様にモデル化され算出される。
最後に、前述のように、分離された成分群の数は、センサで利用可能なチャネル群(例えば、複数の色)の数、又は、結びついた画像群(combined images,)の場合には上記結びついた画像群のカラーチャネルの数に関連する。しかしながら、上記照明及び/又は上記透過におけるスペクトルバンド群の数は、上記チャネル群(複数の色)の数及び分離された成分群の数に依存しない。概して、対象の領域において利用可能なバンドが多くなるほど、特定成分のスペクトル特性が記録されない可能性は低くなる。このため、多くの「狭」スペクトルバンド群は、上記反射率画像のより正確な色表現、及び、種々の成分群のより正確な分離を提供する。けれども、種々の成分群のスペクトル分離は、上記チャネル群の数よりも少ないスペクトルバンド群の数で、実行可能である。
以下では、本発明に好適な基本的な光源及びその代替手段について記述する。
この実施例では、いくつかのLED光源で照明光を生成するために、代わりの照明システムが用いられる。図13に示すように、2つのブロードバンドLED光源を用いる代わりに、このオプションでは、ナロースペクトル発光を有する、複数のLED121,131,141,151…が用いられる。これは、より複雑な照明デバイスを必要とするが、一方で、出力パワーが劇的に増大し、異なるLEDの強度について個別にバランスをとることができる。殆どのモノクロLEDは、サイドスペクトルにテールを持つナロー発光を有している。このため、オプションとして、励起フィルタ122,132,142,152が、上記励起スペクトルを除去するために、用いられてもよい。レーザ光源と同様に、多くのナローバンド光源を有するLED光源からの光は、1つの照明光として見なされてもよい。上記複数のLEDは、全時間で又は一部の時間で重なった状態で、いっせいに照光してもよいし、又は、時間的に重なることなく逐次的に照光してもよい。それでもなお、照明フェーズと関連する上記露光期間(exposure period)内の如何なる時間の組み合わせも、1つの照明フェーズにおいて累積する光スペクトル分布として見なされる。
図22に示される他の実施例において、異なる複数の光源の時間的な切替は、可変の透明度を有する光学要素168,165を用いることにより、行われる。この最もシンプルなケースにおいて、これらの可変な透明度を有する光学要素168,165は、機械的なシャッタである。また、これらは、光変調器(light modulators)又は音響光学デバイス(acousto-optical devices.)であってもよい。光源161から発せられた上記ブロードバンドライトは、ポリクロイックミラー162によって分配され、相補の励起フィルタ164,167によってフィルタリングされ、要素162と同様のポリクロイックミラー169によって再び統合される。ミラー163,166は、上記システムにおいてフィルタ165でフィルタリングされた一部のビームを平行にして導くために用いられる。更なる改良のために、上記励起光は、上記システムにおいてロスを最小限にし且つフィルタのパフォーマンスを最適化するために、平行にされるべきである。
図23に示される代わりの実施形態において、上記照明システムは、上記光学的システムを通して照光するように構成されている。光学的な光ガイドは、上記マルチスペクトル照明システム100からの光を、コネクタポート204で上記イメージングデバイス200へ届ける。上記照明パスは、物質400に対する照光を最適化するために、光学レンズシステム203を含んでいてもよい。それから、上記光は、偏光フィルタ206によってフィルタリングされ、続いて、ビームスプリッタデバイス205を持つ上記イメージングパスへ結びつけられる。そのようなデバイスは、偏光ビームスプリッタキューブ205であってもよい。それから、上記光は、光が通過する時に偏光角度を回転させる、ローテイタブル半波長板(rotatable half wave plate)207を通過する。このことは、上記半波長板の位置に応じた反射光の反射を低減すること又は除去することを可能とする。最も簡単なアセンブリにおいては、半波長板207は、対物レンズ201の前に配設される。
以下では、種々の代わりの検出システムについて記述する。
ほとんどの蛍光の応用において、周囲の光は、避けられるか又はブロックされる必要がある。これは、その周囲の光の強度は、蛍光染料から発せられる蛍光ライトの強度よりも数オーダー大きいためである。周囲の光は、太陽光であり窓を介して物質に届くかもしれないし、ルームライトによって発せられた光かも知れない。技術システムの現在の状態では、蛍光チャネルにおいて周囲光からの強い信号を避けるために、周囲環境は暗い。代替手段として、発光フィルタをパスするような周囲光の特定の波長領域を、フィルタ群によってブロックしてもよい。残念ながら、そのようなフィルタ群は、通常とても高価であり、そのようなフィルタ群で大きな窓又はルームライトを覆うことはできないか、又は、それらはいかなるスペクトル構造にも使用不可能である。
室内照明の照光は、人間の目の最大周波数知覚と比べて高周波数で(例えば、200Hzで)、パルス化されている。上記パルス群の継続期間(デューティサイクル)は、典型的には、図27に示すような蛍光イメージングのためにより長い露光時間を許容する全期間の小さな断片(例えば、その期間の5−20%、典型的には、0.1−5ms)である。イメージング蛍光信号のための光パスは、上記周囲照明の光のパルスの期間では、ブロックされる。図27は、上記イメージングシステムの複数のフェーズと、周囲照明を許容するシャッタデバイスのそれぞれのタイミングとを示している。
図30に示される代わりの実施形態は、上記イメージングのフェーズ1とフェーズ2との間に常に位置し且つ周囲照明のために設定された、異なる光源からの照明光の追加的なフェーズ(第3のフェーズ)を用いる。このフェーズは、フェーズ1及びフェーズ2の周波数の2倍の周波数で出現する。上記光源は、光源902と同様に独立していてもよいし、上記照明システムの光源100に含まれていてもよい。この光源から発せられた光は、イメージングのために用いられる必要はなく、主に、上記物質及び/又は周辺環境における人間の目の視覚感知を改善するために用いられてもよい。
以上の記述においては、2つの異なるフェーズで物質に対して照光する、スペクトル多重及び時間多重が組み合わされたシステムが記述されている。それでもなお、本発明は、より複雑なイメージングシナリオにおける更に多くのフェーズに対しても拡張することができる。例えば、これらによれば、上記反射率画像及び/又は蛍光画像についての、追加的なスペクトルの情報を取得することができる。以下では、マルチフェーズシステムの追加的な例が詳細に記述される。
図31には、4つの光源を用いた4つのフェーズで動く方法が記述される。この例は、4つの異なる光源110,120,130,140と、複数のバンドで光を透過するイメージングシステム200とを有する。図32には、イメージング(検出)システム200における、光透過のスペクトルと共に上記光源の発光スペクトルの個別の例が示されている。4つの光の上記スペクトルプロファイルは、それぞれ、複数のスペクトルバンドからなっている。光1,2の複数のスペクトルバンドは、上記イメージングシステムの複数のスペクトル減衰バンドと一致する一方、光3,4の複数のスペクトルバンドは、上記イメージングシステムの複数の透過バンドと一致する。図33(照明の時間方向)に示すように、上記サンプルは、4つの光源110,120,130,140によって、4つのフェーズで連続して照らされる。各フェーズにおいて、1つの光が物質400を照らす。この特定の例では、光1及び光2は、後に、蛍光を励起する。上記イメージングシステムのフィルタは、反射された励起光を減衰する一方で、蛍光発光を透過する。そして、上記第1光及び上記第2光の照光による複数の蛍光発光画像が形成される。次いで、物質400は、光3,4によって照らされる。光3,4は、物質400によって反射され、上記イメージングシステムによって透過され、上記反射率画像を形成する。トータルで、4つの画像が記録され、各画像は、各照明フェーズに由来している。(光1,2で照らしたときの)上記2つの蛍光画像は、上記複数の蛍光成分をスペクトル的に分離して処理されている、合成蛍光画像を形成するために、上記処理ユニット300によって組み合わせられる。そして、(光3,4で照らしたときの)上記2つの反射率画像は、上記複数の反射成分をスペクトル的に分離して処理されている、合成反射率画像を形成するために、上記処理ユニット300によって組み合わせられる。
上記マルチスペクトルイメージング方法及びシステムは、種々のイメージング機器に組み入れることで実施されうる。図34Aに示される第1の実施形態では、マルチスペクトルイメージングシステムは、カメラアダプタによってディテクタ200に取り付けることで、対物レンズとしてのズームレンズ291と共に用いられる。照明システム100は、ライトガイドで上記物質へ光を運ぶ。図34Bに示される他の実施形態は、検出システム200は、外科用顕微鏡292のビデオポートに接続され、照明システム100は、上記顕微鏡の対物レンズを介して上記物質を照らすために、照明ポートに繋がるライトガイドに接続されている。
以下では、本発明の進歩的な方法のいくつかの可能な応用が記述されている。
a)アプリケーションシナリオ:血液酸素化のイメージング:
以下の例では、組織における含酸素ヘモグロビンの非酸素ヘモグロビン(HbO及びHb)に対する相対的な濃度を算定することにより、酸素飽和度が、画像化される。図35に示すように、HbOとHbとは区別可能な吸収スペクトルを有しているので、上記反射光は、上記システムで記録されうるスペクトルプロファイル情報を伝える。複数の反射成分を光学的に分離することにより、a)視覚化システムにおいて表示されるRGB画像、b)HbO成分及びHb成分の生体内分布の追加的なマップを生成することができる。上記酸素飽和度のマップは、トータルのヘモグロビン飽和度に対するHbOの割合によって算出する。
他の想定されるアプリケーションは、体内の臨床診断イメージングのための注射可能な蛍光造影剤の生体内分布を視覚化するために、上記システムを用いることである。このような蛍光造影剤は、フルオレシン又はインドシアニングリーンのように非標的であり、血管新生、血液かん流等を強調してもよいし、又は、組織において関係のある機能的活性又は病的な活性と関係している分子部位へ結合することによって、癌のような蛍光発光する病気、炎症のような医学的状態、又は、神経節若しくはリンパ節のような解剖学的特徴を強調できるという意味で標的であってもよい。1つの例は、癌細胞におけるプロトポルフィリンの生成を誘発する化合物である、5−ALAを用いた、脳手術中の星細胞系腫瘍(glioblastoma tumors)のイメージングである。これらのアプリケーションは、外科用顕微鏡、内視鏡、腹腔鏡、胃カメラ、気管支鏡、検眼鏡、眼底カメラ等の医学的イメージングシステムに対しての上記進歩的な方法の統合を引き起こす可能性がある。
特に興味深いのは、デュアルレポーターアプローチ(dual reporter diagnostic approaches)を用いた病床治療アプリケーションにおける上記進歩的なリアルタイムマルチスペクトルイメージング技術である。2つ以上の蛍光プローブを用いることにより、組織の病状又は機能状態にアクセスするための異なる生体指標についての多様な情報が得られる。異なる複数のエージェントの複数の生体内分布の組み合わせは、病気の特徴の検出感度及び特異度を増す。これは、分離後の複数の画像成分が、画像化ターゲット、つまり病変(lesion)の画像化を高めることができるからである。
リアルタイムマルチスペクトル蛍光イメージングの追加的な想定されるアプリケーションシナリオは、機械検査についてである。内部で封入されているために視覚的に検査することが難しい、ギヤのようなエンジン部品又は機械部品は、小さなクラックのような損傷を有している可能性がある。このような構造欠陥は、エンジン内を蛍光溶液で流して、蛍光液を留めるクラックの位置を内部で検査するための内視鏡を用いた後に、画像化されうる。リアルタイムマルチスペクトルイメージングは、カラー反射率画像及びカラー蛍光画像を同時に提供することができる。
化学的環境は、蛍光色素の上記発光又は励起に影響を与える可能性がある。上記色素の吸収特性及び発光特性を変えるパラメータの1つは、pH値である。
pH値の変化に対してスペクトル的に感受性があるシグナルを検出するように最適化された上記個別のフィルタ群の上記複数の透過バンドを有していることが好ましい。また、他の検出チャネルは主にpH値の変化に対する感受性があるのに対して、最大限にpH値に依存する複数の検出チャネルを有していることが好ましい。
pH値の変化に対してスペクトル的に感受性があるシグナルを検出するように最適化された上記個別のフィルタ群及び光源群の複数の励起バンドを有することが好ましい。また、他の検出チャネルは主にpH値の変化に対する感受性があるのに対して、検出チャネルのいくつかが最大限にpH値に依存するような、複数の励起バンドを有することが好ましい。
腫瘍診断法に関して、腫瘍組織におけるプロトポルフィリンIX(PPIX)の蓄積を導き出す、5−ALAが、患者に投与される。PPIXは、蛍光色素であり、また、光線力学的療法のエージェントでもある。
興味深いアプリケーションは、内在組織の自己発光、つまり、蛍光造影剤(例えば、蛍光色素分子)を投与することなしに通常発光される蛍光のスペクトル的な検出である。上記内在組織の自己発光は、NADPH、フラビン(flavins)、コラーゲン(collagen)、エラスチン(elastin)等のような、組織内に存在する又は組織で作り出された、種々の分子に起因する。この存在、生成、蓄積、又は他の濃度特性は、解剖学の特性、機能特性、及び病理学の特性のような、種々の組織特性とリンクしている。本発明に従った、組織自己発光のマルチスペクトルイメージング及び上記関連する複数の成分のスペクトル分離は、病状の判断及び診断を助ける、組織の特徴又は特性を明らかにすることができる。自己発光のマルチスペクトルイメージング及び分離は、前進的に投与された蛍光分子と共に行われる。
網膜は、目を通して画像化されうる。現在、このイメージングモダリティは、網膜自体の診断目的のために、臨床診療において、用いられている。
上記マルチスペクトルイメージング及びシステムの興味深いアプリケーションは、それを外科手術ロボットシステムと組み合わせることである。最初に、それは、手術を行う外科医に対して、反射カラードメインにおけるか、又は、(自己)発光ドメインにおける、組織の生体構造、機能、又は病気についての、ビジュアルマルチスペクトル情報を提供することができる。2番目のレベルでは、ロボット手術の安全性を向上させる入力を提供することができ、例えば、医師がうっかり組織(例えば、神経)にダメージを与えてしまうこと(つまり、カットしてしまうこと)を防ぐことができる。三番目のレベルでは、それは、人間の制御を減らした又は最少化した、自動ロボット外科手術手順に対して、直接的にインプット又はフィードバックを提供することができる。
Claims (16)
- 物質(400)の蛍光画像及び反射画像を取得するための装置の作動方法であって、
前記物質(400)を第1光と第2光とで交互に照らし、前記第1光は、前記物質からの蛍光のいくつかの領域の励起のための、高い強度の少なくとも2つのスペクトル領域を含み、且つ、高い強度の領域よりも波長が長い、低い強度の複数の領域を含み、前記蛍光の各領域は、前記第1光の高い強度の前記少なくとも2つのスペクトル領域のうちの1つよりも長い波長であり、前記第2光は、前記物質の反射光の生成のための高い強度のスペクトル領域を少なくとも1つ含み、前記第1光に関して、短い波長で高い強度の領域における光強度と長い波長で低い強度の領域における光強度との間の強度割合は、1×102以上であり、
共通のセンサアレイ(200)を用いて、前記第1光によって前記物質を照らしている期間の前記物質の第1画像を記録して前記物質からの蛍光の前記いくつかの領域を同時に記録すると共に、前記第2光によって前記物質を照らしている期間の前記物質の第2画像を記録し、
前記第1画像として前記センサアレイによって記録される光及び前記第2画像として前記センサアレイによって記録される光は、前記第1光が高い強度を有している少なくとも前記2つのスペクトル領域において、減衰され、
前記センサアレイは、各チャネルが異なるスペクトル感度を有するマルチチャネルアレイであり、
前記第1画像として前記センサアレイによって記録される光及び前記第2画像として前記センサアレイによって記録される光は、前記物質と前記センサアレイとの間に配設された、マルチバンドパスフィルタ(213)によって、減衰される、
方法。 - 請求項1記載の方法であって、
前記センサアレイ(200)は、カラーセンサアレイである、
方法。 - 請求項1又は2記載の方法であって、前記記録された画像のチャネル画像空間、例えば、カラーセンサのカラー画像空間において得られたデータは、成分画像空間の値に変換され、
前記成分画像空間では、好ましくは、複数の成分が、複数の蛍光色素、複数の吸収体、これらから導き出される値、又は、ノイズの、複数の空間的な分布に対応する、
方法。 - 請求項1から3のいずれか1項に記載の方法であって、
前記第1光及び前記第2光の少なくとも1つに関して、短い波長で高い強度の少なくとも1つの領域における強度と長い波長で低い強度の少なくとも1つの領域における強度との間の強度割合は、1×103以上、さらに好ましくは1×106以上であり、
及び/又は、
減衰されるスペクトル領域の強度に対する、減衰されないスペクトル領域の強度の、減衰割合は、1×102以上、好ましくは、1×103以上、さらに好ましくは1×106以上であり、
及び/又は、
前記第1光が高い強度を有する前記複数のスペクトル領域のうちの少なくとも1つにおいて前記センサアレイによって記録された光の減衰量は、好ましくは、減衰されない複数のスペクトル領域において記録された光の強度が、減衰された1つ又は複数のスペクトル領域の全体において記録された光の強度よりも高くなるように、されている、
方法。 - 請求項1から4のいずれか1項に記載の方法であって、
前記第1光及び/又は前記第2光は、a)2つのブロードバンド光源(111)からのブロードバンドライト、例えば、白色光によって、生成され、前記ブロードバンドライトは、前記第1光及び前記第2光を生成するために、マルチバンドパスフィルタ(112)によってフィルタリングされ、
又は、
b)複数のナローバンド光源(121)、好ましくは、複数の発光ダイオードによって生成され、前記複数のナローバンド光源(121)から発せられた光は、オプションとして、光パスにおいてマルチバンドフィルタによってフィルタリングされ、
又は、
c)前記a)に従ったブロードバンド光源と前記b)に従ったナローバンド光源との組み合わせによって、生成される、
方法。 - 請求項1から5のいずれか1項に記載の方法であって、
前記第2光によって前記物質(400)を照らしている間に記録された前記第2画像は、弱められたスペクトル領域に関して前記第2画像を補正するために、処理される、
方法。 - 請求項1から6のいずれか1項に記載の方法であって、
前記物質(400)は、前記物質(400)で反射された第1反射光を生成するために第2光によって照らされ、且つ、前記物質によって発光されたスペクトルが異なる2つ以上の蛍光の励起のために、スペクトルが異なる2つ以上の第1光によって照らされ、
前記第2光と前記2つ以上の第1光のそれぞれとの間で切り替え、前記2つ以上の第1光に関して、短い波長で高い強度の領域における光強度と長い波長で低い強度の領域における光強度との間の強度割合は、1×102以上であり、
各第1光によって前記物質が照らされている間の前記物質の複数の第1画像、及び、前記第2光によって前記物質が照らされている間の前記物質の第2画像を、共通のセンサアレイ(200)を用いて記録し、
前記複数の第1画像として前記センサアレイ(200)によって記録された前記光及び前記第2画像として前記センサアレイによって記録された前記光は、すべての第1光のうちの、1つの、いくつかの、又はすべてのスペクトル領域において、減衰されており、前記1つの、いくつかの、又はすべてのスペクトル領域では、前記第1光は、弱められないスペクトル領域で記録された光の強度が、弱められたスペクトル領域で記録された光の強度よりも高くなるように、高い強度を有しており、
前記第1画像として前記センサアレイによって記録される光及び前記第2画像として前記センサアレイによって記録される光は、前記物質と前記センサアレイとの間に配設された、バンドパスフィルタ(213)によって、フィルタリングされる、
方法。 - 請求項1から7のいずれか1項に記載の方法であって、
第1照明期間を有する前記第1光と第2照明期間を有する前記第2光とで、交互に前記物質(400)を照らし、
他の光のパルス群で前記物質(400)を照らし、前記他の光のパルス継続期間は、前記第1照明期間よりも短く、且つ、前記第2照明期間よりも短く、
前記他の光による照明期間において、前記第1画像及び前記第2画像の記録を保留するか、
又は、
第1照明期間を有する前記第1光と、第2照明期間を有する前記第2光と、第3照明期間を有する第3光とで、順々に、前記物質(400)を照らす、
方法。 - 物質(400)の蛍光画像及び反射画像を取得するイメージング装置であって、
第1光源(121)及び第2光源(111)と、
センサアレイ(200)と、
減衰器(213)と、を有し、
前記第1光源は、前記物質からの蛍光のいくつかの領域の励起のための、高い強度の少なくとも2つのスペクトル領域を含み、且つ、高い強度の領域よりも波長が長い、低い強度の複数の領域を含む、第1光を供給し、前記蛍光の各領域は、前記第1光の高い強度の前記少なくとも2つのスペクトル領域のうちの1つよりも長い波長であり、
前記第2光源は、前記物質の反射光の生成のための高い強度のスペクトル領域を少なくとも1つ含む第2光を供給し、
前記第1光に関して、短い波長で高い強度の領域における光強度と長い波長で低い強度の領域における光強度との間の強度割合は、1×102以上であり、
前記第1光源及び前記第2光源は、前記第1光と前記第2光とで前記物質(400)を交互に照らすように構成され、
前記センサアレイは、前記第1光によって前記物質を照らしている期間の前記物質の第1画像を記録して前記物質からの蛍光の前記いくつかの領域を同時に記録すると共に、前記第2光によって前記物質を照らしている期間の前記物質の第2画像を記録するように構成され、
前記減衰器は、前記第1画像として前記センサアレイによって記録される光及び前記第2画像として前記センサアレイによって記録される光を、前記第1光が高い強度を有している少なくとも前記2つのスペクトル領域において、減衰し、
前記センサアレイは、各チャネルが異なるスペクトル感度を有するマルチチャネルアレイであり、
前記第1画像として前記センサアレイによって記録される光及び前記第2画像として前記センサアレイによって記録される光は、前記物質と前記センサアレイとの間に配設された、前記減衰器としてのマルチバンドパスフィルタ(213)によって、減衰される、
装置。 - 請求項9記載のイメージング装置であって、
前記センサアレイ(200)は、カラーセンサアレイである、
装置。 - 請求項9又は10記載のイメージング装置であって、
前記記録された画像のチャネル画像空間、例えば、カラーセンサのカラー画像空間において得られたデータを、成分画像空間の値に変換するように構成され、
前記成分画像空間では、好ましくは、複数の成分が、複数の蛍光色素、複数の吸収体、これらから導き出される値、又は、ノイズの、複数の空間的な分布に対応する、
装置。 - 請求項9から11のいずれか1項に記載のイメージング装置であって、
前記第1光及び前記第2光の少なくとも1つに関して、短い波長で高い強度の少なくとも1つの領域における強度と長い波長で低い強度の少なくとも1つの領域における強度との間の強度割合は、1×103以上、さらに好ましくは1×106以上であり、
及び/又は、
減衰されたスペクトル領域の強度に対する、減衰されないスペクトル領域の強度の、減衰割合は、1×102以上、好ましくは、1×103以上、さらに好ましくは1×106以上であり、
及び/又は、
前記第1光が高い強度を有する前記複数のスペクトル領域のうちの少なくとも1つにおいて前記センサアレイによって記録される光の減衰量は、好ましくは、減衰されない複数のスペクトル領域において前記センサアレイによって記録された光の強度が、減衰された1つ又は複数のスペクトル領域の全体において前記センサアレイによって記録された強度よりも高くなるように、されている、
装置。 - 請求項9から12のいずれか1項に記載のイメージング装置であって、
前記第2光によって前記物質(400)を照らしている間に記録された前記第2画像は、弱められたスペクトル領域に関して前記第2画像を補正するために、処理される、
装置。 - 請求項9から13のいずれか1項に記載のイメージング装置を有する、内視鏡又は外科用顕微鏡。
- 請求項1から請求項8のいずれか1項に記載の方法、請求項9から請求項13のいずれか1項に記載の装置、又は請求項14に記載の内視鏡を、反射画像及び/又は蛍光画像を記録するために使用する方法。
- 請求項1から請求項8のいずれか1項に記載の方法、請求項9から請求項13のいずれか1項に記載の装置、又は請求項14に記載の内視鏡を、自動車用途、化学分析、及び物理分析のうちの1つにおける内部検査のために使用する請求項15に記載の方法。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
EP14171378.4 | 2014-06-05 | ||
EP14171378 | 2014-06-05 | ||
EP15160630.8 | 2015-03-24 | ||
EP15160630 | 2015-03-24 | ||
PCT/EP2015/062447 WO2015185661A1 (en) | 2014-06-05 | 2015-06-03 | Methods and means for multispectral imaging |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017526899A JP2017526899A (ja) | 2017-09-14 |
JP6696912B2 true JP6696912B2 (ja) | 2020-05-20 |
Family
ID=53269508
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016571099A Active JP6696912B2 (ja) | 2014-06-05 | 2015-06-03 | マルチスペクトルイメージングのための方法及び手段 |
JP2016571115A Active JP6728070B2 (ja) | 2014-06-05 | 2015-06-03 | マルチスペクトルイメージングのための方法及び手段 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016571115A Active JP6728070B2 (ja) | 2014-06-05 | 2015-06-03 | マルチスペクトルイメージングのための方法及び手段 |
Country Status (9)
Country | Link |
---|---|
US (2) | US10684224B2 (ja) |
EP (3) | EP3940371B1 (ja) |
JP (2) | JP6696912B2 (ja) |
CN (2) | CN106572792B (ja) |
CA (2) | CA2951075A1 (ja) |
DK (1) | DK3940371T3 (ja) |
ES (2) | ES2883220T3 (ja) |
FI (1) | FI3940371T3 (ja) |
WO (2) | WO2015185661A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20230071469A (ko) * | 2021-11-16 | 2023-05-23 | 한국광기술원 | 형광영상 및 컬러영상 획득을 위한 다중 형광영상장치 및 그 제어방법 |
Families Citing this family (122)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8498695B2 (en) | 2006-12-22 | 2013-07-30 | Novadaq Technologies Inc. | Imaging system with a single color image sensor for simultaneous fluorescence and color video endoscopy |
BRPI0906187A2 (pt) | 2008-03-18 | 2020-07-14 | Novadaq Technologies Inc. | método e sistema de representação de imagens para aquisição de imagens nir e imagens em cor total |
US9674920B2 (en) * | 2014-12-01 | 2017-06-06 | Industrial Technology Research Institute | Illumination system and method for developing target visual perception of an object |
JP6743137B2 (ja) | 2015-11-13 | 2020-08-19 | ノバダック テクノロジーズ ユーエルシー | ターゲットの照明およびイメージングのためのシステムおよび方法 |
JP6671653B2 (ja) * | 2015-12-11 | 2020-03-25 | 大学共同利用機関法人情報・システム研究機構 | 画像処理装置、画像処理方法及びプログラム |
EP3190394A3 (en) * | 2015-12-15 | 2017-11-15 | Applied Spectral Imaging Ltd. | System and method for spectral imaging |
CA3009419A1 (en) * | 2016-01-26 | 2017-08-03 | Novadaq Technologies ULC | Configurable platform |
JP7030056B2 (ja) * | 2016-01-28 | 2022-03-04 | シーメンス・ヘルスケア・ダイアグノスティックス・インコーポレーテッド | 試料容器と試料の特徴付けのための方法及び装置 |
JP2017131559A (ja) * | 2016-01-29 | 2017-08-03 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用撮像装置、医療用画像取得システム及び内視鏡装置 |
USD916294S1 (en) | 2016-04-28 | 2021-04-13 | Stryker European Operations Limited | Illumination and imaging device |
CA3027592A1 (en) | 2016-06-14 | 2017-12-21 | John Josef Paul FENGLER | Methods and systems for adaptive imaging for low light signal enhancement in medical visualization |
TWI586957B (zh) * | 2016-06-24 | 2017-06-11 | 諾貝爾生物有限公司 | 多通道螢光檢測系統及其方法 |
JP6570484B2 (ja) * | 2016-07-04 | 2019-09-04 | Hoya株式会社 | 分析装置 |
US10371626B2 (en) * | 2016-08-17 | 2019-08-06 | Kla-Tencor Corporation | System and method for generating multi-channel tunable illumination from a broadband source |
CA3035109C (en) * | 2016-08-26 | 2024-01-02 | Huron Technologies International Inc. | Scanning microscope using a mosaic scan filter |
US10490160B2 (en) | 2016-09-22 | 2019-11-26 | Apple Inc. | Light sensor with spectral sensing and color matching function channels |
EP3330685A1 (de) * | 2016-12-05 | 2018-06-06 | Sick Ag | Messvorrichtung für absorptionsspektroskopie |
DE102016125524A1 (de) | 2016-12-22 | 2018-06-28 | Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg | Elektronisches Mikroskop |
WO2018145193A1 (en) | 2017-02-10 | 2018-08-16 | Novadaq Technologies ULC | Open-field handheld fluorescence imaging systems and methods |
JP6726859B2 (ja) * | 2017-02-20 | 2020-07-22 | パナソニックIpマネジメント株式会社 | 蛍光検出器及びその制御方法 |
JP6939000B2 (ja) * | 2017-03-23 | 2021-09-22 | 株式会社Jvcケンウッド | 撮像装置及び撮像方法 |
WO2018177944A1 (en) * | 2017-03-28 | 2018-10-04 | Philips Lighting Holding B.V. | Light source and method for augmenting color perception for color deficient persons |
JP6977287B2 (ja) * | 2017-03-29 | 2021-12-08 | 東ソー株式会社 | 複数の蛍光物質を用いた標識方法 |
US11650157B2 (en) * | 2017-04-20 | 2023-05-16 | Irillic Pvt Ltd | System for extending dynamic range and contrast of a video under fluorescence imaging |
WO2018204835A1 (en) * | 2017-05-04 | 2018-11-08 | June Brain Llc | Brain monitoring system |
DE102018204426B4 (de) * | 2017-05-11 | 2024-02-29 | Carl Zeiss Meditec Ag | Mikroskopiesystem |
CN108937849A (zh) * | 2017-05-29 | 2018-12-07 | 王虎 | 一种用于肿瘤纳米靶向探针荧光成像及手术导航指示系统 |
CN107301639B (zh) * | 2017-06-02 | 2019-10-29 | 清华大学 | 利用数字图像技术改善色度检测线性范围的方法以及装置 |
WO2018225122A1 (ja) * | 2017-06-05 | 2018-12-13 | オリンパス株式会社 | 内視鏡装置 |
EP3417763A1 (en) * | 2017-06-22 | 2018-12-26 | Helmholtz Zentrum München - Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) | System for endoscopic imaging |
DE102017117428B4 (de) * | 2017-08-01 | 2024-07-25 | Schölly Fiberoptic GmbH | Bildgebendes Verfahren unter Ausnutzung von Fluoreszenz sowie zugehörige Bildaufnahmevorrichtung |
DE102017121483B3 (de) | 2017-09-15 | 2019-03-07 | Leica Microsystems Cms Gmbh | Verfahren zur Untersuchung einer multispektralen Probe, Steuereinheit hierfür und Mikroskop-Anordnung |
CN111373413B (zh) * | 2017-11-07 | 2021-11-09 | 眼验股份有限公司 | 用于产生图像的表示的方法和成像系统 |
WO2019131586A1 (ja) | 2017-12-27 | 2019-07-04 | カシオ計算機株式会社 | 撮像装置及び撮像方法 |
JP7000933B2 (ja) | 2017-12-27 | 2022-01-19 | カシオ計算機株式会社 | 撮像装置及び撮像方法 |
JP2021508543A (ja) | 2017-12-27 | 2021-03-11 | エシコン エルエルシーEthicon LLC | 光不足環境におけるハイパースペクトル撮像 |
WO2019151029A1 (ja) * | 2018-02-05 | 2019-08-08 | ソニー株式会社 | 撮像装置および撮像方法、並びにプログラム |
EP3755994B1 (en) | 2018-02-21 | 2021-05-26 | Optotek d.o.o. | Image-processing apparatus and image-processing method for detection of irregularities in tissue |
US11382487B2 (en) * | 2018-04-03 | 2022-07-12 | Curadel, LLC | Micro CMOS scopes for medical imaging |
CN108956564B (zh) * | 2018-06-21 | 2020-12-29 | 深圳市优迈医学科技有限公司 | 光敏剂浓度检测装置、系统以及方法 |
US20210199582A1 (en) * | 2018-06-28 | 2021-07-01 | The Regents Of The University Of California | Producing a composite image of a stained tissue sample by combining image data obtained through brightfield and fluorescence imaging modes |
KR102599207B1 (ko) | 2018-07-20 | 2023-12-15 | 삼성전자 주식회사 | 전자 디바이스의 표면 측정 장치 및 방법 |
CN112601950B (zh) * | 2018-08-22 | 2023-07-28 | 仪景通株式会社 | 图像处理装置、摄像系统、图像处理装置的工作方法以及图像处理装置的工作程序 |
EP3866462B1 (en) * | 2018-10-09 | 2022-11-02 | FUJIFILM Corporation | Imaging device |
WO2020101575A1 (en) * | 2018-11-15 | 2020-05-22 | Ams Sensors Singapore Pte. Ltd. | Measurements using systems having multiple spectrometers |
WO2020123722A1 (en) | 2018-12-14 | 2020-06-18 | Spectral Md, Inc. | System and method for high precision multi-aperture spectral imaging |
EP3669743B1 (en) * | 2018-12-20 | 2024-04-03 | Leica Instruments (Singapore) Pte. Ltd. | System and method, in particular for microscopes and endoscopes, for creating an hdr image of a fluorescing fluorophore |
JP2020130538A (ja) * | 2019-02-18 | 2020-08-31 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用光源装置及び医療用観察システム |
US11747205B2 (en) * | 2019-02-27 | 2023-09-05 | Deep Smart Light Ltd. | Noninvasive, multispectral-fluorescence characterization of biological tissues with machine/deep learning |
WO2020197497A1 (en) * | 2019-03-27 | 2020-10-01 | Ams Sensors Singapore Pte. Ltd. | Self-calibrating spectral sensor modules |
US10878548B2 (en) | 2019-03-28 | 2020-12-29 | Advanced New Technologies Co., Ltd. | Specular reflection reduction using polarized light sources |
KR20220005022A (ko) * | 2019-04-26 | 2022-01-12 | 켐이미지 코포레이션 | 하이브리드 이미징 제품 및 하이브리드 내시경 시스템 |
CN110236694B (zh) * | 2019-06-04 | 2021-09-10 | 广东欧谱曼迪科技有限公司 | 基于光谱响应特性的同屏近红外双谱荧光成像方法及系统 |
US11925328B2 (en) | 2019-06-20 | 2024-03-12 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed hyperspectral imaging system |
US11674848B2 (en) | 2019-06-20 | 2023-06-13 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for hyperspectral imaging |
US11471055B2 (en) | 2019-06-20 | 2022-10-18 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed fluorescence imaging system |
US11937784B2 (en) | 2019-06-20 | 2024-03-26 | Cilag Gmbh International | Fluorescence imaging in a light deficient environment |
US12013496B2 (en) | 2019-06-20 | 2024-06-18 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed laser mapping imaging system |
US11931009B2 (en) | 2019-06-20 | 2024-03-19 | Cilag Gmbh International | Offset illumination of a scene using multiple emitters in a hyperspectral imaging system |
US11550057B2 (en) | 2019-06-20 | 2023-01-10 | Cilag Gmbh International | Offset illumination of a scene using multiple emitters in a fluorescence imaging system |
US11754500B2 (en) | 2019-06-20 | 2023-09-12 | Cilag Gmbh International | Minimizing image sensor input/output in a pulsed fluorescence imaging system |
US10841504B1 (en) | 2019-06-20 | 2020-11-17 | Ethicon Llc | Fluorescence imaging with minimal area monolithic image sensor |
US11540696B2 (en) | 2019-06-20 | 2023-01-03 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed fluorescence imaging system |
US11280737B2 (en) | 2019-06-20 | 2022-03-22 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed fluorescence imaging system |
US11457154B2 (en) | 2019-06-20 | 2022-09-27 | Cilag Gmbh International | Speckle removal in a pulsed hyperspectral, fluorescence, and laser mapping imaging system |
US11533417B2 (en) | 2019-06-20 | 2022-12-20 | Cilag Gmbh International | Laser scanning and tool tracking imaging in a light deficient environment |
US10952619B2 (en) | 2019-06-20 | 2021-03-23 | Ethicon Llc | Hyperspectral and fluorescence imaging and topology laser mapping with minimal area monolithic image sensor |
US11012599B2 (en) * | 2019-06-20 | 2021-05-18 | Ethicon Llc | Hyperspectral imaging in a light deficient environment |
US11276148B2 (en) * | 2019-06-20 | 2022-03-15 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed fluorescence imaging system |
US11284784B2 (en) | 2019-06-20 | 2022-03-29 | Cilag Gmbh International | Controlling integral energy of a laser pulse in a fluorescence imaging system |
US11134832B2 (en) | 2019-06-20 | 2021-10-05 | Cilag Gmbh International | Image rotation in an endoscopic hyperspectral, fluorescence, and laser mapping imaging system |
US11516388B2 (en) | 2019-06-20 | 2022-11-29 | Cilag Gmbh International | Pulsed illumination in a fluorescence imaging system |
US11716543B2 (en) | 2019-06-20 | 2023-08-01 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for fluorescence imaging |
US11398011B2 (en) | 2019-06-20 | 2022-07-26 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed laser mapping imaging system |
US11617541B2 (en) | 2019-06-20 | 2023-04-04 | Cilag Gmbh International | Optical fiber waveguide in an endoscopic system for fluorescence imaging |
US11237270B2 (en) | 2019-06-20 | 2022-02-01 | Cilag Gmbh International | Hyperspectral, fluorescence, and laser mapping imaging with fixed pattern noise cancellation |
US11412920B2 (en) * | 2019-06-20 | 2022-08-16 | Cilag Gmbh International | Speckle removal in a pulsed fluorescence imaging system |
US11288772B2 (en) | 2019-06-20 | 2022-03-29 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed fluorescence imaging system |
US11187658B2 (en) | 2019-06-20 | 2021-11-30 | Cilag Gmbh International | Fluorescence imaging with fixed pattern noise cancellation |
US11389066B2 (en) | 2019-06-20 | 2022-07-19 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed hyperspectral, fluorescence, and laser mapping imaging system |
US11172810B2 (en) * | 2019-06-20 | 2021-11-16 | Cilag Gmbh International | Speckle removal in a pulsed laser mapping imaging system |
US11758256B2 (en) | 2019-06-20 | 2023-09-12 | Cilag Gmbh International | Fluorescence imaging in a light deficient environment |
US11633089B2 (en) | 2019-06-20 | 2023-04-25 | Cilag Gmbh International | Fluorescence imaging with minimal area monolithic image sensor |
US20200397239A1 (en) | 2019-06-20 | 2020-12-24 | Ethicon Llc | Offset illumination of a scene using multiple emitters in a fluorescence imaging system |
US11624830B2 (en) | 2019-06-20 | 2023-04-11 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for laser mapping imaging |
US11793399B2 (en) | 2019-06-20 | 2023-10-24 | Cilag Gmbh International | Super resolution and color motion artifact correction in a pulsed hyperspectral imaging system |
US11671691B2 (en) | 2019-06-20 | 2023-06-06 | Cilag Gmbh International | Image rotation in an endoscopic laser mapping imaging system |
US11622094B2 (en) | 2019-06-20 | 2023-04-04 | Cilag Gmbh International | Wide dynamic range using a monochrome image sensor for fluorescence imaging |
US11898909B2 (en) | 2019-06-20 | 2024-02-13 | Cilag Gmbh International | Noise aware edge enhancement in a pulsed fluorescence imaging system |
US11412152B2 (en) * | 2019-06-20 | 2022-08-09 | Cilag Gmbh International | Speckle removal in a pulsed hyperspectral imaging system |
US12007550B2 (en) | 2019-06-20 | 2024-06-11 | Cilag Gmbh International | Driving light emissions according to a jitter specification in a spectral imaging system |
US11700995B2 (en) | 2019-06-20 | 2023-07-18 | Cilag Gmbh International | Speckle removal in a pulsed fluorescence imaging system |
US11903563B2 (en) | 2019-06-20 | 2024-02-20 | Cilag Gmbh International | Offset illumination of a scene using multiple emitters in a fluorescence imaging system |
US12126887B2 (en) | 2019-06-20 | 2024-10-22 | Cilag Gmbh International | Hyperspectral and fluorescence imaging with topology laser scanning in a light deficient environment |
US11291358B2 (en) | 2019-06-20 | 2022-04-05 | Cilag Gmbh International | Fluorescence videostroboscopy of vocal cords |
US11141052B2 (en) | 2019-06-20 | 2021-10-12 | Cilag Gmbh International | Image rotation in an endoscopic fluorescence imaging system |
US11432706B2 (en) | 2019-06-20 | 2022-09-06 | Cilag Gmbh International | Hyperspectral imaging with minimal area monolithic image sensor |
JP7358817B2 (ja) * | 2019-07-24 | 2023-10-11 | ソニーグループ株式会社 | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
US12055481B2 (en) * | 2019-08-01 | 2024-08-06 | Viavi Solutions Inc. | Sensor device |
CN118490349A (zh) * | 2019-08-05 | 2024-08-16 | 捷锐士阿希迈公司(以奥林巴斯美国外科技术名义) | 医疗系统和用于操作医疗系统的方法 |
EP3779554B1 (en) * | 2019-08-14 | 2024-01-17 | Leica Instruments (Singapore) Pte. Ltd. | Optical beam splitter assembly, camera head, and microscope assembly |
US20210052161A1 (en) * | 2019-08-23 | 2021-02-25 | Rebound Therapeutics Corporation | Fluorescence imaging system |
DE102019123053A1 (de) * | 2019-08-28 | 2021-03-04 | Olympus Winter & Ibe Gmbh | Endoskop mit optischer Filteranordnung und Verwendung |
US11808703B2 (en) * | 2019-10-03 | 2023-11-07 | The Regents Of The University Of California | Fluorescence imitating brightfield imaging |
CN110652284A (zh) * | 2019-10-15 | 2020-01-07 | 中国科学院苏州生物医学工程技术研究所 | 用于荧光成像的变焦检测系统 |
KR102351249B1 (ko) * | 2020-01-03 | 2022-01-14 | 한국과학기술원 | 분자 다중 이미징 방법 및 장치 |
EP3882681A1 (en) | 2020-03-10 | 2021-09-22 | Leica Instruments (Singapore) Pte. Ltd. | A concept for a microscope system with an led-based illumination system |
JP2023536643A (ja) * | 2020-08-05 | 2023-08-28 | ジャイラス エーシーエムアイ インク ディー/ビー/エー オリンパス サージカル テクノロジーズ アメリカ | 解剖学的目標物の組成の識別 |
KR102404070B1 (ko) * | 2020-09-25 | 2022-06-02 | 고려대학교 산학협력단 | 광섬유 번들을 이용하는 반사 내시현미경 및 이를 이용한 이미지 획득 방법 |
DE102021106836A1 (de) * | 2020-10-02 | 2022-04-07 | Karl Storz Se & Co. Kg | Optisches Filtersystem für ein Video-Endoskop, Anzeigesystem und Video-Endoskop |
DE102020131374B4 (de) | 2020-11-26 | 2024-02-08 | Dionex Softron Gmbh | Fluoreszenzdetektion |
DE102020132951A1 (de) | 2020-12-10 | 2022-06-15 | Karl Storz Se & Co. Kg | Erfassung von Bildern eines medizinischen Situs in Weißlicht und Fluoreszenzlicht |
DE102020132978A1 (de) | 2020-12-10 | 2022-06-15 | Karl Storz Se & Co. Kg | Erfassung von Bildern eines medizinischen Objekts in Weißlicht und Fluoreszenzlicht |
DE102020132982A1 (de) | 2020-12-10 | 2022-06-15 | Karl Storz Se & Co. Kg | Erfassung von Bildern eines medizinischen Objekts in Weißlicht und Fluoreszenzlicht |
WO2022131224A1 (ja) * | 2020-12-14 | 2022-06-23 | 国立大学法人徳島大学 | 内視鏡システム |
CN112666180B (zh) * | 2020-12-23 | 2024-07-05 | 浙江大学 | 一种点胶自动化检测方法及系统 |
CN113030038A (zh) * | 2021-02-23 | 2021-06-25 | 北京理工大学 | 多波长荧光检测装置及方法 |
CN113456067B (zh) * | 2021-06-24 | 2023-06-23 | 江西科莱富健康科技有限公司 | 体外血红蛋白浓度测量方法、系统及计算机设备 |
US20230351551A1 (en) * | 2022-04-29 | 2023-11-02 | Wisconsin Alumni Research Foundation | Low-Light Video System |
WO2024011209A2 (en) * | 2022-07-08 | 2024-01-11 | Blaze Bioscience, Inc. | Engineered liquid crystal shutter as a dynamic long-pass optical filter |
WO2024123694A1 (en) * | 2022-12-09 | 2024-06-13 | Stryker Corporation | Visible fluorescent viewing system |
US20240331200A1 (en) * | 2023-03-31 | 2024-10-03 | Morning Dew Creative Technical Co., Ltd. | Endoscope device, endoscopic medical assistance system and endoscopic image processing method |
Family Cites Families (50)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3659918A (en) | 1970-03-24 | 1972-05-02 | Philips Corp | Color separating prism system |
JPH07163572A (ja) * | 1993-12-16 | 1995-06-27 | Matsushita Electric Ind Co Ltd | 光化学診断装置 |
DE19612536A1 (de) * | 1996-03-29 | 1997-10-02 | Freitag Lutz Dr | Anordnung und Verfahren zur Diagnose von malignem Gewebe durch Fluoreszenzbetrachtung |
DE69938493T2 (de) | 1998-01-26 | 2009-05-20 | Massachusetts Institute Of Technology, Cambridge | Endoskop zur erfassung von fluoreszenzbilder |
US6110106A (en) * | 1998-06-24 | 2000-08-29 | Biomax Technologies, Inc. | Endoscopes and methods relating to direct viewing of a target tissue |
US6727521B2 (en) | 2000-09-25 | 2004-04-27 | Foveon, Inc. | Vertical color filter detector group and array |
US7904139B2 (en) * | 1999-08-26 | 2011-03-08 | Non-Invasive Technology Inc. | Optical examination of biological tissue using non-contact irradiation and detection |
US6638668B2 (en) | 2000-05-12 | 2003-10-28 | Ocean Optics, Inc. | Method for making monolithic patterned dichroic filter detector arrays for spectroscopic imaging |
JP4896301B2 (ja) * | 2001-03-22 | 2012-03-14 | オリンパス株式会社 | 走査型光学顕微鏡 |
JP3695340B2 (ja) * | 2001-03-30 | 2005-09-14 | 株式会社日立製作所 | Dna検査方法及びその装置並びに蛍光検出方法 |
US7352892B2 (en) * | 2003-03-20 | 2008-04-01 | Micron Technology, Inc. | System and method for shape reconstruction from optical images |
US20040225222A1 (en) | 2003-05-08 | 2004-11-11 | Haishan Zeng | Real-time contemporaneous multimodal imaging and spectroscopy uses thereof |
US7554663B2 (en) * | 2005-02-08 | 2009-06-30 | Northrop Grumman Corporation | Systems and methods for use in detecting harmful aerosol particles |
FR2882147B1 (fr) * | 2005-02-14 | 2007-10-05 | Commissariat Energie Atomique | Dispositif d'imagerie de fluorescence par reflexion a deux longueurs d'onde |
JP2006263044A (ja) * | 2005-03-23 | 2006-10-05 | Fuji Photo Film Co Ltd | 蛍光検出システム |
WO2007081410A2 (en) | 2005-09-13 | 2007-07-19 | True Materials Incorporated | Encoded microparticles |
US20130191368A1 (en) | 2005-10-26 | 2013-07-25 | c/o Cortica, Ltd. | System and method for using multimedia content as search queries |
EP1952106B1 (en) | 2005-11-04 | 2014-08-27 | George Themelis | System for multispectral imaging |
JP4679375B2 (ja) * | 2006-01-25 | 2011-04-27 | 株式会社日立ハイテクノロジーズ | キャピラリ電気泳動装置 |
US8270689B2 (en) * | 2006-09-12 | 2012-09-18 | Carestream Health, Inc. | Apparatus for caries detection |
US20080062429A1 (en) * | 2006-09-12 | 2008-03-13 | Rongguang Liang | Low coherence dental oct imaging |
US8447087B2 (en) * | 2006-09-12 | 2013-05-21 | Carestream Health, Inc. | Apparatus and method for caries detection |
US20080104352A1 (en) | 2006-10-31 | 2008-05-01 | Advanced Micro Devices, Inc. | Memory system including a high-speed serial buffer |
DE102006056429B3 (de) * | 2006-11-28 | 2008-02-14 | Leica Microsystems Cms Gmbh | Lasermikroskop mit räumlich trennendem Strahlteiler |
US8498695B2 (en) * | 2006-12-22 | 2013-07-30 | Novadaq Technologies Inc. | Imaging system with a single color image sensor for simultaneous fluorescence and color video endoscopy |
JP4954699B2 (ja) * | 2006-12-28 | 2012-06-20 | オリンパス株式会社 | 蛍光内視鏡システム |
WO2009005748A1 (en) * | 2007-06-29 | 2009-01-08 | The Trustees Of Columbia University In The City Ofnew York | Optical imaging or spectroscopy systems and methods |
JP4993195B2 (ja) | 2007-07-02 | 2012-08-08 | 株式会社イノアックコーポレーション | ブロー成形品の穿孔方法とブロー成形用金型 |
US8098375B2 (en) * | 2007-08-06 | 2012-01-17 | Lumencor, Inc. | Light emitting diode illumination system |
JP2009122203A (ja) * | 2007-11-12 | 2009-06-04 | Shimadzu Corp | 光学フィルタ、蛍光分析用フィルタセット及びその光学フィルタを用いた蛍光測定装置 |
US8849380B2 (en) * | 2007-11-26 | 2014-09-30 | Canfield Scientific Inc. | Multi-spectral tissue imaging |
WO2013109966A1 (en) * | 2012-01-20 | 2013-07-25 | The Trustees Of Dartmouth College | Method and apparatus for quantitative hyperspectral fluorescence and reflectance imaging for surgical guidance |
WO2010019515A2 (en) * | 2008-08-10 | 2010-02-18 | Board Of Regents, The University Of Texas System | Digital light processing hyperspectral imaging apparatus |
JP5342869B2 (ja) * | 2008-12-22 | 2013-11-13 | Hoya株式会社 | 内視鏡装置、内視鏡照明装置、画像形成装置、内視鏡照明装置の作動方法および画像形成装置の作動方法 |
JP2010273301A (ja) * | 2009-05-25 | 2010-12-02 | Pfu Ltd | 画像読取装置 |
US9749607B2 (en) * | 2009-07-16 | 2017-08-29 | Digimarc Corporation | Coordinated illumination and image signal capture for enhanced signal detection |
WO2011048886A1 (ja) * | 2009-10-20 | 2011-04-28 | オリンパスメディカルシステムズ株式会社 | 蛍光観察装置 |
JP5562683B2 (ja) * | 2010-03-03 | 2014-07-30 | オリンパス株式会社 | 蛍光観察装置 |
JP2013521900A (ja) * | 2010-03-17 | 2013-06-13 | ズオン、ハイシャン | 高速マルチスペクトルイメージングの方法および装置と癌検出および局在診断への応用 |
JP5538072B2 (ja) * | 2010-06-03 | 2014-07-02 | 株式会社日立ハイテクノロジーズ | 欠陥検査方法およびその装置 |
JP5707758B2 (ja) | 2010-07-13 | 2015-04-30 | ソニー株式会社 | 撮像装置、撮像システム、手術用ナビゲーションシステム、及び撮像方法 |
DE102010060121C5 (de) * | 2010-10-22 | 2023-09-28 | Leica Microsystems Cms Gmbh | SPIM-Mikroskop mit sequenziellem Lightsheet |
EP2629504B1 (en) | 2010-12-14 | 2017-07-12 | Olympus Corporation | Imaging apparatus |
WO2013148360A1 (en) * | 2012-03-30 | 2013-10-03 | Trustees Of Boston University | Phase contrast microscopy with oblique back-illumination |
US9593982B2 (en) * | 2012-05-21 | 2017-03-14 | Digimarc Corporation | Sensor-synchronized spectrally-structured-light imaging |
JP5996287B2 (ja) * | 2012-06-12 | 2016-09-21 | オリンパス株式会社 | 撮像装置、顕微鏡装置、内視鏡装置 |
US10376147B2 (en) * | 2012-12-05 | 2019-08-13 | AccuVeiw, Inc. | System and method for multi-color laser imaging and ablation of cancer cells using fluorescence |
US9068949B2 (en) * | 2013-02-04 | 2015-06-30 | Purdue Research Foundation | System and method for multiplex spectroscopic imaging |
US9155474B2 (en) * | 2013-08-14 | 2015-10-13 | Omega Optical, Inc. | System for multispectral imaging of fluorescence |
CA3009419A1 (en) * | 2016-01-26 | 2017-08-03 | Novadaq Technologies ULC | Configurable platform |
-
2015
- 2015-06-03 EP EP21174170.7A patent/EP3940371B1/en active Active
- 2015-06-03 WO PCT/EP2015/062447 patent/WO2015185661A1/en active Application Filing
- 2015-06-03 EP EP15725386.5A patent/EP3152548B1/en active Active
- 2015-06-03 JP JP2016571099A patent/JP6696912B2/ja active Active
- 2015-06-03 CA CA2951075A patent/CA2951075A1/en active Pending
- 2015-06-03 ES ES15725386T patent/ES2883220T3/es active Active
- 2015-06-03 EP EP15730081.5A patent/EP3152549B1/en active Active
- 2015-06-03 ES ES21174170T patent/ES2964016T3/es active Active
- 2015-06-03 WO PCT/EP2015/062448 patent/WO2015185662A2/en active Application Filing
- 2015-06-03 CA CA2951086A patent/CA2951086A1/en active Pending
- 2015-06-03 DK DK21174170.7T patent/DK3940371T3/da active
- 2015-06-03 FI FIEP21174170.7T patent/FI3940371T3/fi active
- 2015-06-03 CN CN201580042456.7A patent/CN106572792B/zh active Active
- 2015-06-03 JP JP2016571115A patent/JP6728070B2/ja active Active
- 2015-06-03 US US15/316,453 patent/US10684224B2/en active Active
- 2015-06-03 US US15/316,455 patent/US10481095B2/en active Active
- 2015-06-03 CN CN201580042447.8A patent/CN106999021B/zh active Active
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20230071469A (ko) * | 2021-11-16 | 2023-05-23 | 한국광기술원 | 형광영상 및 컬러영상 획득을 위한 다중 형광영상장치 및 그 제어방법 |
KR102624004B1 (ko) | 2021-11-16 | 2024-01-11 | 한국광기술원 | 형광영상 및 컬러영상 획득을 위한 다중 형광영상장치 및 그 제어방법 |
Also Published As
Publication number | Publication date |
---|---|
CA2951075A1 (en) | 2015-12-10 |
CN106999021B (zh) | 2021-06-04 |
EP3152548A1 (en) | 2017-04-12 |
ES2883220T3 (es) | 2021-12-07 |
CN106999021A (zh) | 2017-08-01 |
WO2015185662A3 (en) | 2016-07-21 |
EP3152549C0 (en) | 2023-06-07 |
CN106572792B (zh) | 2020-03-06 |
WO2015185662A2 (en) | 2015-12-10 |
WO2015185661A1 (en) | 2015-12-10 |
JP2017529514A (ja) | 2017-10-05 |
FI3940371T3 (fi) | 2023-11-20 |
US20170176336A1 (en) | 2017-06-22 |
EP3940371A1 (en) | 2022-01-19 |
DK3940371T3 (da) | 2023-11-27 |
US10684224B2 (en) | 2020-06-16 |
CN106572792A (zh) | 2017-04-19 |
ES2964016T3 (es) | 2024-04-03 |
US10481095B2 (en) | 2019-11-19 |
EP3152549B1 (en) | 2023-06-07 |
CA2951086A1 (en) | 2015-12-10 |
EP3940371B1 (en) | 2023-08-30 |
EP3152548B1 (en) | 2021-05-19 |
JP6728070B2 (ja) | 2020-07-22 |
JP2017526899A (ja) | 2017-09-14 |
US20170167980A1 (en) | 2017-06-15 |
EP3152549A2 (en) | 2017-04-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6696912B2 (ja) | マルチスペクトルイメージングのための方法及び手段 | |
CN102036599B (zh) | 用于组合的全色反射和近红外成像的成像系统 | |
US20160262602A1 (en) | Laparoscopic Cholecystectomy With Fluorescence Cholangiography | |
JP5073579B2 (ja) | 撮像装置 | |
CN101744611B (zh) | 用于光动力治疗和摄影检测的装置 | |
JP5229723B2 (ja) | 蛍光画像取得装置 | |
EP2108943B1 (de) | Vorrichtung und Verfahren zur Fluoreszenz-Bildgebung | |
US20110270092A1 (en) | Combined apparatus for detection of multispectral optical image emitted from living body and for light therapy | |
US20120248333A1 (en) | Device For Fluorescence Diagnosis | |
JP2006263044A (ja) | 蛍光検出システム | |
IL173288A (en) | A device for detecting and characterizing biological tissue | |
JP2014087661A (ja) | 画像化内視鏡と共に使用するフィルター | |
CN104274146A (zh) | 内窥镜系统及其工作方法 | |
KR102372602B1 (ko) | 다파장 광원을 이용한 내시경 시스템 | |
JP5489785B2 (ja) | 蛍光内視鏡装置 | |
KR20210051192A (ko) | 기능영상 제공 의료 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170201 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180126 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180227 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180523 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180725 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180827 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190205 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190507 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191105 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200227 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200331 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200423 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6696912 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |