JP6400159B2 - 感光性の対象物、例えば生物組織の医療用撮像装置および撮像方法 - Google Patents
感光性の対象物、例えば生物組織の医療用撮像装置および撮像方法 Download PDFInfo
- Publication number
- JP6400159B2 JP6400159B2 JP2017146557A JP2017146557A JP6400159B2 JP 6400159 B2 JP6400159 B2 JP 6400159B2 JP 2017146557 A JP2017146557 A JP 2017146557A JP 2017146557 A JP2017146557 A JP 2017146557A JP 6400159 B2 JP6400159 B2 JP 6400159B2
- Authority
- JP
- Japan
- Prior art keywords
- spectral
- output
- input
- medical imaging
- band
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0008—Apparatus for testing the eyes; Instruments for examining the eyes provided with illuminating means
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0025—Operational features thereof characterised by electronic signal processing, e.g. eye models
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/0016—Operational features thereof
- A61B3/0041—Operational features thereof characterised by display arrangements
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
- A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
- A61B3/14—Arrangements specially adapted for eye photography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0075—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30041—Eye; Retina; Ophthalmic
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Ophthalmology & Optometry (AREA)
- Signal Processing (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Pathology (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
- Eye Examination Apparatus (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
2 対象物
3 組織
4 眼
6 眼科の撮像デバイス
8 マルチスペクトルカメラ
10 入力画像
12 視野
14 入力画素
15 スペクトル帯の入力セット
16 入力スペクトル帯
18 非可視光範囲
20 出力インターフェース
22 出力画像
24 ディスプレイ
26 出力画素
28 視野内の入力画素位置
29 スペクトル帯の出力セット
30 出力スペクトル帯
31 画像プロセッサ
32 カメラによって記録される入力スペクトル特徴
34 ディスプレイに出力される出力スペクトル特徴
36 対象物の実際のスペクトル特徴
37 可視光範囲
38 入力のみのスペクトル帯
39 出力のみのスペクトル帯
40 照明システム
42 照明システムによって生成される光
44 スペクトル帯の照明セット
46 照明スペクトル帯
48 フィルタシステム
50 スペクトル解析モジュール
52 組織基準値
54 記憶部材
56 較正データ、例えばスペクトルライブラリ
58 モデル入力スペクトル特徴
60 モデル出力スペクトル特徴
62 光学システム
64 照明システムの光の光路
66 カメラの光路
68 照明領域
70 ビームスプリッタ構成
72 ビューア
74 ビューアの光路
75〜79 モデル入出力スペクトル特徴
80 サンプル入力スペクトル特徴
82 サンプル出力スペクトル特徴
90 画像獲得ステップ
92 スペクトルフィッティング
94 組織組成の決定
96 出力画像生成
98 画像出力ステップ
NIR1、NIRn n個の入力スペクトル帯各々内のマルチスペクトルデータ
BP1、BPm スペクトルフィッティングにより決定されるm個の生物色素各々の濃度
Claims (15)
- 感光性の対象物(2)の撮像のための医療用撮像装置(1)であって、前記対象物(2)は、スペクトル特徴(36)を有し、前記医療用撮像装置(1)は、
−入力画像(10)をキャプチャするためのカメラ(8)であって、前記対象物(2)の前記スペクトル特徴(36)は、前記入力画像(10)内でスペクトル帯(16)の入力セット(15)によって表されるカメラ(8)と、
−出力画像(22)を送信するための出力インターフェース(20)と、
を備え、
−前記出力画像(22)内で、可視光範囲(37)内の前記スペクトル特徴(60)は、スペクトル帯(30)の出力セット(29)によって表され、
−前記入力セット(15)内のみに含まれる少なくとも1つの入力スペクトル帯(38)は、前記出力セット(29)内のみに含まれる少なくとも1つの出力スペクトル帯(39)により置換され、
前記医療用撮像装置(1)は、
−前記入力セット(15)を前記出力セット(29)にマッピングするために、生物色素の反射スペクトルを含む較正データ(56)が格納される記憶部材(54)と、
−前記入力セット(15)および前記較正データ(56)に応じて、前記少なくとも1つの出力スペクトル帯(39)内の強度を決定するための画像プロセッサ(31)と、
をさらに備え、
前記少なくとも1つの入力スペクトル帯(38)は、非可視光範囲(18)内に位置する、
医療用撮像装置(1)。 - 前記対象物(2)を、スペクトル帯(46)の照明セット(44)からなる光(42)で照明するための照明システム(40)をさらに備え、
前記照明セット(44)内で、前記少なくとも1つの出力スペクトル帯(39)は、残りのスペクトル帯(30)と比較して減衰される、または、含まれない、
請求項1に記載の医療用撮像装置(1)。 - 前記入力セット(15)および前記出力セット(29)は、少なくとも1つのスペクトル帯を共有する、
請求項1または2に記載の医療用撮像装置(1)。 - 前記照明セット(44)は、NIR範囲内の少なくとも1つのスペクトル帯(46)を含む、
請求項2のいずれかに記載の医療用撮像装置(1)。 - 前記入力セット(15)内の前記スペクトル帯(16)の大部分は、非可視光範囲(18)内に位置し、
前記出力セット(29)内の前記スペクトル帯(16)の大部分は、可視光範囲(37)内に位置する、
請求項1から4のいずれかに記載の医療用撮像装置(1)。 - 前記記憶部材(54)は、スペクトル特徴(36)の表現を、少なくとも、前記入力セット(15)の前記スペクトル帯(16)内および前記出力セット(29)の前記スペクトル帯(30)内に備える、
請求項1から5のいずれかに記載の医療用撮像装置(1)。 - 前記記憶部材(54)は、入力画像(10)の前記入力セット(15)のスペクトルフィッティング(92)のための生物色素(BP1からBPm)の前記スペクトル特徴(36)の表現を備える、
請求項1から6のいずれかに記載の医療用撮像装置(1)。 - 前記医療用撮像装置(1)は、スペクトルライブラリ(56)を備え、
前記スペクトルライブラリ(56)は、モデル出力スペクトル特徴(60)のセットを備え、
前記出力セット(29)は、前記スペクトルライブラリ(56)内の前記モデル出力スペクトル特徴(60)の少なくともサブセットの結合を含む、
請求項1から7のいずれかに記載の医療用撮像装置(1)。 - 前記入力セット(15)および前記照明セット(44)の少なくとも1つは、少なくとも550nmの波長を有する光(42)と、NIRおよびIRの少なくとも1つを備える光(42)と、を表す、
請求項2または4に記載の医療用撮像装置(1)。 - 感光性の対象物(2)を撮像するための医療用撮像方法であって、前記対象物(2)は、スペクトル特徴(36)を有し、前記方法は、
−スペクトル帯(16)の入力セット(15)内の入力画像(10)を獲得するステップと、
−スペクトル帯(30)の出力セット(29)からなる出力画像(22)を送信するステップであって、前記出力セット(29)は、前記出力セット(29)の前記スペクトル帯(30)内の前記スペクトル特徴(36)を表すステップと、
−前記入力セット(15)内のみに含まれる少なくとも1つの入力スペクトル帯(38)を、前記出力セット(29)内のみに含まれる少なくとも1つの出力スペクトル帯(39)により置換することによって、かつ、以前に格納された、生物色素の反射スペクトルを含む較正データ(56)を用いて、前記少なくとも1つの入力スペクトル帯(38)内の強度を前記スペクトル特徴(36)に適応させることによって、前記入力画像(10)を前記出力画像(22)に変換するステップと、
を含み、
前記対象物(2)は、生物組織(3)であり、
前記生物組織(3)は、非可視光範囲(18)内で照明され、
前記少なくとも1つの入力スペクトル帯(38)は、非可視光範囲(18)内に位置し、
前記少なくとも1つの出力スペクトル帯(39)は、可視光範囲(37)内に位置する、
医療用撮像方法。 - 前記生物組織(3)内の生物色素(BP1からBPm)の局所濃度を、前記入力画像(10)の少なくとも1つ内の入力画素(14)の前記入力セット(15)から決定するステップと、
前記局所濃度に応じて、前記出力セット(29)を出力画素(26)に割り当てるステップと、
をさらに含む、
請求項10に記載の医療用撮像方法。 - 前記入力セット(15)および前記出力セット(29)は、少なくとも1つのスペクトル帯を共有する、
請求項10または11に記載の医療用撮像方法。 - 前記少なくとも1つの出力スペクトル帯(39)内の前記対象物(2)の照明は、前記少なくとも1つの入力スペクトル帯(38)内より弱い、
請求項10から12のいずれかに記載の医療用撮像方法。 - 前記出力セット(29)を、格納されたモデル出力スペクトル特徴(60)の表現から生成するステップをさらに含む、
請求項10から13のいずれかに記載の医療用撮像方法。 - コンピュータに請求項10から14のいずれかに記載の方法を実行させるプログラムを格納する非一時的コンピュータ記憶媒体。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| EP16181848.9 | 2016-07-29 | ||
| EP16181848.9A EP3275361B1 (en) | 2016-07-29 | 2016-07-29 | Medical imaging apparatus and method for the imaging of a light-sensitive object, such as biological tissue |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018029954A JP2018029954A (ja) | 2018-03-01 |
| JP6400159B2 true JP6400159B2 (ja) | 2018-10-03 |
Family
ID=56557558
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017146557A Active JP6400159B2 (ja) | 2016-07-29 | 2017-07-28 | 感光性の対象物、例えば生物組織の医療用撮像装置および撮像方法 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US11501427B2 (ja) |
| EP (1) | EP3275361B1 (ja) |
| JP (1) | JP6400159B2 (ja) |
| CN (1) | CN107661087B (ja) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109325938B (zh) * | 2018-08-23 | 2021-11-30 | 武汉嫦娥医学抗衰机器人股份有限公司 | 一种基于光密度空间的中心化图像通道差的色素分离方法 |
Family Cites Families (32)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6089716A (en) * | 1996-07-29 | 2000-07-18 | Lashkari; Kameran | Electro-optic binocular indirect ophthalmoscope for stereoscopic observation of retina |
| WO2000067635A1 (en) | 1999-05-07 | 2000-11-16 | Applied Spectral Imaging Ltd. | Spectral bio-imaging of the eye |
| JP4097873B2 (ja) * | 2000-03-06 | 2008-06-11 | 富士フイルム株式会社 | マルチスペクトル画像の画像圧縮方法および画像圧縮装置 |
| US6792136B1 (en) * | 2000-11-07 | 2004-09-14 | Trw Inc. | True color infrared photography and video |
| JP3736394B2 (ja) * | 2001-07-10 | 2006-01-18 | 松下電器産業株式会社 | 画像圧縮装置 |
| IL166042A (en) * | 2004-12-29 | 2014-04-30 | Elbit Systems Ltd | Night vision coloring |
| CA2947613C (en) * | 2005-04-04 | 2019-11-05 | Hypermed Imaging, Inc. | Hyperspectral imaging in diabetes and peripheral vascular disease |
| US20110151575A1 (en) * | 2005-07-27 | 2011-06-23 | L-3 Communications Cyterra Corporation | Energetic Material Detector |
| WO2009022692A1 (ja) * | 2007-08-16 | 2009-02-19 | Shiro Amano | マイボーム腺観察装置 |
| US8810651B2 (en) * | 2007-09-26 | 2014-08-19 | Honeywell International, Inc | Pseudo-color covert night vision security digital camera system |
| MX2010013057A (es) * | 2008-05-29 | 2011-07-29 | Univ Northeastern | Metodo para reconstituir espectros celulares, util para detectar transtornos celulares. |
| US9117133B2 (en) * | 2008-06-18 | 2015-08-25 | Spectral Image, Inc. | Systems and methods for hyperspectral imaging |
| US8406859B2 (en) * | 2008-08-10 | 2013-03-26 | Board Of Regents, The University Of Texas System | Digital light processing hyperspectral imaging apparatus |
| US20100245765A1 (en) * | 2008-10-28 | 2010-09-30 | Dyer Holdings, Llc | Video infrared ophthalmoscope |
| US8189860B2 (en) * | 2008-11-07 | 2012-05-29 | Micro Usa, Inc. | Systems and methods of using spatial/spectral/temporal imaging for hidden or buried explosive detection |
| JP2010233916A (ja) | 2009-03-31 | 2010-10-21 | Chiba Univ | 眼底画像処理装置及び眼底画像処理プログラム並びに眼底画像処理方法 |
| CN101716068A (zh) * | 2009-11-13 | 2010-06-02 | 深圳大学 | 一种立体视功能客观检测装置及方法 |
| EP2579574A4 (en) | 2010-06-07 | 2013-12-25 | Konica Minolta Advanced Layers | IMAGING DEVICE |
| US8811754B2 (en) * | 2011-08-29 | 2014-08-19 | Lawrence Livermore National Security, Llc | Spatial clustering of pixels of a multispectral image |
| US9380270B1 (en) * | 2011-08-31 | 2016-06-28 | Amazon Technologies, Inc. | Skin detection in an augmented reality environment |
| US9818193B2 (en) * | 2012-01-30 | 2017-11-14 | Scanadu, Inc. | Spatial resolution enhancement in hyperspectral imaging |
| WO2013116316A1 (en) * | 2012-01-30 | 2013-08-08 | Scanadu Incorporated | Hyperspectral imaging systems, units, and methods |
| US20130342845A1 (en) * | 2012-06-21 | 2013-12-26 | Wei Chen | Method of multispectral decomposition for the removal of out-of-band effects |
| US8724894B1 (en) * | 2012-12-03 | 2014-05-13 | Rockwell Collins, Inc. | Colorization of digital imagery |
| US11103122B2 (en) * | 2014-07-15 | 2021-08-31 | Mentor Acquisition One, Llc | Content presentation in head worn computing |
| US10244991B2 (en) * | 2014-02-17 | 2019-04-02 | Children's National Medical Center | Method and system for providing recommendation for optimal execution of surgical procedures |
| US9619711B2 (en) * | 2014-09-29 | 2017-04-11 | Digitalglobe, Inc. | Multi-spectral image labeling with radiometric attribute vectors of image space representation components |
| CA2966635C (en) * | 2014-11-21 | 2023-06-20 | Christopher M. Mutti | Imaging system for object recognition and assessment |
| CA2969038C (en) * | 2014-12-03 | 2023-07-04 | Ventana Medical Systems, Inc. | Methods, systems, and apparatuses for quantitative analysis of heterogeneous biomarker distribution |
| CN204813796U (zh) * | 2015-03-05 | 2015-12-02 | 淄博职业学院 | 一种红外光生物分析检测装置 |
| EP3317624B1 (en) * | 2015-07-05 | 2019-08-07 | The Whollysee Ltd. | Optical identification and characterization system and tags |
| US10580170B2 (en) * | 2015-10-19 | 2020-03-03 | National Ict Australia Limited | Spectral reconstruction |
-
2016
- 2016-07-29 EP EP16181848.9A patent/EP3275361B1/en active Active
-
2017
- 2017-07-06 US US15/642,726 patent/US11501427B2/en active Active
- 2017-07-11 CN CN201710562149.2A patent/CN107661087B/zh active Active
- 2017-07-28 JP JP2017146557A patent/JP6400159B2/ja active Active
Also Published As
| Publication number | Publication date |
|---|---|
| CN107661087A (zh) | 2018-02-06 |
| EP3275361A1 (en) | 2018-01-31 |
| EP3275361B1 (en) | 2024-06-05 |
| CN107661087B (zh) | 2019-12-31 |
| US20180033141A1 (en) | 2018-02-01 |
| US11501427B2 (en) | 2022-11-15 |
| JP2018029954A (ja) | 2018-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8155413B2 (en) | Method and system for analyzing skin conditions using digital images | |
| Badano et al. | Consistency and standardization of color in medical imaging: a consensus report | |
| US20040125996A1 (en) | Skin diagnostic imaging method and apparatus | |
| JP6545658B2 (ja) | ビリルビンレベルを推定すること | |
| US20180247153A1 (en) | System and method for multiclass classification of images using a programmable light source | |
| US20150103401A1 (en) | Reference color slide for use in color correction of transmission-microscope slides | |
| CN114376491B (zh) | 内窥镜成像装置及其方法、系统以及电子设备 | |
| CN101523169A (zh) | 用于使用L*a*b*色空间来分析皮肤的装置和方法 | |
| Cavalcanti et al. | Smartphone‐based spectral imaging otoscope: System development and preliminary study for evaluation of its potential as a mobile diagnostic tool | |
| US12452504B2 (en) | Method and apparatus, electronic device, computer-readable storage medium, and computer program product for obtaining color image based on fusing narrow band images | |
| Ma et al. | Dual-camera laparoscopic imaging with super-resolution reconstruction for intraoperative hyperspectral image guidance | |
| JP6400159B2 (ja) | 感光性の対象物、例えば生物組織の医療用撮像装置および撮像方法 | |
| Yélamos et al. | Understanding Color | |
| Azmi et al. | Color correction of baby images for cyanosis detection | |
| Ma et al. | A hyperspectral surgical microscope with super-resolution reconstruction for intraoperative image guidance | |
| US12336762B2 (en) | Color checker device for a fundus imaging camera | |
| Babilon et al. | Spectral reflectance estimation of organic tissue for improved color correction of video-assisted surgery | |
| Kobayashi et al. | Telepathology support system with gross specimen image using high resolution 4K multispectral camera | |
| Oliver | Considerations for gross autopsy photography | |
| NL2033415B1 (en) | Improved white balance | |
| CN115668275B (zh) | 用于显微镜系统和用于确定变换函数的系统、方法和计算机程序 | |
| Outlaw | Screening for Neonatal Jaundice by Smartphone Sclera Imaging | |
| Cui | Early detection of oesophageal cancer based on colour appearance and colour-based data augmentation | |
| Vasudev et al. | Effects of smartphone sensor characteristics on dermatoscopic images: a simulation study | |
| Soni | Modelling grey-level intensities for smart phones to view medical images |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180416 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180411 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180713 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180813 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180904 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6400159 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |