Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6799463B2 - 光インタロゲーション用システム - Google Patents
[go: Go Back, main page]

JP6799463B2 - 光インタロゲーション用システム - Google Patents

光インタロゲーション用システム Download PDF

Info

Publication number
JP6799463B2
JP6799463B2 JP2016540345A JP2016540345A JP6799463B2 JP 6799463 B2 JP6799463 B2 JP 6799463B2 JP 2016540345 A JP2016540345 A JP 2016540345A JP 2016540345 A JP2016540345 A JP 2016540345A JP 6799463 B2 JP6799463 B2 JP 6799463B2
Authority
JP
Japan
Prior art keywords
target
model
sensor
light
ewc
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016540345A
Other languages
English (en)
Other versions
JP2016530023A5 (ja
JP2016530023A (ja
Inventor
ビー. ストペック,ジョシュア
ビー. ストペック,ジョシュア
ディー. ブラナン,ジョゼフ
ディー. ブラナン,ジョゼフ
ジェイ. ディックハンズ,ウィリアム
ジェイ. ディックハンズ,ウィリアム
エム. ラトカウ,ケーシー
エム. ラトカウ,ケーシー
Original Assignee
コビディエン エルピー
コビディエン エルピー
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by コビディエン エルピー, コビディエン エルピー filed Critical コビディエン エルピー
Publication of JP2016530023A publication Critical patent/JP2016530023A/ja
Publication of JP2016530023A5 publication Critical patent/JP2016530023A5/ja
Application granted granted Critical
Publication of JP6799463B2 publication Critical patent/JP6799463B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/08Measuring devices for evaluating the respiratory organs
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B1/00Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor
    • A61B1/267Instruments for performing medical examinations of the interior of cavities or tubes of the body by visual or photographical inspection, e.g. endoscopes; Illuminating arrangements therefor for the respiratory tract, e.g. laryngoscopes, bronchoscopes
    • A61B1/2676Bronchoscopes
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B34/00Computer-aided surgery; Manipulators or robots specially adapted for use in surgery
    • A61B34/20Surgical navigation systems; Devices for tracking or guiding surgical instruments, e.g. for frameless stereotaxis
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A61B5/0084Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes for introduction into the body, e.g. by catheters
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; Determining position of diagnostic devices within or on the body of the patient
    • A61B5/061Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; Determining position of diagnostic devices within or on the body of the patient
    • A61B5/065Determining position of the probe employing exclusively positioning means located on or in the probe, e.g. using position sensors arranged on the probe
    • A61B5/066Superposing sensor position on an image of the patient, e.g. obtained by ultrasound or x-ray imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • A61B5/113Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb occurring during breathing
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7203Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal
    • A61B5/7207Signal processing specially adapted for physiological signals or for diagnostic purposes for noise prevention, reduction or removal of noise induced by motion artifacts
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient; User input means
    • A61B5/742Details of notification to user or communication with user or patient; User input means using visual displays
    • A61B5/7425Displaying combinations of multiple images regardless of image source, e.g. displaying a reference anatomical image with a live image
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062Arrangements for scanning
    • A61B5/0066Optical coherence imaging
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/06Devices, other than using radiation, for detecting or locating foreign bodies ; Determining position of diagnostic devices within or on the body of the patient
    • A61B5/061Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body
    • A61B5/062Determining position of a probe within the body employing means separate from the probe, e.g. sensing internal probe position employing impedance electrodes on the surface of the body using magnetic field

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Pulmonology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Optics & Photonics (AREA)
  • Otolaryngology (AREA)
  • Gynecology & Obstetrics (AREA)
  • Robotics (AREA)
  • Endoscopes (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Instruments For Viewing The Inside Of Hollow Bodies (AREA)
  • Spectroscopy & Molecular Physics (AREA)

Description

本開示は、光を用いて肺を可視化するためのシステムおよび方法に関する。より詳細には、本開示は、他の画像診断法によって得られた画像を肺の気道の光可視画像で増補し、かつ肺組織の種類を特定するシステムおよび方法に関する。
喘息、慢性閉塞性肺疾患(COPD)および慢性閉塞性肺疾患(COLD)などの肺疾患または肺関連疾患のための標準治療は一般に、主として患者に非常に侵襲的な医学的管理および/または医薬品管理に焦点を当てている。例えば、局所的かつ侵襲的手段(例えば外科手術)による肺除神経は喘息または気腫に治療効果を与えることができるということが何十年にもわたって報告されている。
電磁ナビゲーション(EMN)は、肺などの管腔網の治療の可能性の拡大に寄与している。EMNは、コンピュータ断層撮影(CT)スキャン、磁気共鳴画像(MRI)法または蛍光透視法などの非侵襲的画像診断法に依存している。これらの非侵襲的画像診断法と組み合わせたEMNは、標的の位置を特定し、かつ臨床医が肺の管腔網を標的までナビゲートするのを支援するためにも使用されている。しかし、これらの非侵襲的画像診断法によって生成される画像は、管腔網に平行に走る神経の位置のような特徴を特定するのに十分な解像度を提供できていない。さらに、治療を行う際にこれらの非侵襲的画像診断法を用いてさらなる画像診断を行い、治療が完了したか否かを判定しなければならない。それにより有害なX線や物質の患者への曝露数や治療コストが上昇してしまう。なおさらに、治療されている領域のより高い解像度が常に望まれている。従って、より高い解像度が得られ、かつ手術において臨床的に効率的な画像診断法が現在も必要とされている。
一態様では、本開示は、肺の光インタロゲーションシステムを特徴とする。本システムは、メモリ、電磁(EM)ボード、伸長式作業チャネル(EWC)、EMセンサ、光源、光受信機およびプロセッサを備える。メモリは管腔網の3Dモデルおよび管腔網の経路計画を格納し、EMボードはEM場を発生するように構成されている。EWCは、経路計画に従い標的に向かって患者の管腔網をナビゲートし、EMセンサはEWCの遠位端から遠位に延在し、かつEM場を感知するように構成されている。光源はEWCまたはその周囲に位置し、かつ発光するように構成されており、光受信機はEWCまたはその周囲に位置し、かつ管腔網の気道から反射された光を感知するように構成されている。プロセッサは、反射光を光データに変換するように構成され、かつ、組織の種類もしくは密度を特定するか、1つ以上の血管の存在を特定するか、可視画像を生成するか、あるいは光データを3Dモデルと統合するように構成されている。
一態様では、本システムは、3Dモデルと統合された光データを表示するように構成された表示装置をさらに備える。表示装置はEMセンサの位置に基づき状況を表示するようにさらに構成されている。その状況は、EMセンサが標的内でない位置、標的の位置、または健康な組織に隣接する位置にあるか否か、および標的の治療が完了したか否かを示してもよい。生成された画像は管腔網の内部を示す。
一態様では、生成された可視画像の解像度は3Dモデルの解像度よりも高い。
別の態様では、光源および光受信機はEWCの遠位端またはその周囲に位置している。
別の態様では、生成された画像の統合位置は3DモデルにおけるEMセンサの位置に基づいている。
別の態様では、プロセッサは、光データに基づき治療装置が標的の位置にあるか否かを判定するようにさらに構成されている。
さらに別の態様では、プロセッサは、光データによる標的の密度に基づき治療の十分性を判定するようにさらに構成されている。
さらに別の態様では、プロセッサは、蛍光染料で染色された標的の蛍光色の変化に基づき治療の十分性を判定するようにさらに構成されている。
なおさらに別の態様では、プロセッサは、肺組織の反射パターンに基づき予測アルゴリズムを用いて分光分析を行う。
別の態様では、光源および光受信機は、共焦点画像診断装置または光干渉断層撮影装置に一体化されている。
別の態様では、プロセッサはEMセンサと光受信機との間の離間距離を測定するようにさらに構成されている。光データの3Dモデルとの統合はその離間距離に基づいている。
別の態様では、本システムは患者の体表に位置する複数の基準センサをさらに備え、患者の呼吸パターンを認識するように構成されている。本システムは、呼吸パターンに基づき患者の呼吸を補正することによりEMセンサの位置を特定するように構成された追跡装置をさらに備える。
別の態様では、生成された画像を選択的に融合して3Dモデルとの複合画像データセットを作成する。
さらに別の態様では、発光の波長は400ナノメートル〜700ナノメートルの範囲である。
なおさらに別の態様では、光源は、発光ダイオード(LED)、レーザー、白熱電球または蛍光電球である。
本開示の上記態様および実施形態のいずれかを本開示の範囲から逸脱することなく組み合わせてもよい。
本開示のシステムおよび方法の目的および特徴は、添付の図面を参照しながら各種実施形態の説明を読めば、当業者には明らかになるであろう。
本開示の一実施形態に係る肺の光可視化システムの斜視図である。 本開示の一実施形態に係るカテーテルガイドアセンブリの側面図である。 本開示の一実施形態に係る図2Aの伸長式作業チャネルの遠位先端を示す、指示された領域の拡大詳細図である。 本開示の一実施形態に係る肺の3次元モデルの解剖図である。 本開示の一実施形態に係る入口点から標的までの経路の例示である。 図4Aの断面線B−Bに沿って切断された肺の部分の横断面図である。 図4Aの経路計画に従って肺に挿入されたカテーテルガイドアセンブリの例示である。 図4Cの指示された領域の拡大詳細図である。 肺組織の反射パターンを示すグラフである。 正常な肺組織および悪性の肺組織の反射パターンを示すグラフである。 本開示の一実施形態に係る肺の光可視化方法のフローチャートである。 本開示の一実施形態に係る標的までのナビゲーション方法のフローチャートである。 本開示の一実施形態に係る治療のレベルを確認する方法のフローチャートである。
本開示は、診断、ナビゲーションおよび治療目的のために、標的を特定し、かつその位置を突き止めるのに十分な解像度を与える光画像診断法を用いて肺の気道を可視化するためのシステムおよび方法に関する。特に非侵襲的画像診断と共に用いられる光画像診断により、より高い解像度が得られ、かつ管腔網のマッピングおよび標的の特定が可能になる。さらに、特定された標的に隣接する組織に関してさらなる鮮明性が得られ、それにより異なる治療選択肢を検討して隣接する組織に悪影響を与えるのを回避することができる。なおさらに、治療と共に光画像診断を使用することで治療後分析および治療の十分性の確認のために詳細な画像診断を行うことができる。本開示を具体的な例示的実施形態に関して説明するが、本開示の趣旨を逸脱することなく、各種修飾、再構成および置き換えを行うことができることは当業者には容易に明らかになるであろう。本開示の範囲は、本開示に添付されている特許請求の範囲によって定められている。
図1は、CT、MRIまたは蛍光透視画像を患者の肺の管腔網を通って標的までナビゲートするのを支援する光画像データで増補するように構成された電磁ナビゲーション(EMN)システム100を示す。そのようなENMシステムの1つは、現在コヴィディエン社によって販売されている電磁ナビゲーション気管支鏡(登録商標)システムであってもよい。EMNシステム100は、カテーテルガイドアセンブリ110、気管支鏡115、計算装置120、監視装置130、EMボード140、追跡装置160および基準センサ170を備える。気管支鏡115は、有線接続(図1に示す)または無線接続(図示せず)を介して計算装置120および監視装置130に動作可能に接続されている。
気管支鏡115を患者150の口に挿入し、肺の管腔網の画像を取得する。EMNシステム100では、患者150の管腔網の末梢へのアクセスを達成するためにカテーテルガイドアセンブリ110を気管支鏡115に挿入する。カテーテルガイドアセンブリ110は、遠位先端にEMセンサ265(図2B)を備えた位置特定可能ガイドカテーテル(LG)220が挿入される伸長式作業チャネル(EWC)230を備えていてもよい。以下により詳細に説明するように、EWC230、LG220およびEMセンサ255を使用して肺の管腔網を通してナビゲートする。
ラップトップ、デスクトップ、タブレットまたは他の同様の計算装置などの計算装置120は、表示装置122、1つ以上のプロセッサ124、メモリ126、ネットワークカード128および入力装置129を備える。またEMNシステム100は、複数の計算装置を備えていてもよく、ここで複数の計算装置は、計画、治療、可視化のため、あるいは医療手術に適した方法で臨床医を支援するために用いられる。表示装置122は、表示装置122を入力装置および出力装置の両方として機能させることができるタッチセンサ式および/または音声作動式であってもよい。表示装置122は、肺疾患の症状を示す肺の一部を特定し、かつその位置を突き止めるために、肺の2次元(2D)画像または3次元(3D)モデルを表示してもよい。そのような画像およびモデルの生成については以下により詳細に説明する。表示装置122は、治療される標的を選択、追加および削除するためのオプションおよび肺の可視化のために設定可能な項目をさらに表示してもよい。一態様では、表示装置122は、肺の2D画像または3Dモデルに基づき、肺の管腔網内のカテーテルガイドアセンブリ110の位置も表示してもよい。説明(本開示の範囲を限定するものではない)を容易にするために3Dモデルについて以下に詳細に説明するが、当業者であれば2Dモデルおよび画像を用いて同様の機能およびタスクを達成できることが分かるであろう。
1つ以上のプロセッサ124はコンピュータ実行可能命令を実行する。プロセッサ124は、肺の3Dモデルを表示装置122に表示することできるように画像処理機能を行ってもよい。実施形態では、1つ以上のプロセッサ124が他のプログラムに利用可能になり得るように、計算装置120は、画像処理機能のみを行う別個のグラフィックアクセラレータ(図示せず)をさらに備えていてもよい。メモリ126はデータおよびプログラムを格納する。例えば、データは3Dモデルの画像データであってもよく、あるいは患者の医療記録、処方および/または患者の疾患歴などの任意の他の関連データであってもよい。
メモリ126に格納されるプログラムの一種は3Dモデル/経路計画ソフトウェアモジュール(計画ソフトウェア)である。3Dモデル生成/経路計画ソフトウェアの例は、現在コヴィディエン社によって販売されているILOGIC(登録商標)計画ソフトウェアパッケージであってもよい。例えばCT画像データセット(または他の画像診断法による画像データセット)から得られた、典型的には「医用におけるデジタル画像と通信(DICOM:Digital Imaging and COmmunications in Medicine)」フォーマットである患者の画像データを計画ソフトウェアにインポートすると、気管支樹の3Dモデルが生成される。一態様では、CT画像診断法、磁気共鳴画像(MRI)法、機能的MRI法、X線法および/または任意の他の画像診断法によって画像診断を行ってもよい。3Dモデルを生成するために、計画ソフトウェアは領域分割、表面レンダリングおよび/または体積レンダリングを用いる。次いで、計画ソフトウェアにより、3Dモデルを元の画像データを見直すために一般に使用される軸方向表示、冠状方向表示および矢状方向表示を含む多くの異なる表示にスライスしたり操作したりすることができる。これらの異なる表示によりユーザは画像データを全て見直し、画像内の潜在的標的を特定することができる。
標的を特定したら、当該ソフトウェアは経路計画モジュールを開始する。経路計画モジュールは標的へのアクセスを達成するための経路計画を作成し、その経路計画は標的の位置を正確に示し、かつEMNシステム100、特にEWC230およびLG220と共にカテーテルガイドアセンブリ110を用いて標的に到達することができるように標的の座標を特定する。経路計画モジュールは、臨床医を一連の工程を通して案内して、エクスポートのため、および患者150の体内の標的へのナビゲーション中に後で使用するために経路計画を作成する。臨床医という用語は、医師、外科医、看護師、医療助手または医療処置の計画、実行、監視および/または監督に関わる経路計画モジュールのあらゆるユーザを含んでもよい。
これらのプロセスおよび経路計画モジュールの詳細は、2014年8月11日に出願された「治療手順計画システムおよび方法(Treatment procedure planning system and method)」という発明の名称の本発明の譲受人に譲渡された米国特許出願第62/035,863号、および2013年6月21日に出願された「経路計画システムおよび方法(Pathway planning system and method)」という発明の名称の米国特許出願第13/838,805号に記載されており、それらの各開示内容全体が参照により本開示に組み込まれる。そのような経路計画モジュールにより、臨床医はCT画像データセットの個々のスライスを見て1つ以上の標的を特定することができる。これらの標的は、例えば、肺疾患により肺機能が損なわれている組織の作用に影響を与える病変部または神経の位置であってもよい。
メモリ126は、臨床医に案内を行い、かつ3Dモデルおよび3Dモデルから得られた2D画像上の計画された経路の表示を行うための、EMNシステム100とインタフェースで接続するナビゲーション/手順ソフトウェアを格納していてもよい。そのようなナビゲーションソフトウェアの例は、コヴィディエン社によって販売されているILOGIC(登録商標)ナビゲーション/手順ソフトウェアパッケージである。実際には、EM場発生装置145により生じたEM場における患者150の位置を、3Dモデルおよび3Dモデルから得られた2D画像に登録しなければならない。そのような登録は手動であっても自動であってもよく、コヴィディエン社によって2014年7月2日に出願された「肺の中をナビゲートするためのシステムおよび方法(System and method for navigating within the lung)」という発明の名称の本開示と同時に出願され、かつ本発明の譲受人に譲渡された米国特許出願第62/020,240号に詳細に記載されている。
図1に示すように、EMボード140は、患者が横たわる平らな表面を提供するように構成されており、EM場発生装置145を備える。患者150がEMボード140に横たわると、EM場発生装置145は、患者150の一部を取り囲むのに十分なEM場を発生する。LG220の端部にあるEMセンサ265を使用して、EM場発生装置145により生じたEM場におけるEMセンサ265の位置を決定する。
一実施形態では、EMボード140は、患者150の胸部に位置する基準センサ170に動作可能に接続されるように構成されていてもよい。基準センサ170は患者150が息を吸い込む間は胸部に従って上に移動し、患者150が息を吐いている間は胸部に従って下に移動する。患者150の呼吸パターンを認識することができるように、EM場における患者150の胸部の動きは基準センサ170によって取得されて、追跡装置160に送信される。追跡装置160はEMセンサ265の出力も受信し、両方の出力を組み合わせ、EMセンサ265の位置特定のために呼吸パターンを補正する。このように、EMセンサ265の補正された位置を肺の3Dモデルと同期させることができるように、EMセンサ265によって特定された位置を補正してもよい。患者150を3Dモデルに登録すると、EWC230および特にLG220の位置をEM場発生機145により生じたEM場内で追跡することができ、LG220の位置をナビゲーション/手順ソフトウェアの3Dモデルまたは2D画像内に示すことができる。
図2Aは、図1のカテーテルガイドアセンブリ110の一実施形態を示す。カテーテルガイドアセンブリ110は制御ハンドル210を備える。制御ハンドル210は、伸長式作業チャネル(EWC)230またはEWC230に挿入される位置特定ガイドカテーテル(LG)220を選択的かつ機械的に操縦、回転および前進させるためのアクチュエータおよびセレクター機序を有し、これはLG220の遠位先端260が制御ハンドル210の移動に従った方向を向くことを意味している。固定機序225はEWC230およびLG220を互いに固定する。本開示で使用可能なカテーテルガイドアセンブリは、スーパーディメンション(superDimension)(登録商標)手順キットおよびEDGE(商標)手順キットという名称でコヴィディエン社によって現在市販および販売されているものであってもよい。カテーテルガイドアセンブリのより詳細な説明は、Ladtkowらにより2013年3月15日に出願された共同所有の米国特許出願第13/836,203号および米国特許第7,233,820号にあり、その開示内容全体が参照により本明細書に組み込まれる。
図2Bは、図2AのEWC230の遠位端250の拡大図である。光源255はEWC230の遠位端250に位置している。EMセンサ265は、EWC230の遠位端250を超えて延在している状態で示されているLG220の遠位先端260に位置している。上に簡単に説明したように、EMセンサ265はEM場発生装置145により生じたEM場を感知する。感知されたEM場を使用してEM場の座標系に従い、EMセンサ265の位置を特定する。追跡装置160によってEMセンサ265の位置が決定されると、計算装置120はEMセンサ265の位置を肺の3Dモデルと比較し、EMセンサ265の位置を3Dモデルの座標系の中に登録する。
例えば、EMセンサ265が気管への入口の近くにある場合、EMセンサ265はEM場を感知し、次いで、EMセンサ265の位置がナビゲーション/手順ソフトウェアの3Dモデルおよび2D画像の対応する位置に示されるように、EMセンサ265の位置は3Dモデルの気管部分と比較される。次いで、EMセンサ265を気管を通して気管支樹が分岐している位置までさらに挿入すると、EMセンサ265が気管の入口から分岐位置まで移動した距離は、ナビゲーション/手順ソフトウェアの3Dモデルおよび2D画像内の対応する距離に一致するように縮尺される。具体的には、EMセンサ265が気管に沿って移動すると、その距離がEM場の座標系に従って測定される。EM場の座標系は3Dモデルの座標系と異なるため、EM場の座標系を3Dモデルの座標系に一致させるための縮尺係数が存在する。従って、縮尺係数をEMセンサ265が移動した距離に掛けて、EM場の座標系を3Dモデルの座標系と同期させる。このように、EM場の座標系をナビゲーション/手順ソフトウェアの3Dモデルおよび2D画像と同期させてもよい。あるいは、他の好適な方法を用いてEM場の座標系を3Dモデルの座標系と同期させてもよい。
上述のように、3Dモデルでは、カテーテルガイドアセンブリ110のEWC230を標的に案内するのに十分な解像度を得ることができないが、これは3Dモデルが不鮮明になったりEWC230が特定の地点に接近すると管腔網を認識しなくなったりすることを意味する。例えば、CTスキャン装置によって1mmの厚さおよび1cmの間隔でCTスキャン画像が撮影された場合、対応する3Dモデルおよび/または経路計画は、1cm未満の大きさの標的の全体像または直径が1cm未満の管腔網の部分を示すことができない。従って、CTスキャン画像が十分に詳細に示すことができない特定の大きさに満たない大きさの標的および/または終末気管支分岐部を発見および/または特定するために別の画像診断法が必要である。この目的のために、メモリ126は、以下に詳細に説明するように、カテーテルガイドアセンブリ110に関連する画像診断法によって取得された画像データを処理および変換することができる別のプログラムも格納する。この画像データをそのような標的および終末気管支分岐部を特定するのに十分な解像度を有する可視画像に変換してもよく、あるいは、より高い解像度を得、かつCTスキャンで欠けていたデータを埋める目的で、それらを組み込んで使用してCTスキャンからのデータを更新してもよい。
そのような画像診断法の1つが図2Bに示されており、ここでは光源255および光受信機257はEWC230の遠位端の近くに示されている。当業者であれば、光源255および光受信機257もLG220上に形成することができ、あるいは本開示の範囲から逸脱することなく、2つ以上の各光源および光受信機を用いてもよいことが分かるであろう。光源255は気道に対して可視光を発し、光受信機257は気道の組織から反射および/または散乱された可視光を受信する。一般に、可視光は、400ナノメートル(nm)〜700nmの範囲の電磁波を含む。
光源255は、その近位端で発光ダイオード(LED)、白熱電球、蛍光電球または可視光を発生するあらゆる好適な光源に接続する光ファイバーの遠位端(図示せず)であってもよい。同様に、光受信機267は、計算装置120上に存在する画像診断ハードウェアおよびソフトウェアに接続する光ファイバーの遠位端であってもよい。画像診断ハードウェアは、光電池、フォトレジスタ、フォトダイオード、フォトトランジスタ、カラー電荷結合素子、共焦点ミニプローブ、または400nm〜700nmの範囲の波長を有する光を検出するのに適したあらゆる装置を備えていてもよい。これらの光ファイバーはEWC230内に位置していても、EWC230の外側に取り付けられていても、EWC230の内腔に配置されていてもよい。
異なる種類の肺組織は、特定の周波数で異なるパターンの可視光の吸収、散乱および反射を有する。これらのパターンを予測アルゴリズムを用いて分光分析で確定的に使用して、組織の種類を特定してもよい。また、これらのパターンを使用して組織の密度、組織の病状および治療の十分性を確認し、かつ光受信機267が治療される標的の位置にあるか否かを判定してもよい。白色光は光の全ての可視領域を含むため、分光分析のために白色光を使用してもよい。一態様では、光画像診断法は光干渉断層撮影法であってもよい。実施形態では、光源265および光受信機267をEWC230の周囲に形成してもよく、それらにより気管支樹の気道の放射状図が生成され、かつ気道の光学マップが生成される。
図5Aは気管支粘膜の反射分光測定結果500を示す。垂直軸は単位を含まない0〜1.5の範囲の正規化された反射率を表し、水平軸は400nm〜900nmの範囲の波長を表す。反射スペクトル信号グラフ510には600nm近くに窪み520があるが、それは血中のヘモグロビンがその周波数で光を吸収するからである。反射スペクトル信号グラフ510は、正常な気管支粘膜の反射パターンまたは吸収パターンを示してもよい。
図5Bは、正常な気管支粘膜および悪性の気管支粘膜のための別の反射スペクトル信号グラフ550の例を示す。図5Aに記載するように、垂直軸は単位を含まない反射パターンを表し、水平軸は300nm〜1,000nmの範囲の波長を表す。反射スペクトル信号グラフ560は正常な粘膜の反射パターンを示し、反射スペクトル信号グラフ570は悪性の粘膜の反射パターンを示す。図5Bに見られるように、悪性の粘膜は600nm近くに正常な粘膜よりも急勾配の窪み580を有する。これは、悪性の粘膜がより多くの血液体積を有するために、その周波数でより多くの光を吸収し、かつより少ない光を反射するより多くのヘモグロビンが病変部に存在していることを証明している。
白色光が光源255から発せられると、正常な粘膜および悪性の粘膜は血液含有量に基づき異なるパターンの反射スペクトルを有する。しかし、これらのパターンの反射スペクトルはヒトの目では容易に識別することができない。従って、光受信機257が反射光を感知すると、計算装置120は反射光に対して分光分析を行い、組織の種類もしくは密度を特定し、かつ/またはその組織が悪性であるか否かを判定する。計算装置120は、3Dモデルまたはそこから得られた2D画像を分光分析データで増補してもよい。
本開示の一態様では、蛍光を使用して、可視光を用いる分光法により標的を特定してもよい。CTまたはMRIスキャンにより標的を特定したら、蛍光または自家蛍光染料のいずれか一方を用いてその標的を染色してもよい。蛍光染料の場合、光源255が蛍光染色された病変部に対して光を発すると、蛍光染料は、光受信機257で受信することができ、かつ他の染色されていない肺組織の応答とは異なるように検出することができる特定の周波数応答を放出する。同様に、光源255を必要とすることはないが、自家蛍光染料は特定の周波数で絶えず信号を発しており、これらの信号は光受信機257で受信および検出することができる。どちらの場合も、応答を処理して計算装置120の表示装置に表示することができるため、分光分析を必要とすることなく標的を可視化することができる。
実施形態では、治療を行って気管支樹の異常組織を治療する場合、治療に沿って蛍光色を変化させてもよい。言い換えると、治療が完了すると、蛍光色は消えるか所定の色に変化してもよい。従って、臨床医は標的の蛍光色を調べることにより、標的の治療が完了したか否か、あるいは別の治療を行うべきか否かを判定してもよい。一般に、治療を行った場合、別の組のCTまたはMRIスキャンを行って治療のレベルを確認する必要がある。しかし、光検出ハードウェアおよびソフトウェアと組み合わせた光受信機257は異常組織の蛍光色を確認することができるため、別のCTスキャンを行わずにその場で治療のレベルを確認してもよい。
図2Bに示すように、光源255および光受信機257はある距離DOFFだけEMセンサ265から離れている。この距離DOFFは、臨床医がナビゲーション/手順ソフトウェアにコード化するか測定および設定してもよく、あるいは光源255およびEMセンサ265が感知してもよい。計算装置120は距離DOFFを使用して、可視光データ画像の3Dモデルまたはそこから得られた2D画像への組み込みを調整する。例えば、EMセンサ265がLG220の遠位先端260に位置し、光受信機257がEWC230の遠位端250またはその周囲に位置し、かつそれらが互いから1cmの距離だけ離れている場合、可視光データは、EM場の座標系において1cmに相当する3Dモデルの座標系における距離だけ位置をずらして3Dモデルまたはそこから得られた2D画像の中に統合される。
経路計画に従ったカテーテルガイドアセンブリ110の操作によりEWC230およびLG220が標的に到達すると、EMセンサ265は標的におけるその位置を確認し、臨床医は受信機257によって生成された可視画像を見て標的におけるその位置を目で確認してもよい。LGカテーテル220をカテーテルガイドアセンブリ110から取り出してもよく、生検具をEWC230の中に標的まで挿入して疾患の確認のために標的試料を採取してもよい。固定具を用いてEWC230を標的に固定してもよい。さらに、焼灼カテーテルなどの治療具をEWC230を通して標的の中に挿入してもよい。光源255および光受信機257を使用して、治療具を取り囲んでいる組織から反射および/または散乱され、かつ光受信機257によって受信された光データを目で見ることにより、あるいは標的の分光画像を正常組織または罹患組織の画像と臨床的に比較することにより、治療具が標的の位置にあることを確認してもよい。
呼吸困難のいくつかの原因は、気道内の粘液および/または異物に関連している。光受信機257によって感知された可視光データは、気道内の粘液および異物を示してもよい。従って、経路計画に従い標的まで移動している間にこれらが発見された場合、吸引具などの治療具を使用して肺の気道内の粘液または異物を除去する。
実施形態では、治療前工程において、標的の位置をマークするために1つ以上のマーカーをEWC230の中に配置することができる。このマーカーは、本開示のEMナビゲーション機能が有効になり得ない場合、特にLG220およびEMセンサ265の取り出し後に、所望の位置へのナビゲーションおよびEWC230の配置の確認を支援することができる。このマーカーにより、臨床医は標的の治療後に標的を再診し、かつさらなる試料を採取することができるようになる。このマーカーは、基準マーカー、蛍光染料またはFLUOROGOLD(登録商標)であってもよい。蛍光染料マーカーの場合、上記のとおり光受信機257で受信された光データを使用して治療の十分性を判定したり、標的の正確な位置に関するより高い鮮明性を得たりしてもよい。当業者は、本開示の範囲から逸脱することなく、標的の位置をマークするために他のマーカーを用いてもよい。
図3は、肺と共に患者の気管支樹および気管の3Dモデル300を示す。3Dモデル300は、図3に示すように臨床医が特定の臓器または対象の臓器の部分を選択的に見ることができるように、臓器の大部分の情報を含んでいてもよい。この場合、これらの選択された臓器は、右葉310、左葉320、気管330および気管支樹340を含む肺である。右葉310は3つの下位の葉、すなわち上葉312、中葉314および下葉316を有し、左葉320は2つの下位の葉、すなわち上葉322および下葉324を有する。
気管330は、咽頭および喉頭を肺310および320に繋げる管である。気管330の下端では左および右主気管支342に分かれる。また、主気管支342の下端では葉気管支344に分かれる。主気管支342の外周は葉気管支344の外周よりも大きい。同じように、葉気管支344の下端では区域気管支346に分かれ、区域気管支346の下端では終末細気管支348に分かれる。主気管支342、葉気管支344および区域気管支346は軟骨板によって支えられている。しかし、区域気管支346の大きさが段々と小さくなると軟骨板は存在しなくなり、外壁は平滑筋で占められる。終末細気管支348の外壁も平滑筋で占められている。
罹患細胞または癌性細胞あるいは簡単に言うと標的は、あらゆる気管支樹、主気管支342、葉気管支344、区域気管支346および終末細気管支348上に存在し得る。標的がどこに位置していても、標的が小さすぎてCT画像診断法により検出できない場合でさえ、光源255および光受信機257を備えたEWC230が別の標的に向かって肺の管腔網を通ってナビゲートしている間に、本明細書に記載されている光インタロゲーション方法によって標的を検出することができる。光データにより、患者の体内の標的の位置を検出および特定する際により高い特異性およびより高い正確性が得られる。少なくとも1つの実施形態によれば、光源255および光受信機257はEWC230を取り囲み、それらを用いて、上記経路計画および光データに従い、かつ経路に沿って肺の画像データをさらに精細化する。この光データをCTスキャン画像および/または3Dモデル300に登録して、標的の検出、位置および大きさに関してより高い鮮明性を得てもよい。また、例えばこの光データを診断的に使用して、臨床医が全てのそれらしい標的が特定されていること、あるいは治療後に完全に治療されていることを確認するのを支援してもよい。
さらに、光受信機257が光画像データを取得すると、そのデータは無線または有線接続を介して計算装置120に転送される。光技術によって取得された画像データはまだ臨床医によって容易に見ることできる状態ではない。計算装置120は光画像データを、臨床医が組織の種類を特定したり、病状を診断したり、治療のレベルを決定したりすることができる画像に処理および変換する。
図4Aは、3Dモデルの気管支樹の平面図すなわち図3の気管支樹などの肺のスライス画像と標的までの経路計画とを示す。経路計画は、標的が図3の終末細気管支の下側左端の先端に位置している場合に肺の管腔網を通って標的に到着する方法を示す。
図4Bは、図4Aの断面線B−Bに沿って切断された終末細気管支の拡大横断面図である。終末細気管支は平滑筋405によって囲まれている。神経410および静脈415は平滑筋405の外壁に位置している。符号412は、気道内の腫れた平滑筋、粘液または異物を表す。光画像診断法では上記のように、終末細気管支に向かう気道の内部情報までも得られるため、異物、粘液または腫れた平滑筋を目で見ることができたり平滑筋405上の細い神経410および静脈415さえも検出および特定したりすることができる。
図4Cは、経路計画に従いカテーテルガイドアセンブリが患者の天然の開口部(例えば口)から標的まで肺の中に挿入された状態の気管支鏡420を示す。気管支鏡420が肺の特定の位置に到達すると、気管支鏡420はサイズ制限により、動けなくなって気管支樹内をさらに進むことができなくなる。そこで、上記のようにカテーテルガイドアセンブリのEWC430を使用して、経路計画に従い標的450まで管腔網をナビゲートしてもよい。EWC430は標的450に到達するのに十分な程に小さくて細い。図4Dは、図4Cの丸で囲まれた領域の拡大詳細図を示し、ここでは、位置特定可能ガイド(LG)はEWC430の遠位先端から突き出ていてもよく、肺の終末細気管支に位置する標的450まで管腔網をナビゲートする。
図6Aは、可視光技術を用いて肺組織を可視化する方法600のフローチャートである。方法600は、肺の3Dモデルおよび標的までの経路計画を図1の計算装置120などのコンピュータに格納されたナビゲーション/手順ソフトウェアにインポートする工程605で開始する。
工程610では、図1に示すように、EMボード140のEM場発生装置145によりEM場を発生させる。工程615では、EMセンサ265、光源255および光受信機257を天然の開口部または切開部から肺の中に挿入する。一態様では、EMセンサ265および光源255および光受信機257はある距離だけ離れてEWC230上に位置していてもよく、あるいは異なる場所に位置していてもよい。例えば、EMセンサ265はLG220の遠位先端260またはその周囲に位置していてもよく、光源255および光受信機257はEWC230の遠位端250またはその周囲に位置していてもよく、あるいはそれらは逆であってもよい。
工程620では、EMセンサ265はEM場を感知し、感知された結果は計算装置120に送信される。感知された結果を使用してEM場の座標系におけるEMセンサ265の位置を計算する。位置を計算したら、計算装置120はEMセンサ265の位置を、3Dモデルまたはそこから得られた2D画像および経路計画と比較する。一態様では、計算装置120に送信する前に、EMセンサ265の位置を、追跡装置160および基準センサ170により検出することができる患者の呼吸パターンに従って補正してもよい。従って、患者が息を吸ったり吐いたりする間にEMセンサ265の位置が3Dモデルの座標系において異なることはない。
工程625では、EMセンサ265の位置を3Dモデルおよびそこから得られた2D画像と同期させる。この位置は3Dモデルの開始位置すなわち3Dモデルの気管の入口であってもよい。この位置を同期させたとしても、EMセンサ265の実際の移動はここではまだ3Dモデルに同期されていない。
EMセンサ265は、ある距離だけ(例えば、気管の入口から気管の底にある分岐点まで)移動する。EMセンサ265がEM場の感知を開始した後、この距離をEM場の座標系において測定してもよい。工程630では、EM場の座標系によるEMセンサ265の移動距離を、縮尺された距離が3Dモデルの座標系に一致するように縮尺してもよい。この工程の後に、EMセンサ265の位置および移動を3Dモデルに実質的にマッピングする。これは3Dモデルおよびそこから得られた2D画像への患者の同期すなわち登録である。
工程635では、EMセンサ265、LG220およびEWC230は経路計画に従って標的まで肺の管腔網をナビゲートする。工程640では、EMセンサ265が標的に到達したか否かを判定する。EMセンサ265が標的に到達していないと判定された場合、経路計画に従い標的に到達するまでナビゲーション工程635を継続する。
実施形態では、工程640において標的に到達していると判定された場合、工程645を行い、本明細書に記載されている光技術で標的をインタロゲートしてその位置を確認してもよい。さらに、治療後にインタロゲーションを用いて治療の十分性を確保してもよい。以下の図6Cでは工程645をさらに詳細に説明する。
図6Bは、標的へのナビゲーションの詳細な工程すなわち図6Aの方法600の工程635を示す。工程650では、EWC230の遠位端が経路計画に従って標的までナビゲートする間に、可視光を光源255から発して光受信機257で受信する。工程655では、光受信機257は肺の気道から反射された可視光を受信し、それを計算装置120に送信し、次いで計算装置120は工程660で予測アルゴリズムを用いて反射された可視光に対して分光分析を行う。反射光は振幅および送信から受信までの遅延時間などの情報を有する。計算装置120はその情報を処理して肺組織の密度または種類を決定し、かつ/またはCTスキャン画像内に新しい標的(すなわち治療される罹患細胞または癌性細胞、気道内の粘液または異物)が発見されていないか否かを判定する。
工程665では、標的までの経路計画に沿って新しい標的が存在するか否かを判定する。新しい標的が存在すると判定された場合、工程670では新しい標的を特定して、後での治療のために3Dモデルに登録する。工程675では、標的までの経路計画の一部である新しい標的までの経路も新しい標的までの経路計画として保存する。次いで、方法635は工程665に戻って別の新しい標的が存在するか否かを確認する。
工程665において新しい標的が存在しないと判定された場合、計算装置120は、処理された反射光に基づき画像を生成してもよい。可視光の波長の大部分は肺組織の気道の内面から反射されるため、生成された画像は気管支樹の内部を示す。生成された画像は、気管支樹の内部に存在する罹患細胞、癌性細胞、粘液または異物も示す。一態様では、治療装置が治療目的で標的に貫通した場合、生成された画像は治療装置が標的の位置にあるか否かを示すことができる。
工程685では、EMセンサ265の位置ならびにEMセンサ265と光源255および光受信機257との離間距離DOFFに基づき、生成された画像を3Dモデルまたはそこから得られた2D画像に統合する。実施形態では、CTスキャン画像のより低い解像度部分をより高い解像度画像(すなわち生成された可視画像)で置き換えることができるように、生成された画像をCTスキャン画像に上書きしてもよく、光画像データを選択的に融合して複合画像データセットを作成してもよく、あるいはこれらのデータをCT画像データに組み込んでもよい。工程690では、計算装置は、3Dモデルを含む生成された画像すなわち簡単に言うと統合された3Dモデルを表示する。図6Aの方法600に図示するように、これらのナビゲーション工程650〜690を標的に到達するまで繰り返す。
一実施形態では、本明細書に記載されている光技術を用いる可視化すなわちインタロゲーションを使用して治療の十分性を判定してもよい。一般に、標的に対して1回の治療を行った場合、標的の大きさ、密度および水分を含む標的の属性は変化する。従って、治療が完了したか否かを確認するために、標的の属性を治療前に取得した同様の測定値と確認および比較しなければならない。一実施形態では、十分な治療後に色を変えるか消える蛍光染料の使用と組み合わせた光インタロゲーションを使用して治療のレベルを決定してもよい。図6Cは、治療の十分性を確認する方法のフローチャートである。工程705では、LG220およびEMセンサ265の取り出し後に、焼灼カテーテルなどの治療装置をEWC230に挿入する。工程710では、上記のように組織をインタロゲートし、治療装置が標的の位置にあるか否かを判定する。
治療装置が標的の位置にないと判定された場合、工程715では治療装置を多少挿入または後退させてその位置を調整する。次いで、工程710では治療装置の位置を再び確認する。工程710において治療装置が標的の位置にあると判定された場合、治療装置で標的を治療する。
別の実施形態では、図6Cの工程705〜715と同様の工程を生検に適用してもよい。生検具を挿入して標的の試料を採取したら、光源255および光受信機257を使用して生検具が正しい標的の位置にあるか否かを確認する。生検具が正しい場所にあると判定された場合、生検具で試料を採取する。生検具が標的の位置にないと判定された場合、生検具を調整して標的に正確に到達させてもよい。
工程720では、治療装置で標的を治療する。次いで治療への適用後に、光源255は可視光を発して標的をインタロゲートし、光受信機257は反射された可視光を受信して、工程725で標的の属性(例えば、大きさ、色など)を決定し、工程730でそれらの属性を閾値と比較する。ここで閾値は、疾患の種類に基づいて予め定められていてもよく、疾患が完全に治療されていることを示してもよい。
標的の色が所定の色と等しくなく、かつ標的の密度が所定の密度よりも大きいと判定された場合、計算装置120は工程735で、治療が不完全であることを表示画面にそのような通知を表示して臨床医に知らせる。所定の密度は、正常組織の密度に基づき予め定められていてもよい。次いで、方法645は、別の治療のために工程720に戻る。これらの工程720〜735を治療が完了するまで繰り返す。
工程730において、蛍光染料を用いた場合に治療された標的の色が所望の色の変化に達していないと判定されたか、あるいは標的の密度が所定の密度以下であると判定された場合、計算装置120は工程740で、治療が完了したことを表示して臨床医に治療の完了を知らせ、治療の十分性を確認する方法645は終了する。
実施形態では、工程730により気道が十分に広くなっているか否かを判定してもよい。一般に喘息は狭い気道によって引き起こされる。気道は狭くなったり、詰まったり、粘液、異物もしくは腫れた平滑組織によって制限されたりする。粘液または異物を取り除くか腫れた平滑組織を緩和させる治療により気道を広げてもよい。本実施形態では、気道の大きさを治療前の気道の大きさと比較する。他の確認工程を同様に適用してもよい。
別の実施形態では、監視装置130および/または計算装置120は、臨床医に状況を知らせるカラーコードを表示装置に表示してもよい。その状況はカテーテルガイドアセンブリ110のEWC230の位置に基づいていてもよい。その状況は、カテーテルガイドアセンブリ110のEWC230が標的内でない位置、標的の位置、または健康な組織に隣接する位置にあるか否か、および標的の治療が完了したか否かを示してもよい。例えば、赤色はEWC230が標的内でない位置にあることを示し、緑色はEWC230が標的の位置にあることを示し、黄色はEWC230が健康な組織に隣接していることを示し、かつ橙黄色は治療が完了したことを示すようにカラーコードを使用してもよい。但し、これは一例であって本開示の範囲を限定するものではない。当業者であれば理解するように、他の状況表示システムを用いてもよい。
上に詳細に説明していないが、図1に関して、ネットワークインタフェース128により、他の計算装置、気管支鏡115およびカテーテルガイドアセンブリ110は互いに、有線および/または無線ネットワーク接続を介して通信することができる。図1では、気管支鏡115およびカテーテルガイドアセンブリ110は、有線接続を介して計算装置120へ/から医用画像、医療データおよび制御データを送受信してもよい。ネットワークインタフェース128が他の計算装置または気管支鏡115およびカテーテルガイドアセンブリ110に無線で接続している場合、ネットワークインタフェース128は通信のために周波数を使用するが、これは気管支鏡115またはカテーテルガイドアセンブリ110が取得した画像を送信するために使用する周波数とは異なってもよい。
計算装置120のメモリ126は、ソリッドステート記憶装置、フラッシュメモリチップ、大容量記憶装置、テープ駆動機構、またはストレージコントローラおよび通信バスを介してプロセッサに接続されているあらゆるコンピュータ可読記憶媒体のうちの1つ以上を備えていてもよい。コンピュータ可読記憶媒体としては、コンピュータ可読命令、データ構造、プログラムモジュールまたは他のデータなどの情報の格納のための任意の方法または技術に実装される非一時的な揮発性および不揮発性の取外し可能および取外し不可能な媒体が挙げられる。例えば、コンピュータ可読記憶媒体としては、ランダムアクセスメモリ(RAM)、リードオンリーメモリ(ROM)、消去可能プログラム可能ROM(EPROM)、電気的消去可能プログラム可能ROM(EEPROM)、フラッシュメモリもしくは他のソリッドステートメモリ技術、CD−ROM、DVD、または他の光学記憶装置、磁気カセット、磁気テープ、磁気ディスク記憶装置もしくは他の磁気記憶装置、あるいは所望の情報を格納するために使用することができ、かつ計算装置120がアクセスすることができるあらゆる他の媒体が挙げられる。
実施形態では、表示装置122は、指を摘まんだり広げたりするなどの複数の指の動作を表示装置が受信することができるような入力装置として機能してもよい。例えば、指を摘まんだ場合は、指を摘まむ前にその指が位置している表示装置122上の表示画像の一部は縮小されてもよく、指を広げた場合は、指を広げる前にその指が位置している表示装置122上の肺の画像の一部は拡大されてもよい。あるいは、複数の指で一緒に表示装置122を一方向にスワイプした場合は、スワイプしている方向および回転量がスワイプ動作の距離および/または速度に比例するように表示画像を同じ方向に回転させてもよい。入力装置129を用いてこれらの機能を実行してもよい。
データまたは設定値などの制御情報あるいはテキスト情報を入力するために入力装置129を使用する。入力装置129としては、キーボード、マウス、スキャン装置または他のデータ入力装置が挙げられる。表示画像または3Dモデルを拡大、縮小および一方向へ回転させるように操作するために、入力装置129をさらに使用してもよい。
監視装置130は、気管支鏡115および計算装置120に動作可能に接続されている。監視装置130は、監視装置130の設定可能な項目を設定するためのボタンおよびスイッチを備える。監視装置130は、監視装置130を入力装置および出力装置の両方として機能させることができるタッチセンサ式および/または音声作動式であってもよい。従って、ボタン、監視装置130の画面へのタッチまたは音声を用いて、監視装置130の設定可能な項目を設定、変更または調整してもよい。
気管支鏡115が肺の管腔網の画像を取得し、取得した画像をヒトの目で見ることができるように処理する必要がない場合、特に登録の確認で使用するために臨床医がカテーテルガイドアセンブリ110の位置が意図した場所にあるかを確認することができるように、監視装置130は取得された画像を受信して監視装置130上に表示してもよい。
例示および説明のために添付の図面を参照しながら実施形態について詳細に説明してきたが、当然のことながら本発明の方法および装置は限定されるものとして解釈されるべきではない。本開示の範囲から逸脱することなく、上記実施形態に対して様々な修飾をなし得ることは当業者には明らかであろう。

Claims (20)

  1. 光インタロゲーション用システムであって、
    管腔網の3Dモデルおよび管腔網をナビゲートするための経路計画を格納するメモリと、
    電磁(EM)場を発生するように構成されたEMボードと、
    前記経路計画に従い標的に向かって患者の管腔網をナビゲートするように構成された伸長式作業チャネル(EWC)と、
    前記EWCの遠位端から遠位に延在し、かつ前記EM場を感知するように構成されたEMセンサと、
    前記EWCまたはその周囲に位置し、かつ光を発するように構成された光源と、
    前記EWCまたはその周囲に位置し、かつ前記管腔網の気道から反射された光を感知するように構成された光受信機と、
    前記反射された光を処理するように構成された計算装置であって、前記反射された光は、前記反射された光の振幅および送信から受信までの遅延時間についての情報を有し、前記計算装置は、前記管腔網の3Dモデルから生成された画像内に治療すべき対象が発見されていないか否かを判定するべく前記反射された光についての情報を処理するようにさらに構成され、前記管腔網は肺組織である、計算装置と、
    前記反射された光を光データに変換し、組織の種類もしくは密度を特定し、1つ以上の血管の存在を特定し、前記光データから可視画像を生成し、前記光データを前記3Dモデルと統合するように構成されたプロセッサと、
    を備える、システム。
  2. 前記3Dモデルを用いて統合された光データを表示するように構成された表示装置をさらに備える、請求項1に記載のシステム。
  3. 前記表示装置は、前記EMセンサの位置に基づく状況を表示するようにさらに構成されている、請求項2に記載のシステム。
  4. 前記状況は、前記EMセンサが標的内でない位置、前記標的、または健康な組織に隣接する位置にあるか否かを示す、請求項3に記載のシステム。
  5. 前記状況は、前記標的の治療が完了しているか否かを示す、請求項3に記載のシステム。
  6. 生成された画像は前記管腔網の内部を示す、請求項2に記載のシステム。
  7. 生成された可視画像の解像度は前記3Dモデルの解像度よりも高い、請求項1に記載のシステム。
  8. 前記光源および前記光受信機は、前記EWCの遠位端またはその周囲に位置している、請求項1に記載のシステム。
  9. 前記光データの統合位置は、前記3Dモデル内における前記EMセンサの位置に基づいている、請求項1に記載のシステム。
  10. 前記プロセッサは、前記光データに基づき治療装置が前記標的にあるか否かを判定するようにさらに構成されている、請求項1に記載のシステム。
  11. 前記プロセッサは、前記光データにより前記標的の密度に基づき治療の十分性を判定するようにさらに構成されている、請求項1に記載のシステム。
  12. 前記プロセッサは、蛍光染料で染色されている標的の蛍光の変化に基づき治療の十分性を判定するようにさらに構成されている、請求項1に記載のシステム。
  13. 前記プロセッサは、肺組織からの光の反射パターンに基づき予測アルゴリズムを用いて分光分析を行う、請求項1に記載のシステム。
  14. 前記光源および前記光受信機は、共焦点画像診断装置または光干渉断層撮影装置に一体化されている、請求項1に記載のシステム。
  15. 前記プロセッサは、前記EMセンサと前記光受信機との間の離間距離を判定するようにさらに構成されている、請求項1に記載のシステム。
  16. 前記光データの前記3Dモデルとの統合は前記離間距離に基づいている、請求項15に記載のシステム。
  17. 患者の上に位置し、かつ前記患者の呼吸パターンを認識するように構成された複数の基準センサをさらに備える、請求項1に記載のシステム。
  18. 前記呼吸パターンに基づき患者の呼吸を補正することにより前記EMセンサの位置を特定するように構成された追跡装置をさらに備える、請求項17に記載のシステム。
  19. 生成された画像は、前記3Dモデルとの複合画像データセットを作成するように選択的に融合される、請求項1に記載のシステム。
  20. 前記光源から発せられる光の波長は、400ナノメートルから700ナノメートルに及ぶ、請求項1に記載のシステム。
JP2016540345A 2013-09-06 2014-09-03 光インタロゲーション用システム Expired - Fee Related JP6799463B2 (ja)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201361874881P 2013-09-06 2013-09-06
US61/874,881 2013-09-06
US201462041893P 2014-08-26 2014-08-26
US201462041800P 2014-08-26 2014-08-26
US62/041,800 2014-08-26
US62/041,893 2014-08-26
US14/469,744 US10448861B2 (en) 2013-09-06 2014-08-27 System and method for light based lung visualization
US14/469,744 2014-08-27
PCT/US2014/053890 WO2015034916A1 (en) 2013-09-06 2014-09-03 System and method for light based lung visualization

Publications (3)

Publication Number Publication Date
JP2016530023A JP2016530023A (ja) 2016-09-29
JP2016530023A5 JP2016530023A5 (ja) 2017-10-05
JP6799463B2 true JP6799463B2 (ja) 2020-12-16

Family

ID=52626224

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2016540346A Pending JP2016530024A (ja) 2013-09-06 2014-09-03 光を用いて肺を可視化するためのシステムおよび方法
JP2016540345A Expired - Fee Related JP6799463B2 (ja) 2013-09-06 2014-09-03 光インタロゲーション用システム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2016540346A Pending JP2016530024A (ja) 2013-09-06 2014-09-03 光を用いて肺を可視化するためのシステムおよび方法

Country Status (7)

Country Link
US (3) US10448861B2 (ja)
EP (2) EP3041397A4 (ja)
JP (2) JP2016530024A (ja)
CN (2) CN105611867B (ja)
AU (2) AU2014315366B2 (ja)
CA (2) CA2923464A1 (ja)
WO (2) WO2015034916A1 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015200214A1 (de) * 2015-01-09 2016-07-14 Siemens Healthcare Gmbh Verfahren zur Kommunikation in einer Magnetresonanzeinrichtung und Magnetresonanzeinrichtung
CN107666856B (zh) * 2015-06-02 2021-03-09 科迪影技术股份有限公司 提供几何形状信息的磁感测
US10986990B2 (en) 2015-09-24 2021-04-27 Covidien Lp Marker placement
US10357162B1 (en) * 2015-12-30 2019-07-23 Banpil Photonics, Inc. Imaging system for screening and diagnosis of breast cancer
WO2017136523A1 (en) * 2016-02-06 2017-08-10 The United States Of America As Represented By The Secretary Of The Army Airway management device for identification of tracheal and/or esophageal tissue
US10478254B2 (en) * 2016-05-16 2019-11-19 Covidien Lp System and method to access lung tissue
US10470839B2 (en) * 2016-06-02 2019-11-12 Covidien Lp Assessment of suture or staple line integrity and localization of potential tissue defects along the suture or staple line
CN106075688A (zh) * 2016-07-11 2016-11-09 李景 一种可视多功能插管导芯
US20180049808A1 (en) * 2016-08-17 2018-02-22 Covidien Lp Method of using soft point features to predict breathing cycles and improve end registration
JP7170631B2 (ja) 2016-10-05 2022-11-14 ニューヴェイジヴ,インコーポレイテッド 外科ナビゲーションシステム及び関連する方法
CN107019852B (zh) * 2017-03-14 2020-01-31 苏州大学 模拟人体肺部肿瘤运动的跟踪装置
US11138792B2 (en) 2018-04-02 2021-10-05 Cardioinsight Technologies, Inc. Multi-dimensional method of fundamental solutions for reconstruction of electrophysiological activity
CN114601559B (zh) * 2018-05-30 2024-05-14 奥瑞斯健康公司 用于基于定位传感器的分支预测的系统和介质
US11944388B2 (en) 2018-09-28 2024-04-02 Covidien Lp Systems and methods for magnetic interference correction
EP3955795B1 (en) * 2019-04-17 2024-08-21 University of Pittsburgh - of the Commonwealth System of Higher Education Device for endovascular orifice detection for fenestrated stent graft deployment
US11207141B2 (en) * 2019-08-30 2021-12-28 Auris Health, Inc. Systems and methods for weight-based registration of location sensors
US11612440B2 (en) 2019-09-05 2023-03-28 Nuvasive, Inc. Surgical instrument tracking devices and related methods
CN111513676B (zh) * 2020-04-10 2021-11-02 广州永士达医疗科技有限责任公司 用于检测哮喘患者病期的oct设备、装置及存储介质
CN116712170A (zh) * 2023-05-30 2023-09-08 上海微创医疗机器人(集团)股份有限公司 一种配准方法和装置

Family Cites Families (78)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5129896A (en) * 1989-11-13 1992-07-14 Hasson Harrith M Holder to facilitate use of a laser in surgical procedures
US5244462A (en) 1990-03-15 1993-09-14 Valleylab Inc. Electrosurgical apparatus
DE69332042T2 (de) 1992-12-18 2003-01-02 Koninklijke Philips Electronics N.V., Eindhoven Ortungszurückstellung von relativ elastisch verformten räumlichen Bildern durch übereinstimmende Flächen
US5569289A (en) 1993-06-24 1996-10-29 Yoon; Inbae Safety penetrating instrument with penetrating member and cannula moving during penetration and triggered safety member protusion
US5531520A (en) 1994-09-01 1996-07-02 Massachusetts Institute Of Technology System and method of registration of three-dimensional data sets including anatomical body data
US7778688B2 (en) 1999-05-18 2010-08-17 MediGuide, Ltd. System and method for delivering a stent to a selected position within a lumen
JP2001029490A (ja) * 1999-07-19 2001-02-06 Hitachi Ltd 混合照射評価支援システム
US6749606B2 (en) 1999-08-05 2004-06-15 Thomas Keast Devices for creating collateral channels
US6379302B1 (en) 1999-10-28 2002-04-30 Surgical Navigation Technologies Inc. Navigation information overlay onto ultrasound imagery
US20020007122A1 (en) * 1999-12-15 2002-01-17 Howard Kaufman Methods of diagnosing disease
JP4583658B2 (ja) 2001-05-22 2010-11-17 オリンパス株式会社 内視鏡システム
US7883471B2 (en) 2001-09-10 2011-02-08 Pulmonx Corporation Minimally invasive determination of collateral ventilation in lungs
US7328060B2 (en) * 2002-02-12 2008-02-05 Science & Engineering Associates, Inc. Cancer detection and adaptive dose optimization treatment system
US20070015981A1 (en) * 2003-08-29 2007-01-18 Benaron David A Device and methods for the detection of locally-weighted tissue ischemia
US6711426B2 (en) * 2002-04-09 2004-03-23 Spectros Corporation Spectroscopy illuminator with improved delivery efficiency for high optical density and reduced thermal load
EP1499235B1 (en) 2002-04-17 2016-08-17 Covidien LP Endoscope structures and techniques for navigating to a target in branched structure
US7998062B2 (en) * 2004-03-29 2011-08-16 Superdimension, Ltd. Endoscope structures and techniques for navigating to a target in branched structure
JP4054222B2 (ja) 2002-06-05 2008-02-27 オリンパス株式会社 内視鏡装置用光源装置
WO2004028353A2 (en) * 2002-09-30 2004-04-08 Vanderbilt University Optical apparatus for guided liver tumor treatment and methods
JP4085314B2 (ja) 2002-09-10 2008-05-14 株式会社日立メディコ 超音波診断装置
AU2004214938B2 (en) * 2003-02-26 2008-11-06 Johns Hopkins University Glutamate transport modulatory compounds and methods
EP2316328B1 (en) * 2003-09-15 2012-05-09 Super Dimension Ltd. Wrap-around holding device for use with bronchoscopes
DE10357184A1 (de) 2003-12-08 2005-07-07 Siemens Ag Verfahren zur fusionierten Bilddarstellung
EP1691666B1 (en) 2003-12-12 2012-05-30 University of Washington Catheterscope 3d guidance and interface system
DE10358735B4 (de) 2003-12-15 2011-04-21 Siemens Ag Kathetereinrichtung umfassend einen Katheter, insbesondere einen intravaskulären Katheter
JP2005218760A (ja) 2004-02-09 2005-08-18 Olympus Corp 内視鏡装置
US8764725B2 (en) * 2004-02-09 2014-07-01 Covidien Lp Directional anchoring mechanism, method and applications thereof
US7197354B2 (en) 2004-06-21 2007-03-27 Mediguide Ltd. System for determining the position and orientation of a catheter
JP4648683B2 (ja) 2004-11-09 2011-03-09 Hoya株式会社 内視鏡システム
WO2006076789A1 (en) * 2005-01-24 2006-07-27 Claron Technology Inc. A bronchoscopy navigation system and method
AU2006201646B2 (en) 2005-04-26 2011-01-06 Biosense Webster, Inc. Display of catheter tip with beam direction for ultrasound system
US7889905B2 (en) 2005-05-23 2011-02-15 The Penn State Research Foundation Fast 3D-2D image registration method with application to continuously guided endoscopy
DE102005027951A1 (de) * 2005-06-16 2007-01-04 Siemens Ag Medizinisches System zur Einführung eines Katheters in ein Gefäß
GB2427692A (en) * 2005-06-27 2007-01-03 Intelligent Sensors Plc Non-contact life signs detector
US7835785B2 (en) * 2005-10-04 2010-11-16 Ascension Technology Corporation DC magnetic-based position and orientation monitoring system for tracking medical instruments
US20070173813A1 (en) * 2006-01-24 2007-07-26 Sherwood Services Ag System and method for tissue sealing
WO2008005953A2 (en) 2006-06-30 2008-01-10 Broncus Technologies, Inc. Airway bypass site selection and treatment planning
US7824328B2 (en) * 2006-09-18 2010-11-02 Stryker Corporation Method and apparatus for tracking a surgical instrument during surgery
WO2008125910A2 (en) 2006-11-10 2008-10-23 Superdimension, Ltd. Adaptive navigation technique for navigating a catheter through a body channel or cavity
US7831076B2 (en) 2006-12-08 2010-11-09 Biosense Webster, Inc. Coloring electroanatomical maps to indicate ultrasound data acquisition
US20080167639A1 (en) * 2007-01-08 2008-07-10 Superdimension Ltd. Methods for localized intra-body treatment of tissue
US8672836B2 (en) * 2007-01-31 2014-03-18 The Penn State Research Foundation Method and apparatus for continuous guidance of endoscopy
US8690864B2 (en) * 2007-03-09 2014-04-08 Covidien Lp System and method for controlling tissue treatment
US8821376B2 (en) 2007-03-12 2014-09-02 David Tolkowsky Devices and methods for performing medical procedures in tree-like luminal structures
GB0708567D0 (en) 2007-05-03 2007-06-13 Univ Manchester Imaging technique
US8428690B2 (en) 2007-05-16 2013-04-23 General Electric Company Intracardiac echocardiography image reconstruction in combination with position tracking system
US8535306B2 (en) 2007-11-05 2013-09-17 Angiodynamics, Inc. Ablation devices and methods of using the same
US10492854B2 (en) 2007-12-05 2019-12-03 Biosense Webster, Inc. Catheter-based acoustic radiation force impulse system
US20090299352A1 (en) 2007-12-21 2009-12-03 Boston Scientific Scimed, Inc. Steerable laser-energy delivery device
EP2633811B1 (en) * 2008-02-12 2015-09-16 Covidien LP Controlled perspective guidance method
EP2249737B1 (en) 2008-03-03 2020-07-01 Koninklijke Philips N.V. Biopsy guidance by electromagnetic tracking and photonic needle
US8218846B2 (en) * 2008-05-15 2012-07-10 Superdimension, Ltd. Automatic pathway and waypoint generation and navigation method
JP5110702B2 (ja) 2008-05-22 2012-12-26 富士フイルム株式会社 蛍光画像取得装置
JP5372407B2 (ja) 2008-05-23 2013-12-18 オリンパスメディカルシステムズ株式会社 医療機器
CA2732962A1 (en) 2008-08-04 2010-02-11 University Of Utah Research Foundation Dye application for confocal imaging of cellular microstructure
US8468637B2 (en) 2009-02-06 2013-06-25 Endoclear Llc Mechanically-actuated endotracheal tube cleaning device
US9279140B2 (en) * 2009-02-06 2016-03-08 Kimberly-Clark Worldwide, Inc. Personal care products with visual indicator of vaginitis
US8611984B2 (en) * 2009-04-08 2013-12-17 Covidien Lp Locatable catheter
CN101862331B (zh) * 2009-04-14 2013-05-22 中国中医科学院中药研究所 甲基莲心碱的新用途
EP2429438A1 (en) * 2009-04-24 2012-03-21 Medtronic, Inc. Electromagnetic navigation of medical instruments for cardiothoracic surgery
WO2010138277A1 (en) 2009-05-29 2010-12-02 Xlumena, Inc. Apparatus and method for deploying stent across adjacent tissue layers
US20120238806A1 (en) 2009-08-24 2012-09-20 Quali-Med Gmbh Implantation system with handle and catheter and method of use thereof
DE112010004184B4 (de) * 2009-10-29 2017-10-12 Hoya Corp. Hilfsdiagnoseeinrichtung und Hilfsdiagnoseverfahren
CN102231965B (zh) 2009-11-17 2014-03-12 奥林巴斯医疗株式会社 活检辅助系统
JP2013517909A (ja) 2010-01-28 2013-05-20 ザ ペン ステイト リサーチ ファンデーション 気管支鏡検査法ガイダンスに適用される画像ベースのグローバル登録
JP5877797B2 (ja) 2010-02-18 2016-03-08 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 標的組織の運動を推定するシステム及びその作動方法
JP6153865B2 (ja) 2010-05-03 2017-06-28 ニューウェーブ メディカル, インコーポレイテッドNeuwave Medical, Inc. エネルギー送達システム
US10264947B2 (en) 2010-08-20 2019-04-23 Veran Medical Technologies, Inc. Apparatus and method for airway registration and navigation
US9456737B2 (en) * 2010-11-16 2016-10-04 Given Imaging Ltd. In-vivo imaging device and method for performing spectral analysis
US8688192B2 (en) * 2011-01-31 2014-04-01 Seiko Epson Corporation High-resolution magnetocardiogram restoration for cardiac electric current localization
GB2511375B (en) 2011-05-13 2017-07-26 Spiration Inc Deployment Catheter
US8795241B2 (en) 2011-05-13 2014-08-05 Spiration, Inc. Deployment catheter
US8840605B2 (en) 2011-09-02 2014-09-23 Katalyst Surgical, Llc Steerable laser probe
EP2816966B1 (en) * 2012-02-22 2023-10-25 Veran Medical Technologies, Inc. Steerable surgical catheter comprising a biopsy device at the distal end portion thereof
US9014445B2 (en) 2012-10-11 2015-04-21 Vida Diagnostics, Inc. Visualization and characterization of pulmonary lobar fissures
US9439570B2 (en) * 2013-03-15 2016-09-13 Lx Medical Corporation Tissue imaging and image guidance in luminal anatomic structures and body cavities
JP2017513645A (ja) * 2014-04-28 2017-06-01 カーディオフォーカス,インコーポレーテッド アブレーション処置の際にicg色素組成物を用いて組織を視覚化するためのシステムおよび方法
US20160051221A1 (en) 2014-08-25 2016-02-25 Covidien Lp System and Method for Planning, Monitoring, and Confirming Treatment

Also Published As

Publication number Publication date
EP3041397A4 (en) 2017-05-10
CN105611867B (zh) 2019-09-17
US20200037925A1 (en) 2020-02-06
CN105636502B (zh) 2019-07-30
EP3041398A4 (en) 2017-05-10
CN105636502A (zh) 2016-06-01
WO2015034921A2 (en) 2015-03-12
US20150073268A1 (en) 2015-03-12
AU2014315371A1 (en) 2016-03-24
AU2014315371B2 (en) 2019-02-28
EP3041397A1 (en) 2016-07-13
AU2014315366B2 (en) 2019-02-21
AU2014315366A1 (en) 2016-03-24
CN105611867A (zh) 2016-05-25
JP2016530024A (ja) 2016-09-29
JP2016530023A (ja) 2016-09-29
EP3041398A2 (en) 2016-07-13
US10448862B2 (en) 2019-10-22
CA2923461A1 (en) 2015-03-12
WO2015034916A1 (en) 2015-03-12
US20150073269A1 (en) 2015-03-12
CA2923464A1 (en) 2015-03-12
US10448861B2 (en) 2019-10-22

Similar Documents

Publication Publication Date Title
JP6799463B2 (ja) 光インタロゲーション用システム
US12582328B2 (en) System and method for lung visualization using ultrasound
EP3366254B1 (en) Integration of multiple data sources for localization and navigation

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170825

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170825

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180530

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180619

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180731

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190402

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190917

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191120

C60 Trial request (containing other claim documents, opposition documents)

Free format text: JAPANESE INTERMEDIATE CODE: C60

Effective date: 20191120

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20191127

C21 Notice of transfer of a case for reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C21

Effective date: 20191203

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20200124

C211 Notice of termination of reconsideration by examiners before appeal proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C211

Effective date: 20200128

C22 Notice of designation (change) of administrative judge

Free format text: JAPANESE INTERMEDIATE CODE: C22

Effective date: 20200407

C13 Notice of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: C13

Effective date: 20200526

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200819

C302 Record of communication

Free format text: JAPANESE INTERMEDIATE CODE: C302

Effective date: 20200925

C23 Notice of termination of proceedings

Free format text: JAPANESE INTERMEDIATE CODE: C23

Effective date: 20201006

C03 Trial/appeal decision taken

Free format text: JAPANESE INTERMEDIATE CODE: C03

Effective date: 20201110

C30A Notification sent

Free format text: JAPANESE INTERMEDIATE CODE: C3012

Effective date: 20201110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20201120

R150 Certificate of patent or registration of utility model

Ref document number: 6799463

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees