Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6469731B2 - 画像をセグメント化するためのパラメータの最適化 - Google Patents
[go: Go Back, main page]

JP6469731B2 - 画像をセグメント化するためのパラメータの最適化 - Google Patents

画像をセグメント化するためのパラメータの最適化 Download PDF

Info

Publication number
JP6469731B2
JP6469731B2 JP2016571734A JP2016571734A JP6469731B2 JP 6469731 B2 JP6469731 B2 JP 6469731B2 JP 2016571734 A JP2016571734 A JP 2016571734A JP 2016571734 A JP2016571734 A JP 2016571734A JP 6469731 B2 JP6469731 B2 JP 6469731B2
Authority
JP
Japan
Prior art keywords
image
contour
region
parameter
class
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016571734A
Other languages
English (en)
Other versions
JP2017524404A5 (ja
JP2017524404A (ja
Inventor
ダニエル ビストロフ
ダニエル ビストロフ
ハインリッヒ シュルツ
ハインリッヒ シュルツ
トルビョーン ヴィーク
トルビョーン ヴィーク
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2017524404A publication Critical patent/JP2017524404A/ja
Publication of JP2017524404A5 publication Critical patent/JP2017524404A5/ja
Application granted granted Critical
Publication of JP6469731B2 publication Critical patent/JP6469731B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T12/00Tomographic reconstruction from projections
    • G06T12/10Image preprocessing, e.g. calibration, positioning of sources or scatter correction
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/12Edge-based segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/136Segmentation; Edge detection involving thresholding
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20092Interactive image processing based on input by user
    • G06T2207/20101Interactive definition of point of interest, landmark or seed
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Data Mining & Analysis (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Radiology & Medical Imaging (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • General Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Image Analysis (AREA)
  • Apparatus For Radiation Diagnosis (AREA)
  • Image Processing (AREA)
  • Radiation-Therapy Devices (AREA)

Description

本発明は、被験者の画像をセグメント化するデバイス、システム及び方法に関する。本発明は、特に放射線療法治療計画のためのソフトウェアベースのインタラクティブ画像解析に応用される。
医用撮像の分野において、画像セグメンテーションは、デジタル画像をピクセル又はボクセルである画素からなる複数のセグメントに分割するプロセスである。画像ベースの医学分析、医療計画のため、すなわち医用画像における視覚化若しくはコンテキストベースのナビゲーションの改善のため、画像セグメンテーションは不可欠な技術である。例えば放射線療法治療計画にとって、画像セグメンテーションは、放射線感受性の解剖学的構造が損傷するのを防ぐために重要である。
画像をセグメント化する様々なやり方が存在する。例えば、閾値又は外観ベースのセグメンテーションアルゴリズム、アトラス登録に基づくセグメンテーションアルゴリズム又は形状モデルベースのセグメンテーションアルゴリズム等である。
あらゆる画像セグメンテーション方法のうち、幾つかのセグメンテーションタスクに自動化方法が利用できない場合、又は自動セグメンテーションアルゴリズムの結果が手動による修正を必要とする場合には、インタラクティブ画像セグメンテーション技術が必要となる。例えばインタラクティブ画像セグメンテーションの一般に認められた技術は、画像スライスの手動による輪郭形成である。通常幾つかの解剖学的構造にのみ可能な自動画像セグメンテーションと対照的に、インタラクティブ画像セグメンテーションは高いユーザ柔軟性を提供する。例えば、様々な画像診断法及び/又は特定の撮像プロトコルと共に利用することができる。
米国特許出願公開2010/022489A1は、画像を受信するステップ、初期のセグメンテーションパラメータに基づいて画像のセグメントを生成するステップ、生成されたセグメントの特徴を分類するステップ、及び少なくとも1つの修正されたセグメンテーションパラメータを生成するステップを含む、画像をセグメント化するコンピュータ実装方法を開示する。さらに、関心のある輪郭を抽出でき、セグメンテーションパラメータが変更されるときに異なる輪郭を作成することができる。
Vincent,Martin等による「A Cognitive Vision Approach to Image Segmentation」,「Tools in Artificial Intelligence」,208,InTech Education and Publishing,pp.265−294は、閉じた輪郭を持つ領域を有する訓練画像の手動セグメンテーションのための枠組みを開示する。特に、この枠組みは、セグメンテーション品質関数を定義すること、及びセグメンテーション品質関数を最小化又は最大化することによりパラメータのセットを最適化することを含む。
欧州特許出願公開1526481A2は、第1の領域及び第2の領域をセグメント化する方法及び装置を開示し、該方法は、画像のどのピクセルが第1の領域と関連すると分類する基準を満たすか、及び、画像のどのピクセルが第2の領域と関連すると分類する基準を満たすかを、1つ以上の配色に基づいて学習機械を用いて決定することを含む。
William B.Kerr等による「A Methodology and Metric for Quantitative Analysis and Parameter Optimization of Unsupervised, Multi−Region Image Segmentation」,Proceeding of the 8th IASTED International Conference on Signal and Image Processing,14 August 2006,pp.243−248は、8つの個別のパフォーマンス尺度に基づいた、教師なしの複数領域画像セグメンテーションの定量分析及びパラメータ最適化のための方法を開示する。機械でセグメント化された画像と対応するグラウンドトルース画像の重複の統計的分析に基づく、アルゴリズムパラメータを評価及び最適化するための測定基準が開示され、教師なしのセグメンテーションアルゴリズムのアルゴリズム間性能が比較される。
しかしながら、当技術分野で知られているインタラクティブ画像セグメンテーションツールは、しばしば多くの技術的パラメータを選択及び最適に調整する必要があるため、その効率性が限られている。さらに、例えば不正確な輪郭補正のために、セグメンテーション結果の信頼性が限られていることも多い。これにより、追加の画像セグメンテーションによりコストが高くなるとともに、致命的結果を有する非最適な放射線療法治療計画がもたらされる。
本発明の目的は、被験者のインタラクティブ画像セグメンテーションを行う、信頼性が高く、正確かつ簡単なデバイス、システム及び方法を提供することである。
本発明の第1の態様において、被験者の画像をセグメント化するデバイスであって、被験者の画像、及び、画像内の構造を示す少なくとも1つの輪郭又は少なくとも1つの輪郭の一部を受信するデータインターフェースと、輪郭又は輪郭の一部により第1及び第2の分離部に分割され、描画された領域及び/又は計算された領域を含む画像内の領域を選択する選択ユニットと、画像セグメンテーションのための少なくとも1つのパラメータに基づいて選択された領域を分類する分類器と、分類結果に基づいて目的関数を定義する分析ユニットと、目的関数の出力を変化させることによりパラメータのセットを最適化するオプティマイザと、最適化されたパラメータのセットを使用して画像をセグメント化する画像セグメンテーションユニットとを有するデバイスが示される。好ましくは、分類器は、輪郭又は輪郭の少なくとも一部を分類しないように構成される。
受信された画像内の領域を選択できることで、ユーザは、高い自由度及び柔軟度で画像をインタラクティブにセグメント化することができる。特に、前述の従来技術に開示された技術と対照的に、本発明は、完全にユーザの選択に基づいて局所領域を直接選択できるようにする。領域は、初期のセグメンテーションパラメータに基づいてデバイスにより生成されないため、ユーザは、領域選択の正確さに直接的影響を及ぼす。初期のセグメンテーションパラメータは必要なく、誤ったパラメータを使用するリスクが回避される。したがって、本発明は、インタラクティブ画像セグメンテーションの効率的なやり方を可能にする。
受信された画像内の与えられた輪郭を用いることで、関心のある構造を容易に認識することができ、画像セグメンテーションの追加的な手順の効率性を高める。与えられた輪郭又は輪郭の一部により2つの分離部に分割される領域を選択し、この領域を分類することにより、本発明は、グローバルな画像セグメンテーション及び/又は輪郭補正のために局所的に画像セグメンテーションパラメータを最適化することができる。特に、本発明は、パラメータの最適化のために選択される領域が与えられた輪郭の近くにあるという点で、知られている画像セグメンテーション技術、例えば前述の従来技術に開示された技術と異なる。このことは、このように最適化されたセグメンテーションパラメータを最小限の追加的な調整の有無にかかわらず、与えられた輪郭又は輪郭の一部を調整するのに直接使用できるために有利である。結果的に、受信された画像のインタラクティブセグメンテーションを単純化することができる。
本発明は、特に放射線療法計画に用いられる場合に有利である。患者の解剖学的構造の複雑さに起因して、放射線療法計画を実行する術者は、多くのパラメータを同時に調整することができるインタラクティブ画像セグメンテーションツールを必要とすることが多い。当技術分野で知られている放射線療法計画システムは、理解するのが難しい複雑なグラフィカルユーザインターフェースを装備していることが多い。さらに、パラメータを最適化し、輪郭を調整するには、術者は多くの場合かなりの訓練が必要である。本発明を用いることで、術者は、単にコンピュータのマウスカーソル及び/又はタッチスクリーンと共にユーザの指又は他の手段を使用して領域を選択することができる。複雑なグラフィカルユーザインターフェースは不要であり、術者は満足のいく信頼度で画像セグメンテーションタスクを遂行するために、多数のパラメータに精通している必要がない。最後に、目的関数を定義すること、及び目的関数の出力を増加させることにより、セグメンテーションパラメータを、目的関数の実際のアルゴリズムの詳細と無関係に直接的かつ正確に最適化することができる。したがって、セグメンテーション品質を維持する、ひいては向上させつつ、画像のグローバルなセグメンテーションを単純化することができる。
好ましい実施形態において、分類器は、選択された領域を第1及び第2の画像クラスに分類するように構成される。これには、少なくとも1つの画像セグメンテーションパラメータを含むパラメータのセットを最小限の計算量で局所的に最適化できるという利点がある。
別の好ましい実施形態において、第1の画像クラスは、第1の分離部の主要な画像クラスである。本発明の範囲内において、基本的に画像のサブセットを表す主要な画像クラスは、画像又は画像の一部を実質的に特徴づける画像クラスである。これは、画像又は画像の一部が主要な画像クラスに分類される場合に分類が肯定的であることを意味する。有利には、第1の分離部は、画像セグメンテーションの次のステップにおいてパラメータのセットの追加補正のための計算量を最小化できるように正確に分類される。
別の好ましい実施形態において、第2の画像クラスは、第2の分離部の主要な画像クラスである。有利には、第2の分離部は、画像セグメンテーションの次のステップにおいてパラメータのセットの追加補正のための計算量を最小化できるように正確に分類され、迅速かつ効率的な画像セグメンテーションをもたらす。
別の好ましい実施形態において、オプティマイザは、第1の分離部から第1の画像クラスに対応する第1の区域を決定するように構成される。この実施形態は、第1の分離部のサイズに関する第1の区域のサイズが、第1の分離部と第1の分離部内の実際の画像詳細との間の一致の尺度であるため有利である。したがって、選択された領域、特に第1の分離部を分類するのに使用されるパラメータのセットの品質を決定することができる。
別の好ましい実施形態において、オプティマイザは、第2の分離部から第2の画像クラスに対応する第2の区域を決定するように構成される。この実施形態は、第2の分離部のサイズに関する第2の区域のサイズが、第2の分離部と第2の分離部内の実際の画像詳細との間の一致の尺度であるため有利である。したがって、選択された領域、特に第2の分離部を分類するのに使用されるパラメータのセットの品質を決定することができる。
別の好ましい実施形態において、目的関数は、第1及び第2の区域の和を含む。このように、選択されたパラメータのセットの品質を高い精度で決定できるように、信頼性の高い目的関数が選択される。これは、特に、第1の画像クラスが第1の分離部の主要な画像クラスである場合、及び/又は第2の画像クラスが第2の分離部の主要な画像クラスである場合である。
別の好ましい実施形態において、オプティマイザは、目的関数の出力を最大化するように構成される。有利には、パラメータのセットは、画像を特に高い信頼性で分類できるように最適化され得る。
別の好ましい実施形態において、オプティマイザは、第1及び/又は第2の分離部のグラウンドトルース分類に従って目的関数の出力を最大化するように構成される。グラウンドトルース分類を用いることで、選択された領域の第1及び/又は第2の分離部は、パラメータ最適化、ひいては画像セグメンテーションの結果が信頼性の高いものとなるように高い精度で分類され得る。
別の好ましい実施形態において、画像セグメンテーションユニットは、最適化されたパラメータのセットを使用して輪郭又は輪郭の一部を調整するように構成される。有利には、輪郭補正は、単純かつ直観的なインタラクティブ画像セグメンテーション技術を使用して可能になる。
別の好ましい実施形態において、輪郭は、描画された輪郭及び/若しくは計算された輪郭を含み、並びに/又は選択された領域は、描画された領域及び/若しくは計算された領域を含む。このように、本発明は、ユーザ柔軟度が増すように、輪郭のタイプと無関係に使用され得る。有利には、ユーザは、インタラクティブ画像セグメンテーションがさらに単純化されるように、パラメータ最適化のための領域を自由に選択することができる。
本発明の別の態様において、被験者の画像をセグメント化するシステムであって、被験者の少なくとも1つの画像を生成する撮像装置と、生成された少なくとも1つの画像をセグメント化する本明細書に開示されるデバイスとを有するシステムが示される。本発明によるシステムは、医用画像を生成することだけでなく、当技術分野で知られているシステムと比較して、より正確で信頼性があると同時に単純化されたインタラクティブ画像セグメンテーションも可能にするという利点を有する。
本発明の別の態様において、被験者の画像をセグメント化する方法であって、被験者の画像、及び画像内の構造を示す少なくとも1つの輪郭又は輪郭の少なくとも一部を受信するステップと、輪郭又は輪郭の一部により第1及び第2の分離部に分割され、描画された領域及び/又は計算された領域を含む画像内の領域を選択するステップと、画像セグメンテーションのために少なくとも1つのパラメータに基づいて選択された領域を分類するステップと、分類結果に基づいて目的関数を定義するステップと、目的関数を増減させることによりパラメータのセットを最適化するステップと、最適化されたパラメータのセットを使用して画像をセグメント化するステップとを含む方法が示される。
本発明による方法を使用して、インタラクティブ画像セグメンテーションを異なるタイプの医用画像に容易に適用することができる。したがって、直観的で単純化されたインタラクティブ画像セグメンテーション技術が可能となる結果、理解するのが困難で使いにくく、多くの訓練が必要な複雑なグラフィカルユーザインターフェースを回避することができる。
本発明のさらに別の態様では、プログラムがコンピュータで実行される場合に、コンピュータに、本明細書に開示される方法のステップを実行させるためのプログラムコード手段を有するコンピュータプログラムが提供される。さらに、デバイスによって実行されたときに、本明細書に開示される方法が実行されるようにするコンピュータプログラムプロダクトを保存する非一時的なコンピュータ可読記憶媒体が提供される。
本発明の好ましい実施形態は、従属請求項に規定される。請求項に係るシステム、方法及びコンピュータプログラムは、請求項に係るデバイスの実施形態及び従属請求項に規定される実施形態と類似の及び/又は同一の好ましい実施形態を有することを理解されたい。
本発明のこれらの態様及び他の態様は、後述する1つ以上の実施形態から明らかとなり、かかる実施形態を参照して解明されるであろう。
図1は、本発明によるデバイスの実施形態の概略ブロック図である。 図2は、本発明によるシステムの実施形態の概略ブロック図である。 図3は、本発明による方法の実施形態を示す。 図4は、図1のデバイスの実施形態で使用される画像の説明図を示す。
図1を参照すると、ある実施形態による被験者14(図2)の画像12をセグメント化するデバイス10の概略ブロック図が示されている。デバイス10は、被験者14の画像12、及び、特に被験者14の解剖学的構造に関連する構造19(図4、破線)を示す少なくとも1つの輪郭18を受信するデータインターフェース16を有する。図1には輪郭全体が示されているが、本発明は輪郭の一部と共に使用されることも理解される。輪郭18は、ペン/鉛筆を使用して描かれるか、又は機械、特にコンピュータにより生成される。データインターフェース16は、当技術分野で知られている任意のタイプのデータインターフェース、特に撮像装置及び本明細書に開示されるデバイスを接続するデータインターフェースであり得る。データインターフェース16のタイプは、Current Loop、RS−232,GPIB,V.35等を含むがこれらに限定されない。
デバイス10は、画像12内の領域22(図4)を、領域22が輪郭18により第1の分離部24及び第2の分離部26(図4)に分割されるように選択する選択ユニット20を有する。好ましい実施形態において、選択ユニット20は、ユーザがモニタ上でマウスカーソルを動かすことにより画像12内の領域22を選択できるように、マウスカーソル及び/又はモニタと併用される手段を有する。代替的に、ユーザは、タッチスクリーン上で指又は他の手段を動かすことにより画像12内の領域22を選択することができる。選択ユニット20は、1つ以上の画像及び/又はテキスト編集ソフトウェアのような既存の画像及び/又はテキスト編集手段と協働する。
デバイス10はさらに、少なくとも1つの画像セグメンテーションパラメータを含むパラメータのセットに基づいて、選択された領域22を分類する分類器28を有する。パラメータのセットは、複数の画像セグメンテーションパラメータを含み、分類器28は、選択された領域22の第1の分離部24及び第2の分離部26に同じ又は異なる画像セグメンテーションパラメータを適用する。好ましい実施形態において、パラメータのセットは、形状及び/又は外観パラメータ、特にグレー値遷移、画像勾配、及び/又は曲率平滑度を含む。この実施形態は、本発明を多くの画像タイプ及び/又は解剖学的構造に適用できるように、多くの異なる画像セグメンテーションパラメータを最適化できるため有利である。別の好ましい実施形態において、分類器28は、好ましくはデータインターフェース16を介して、データベース、クラウドシステム、ローカル通信ネットワークのような外部データ要素から1つ以上の画像セグメンテーションパラメータを選択する。
デバイス10はさらに、選択された領域22を分類するために選択されたパラメータのセットの品質を決定する分析ユニット29を有する。そうするために、分析ユニット29は、目的関数を定義するように構成される。分析ユニット29は、目的関数を定義するために、ライブワイヤアルゴリズム、グラウンドトルース、2D又は3Dセグメンテーションアルゴリズム、機械学習等のような1つ以上のアルゴリズムを利用する。好ましい実施形態において、分析ユニット29は、選択された領域22の第1の分離部24及び第2の分離部26のための目的関数を、例えば別々に定義する。別の好ましい実施形態において、分析ユニット29は、選択された領域22のための単一の目的関数を定義する。しかしながら、本発明はこれらの実施形態に限定されない。別の好ましい実施形態において、分析ユニット29は、輪郭18が領域22内の構造にどの程度一致しているかを反映するように目的関数を定義する。別の好ましい実施形態において、目的関数は、画像セグメンテーションパラメータの1つのみ又は複数に関連する。特に、目的関数は、1つ以上の画像セグメンテーションパラメータに基づいて定義される。好ましい実施形態において、分析ユニット29は、画像クラスの1つのみ又は複数に基づいて目的関数を定義する。
デバイス10は、目的関数の出力を変化させることによりパラメータのセットを最適化するオプティマイザ30を有する。好ましい実施形態において、オプティマイザ30は、好ましくはデータインターフェース16を介して、データベース、クラウドシステム、インターネット及び/又はローカル通信ネットワークといった外部データ要素からパラメータのセットを最適化する1つ以上のアルゴリズムを選択する。別の好ましい実施形態において、オプティマイザ30は、目的関数の出力を増加又は減少させる。別の好ましい実施形態において、オプティマイザ30は、目的関数の出力を最大化又は最小化する。さらに別の好ましい実施形態において、オプティマイザ30は、複数回の反復を行うように構成され、目的関数の出力は、各反復において固定又は可変増分だけ変化させられる。
デバイス10はさらに、最適化されたパラメータのセットを使用して画像12をセグメント化する画像セグメンテーションユニット32を有する。好ましい実施形態において、画像セグメンテーションユニット32は、マウスカーソル又はユーザの指、及び/又は1つ以上の画像セグメンテーション機能と共に使用される。画像12は、最適化されたパラメータのセットを使用して完全に又は部分的にセグメント化され得る。好ましくは、ユーザは、マウスカーソルを使用して、最適化されたパラメータのセットを使用して画像セグメンテーションユニット32によりセグメント化された、モニタ上の画像12の一部を選択する。これは、ユーザの指又は他の手段を使用してタッチスクリーン上の画像12の一部を選択することによっても行われる。
図2を参照すると、ある実施形態による、画像、特に被験者の画像12をセグメント化するシステム34の概略ブロック図が示されている。システム34は、被験者14の少なくとも1つの画像12を生成する撮像装置36、及び画像をセグメント化するデバイス、特に図1のデバイス10を有する。撮像装置36は、X線、超音波、コンピュータ断層撮影(CT)、磁気共鳴撮像(MRI)、ポジトロン放出断層撮影(PET)、内視鏡撮像、サーモグラフィ、エラストグラフィ等といった技術を採用する、医用撮像の分野で知られている任意のタイプの撮像装置を含む。撮像装置36は、好ましくは放射線療法計画を可能にする装置である。好ましくは、撮像装置36は、線量測定、及び/又はHDR小線源療法及び/又はLDR小線源療法といった小線源療法の最適化を可能にする装置である。別の好ましい実施形態において、撮像装置36は、1つ以上の線量−体積ヒストグラムによる放射線療法計画を可能にする。しかしながら、本発明はこれらの実施形態に限定されない。被験者14及び撮像装置36間の破線は、あくまで説明のためのものであり、技術的特徴を持たないことに留意されたい。特に、被験者14を撮像装置36により完全に又は部分的に捕捉できることに留意されたい。
図3を参照すると、本発明のある実施形態による、被験者、特に被験者14の画像、特に画像12をセグメント化する方法の概略ブロック図が示されている。この方法の第1のステップ101において、被験者14の画像12及び輪郭18は、データインターフェース16を介して受信される。輪郭18は、画像12内の構造19(破線)に対応し、構造は、通常、人、哺乳動物又はその他の生物を含む生体被験者の1つ以上の解剖学的構造/器官に関係する。好ましい実施形態において、画像12及び/又は輪郭18は、第1のステップ101において内部又は外部メモリユニットに記憶される。第2のステップ102において、領域、特に画像12内の領域22は、輪郭18により第1及び第2の分離部24、26に分割されるように選択される。好ましい実施形態において、この方法の第2のステップ102は、好ましくはコンピュータプログラムと共にユーザにより実行される。第3のステップ103において、選択された領域22は、少なくとも1つの画像セグメンテーションパラメータを含むパラメータのセットに基づいて分類される。次に、第4のステップ104において、目的関数が定義され、選択された領域22を分類するのに使用されるパラメータのセットの品質を決定する。第5のステップ105において、パラメータのセットは、第4のステップ104から目的関数を変化させることにより最適化される。第6のステップ106において、第5のステップ105において最適化されたパラメータのセットは、画像12をセグメント化するのに使用される。また、輪郭全体の代わりに、輪郭の一部が本発明による方法により使用されてもよいことが理解される。
本明細書に開示される全ての実施形態において、画像セグメンテーションユニット32は、好ましくは最適化されたパラメータのセットを使用して輪郭18を調整するように構成される。好ましくは、ユーザは、マウスカーソルを使用して輪郭18の1つ以上の部分を選択し、マウスカーソルにより選択された1つ以上の部分を強調する。さらに好ましくは、ユーザは、マウスカーソルを1つ以上の部分に移動させることにより、選択された領域22に最適化されたパラメータのセットを輪郭18の残りの部分において選択された1つ以上の部分に移動させる。このとき画像セグメンテーションユニット32は、最適化されたパラメータのセットを輪郭18の選択された1つ以上の部分に適用する。このように、当技術分野で知られているテキスト編集ツールと同様に、「コピーアンドペーストセグメンテーション特性」を可能にするインタラクティブ画像セグメンテーションが実現される。本発明はまた、画像12全体をセグメント化する、及び/又は複数の画像を連続的に又は同時にセグメント化するのに適用される。
図4を参照すると、本発明のある実施形態による説明図が示されている。図4Aは、本発明による撮像装置36といった当技術分野において知られている撮像装置により生成される画像を示す。画像12内に輪郭18が見られる。さらに図4Aから、輪郭18は、破線により表される構造19に完全には一致していないことが分かる。
図4Bは、本発明を用いて処理された画像12を示す。輪郭18は、図4A及び図4Bの構造19と異なる区域38を囲む。領域22は、輪郭18により第1の分離部24及び第2の分離部26に分割されるように、輪郭18の近くに選択される。第1の分離部24は、区域38内部に位置し、輪郭18及び領域22の外周で囲まれる一方、第2の分離部26は区域38の外側に位置する。領域22が選択された後、パラメータのセットが使用されて領域22を分類する。パラメータのセットは、1つ以上の画像セグメンテーションパラメータ、特にグレー値遷移、画像勾配、曲率平滑度、又はその他の形状及び/又は外観パラメータを含む。好ましい実施形態において、領域22は、閾値パラメータtに基づいて第1の画像クラスCA及び第2の画像クラスCBに分類される。これらは次の式(1)を使用して実行される:
ここで、I(x)は、その値が閾値パラメータtと比較される画素xの関数である。好ましくは、第1の画像クラスは、構造19を実質的に特徴づける主要な画像クラス又は主要な画像クラスの1つに選択される。さらに、第2の画像クラスは、構造19に隣接する領域を特徴づける主要な画像クラス又は主要な画像クラスの1つに選択される。例えば、構造19ががん組織の画像クラスで実質的に特徴づけられる人体の領域であり、構造19に隣接する領域が健常組織の画像クラスで実質的に特徴づけられる場合、第1の画像クラスはがん組織タイプに選択され、第2の画像クラスは健常組織に選択され得る。しかしながら、これは、本発明を決して限定しない画像クラスの選択の一例と理解されるべきである。特に、3つ以上の画像クラスが選択されて、選択された領域22を分類してもよい。
選択された領域22の分類に基づいて、領域22を分類するのに使用されるパラメータのセットの品質を反映する目的関数を定義することができる。好ましい実施形態において、目的関数は、第1及び第2の区域の和であってもよく、第1の区域は、第1の画像クラスに分類された第1の分離部24内部の全ての画素、特に全てのピクセル及び/又はボクセルの区域である。さらに、第2の区域は、好ましくは第2の画像クラスに分類された第2の分離部26内部の全ての画素、特に全てのピクセル及び/又はボクセルの区域である。しかしながら、このことは本発明を限定していない。特に、目的関数は、第1の区域又は第2の区域の画素の和である。代替的に、目的関数は、選択された領域22全体内の第1の画像クラス又は第2の画像クラスに分類された全てのピクセル及び/又はボクセルの区域の和である。別の好ましい実施形態において、目的関数は、式(1)の閾値パラメータtに基づき、式(2)に従って定義される:
ここで、Aは第1の分離部24を表し、Bは第2の分離部26を表す。式(2)は、目的関数を式(1)に従った分類を使用した、第1の画像クラスCAに同時に分類される第1の分離部24の全ての画素の第1の区域、及び第2の画像クラスCBに同時に分類される第2の分離部26の全ての画素の第2の区域の和として表す。
次のステップにおいて、領域22を分類するのに選択されたパラメータのセットが最適化される。好ましい実施形態において、式(1)及び(2)に示される閾値パラメータtは、式(2)に規定された第1の区域及び第2の区域の和Sを最大化することにより最適化され、式(3)をもたらす:
このように、閾値パラメータtは、式(2)に規定される第1の区域及び第2の区域の和を最大化する最適化された閾値toptが生成されるように最適化される。別の好ましい実施形態において、閾値パラメータtは、第1の分離部24及び/又は第2の分離部26のグラウンドトルース分類を使用して閾値toptを得るように最適化される。本発明は、インタラクティブ画像セグメンテーションの簡単かつ直観的なやり方を可能にし、これによりユーザは、好ましくは単にモニタ上に示されるマウスカーソルを使用して与えられた輪郭の近くに領域を選択することにより、局所的なパラメータ最適化を行うことができる。
目的関数を最大化する代わりに、本発明の方法、デバイス10及びシステム34は、目的関数の出力を最小化し、選択された領域22を分類するのに使用されるパラメータのセットを最適化できるようにすることが理解される。例えば、第1の画像クラスは、構造19を実質的に特徴づけない、第1の分離部24に関する非主要な画像クラスであり、第2の画像クラスは、構造19に隣接する領域を実質的に特徴づけない、第2の分離部26に関する非主要な画像クラスである。この場合、閾値パラメータtは、第1及び第2の区域の和を最小化することにより最適化される。このように、本発明は、分類エラーが自動的に訂正されるように、パラメータのセットの選択、又は領域の分類結果と関係なく用いられる。
次のステップにおいて、図4Bの選択された領域22に最適化されたパラメータのセットは、輪郭18の残りの部分を調整するのに適用される。この輪郭調整の結果は、図4Cに例示的に示される。調整前の輪郭18よりも構造19にかなりよく一致する調整された輪郭18’が示されている。同様に、画像12の残りの画素もまた、最適化されたパラメータのセットを使用してセグメント化される。
図4A〜図4Cに示される画像は、全て説明のためのものであり、実際の被験者から生成される実際の画像の正確さを要求しないことに留意されたい。
本発明は、図面及び前述の記載において詳細に図示及び説明されたが、このような図示及び記載は、解説的又は例示的であって限定するものではないと見なされるべきである。すなわち本発明は、開示された実施形態に限定されるものではない。開示された実施形態に対する他のバリエーションは、当業者により、請求項に係る発明を実施する際に、図面、開示内容、及び添付の請求項の精査から理解され、達成され得る。
請求項において、「有する(comprising)」なる単語は、他の要素又はステップを排除するものではなく、不定冠詞「a」又は「an」は、複数を排除するものではない。単一のプロセッサ又は他のユニットは、請求項に列挙されたいくつかの項目の機能を充足する。特定の手段が相互に異なる従属請求項に引用されているという単なる事実は、これら手段の組み合わせを有利に使用することができないことを示すものではない。
コンピュータプログラムは、他のハードウェアと共に若しくは他のハードウェアの一部として供給される光記憶媒体又はソリッド−ステート媒体等の適切な媒体に保存/分配されてもよいが、インターネット又は他の有線若しくは無線の電気通信システムを介して等の他の形式で分配されてもよい。
請求項における任意の参照符号は、本発明の範囲を限定するものと解釈されるべきではない。

Claims (12)

  1. 被験者の画像をセグメント化するデバイスであって、当該デバイスは、
    前記被験者の画像と、前記画像内の構造を示す少なくとも1つの輪郭又は輪郭の少なくとも一部とを受信するデータインターフェースと、
    前記輪郭又は前記輪郭の前記一部により第1の分離部及び第2の分離部に分割される前記画像内の領域をユーザが選択する選択ユニットと、
    画像セグメンテーションのための少なくとも1つのパラメータに基づいて、選択された前記領域の第1の画像区域を第1の画像クラスに分類し、選択された前記領域の第2の画像区域を第2の画像クラスに分類する分類器であって、前記第1の画像クラスは前記第1の分離部についての特徴があり、前記第2の画像クラスは前記第2の分離部についての特徴がある、分類器
    目的関数の出力が最大化又は最小化される前記少なくとも1つのパラメータの値を見つけることにより前記少なくとも1つのパラメータを最適化するオプティマイザであって、前記目的関数は、前記少なくとも1つのパラメータの品質を決定し、前記第1の画像区域及び第2の画像区域に基づいている、オプティマイザと、
    最適化された前記少なくとも1つのパラメータを使用して前記画像をセグメント化する画像セグメンテーションユニットとを有し、
    前記選択ユニットは、前記輪郭を前記領域の内部の第1の輪郭部及び前記領域の外部の第2の輪郭部に分割するように前記領域を選択し、
    前記画像セグメンテーションユニットは、前記領域に最適化された前記少なくとも1つのパラメータを、前記第2の輪郭部において選択された少なくとも一部分に適用する、デバイス。
  2. 前記第1の画像クラスは、前記第1の分離部の主要な画像クラスである、請求項1に記載のデバイス。
  3. 前記第2の画像クラスは、前記第2の分離部の主要な画像クラスである、請求項1に記載のデバイス。
  4. 前記オプティマイザは、前記第1の分離部から前記第1の画像クラスに対応する第1の区域を決定する、請求項1に記載のデバイス。
  5. 前記オプティマイザは、前記第2の分離部から前記第2の画像クラスに対応する第2の区域を決定する、請求項1に記載のデバイス。
  6. 前記目的関数は、前記第1の区域と前記第2の区域との和を含む、請求項4及び5に記載のデバイス。
  7. 前記オプティマイザは、前記第1の分離部及び/又は前記第2の分離部のグラウンドトルース分類に従って前記目的関数の前記出力を最大化する、請求項に記載のデバイス。
  8. 前記画像セグメンテーションユニットは、前記最適化されたパラメータのセットを使用して前記輪郭又は前記輪郭の前記一部を調整する、請求項1に記載のデバイス。
  9. 前記輪郭又は前記輪郭の前記一部は、描画された輪郭若しくは輪郭の描画された一部及び/又は計算された輪郭を含む、請求項1に記載のデバイス。
  10. 被験者の画像をセグメント化するシステムであって、
    前記被験者の少なくとも1つの画像を生成する撮像装置と、
    生成された前記少なくとも1つの画像をセグメント化する請求項1に記載のデバイスとを有する、システム。
  11. 被験者の画像をセグメント化する方法であって、
    前記被験者の画像と、前記画像内の構造を示す少なくとも1つの輪郭又は輪郭の少なくとも一部とを受信するステップと、
    前記輪郭又は前記輪郭の一部により第1の分離部及び第2の分離部に分割され、ユーザによって描画された領域及び/又はコンピュータによって生成された領域を含む、前記画像内の領域をユーザが選択するステップと、
    画像セグメンテーションのために少なくとも1つのパラメータに基づいて選択された前記領域の第1の画像区域を第1の画像クラスに分類し、選択された前記領域の第2の画像区域を第2の画像クラスに分類するステップであって、前記第1の画像クラスは前記第1の分離部についての特徴があり、前記第2の画像クラスは前記第2の分離部についての特徴がある、ステップ
    目的関数の出力が最大化又は最小化される前記少なくとも1つのパラメータの値を見つけることにより前記少なくとも1つのパラメータを最適化するステップであって、前記目的関数は、前記少なくとも1つのパラメータの品質を決定し、前記第1の画像区域及び第2の画像区域に基づいている、ステップと、
    最適化された前記少なくとも1つのパラメータを使用して前記画像をセグメント化するステップとを含み、
    前記輪郭を前記領域の内部の第1の輪郭部及び前記領域の外部の第2の輪郭部に分割するように前記領域を選択するステップと、
    前記領域に最適化された前記少なくとも1つのパラメータを、前記第2の輪郭部において選択された少なくとも一部分に適用するステップとを更に含む、方法。
  12. コンピュータプログラムがコンピュータで実行される場合に、前記コンピュータに、請求項11に記載の方法のステップを実行させるためのプログラムコード手段を有する、コンピュータプログラム。
JP2016571734A 2014-06-12 2015-06-11 画像をセグメント化するためのパラメータの最適化 Active JP6469731B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP14172124 2014-06-12
EP14172124.1 2014-06-12
PCT/EP2015/062994 WO2015189303A1 (en) 2014-06-12 2015-06-11 Optimization of parameters for segmenting an image

Publications (3)

Publication Number Publication Date
JP2017524404A JP2017524404A (ja) 2017-08-31
JP2017524404A5 JP2017524404A5 (ja) 2018-10-25
JP6469731B2 true JP6469731B2 (ja) 2019-02-13

Family

ID=50943130

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016571734A Active JP6469731B2 (ja) 2014-06-12 2015-06-11 画像をセグメント化するためのパラメータの最適化

Country Status (5)

Country Link
US (1) US10134142B2 (ja)
EP (1) EP3155589B1 (ja)
JP (1) JP6469731B2 (ja)
CN (1) CN106462974B (ja)
WO (1) WO2015189303A1 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2743577C2 (ru) * 2015-11-19 2021-02-20 Конинклейке Филипс Н.В. Оптимизация взаимодействий пользователя при сегментации
CN106846323B (zh) * 2017-01-04 2020-07-10 珠海大横琴科技发展有限公司 一种实现交互式图像分割的方法、装置及终端
CN111145099B (zh) * 2018-11-02 2023-05-26 广州灵派科技有限公司 一种模式化图像处理技术
CN109685798B (zh) * 2018-12-26 2021-02-23 北京邮电大学 一种确定有效医学图像的方法及装置
US10884396B2 (en) * 2019-02-27 2021-01-05 General Electric Company Sensor based smart segmentation
CN111210452B (zh) * 2019-12-30 2023-04-07 西南交通大学 一种基于图割和均值偏移的证件照人像分割方法
CN112330634B (zh) * 2020-11-05 2024-07-19 恒信东方文化股份有限公司 一种针对服装的边缘精细抠图方法及系统

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2632501B2 (ja) * 1994-07-12 1997-07-23 株式会社グッドマン 内臓器官の複数画像フレームを使用した生体内における内臓器官輪郭抽出方法
JPH10191020A (ja) 1996-12-20 1998-07-21 Canon Inc 被写体画像切出し方法及び装置
US7295700B2 (en) 2003-10-24 2007-11-13 Adobe Systems Incorporated Object extraction based on color and visual texture
JP4949264B2 (ja) * 2004-11-19 2012-06-06 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 医療画像データ内の腫瘍境界を自動的に検出及び区分するシステム及び方法
US7502521B2 (en) * 2005-06-21 2009-03-10 Microsoft Corporation Image completion with structure propagation
JP2008059081A (ja) * 2006-08-29 2008-03-13 Sony Corp 画像処理装置及び画像処理方法、並びにコンピュータ・プログラム
US8155405B2 (en) 2007-04-20 2012-04-10 Siemens Aktiengsellschaft System and method for lesion segmentation in whole body magnetic resonance images
US20100022494A1 (en) 2008-07-24 2010-01-28 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Method, device, and kit for maintaining physiological levels of steroid hormone in a subject
RU2571523C2 (ru) * 2010-03-11 2015-12-20 Конинклейке Филипс Электроникс Н.В. Вероятностная оптимизация сегментации, основанной на модели
DE102010022307A1 (de) * 2010-06-01 2011-12-01 Siemens Aktiengesellschaft Verfahren zur Überprüfung der Segmentierung einer Struktur in Bilddaten
US8983189B2 (en) 2011-02-08 2015-03-17 Algotec Systems Ltd. Method and systems for error correction for three-dimensional image segmentation
US8867806B2 (en) * 2011-08-01 2014-10-21 Impac Medical Systems, Inc. Method and apparatus for correction of errors in surfaces
CN102289811A (zh) * 2011-08-17 2011-12-21 深圳市旭东数字医学影像技术有限公司 一种半自动序列图像分割方法及系统
US8958618B2 (en) * 2012-06-28 2015-02-17 Kabushiki Kaisha Toshiba Method and system for identification of calcification in imaged blood vessels
US9495752B2 (en) * 2012-09-27 2016-11-15 Siemens Product Lifecycle Management Software Inc. Multi-bone segmentation for 3D computed tomography
CN103839248B (zh) * 2012-11-22 2018-03-27 北京三星通信技术研究有限公司 图像分割方法和装置
CN103366183B (zh) * 2013-07-19 2017-05-10 南方医科大学 一种局灶性病灶的非参数自动检测方法

Also Published As

Publication number Publication date
US20180268549A1 (en) 2018-09-20
EP3155589A1 (en) 2017-04-19
CN106462974A (zh) 2017-02-22
WO2015189303A1 (en) 2015-12-17
US10134142B2 (en) 2018-11-20
JP2017524404A (ja) 2017-08-31
EP3155589B1 (en) 2018-12-26
CN106462974B (zh) 2020-07-28

Similar Documents

Publication Publication Date Title
JP6469731B2 (ja) 画像をセグメント化するためのパラメータの最適化
JP5919287B2 (ja) 医用画像のセグメンテーションのためのシステム
CN112601582B (zh) 用于加速的在线自适应放射疗法的系统和方法
US9536316B2 (en) Apparatus and method for lesion segmentation and detection in medical images
CN109934812A (zh) 图像处理方法、装置、服务器及存储介质
JP2020500579A (ja) 撮像システムのための収集パラメータを選択すること
CN111008984A (zh) 医学影像中正常器官的轮廓线自动勾画方法及系统
EP3410393A1 (en) Comparing medical images
JP5662962B2 (ja) 画像処理装置、方法及びプログラム
CN113196340A (zh) 用于正电子发射断层摄影(pet)的基于人工智能(ai)的标准化摄取值(suv)校正和变化评估
US12299781B2 (en) Deep reinforcement learning for computer assisted reading and analysis
US9317926B2 (en) Automatic spinal canal segmentation using cascaded random walks
KR20220068982A (ko) 모델 기반 스텐트 설계 및 배치를 위한 시스템 및 방법
EP3424017A1 (en) Automatic detection of an artifact in patient image data
US20220122261A1 (en) Probabilistic Segmentation of Volumetric Images
CN111373438A (zh) 用于对器官成像的方法和装置
CN118968186A (zh) 医疗图像数据集的自适应图像分类方法、系统及存储介质
JP2023519563A (ja) 放射線治療計画
CN113160199A (zh) 影像识别方法、装置、计算机设备和存储介质
Todd et al. An analysis of medical image processing methods for segmentation of the inner ear
EP4419935A1 (en) Ai-assisted clinician contour reviewing and revision
WO2026002823A1 (en) Enhanced interpretability of ai results in medical imaging by supervision, and associated devices, systems, and methods
JP2025503466A (ja) 画像を処理するための方法及びシステム
Voormolen et al. Intra-temporal facial nerve centerline segmentation for navigated temporal bone surgery
JP2024538850A (ja) 医用画像セグメンテーションの品質保証のためのシステム及び方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180608

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180608

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180912

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20180912

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181126

TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20181211

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20181218

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190116

R150 Certificate of patent or registration of utility model

Ref document number: 6469731

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250