Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6948966B2 - 診断支援システム、診断支援方法、及びプログラム - Google Patents
[go: Go Back, main page]

JP6948966B2 - 診断支援システム、診断支援方法、及びプログラム - Google Patents

診断支援システム、診断支援方法、及びプログラム Download PDF

Info

Publication number
JP6948966B2
JP6948966B2 JP2018034574A JP2018034574A JP6948966B2 JP 6948966 B2 JP6948966 B2 JP 6948966B2 JP 2018034574 A JP2018034574 A JP 2018034574A JP 2018034574 A JP2018034574 A JP 2018034574A JP 6948966 B2 JP6948966 B2 JP 6948966B2
Authority
JP
Japan
Prior art keywords
observation
organ
unit
medical image
region
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018034574A
Other languages
English (en)
Other versions
JP2019149094A (ja
Inventor
勇哉 久藤
勇哉 久藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2018034574A priority Critical patent/JP6948966B2/ja
Publication of JP2019149094A publication Critical patent/JP2019149094A/ja
Application granted granted Critical
Publication of JP6948966B2 publication Critical patent/JP6948966B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Medical Treatment And Welfare Office Work (AREA)

Description

本開示は、診断支援システム、診断支援方法、及びプログラムに関する。
従来、多臓器及び多疾病を対象とする診断支援を実現するために、診断支援アルゴリズムを共有化し利用するための仕組みを備える共通プラットフォームが提案されている(非特許文献1参照)。
二村 幸孝、出口 大輔、北坂 孝幸、森 健策、末永 康仁、"PLUTO:医用画像診断支援共通プラットフォーム"、MEDICAL IMAGING TECHNOLOGY Vol.26 No.3、P.187-191、May 2008
しかしながら、非特許文献1には、多臓器及び多疾病を対象とする診断支援を実現するための共通プラットフォームを提供することは記載されているものの、診断のために、要観察領域を観察する観察者に、どのように医用画像を割り当てるかについては記載されていない。
本開示は、以上の事情を鑑みて成されたものであり、医用画像から疾患を適切に診断することができる診断支援システム、診断支援方法、及びプログラムを提供することを目的とする。
上記目的を達成するために、本開示の第1の態様の診断支援システムは、医用画像を取得する取得部と、取得部により取得された医用画像から臓器が描出された臓器領域を抽出する抽出部と、抽出部により抽出された臓器領域の臓器情報を導出する導出部と、導出部により導出された臓器情報に基づいて、観察を要する要観察領域を検出する検出部と、検出部により要観察領域が複数検出された場合、一人の観察者が観察を行う場合について複数の要観察領域の組合せ毎に予め定められた一人の観察者が観察を行うことに関する情報を参照し、複数の要観察領域を一人の観察者に割り当てるか、複数の観察者に割り当てるか複数の要観察領域の割り当てについて判断する判断部と、判断部の判断が一人の観察者に割り当てる場合は、一人の観察者が観察を行うことに関する情報に基づいて、複数の要観察領域を一人の観察者に割り当て、かつ判断部の判断が複数の観察者に割り当てる場合は、複数の観察者の各々と複数の要観察領域の各々との対応関係を表す情報、及び判断部の判断結果に基づいて、複数の要観察領域を複数の観察者の各々に割り当てる割当部と、を備える。
第2の態様の診断支援システムは、第1の態様の診断支援システムにおいて、割当部は、複数種類の臓器毎の専門家、複数種類の疾患毎の専門家、及び疾患のレベル毎の専門家のいずれかである複数の観察者の各々に複数の要観察領域を割り当てる。
の態様の診断支援システムは、第1の態様または第2の態様の診断支援システムにおいて、検出部は、取得部により取得された第1の医用画像から抽出された第1の臓器領域について導出された第1の臓器情報と、取得部により取得された第2の医用画像から抽出された第2の臓器領域について導出された第2の臓器情報と、に基づいて導出された指標値により要観察領域を検出する。
の態様の診断支援システムは、第の態様の診断支援システムにおいて、第2の医用画像は第1の医用画像と同一の画像であり、画像内に複数の臓器領域を含む。
の態様の診断支援システムは、第の態様または第の態様の診断支援システムにおいて、導出部は、少なくとも第1の医用画像から抽出された臓器領域から第1の臓器情報を導出する。
の態様の診断支援システムは、第の態様から第の態様のいずれか1態様の診断支援システムにおいて、抽出部は、医用画像内に存在する臓器全体の臓器領域を抽出した後に、抽出した臓器領域の一部の領域を更に抽出し、導出部は、一部の領域から一部臓器情報を導出し、検出部は、第1の医用画像から抽出された第1の臓器領域の一部の領域について導出された第1の一部臓器情報と、第2の医用画像から抽出された第2の臓器領域の一部の領域について導出された第2の一部臓器情報と、に基づいて、指標値を導出する。
の態様の診断支援システムは、第の態様の診断支援システムにおいて、第1の臓器領域と第2の臓器領域とは同じ臓器領域である。
の態様の診断支援システムは、第の態様から第の態様のいずれか1態様の診断支援システムにおいて、抽出部は、第1の医用画像と、第1の医用画像内に存在する臓器が含まれる医用画像であって、かつ第1の医用画像以外の医用画像とから臓器領域を抽出する。
の態様の診断支援システムは、第の態様の診断支援システムにおいて、第1の医用画像、及び第1の医用画像以外の医用画像は、同一検査内の異なる画像である。
10の態様の診断支援システムは、第の態様の診断支援システムにおいて、第1の医用画像以外の医用画像は、第1の医用画像よりも過去に撮影されて得られた医用画像である。
11の態様の診断支援システムは、第の態様の診断支援システムにおいて、第1の医用画像、及び第1の医用画像以外の医用画像は、異なる撮影方法による撮影によって得られた医用画像である。
12の態様の診断支援システムは、第の態様から第11の態様のいずれか1態様の診断支援システムにおいて、指標値は、疾患の進行度、及び疾患の評価対象の領域を表す情報の少なくとも一方を含む。
13の態様の診断支援システムは、第の態様から第12の態様のいずれか1態様の診断支援システムにおいて、臓器情報は、臓器領域のサイズ、臓器領域の画像における各画素の信号値、及び各画素の信号値を用いて算出される値の少なくとも1つを含む。
14の態様の診断支援システムは、第1の態様から第13の態様のいずれか1態様の診断支援システムにおいて、割当部は、要観察領域を割り当てた観察者の予め定められた連絡先に、割り当てに関する情報を通知する。
15の態様の診断支援システムは、第の態様から第13の態様のいずれか1態様の診断支援システムにおいて、割当部は、指標値が予め定められた条件を満たす場合に、要観察領域を割り当てた観察者の予め定められた連絡先に、割り当てに関する情報を通知する。
16の態様の診断支援システムは、第1の態様から第15の態様のいずれか1態様の診断支援システムにおいて、割当部が割り当てた複数の観察者の各々による、割り当てられた要観察領域の観察を行う指示を受け付ける受付部と、受付部が指示を受け付けた場合、指示を行った観察者に割り当てられている要観察領域を示す画像を表示部に表示させる制御を行う表示制御部と、をさらに備えた。
第17の態様の診断支援システムは、第16の態様の診断支援システムにおいて、表示制御部は、要観察領域を示す画像として、要観察領域を強調させた状態の医用画像を表示させる制御を行う。
一方、上記目的を達成するために、第18の態様の診断支援方法は、医用画像を取得し、取得された医用画像から臓器が描出された臓器領域を抽出し、抽出された臓器領域の臓器情報を導出し、導出された臓器情報に基づいて、観察を要する要観察領域を検出し、要観察領域が複数検出された場合、一人の観察者が観察を行う場合について複数の要観察領域の組合せ毎に予め定められた一人の観察者が観察を行うことに関する情報を参照し、複数の要観察領域を一人の観察者に割り当てるか、複数の観察者に割り当てるか複数の要観察領域の割り当てについて判断一人の観察者に割り当てる場合は、一人の観察者が観察を行うことに関する情報に基づいて、複数の要観察領域を一人の観察者に割り当て、かつ複数の観察者に割り当てる場合は、複数の観察者の各々と複数の要観察領域の各々との対応関係を表す情報、及び判断結果に基づいて、複数の要観察領域を複数の観察者の各々に割り当てる、処理を診断支援システムが実行する診断支援方法である。
また、上記目的を達成するために、第19の態様のプログラムは、医用画像を取得し、取得された医用画像から臓器が描出された臓器領域を抽出し、抽出された臓器領域の臓器情報を導出し、導出された臓器情報に基づいて、観察を要する要観察領域を検出し、要観察領域が複数検出された場合、一人の観察者が観察を行う場合について複数の要観察領域の組合せ毎に予め定められた一人の観察者が観察を行うことに関する情報を参照し、複数の要観察領域を一人の観察者に割り当てるか、複数の観察者に割り当てるか複数の要観察領域の割り当てについて判断一人の観察者に割り当てる場合は、一人の観察者が観察を行うことに関する情報に基づいて、複数の要観察領域を一人の観察者に割り当て、かつ複数の観察者に割り当てる場合は、複数の観察者の各々と複数の要観察領域の各々との対応関係を表す情報、及び判断結果に基づいて、複数の要観察領域を複数の観察者の各々に割り当てる、処理をコンピュータに実行させるためのプログラムである。
本開示によれば、複数の臓器情報の組み合わせから疾患の評価を行うことができる。
実施形態の診断支援システムの構成の一例を示すブロック図である。 実施形態の診断支援装置のハードウェア構成の一例を示すブロック図である。 実施形態の割当テーブルの一例を示す図である。 実施形態の診断支援装置の機能的な構成の一例を示すブロック図である。 実施形態の医用画像から抽出された臓器領域の一例を示す図である。 実施形態の診断支援処理の一例を示すフローチャートである。 実施形態の医用画像から抽出された脊椎の領域の一例を示す図である。 実施形態の医用画像から抽出された大腰筋の領域の一例を示す図である。 実施形態の指標値表示画面の一例を示す図である。
以下、図面を参照して、本開示の技術を実施するための形態例を詳細に説明する。
まず、図1を参照して、本実施形態の診断支援システム10の構成を説明する。図1に示すように、診断支援システム10は、画像管理装置12及び診断支援装置14を含む。画像管理装置12及び診断支援装置14は、各々ネットワークNに接続され、ネットワークNを介した通信が可能とされる。画像管理装置12は、CT(Computed Tomography)及びMRI(Magnetic Resonance Imaging)等の医用画像を撮影する撮影装置による撮影により得られた医用画像を示す医用画像データを記憶する。画像管理装置12の例としては、PACS(Picture Archiving and Communication System)等が挙げられる。診断支援装置14は、画像管理装置12に記憶された医用画像データを用いて診断の支援を行う。診断支援装置14の例としては、パーソナルコンピュータ及びサーバコンピュータ等の情報処理装置が挙げられる。
次に、図2を参照して、本実施形態の診断支援装置14のハードウェア構成を説明する。図2に示すように、診断支援装置14は、CPU(Central Processing Unit)20、一時記憶領域としてのメモリ21、及び不揮発性の記憶部22を含む。また、診断支援装置14は、液晶ディスプレイ等の表示部23、キーボードとマウス等の入力部24、及びネットワークNに接続されるネットワークI/F(InterFace)25を含む。CPU20、メモリ21、記憶部22、表示部23、入力部24、及びネットワークI/F25は、バス26に接続される。
記憶部22は、HDD(Hard Disk Drive)、SSD(Solid State Drive)、及びフラッシュメモリ等によって実現される。記憶媒体としての記憶部22には、診断支援プログラム30が記憶される。CPU20は、記憶部22から診断支援プログラム30を読み出してからメモリ21に展開し、展開した診断支援プログラム30を実行する。
また、記憶部22には、割当テーブル32が記憶される。図3に、割当テーブル32の一例を示す。図3に示すように、本実施形態の割当テーブル32は、複数種類の臓器のそれぞれと、その臓器の観察を担当する医師と、観察を担当する医師の連絡先と、が対応付けられた情報である。臓器の観察を担当する医師は、例えば、その臓器の専門医であってもよいし、その臓器に関わる疾患の専門医であってもよく、観察を行うために適切な人物を予め定めておけばよい。また、連絡先は観察を担当する医師に連絡を行うことができる連絡先であれば特に限定されず、例えば、携帯電話等の電話番号や、メールアドレス等が挙げられる。本実施形態の医師が本開示の観察者の一例である。また、本実施形態の割当テーブル32が、本開示の対応関係を表す情報の一例である。
次に、図4を参照して、本実施形態の診断支援装置14の機能的な構成について説明する。図4に示すように、診断支援装置14は、取得部40、抽出部42、導出部44、検出部46、判断部48、割当部50、受付部52、及び表示制御部54を含む。CPU20が診断支援プログラム30を実行することで、取得部40、抽出部42、導出部44、検出部46、判断部48、割当部50、受付部52、及び表示制御部54として機能する。
取得部40は、画像管理装置12から、画像管理装置12に記憶された医用画像データを、ネットワークNを介して取得する。本実施形態では、取得部40は、例えば、一度のCT撮影により得られた複数の医用画像等の同一検査内の複数の医用画像それぞれを示す複数の医用画像データを取得する。
抽出部42は、取得部40により取得された複数の医用画像データが示す複数の医用画像から臓器が描出された臓器領域を抽出する。なお、抽出部42は、異なる複数の医用画像のそれぞれから複数の臓器領域を抽出してもよい。
抽出部42による臓器領域の抽出処理には、例えば、AI(Artificial Intelligence)技術を適用することができる。具体的には、例えば、医用画像データを入力とし、抽出される臓器領域を出力としたディープニューラルネットワークを作成する。次に、医用画像データ及びその医用画像データが示す医用画像内の臓器領域を含む教師データを用いて、作成したディープニューラルネットワークを学習させることによって得られた学習済みモデルを記憶部22に予め記憶しておく。抽出部42は、取得部40により取得された複数の医用画像データを学習済みモデルに入力し、学習済みモデルから出力された臓器領域を取得することによって、医用画像から臓器領域を抽出する。図5に、抽出部42により抽出された臓器領域の一例を示す。なお、抽出部42は、ユーザにより入力部24を介して入力された領域を臓器領域として抽出してもよい。
導出部44は、抽出部42により抽出された複数の臓器領域について、それぞれの臓器領域の画像から得られる臓器情報を導出する。臓器情報の例としては、面積と体積等の臓器領域のサイズ、及び臓器領域の画像の各画素の信号値(例えば、画素値)が挙げられる。また、臓器情報の例としては、臓器領域の画像の各画素の信号値から算出される値(例えば、最大値、最小値、平均値、分散、及び標準偏差等)等も挙げられる。
導出部44による臓器情報の導出処理には、例えば、AI技術を適用することができる。具体的には、例えば、臓器領域の画像を示す画像データを入力とし、臓器情報を出力としたディープニューラルネットワークを作成する。次に、臓器領域の画像を示す画像データ及びその画像データに対応する臓器情報を含む教師データを用いて、作成したディープニューラルネットワークを学習させることによって得られた学習済みモデルを記憶部22に予め記憶しておく。導出部44は、抽出部42により抽出された臓器領域の画像を示す画像データを学習済みモデルに入力し、学習済みモデルから出力された臓器情報を取得することによって、抽出部42により抽出された臓器領域の臓器情報を導出する。
検出部46は、導出部44により複数の臓器領域それぞれについて導出された各臓器情報に基づいて、医用画像から医師により観察を要する要観察領域を検出する。本実施形態では、検出部46が要観察領域を検出する方法の一例として、導出部44により複数の臓器領域それぞれについて導出された各臓器情報に基づいて指標値を導出し、導出した指標値に基づいて、臓器領域から要観察領域を検出する。なお、本実施形態では、要観察領域の導出に用いられる指標値の一例として、疾患の評価に関する指標値等を用いている。なお、臓器情報の数は、2つでもよいし、3つ以上でもよい。
検出部46による指標値の導出処理には、例えば、AI技術を適用することができる。具体的には、例えば、複数の臓器情報を入力とし、疾患の評価に関する指標値を出力としたディープニューラルネットワークを作成する。次に、複数の臓器情報及びその臓器情報に対応する疾患の評価に関する指標値を含む教師データを用いて、作成したディープニューラルネットワークを学習させることによって得られた学習済みモデルを記憶部22に予め記憶しておく。検出部46は、複数の臓器領域について導出部44により導出された臓器情報を学習済みモデルに入力し、学習済みモデルから出力された疾患の評価に関する指標値を取得することによって、疾患の評価に関する指標値を導出する。なお、検出部46は、AI技術を用いるのではなく、予め定義されたルールに従って、疾患の評価に関する指標値を導出してもよい。
判断部48は、検出部46が要観察領域を複数検出した場合、複数の要観察領域の、複数の医師への割り当てについて判断する。
割当部50は、判断部48の判断結果に基づいて、複数の要観察領域の各々に、各要観察領域を観察する医師を割り当てる。具体的には、割当部50は、割当テーブル32を参照し、要観察領域に対応する臓器領域に、その臓器領域を専門とする医師(専門医)を割り当てる。
また、本実施形態の割当部50は、割り当てた医師に対応付けられている連絡先に、要観察領域の観察が割り当てられたことを表す情報を通知する。具体的には、割当部50は、割当テーブル32を参照し、要観察領域を割り当てた医師に対応付けられている連絡先を取得し、取得した連絡先に、ネットワークI/F25を介して予め定められた通知を行う。なお、ここで行う通知の具体的な内容は特に限定されず、例えば、要観察領域が割り当てられたことを表す情報のみであってもよいし、検出部46が導出した指標値に関する情報等、要観察領域の観察に付随する情報も含まれていてもよい。
受付部52は、要観察領域を割り当てられた医師による、要観察領域の観察を行う旨の指示(以下、「観察実行指示」という)を受け付ける。なお、受付部52は、観察実行指示を、入力部24を介して受け付けてもよいし、医師が使用する他の端末装置等から行われた観察実行指示をネットワークI/F25を介して受け付けてもよい。
表示制御部54は、受付部52が観察実行指示を受け付けた場合、医師により観察実行指示が行われた装置の表示部に、観察実行指示を行った医師に割り当てられている要観察領域を表す画像を表示させる制御を行う。具体的には、受付部52が入力部24を介して観察実行指示を受け付けた場合、表示制御部54は、表示部23に要観察領域を表す画像を表示させる制御を行う。なお、要観察領域を表す画像とは、例えば、要観察領域の抽出対象の医用画像であり、本実施形態の表示制御部54は、一例として、医用画像に対し、検出した要観察領域をマーキングする等強調させた状態で表示部に表示させる。また、受付部52は、検出部46により導出された指標値を要観察領域とともに表示部に表示する制御を行う。
次に、図6を参照して、本実施形態の診断支援装置14の作用を説明する。CPU20が診断支援プログラム30を実行することによって、図6に示す診断支援処理が実行される。また、図6に示す診断支援処理は、例えば、ユーザにより入力部24を介して、診断支援プログラム30の実行指示が入力された場合に実行される。
図6のステップS10で、取得部40は、前述したように、画像管理装置12から、画像管理装置12に記憶された医用画像データを、ネットワークNを介して取得する。次のステップS12で、抽出部42は、ステップS10の処理により取得された複数の医用画像データが示す複数の医用画像から臓器が描出された臓器領域を複数抽出する。
次のステップS14で、導出部44は、前述したように、ステップS12の処理により抽出された複数の臓器領域について、それぞれの臓器領域の画像から得られる臓器情報を導出する。
次のステップS16で、検出部46は、前述したように、ステップS14の処理により複数の臓器領域それぞれについて導出された複数の臓器情報に基づいて、要観察領域を検出するための指標値を導出する。
次のステップS18で、検出部46は、前述したように、ステップS16の処理により導出された指標値に基づいて、医用画像から要観察領域を検出する。
次のステップS20で、判断部48は、前述したように、ステップS18の処理により複数の要観察領域が検出された場合、複数の要観察領域の複数の観察者への割り当てについて判断するために、要観察領域毎に、複数の医師の各々に割り当てるか否かを判定する。例えば、要観察領域が複数検出された場合でも、例えば、要観察領域に対応する臓器領域を専門とする分野が近い場合等、一人の医師が観察を行うことが好ましい場合がある。本実施形態の診断支援装置14では、このように要観察領域が複数検出された場合であっても、一人の医師が観察を行うことが好ましい場合について、複数の要観察領域の組合せ毎に予め定めておき、一人の医師が観察を行うことに関する情報を記憶部22に予め記憶させておく(図示省略)。
要観察領域毎に複数の医師の各々に割り当てる場合、ステップS20の判定が肯定判定となり、ステップS22へ移行する。
ステップS22で、割当部50は、前述したように、割当テーブル32を参照し、ステップS18の処理により導出された複数の要観察領域に、各要観察領域を観察する医師を割り当てる。
次のステップS24で、割当部50は、前述したように、ステップS22の処理により割り当てた医師に、通知を行うか否かを判定する。本実施形態では、一例として、ステップS16の処理により導出された指標値が予め定められた条件を満たす場合に、割り当てた医師に対して要観察領域の観察が割り当てられたことを表す情報を通知する。なお、本実施形態では、予め定められた条件として、疾患の程度が重いとみなせる指標値や、疾患の緊急度が高いとみなせる指標値であるとした条件を採用しているが、具体的な数値は、疾患等に応じて適宜、設定が可能である。なお、本実施形態に限定されず、割当部50は、指標値以外の情報を参照して通知を行うか否かを判定してもよい。例えば、ステップS10で取得した医用画像の被写体である患者等に対応付けられている患者情報が取得可能な場合、割当部50は、患者情報に基づいて通知を行うか否かを判定してもよい。具体例としては、急患であることを表す情報が対応付けられている場合、割当部50は、通知を行うと判定することが挙げられる。
通知を行わない場合、ステップS24の判定が否定判定となり、ステップS28へ移行する。一方、通知を行う場合、ステップS24の判定が肯定判定となり、ステップS26へ移行する。
ステップS26で、割当部50は、前述したように、割当テーブル32を参照して、ステップS22の処理により割り当てた医師に対応付けられている連絡先に、要観察領域の観察が割り当てられたことを表す情報を通知し、ステップS28へ移行する。
一方、要観察領域毎に複数の医師の各々に割り当てない場合、ステップS20の判定が否定判定となり、ステップS28へ移行する。なお、本実施形態では、ステップS18の処理により検出された要観察領域が1つの場合も、ステップS20の判定が否定判定となり、ステップS28へ移行する。
ステップS28で、表示制御部54は、前述したように、観察実行指示を受付部52が受け付けたか否かを判定する。受付部52が観察実行指示を受け付けるまでステップS28の判定が否定判定となる。一方、受付部52は観察実行指示を受け付けると、ステップS28の判定が肯定判定となり、ステップS30へ移行する。
ステップS30で、表示制御部54は、前述したように、医師により観察実行指示が行われた装置の表示部に、観察実行指示を行った医師に割り当てられている要観察領域を表す画像を表示させる制御を行う。ステップS30の処理が終了すると、診断支援処理が終了する。本ステップS30の処理が実行されることにより、要観察領域を割り当てられた医師は、表示部に表示された要観察領域を表す画像を読影し、要観察領域の観察を行う。
次に、診断支援装置14の具体的な動作例について説明する。
例えば、脂肪肝について観察を行う場合(疾患が脂肪肝の場合)、要観察領域は肝臓の領域となり、指標値として脂肪肝の評価に関する指標値が用いられる。また例えば、肺がんについて観察を行う場合(疾患が肺がんの場合)、要観察領域は肺の領域と、リンパ節の領域と、肺及びリンパ節以外の他臓器の領域となり、指標値として肺癌の評価に関する評価値が用いられる。また例えば、サルコペニアについて観察を行う場合(疾患がサルコペニアの場合)、要観察領域は脊椎の領域及び大腰筋の領域をとなり、指標値としてサルコペニアの評価に関する指標値に関する指標値が用いられる。
上記ステップS12で抽出部42は、複数の医用画像から脾臓の領域及び肝臓の領域を抽出する。また、抽出部42は、複数の医用画像から肺の領域と、リンパ節の領域と、肺及びリンパ節以外の他臓器の領域とを抽出する。さらにた、抽出部42は、複数の医用画像から脊椎の領域、及び大腰筋の領域を抽出する。抽出部42により抽出された脊椎の領域の一例を図7に示し、大腰筋の領域の一例を図8に示す。
上記ステップS14で、導出部44は、脾臓の領域の臓器情報として、脾臓の領域における画素値(例えば、CT値)の平均値を導出し、また、肝臓の領域の臓器情報として、肝臓の領域における各画素の画素値を導出する。また、導出部44は、肺の領域の臓器情報として、肺の領域における腫瘍のサイズ及び浸潤の有無を導出する。また、導出部44は、リンパ節の領域の臓器情報として、リンパ節転移の有無を導出する。また、導出部44は、他臓器の領域の臓器情報として、他臓器における腫瘍(すなわち、遠隔転移)の有無を導出する。さらに、導出部44は、脊椎の領域の臓器情報として、第3腰椎乃至第4腰椎の位置を導出し、大腰筋の領域の臓器情報として、大腰筋の複数の断面それぞれの断面積を導出する。
上記ステップS16で検出部46は、脂肪肝の評価に関する指標値として、肝臓の領域における各画素のうち、画素値が脾臓の領域における画素値の平均値よりも所定値(例えば、10HU(Hounsfield Unit))以上小さく、かつ画素値が閾値(例えば、40HU)以下の領域を表す情報を導出する。本動作例における、この領域を表す情報が、本開示の疾患の評価対象の領域を表す情報の一例である。この場合、上記ステップS20で検出部46は、指標値となる、上記領域を表す情報が導出された領域を要観察領域として検出する。なお、上記領域を表す情報が導出されない場合、脂肪肝に関する要観察領域が検出されなかったことを示している。
また、上記ステップS16で検出部46は、導出部44により導出された肺の領域における腫瘍のサイズ及び浸潤の有無と、リンパ節転移の有無と、遠隔転移の有無とに基づいて、肺がんの評価に関する指標値として、肺がんの進行度の一例としての病期を導出する。この肺がんの病期の導出に用いる手法としては、例えば、以下の参考文献1に開示されている手法を適用することができる。
[参考文献1]“病期の分類法”、[online]、[平成30年2月6日検索]、インターネット(URL:http://ganclass.jp/kind/lung/stage/stage.php)
この場合、上記ステップS20で検出部46は、指標値となる肺癌の病期に応じて、肺の領域、リンパ節の領域、遠隔転移が認められた領域等を要観察領域として検出する。なお、肺がんの病期が導出されない場合、肺がんに関する要観察領域が検出されなかったことを示している。
また、上記ステップS16で検出部46は、第3腰椎乃至第4腰椎における大腰筋の断面積をサルコペニアの評価に関する指標値として導出する。この場合、上記ステップS20で検出部46は、指標値となる大腰筋の断面積の経時的な変化の値に応じて、例えば、変化量が閾値値以上の場合、第3腰椎乃至第4腰椎の領域、及び大腰筋の領域を要観察領域として検出する。なお、大腰筋の断面積に経時的な変化が生じていないとみなせる場合、サルコペニアに関する要観察領域が検出されなかったことを示している。
ステップS20で判断部48は、上記のように、脂肪肝、肺がん、及びサルコペニア等に対応する要観察領域が複数検出されたか否かを判定し、判定結果に応じて、ステップS22で割当部50が、要観察領域の割り当てを行う。
以上説明したように、本実施形態の診断支援システム10は、医用画像を取得する取得部40と、取得部40により取得された医用画像から臓器が描出された臓器領域を抽出する抽出部42と、抽出部42により抽出された臓器領域の臓器情報を導出する導出部44と、導出部44により導出された臓器情報に基づいて、観察を要する要観察領域を検出する検出部46と、検出部46により要観察領域が複数検出された場合、複数の要観察領域の複数の医師への割り当てについて判断する判断部48と、判断部48の判断結果に基づいて、複数の要観察領域を複数の医師の各々に割り当てる割当部50と、を備える。
従って、本実施形態によれば、複数の医師の各々により医用画像から疾患を適切に診断することができる。
なお、本実施形態では、複数種類の臓器のそれぞれに対応して、臓器毎の専門家に割り当てる場合について説明したが、これに限定されない。例えば、疾患毎の専門家に割り当ててもよいし、疾患のレベル(疾患の進行度等)毎の専門家に割り当ててもよいし、またこれらの専門家の組合せに応じて割り当ててもよい。これらの場合、それぞれの専門家に対応する割当テーブル32を記憶部22に記憶させておけばよい。
また、本実施形態では、複数の医用画像から複数の臓器領域を抽出する場合について説明したが、これに限定されない。例えば、1つの医用画像から複数の臓器領域を抽出する形態としてもよい。
また、本実施形態では、肝臓及び脾臓等の臓器全体の領域を抽出する場合について説明したが、これに限定されない。抽出部42が臓器全体の領域を抽出した後、抽出した領域から一部の領域を更に抽出してもよい。この場合、導出部44は、抽出部42により抽出された一部の領域の画像から、一部臓器情報を導出する形態が例示される。また、この場合、検出部46は、導出部44により複数の一部の領域それぞれについて導出された複数の一部臓器情報に基づいて、疾患の評価に関する指標値を導出する形態が例示される。また、この場合、複数の一部の領域は、例えば、肺の左上葉及び肺の右上葉のように、同じ臓器領域から抽出された一部の領域でもよいし、異なる臓器領域から抽出された一部の領域でもよい。また、この場合、疾患の評価に関する指標値の導出に用いる複数の臓器領域は、臓器全体の領域及び臓器の一部の領域の組み合わせでもよい。
また、本実施形態では、同一検査内の複数の医用画像から臓器領域を抽出する場合について説明したが、これに限定されない。例えば、同一の被写体を撮影した撮影時期の異なる複数の医用画像から臓器領域を抽出する形態としてもよい。また、例えば、同一の被写体を異なる撮影方法により撮影して得られた複数の医用画像から臓器領域を抽出する形態としてもよい。この場合の異なる撮影方法としては、例えば、CT撮影とMRI撮影等の異なる撮影装置による撮影が挙げられる。また、この場合の異なる撮影方法としては、例えば、同じ撮影装置による撮影ではあるが、造影剤が体内にある状態での撮影と無い状態での撮影、及びマンモグラフィでの通常撮影とトモシンセシス撮影等も挙げられる。
なお、本実施形態では、疾患の評価に関する指標値を表示部に表示する場合について説明したが、これに限定されない。例えば、疾患の評価に関する指標値に加え、指標値の導出に用いた各臓器情報、及び各臓器情報に対応する各臓器領域の少なくとも1つを更に表示部に表示する形態としてもよい。
また、例えば、疾患の評価に関する指標値を用いた診断結果を表示部に表示する形態としてもよい。この場合、肝臓の領域における各画素のうち、画素値が脾臓の領域における画素値の平均値よりも所定値以上小さく、かつ画素値が閾値以下の領域の面積が所定値以上の場合に、患者が脂肪肝であることを示す情報を表示部に表示する形態が例示される。
また、上記実施形態でCPUがソフトウェア(プログラム)を実行することにより実行した各種処理を、CPU以外の各種のプロセッサが実行してもよい。この場合のプロセッサとしては、FPGA(Field-Programmable Gate Array)等の製造後に回路構成を変更可能なPLD(Programmable Logic Device)、及びASIC(Application Specific Integrated Circuit)等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が例示される。また、上記各種処理を、これらの各種のプロセッサのうちの1つで実行してもよいし、同種又は異種の2つ以上のプロセッサの組み合わせ(例えば、複数のFPGA、及びCPUとFPGAとの組み合わせ等)で実行してもよい。また、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。
また、上記実施形態では、診断支援プログラム30が記憶部22に予め記憶(インストール)されている態様を説明したが、これに限定されない。診断支援プログラム30は、CD−ROM(Compact Disk Read Only Memory)、DVD−ROM(Digital Versatile Disk Read Only Memory)、及びUSB(Universal Serial Bus)メモリ等の記録媒体に記録された形態で提供されてもよい。また、診断支援プログラム30は、ネットワークを介して外部装置からダウンロードされる形態としてもよい。
10 診断支援システム
12 画像管理装置
14 診断支援装置
20 CPU
21 メモリ
22 記憶部
23 表示部
24 入力部
25 ネットワークI/F
26 バス
30 診断支援プログラム
32 割当テーブル
40 取得部
42 抽出部
44 受付部
46 検出部
48 判断部
50 割当部
52 受付部
54 表示制御部
N ネットワーク

Claims (19)

  1. 医用画像を取得する取得部と、
    前記取得部により取得された医用画像から臓器が描出された臓器領域を抽出する抽出部と、
    前記抽出部により抽出された臓器領域の臓器情報を導出する導出部と、
    前記導出部により導出された臓器情報に基づいて、観察を要する要観察領域を検出する検出部と、
    前記検出部により前記要観察領域が複数検出された場合、一人の観察者が観察を行う場合について複数の要観察領域の組合せ毎に予め定められた一人の観察者が観察を行うことに関する情報を参照し、複数の前記要観察領域を一人の観察者に割り当てるか、複数の観察者に割り当てるか複数の前記要観察領域の割り当てについて判断する判断部と、
    前記判断部の判断が一人の観察者に割り当てる場合は、前記一人の観察者が観察を行うことに関する情報に基づいて、複数の前記要観察領域を前記一人の観察者に割り当て、かつ前記判断部の判断が複数の観察者に割り当てる場合は、前記複数の観察者の各々と複数の前記要観察領域の各々との対応関係を表す情報、及び前記判断部の判断結果に基づいて、複数の前記要観察領域を前記複数の観察者の各々に割り当てる割当部と、
    を備えた診断支援システム。
  2. 前記割当部は、複数種類の臓器毎の専門家、複数種類の疾患毎の専門家、及び疾患のレベル毎の専門家のいずれかである前記複数の観察者の各々に複数の前記要観察領域を割り当てる、
    請求項1に記載の診断支援システム。
  3. 前記検出部は、前記取得部により取得された第1の医用画像から抽出された第1の臓器領域について導出された第1の臓器情報と、前記取得部により取得された第2の医用画像から抽出された第2の臓器領域について導出された第2の臓器情報と、に基づいて導出された指標値により前記要観察領域を検出する、
    請求項1または請求項2に記載の診断支援システム。
  4. 前記第2の医用画像は前記第1の医用画像と同一の画像であり、画像内に複数の臓器領域を含む、
    請求項に記載の診断支援システム。
  5. 前記導出部は、少なくとも前記第1の医用画像から抽出された臓器領域から前記第1の臓器情報を導出する、
    請求項または請求項に記載の診断支援システム。
  6. 前記抽出部は、前記医用画像内に存在する臓器全体の臓器領域を抽出した後に、抽出した臓器領域の一部の領域を更に抽出し、
    前記導出部は、前記一部の領域から一部臓器情報を導出し、
    前記検出部は、前記第1の医用画像から抽出された第1の臓器領域の一部の領域について導出された第1の一部臓器情報と、前記第2の医用画像から抽出された第2の臓器領域の一部の領域について導出された第2の一部臓器情報と、に基づいて、前記指標値を導出する、
    請求項から請求項のいずれか1項に記載の診断支援システム。
  7. 前記第1の臓器領域と前記第2の臓器領域とは同じ臓器領域である、
    請求項に記載の診断支援システム。
  8. 前記抽出部は、前記第1の医用画像と、前記第1の医用画像内に存在する臓器が含まれる医用画像であって、かつ前記第1の医用画像以外の医用画像とから前記臓器領域を抽出する、
    請求項から請求項のいずれか1項に記載の診断支援システム。
  9. 前記第1の医用画像、及び前記第1の医用画像以外の医用画像は、同一検査内の異なる画像である、
    請求項に記載の診断支援システム。
  10. 前記第1の医用画像以外の医用画像は、前記第1の医用画像よりも過去に撮影されて得られた医用画像である、
    請求項に記載の診断支援システム。
  11. 前記第1の医用画像、及び前記第1の医用画像以外の医用画像は、異なる撮影方法による撮影によって得られた医用画像である、
    請求項に記載の診断支援システム。
  12. 前記指標値は、疾患の進行度、及び疾患の評価対象の領域を表す情報の少なくとも一方を含む、
    請求項から請求項11のいずれか1項に記載の診断支援システム。
  13. 前記臓器情報は、前記臓器領域のサイズ、前記臓器領域の画像における各画素の信号値、及び前記各画素の信号値を用いて算出される値の少なくとも1つを含む、
    請求項1から請求項12のいずれか1項に記載の診断支援システム。
  14. 前記割当部は、前記要観察領域を割り当てた前記観察者の予め定められた連絡先に、割り当てに関する情報を通知する、
    請求項1から請求項13のいずれか1項に記載の診断支援システム。
  15. 前記割当部は、指標値が予め定められた条件を満たす場合に、前記要観察領域を割り当てた前記観察者の予め定められた連絡先に、割り当てに関する情報を通知する、
    請求項から請求項13のいずれか1項に記載の診断支援システム。
  16. 前記割当部が割り当てた複数の前記観察者の各々による、割り当てられた前記要観察領域の観察を行う指示を受け付ける受付部と、
    前記受付部が前記指示を受け付けた場合、前記指示を行った前記観察者に割り当てられている前記要観察領域を示す画像を表示部に表示させる制御を行う表示制御部と、
    をさらに備えた、
    請求項1から請求項15のいずれか1項に記載の診断支援システム。
  17. 表示制御部は、前記要観察領域を示す画像として、前記要観察領域を強調させた状態の前記医用画像を表示させる制御を行う
    請求項16に記載の診断支援システム。
  18. 医用画像を取得し、
    取得された医用画像から臓器が描出された臓器領域を抽出し、
    抽出された臓器領域の臓器情報を導出し、
    導出された臓器情報に基づいて、観察を要する要観察領域を検出し、
    前記要観察領域が複数検出された場合、一人の観察者が観察を行う場合について複数の要観察領域の組合せ毎に予め定められた一人の観察者が観察を行うことに関する情報を参照し、複数の前記要観察領域を一人の観察者に割り当てるか、複数の観察者に割り当てるか複数の前記要観察領域の割り当てについて判断
    一人の観察者に割り当てる場合は、前記一人の観察者が観察を行うことに関する情報に基づいて、複数の前記要観察領域を前記一人の観察者に割り当て、かつ複数の観察者に割り当てる場合は、前記複数の観察者の各々と複数の前記要観察領域の各々との対応関係を表す情報、及び判断結果に基づいて、複数の前記要観察領域を前記複数の観察者の各々に割り当てる、
    処理を診断支援システムが実行する診断支援方法。
  19. 医用画像を取得し、
    取得された医用画像から臓器が描出された臓器領域を抽出し、
    抽出された臓器領域の臓器情報を導出し、
    導出された臓器情報に基づいて、観察を要する要観察領域を検出し、
    前記要観察領域が複数検出された場合、一人の観察者が観察を行う場合について複数の要観察領域の組合せ毎に予め定められた一人の観察者が観察を行うことに関する情報を参照し、複数の前記要観察領域を一人の観察者に割り当てるか、複数の観察者に割り当てるか複数の前記要観察領域の割り当てについて判断
    一人の観察者に割り当てる場合は、前記一人の観察者が観察を行うことに関する情報に基づいて、複数の前記要観察領域を前記一人の観察者に割り当て、かつ複数の観察者に割り当てる場合は、前記複数の観察者の各々と複数の前記要観察領域の各々との対応関係を表す情報、及び判断結果に基づいて、複数の前記要観察領域を前記複数の観察者の各々に割り当てる、
    処理をコンピュータに実行させるためのプログラム。
JP2018034574A 2018-02-28 2018-02-28 診断支援システム、診断支援方法、及びプログラム Active JP6948966B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018034574A JP6948966B2 (ja) 2018-02-28 2018-02-28 診断支援システム、診断支援方法、及びプログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018034574A JP6948966B2 (ja) 2018-02-28 2018-02-28 診断支援システム、診断支援方法、及びプログラム

Publications (2)

Publication Number Publication Date
JP2019149094A JP2019149094A (ja) 2019-09-05
JP6948966B2 true JP6948966B2 (ja) 2021-10-13

Family

ID=67850683

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018034574A Active JP6948966B2 (ja) 2018-02-28 2018-02-28 診断支援システム、診断支援方法、及びプログラム

Country Status (1)

Country Link
JP (1) JP6948966B2 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7405546B2 (ja) * 2019-09-24 2023-12-26 キヤノン株式会社 情報処理装置、医用画像撮像装置、情報処理方法、プログラム
JP7765415B2 (ja) 2021-01-26 2025-11-06 富士フイルム株式会社 学習済みモデルの生成方法、機械学習システム、プログラムおよび医療画像処理装置
EP4285828B1 (en) 2021-01-27 2026-03-18 FUJIFILM Corporation Learned model generation method, machine learning system, program, and medical image processing device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5328146B2 (ja) * 2007-12-25 2013-10-30 キヤノン株式会社 医用画像処理装置、医用画像処理方法ならびにプログラム
CN102918558A (zh) * 2010-01-28 2013-02-06 拉德罗吉克斯公司 用于对医学图像进行分析、优先级划分、显现和报告的方法和系统
US10108783B2 (en) * 2011-07-05 2018-10-23 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for monitoring health of employees using mobile devices
JP6336543B2 (ja) * 2014-08-01 2018-06-06 キヤノンマーケティングジャパン株式会社 情報処理装置およびその制御方法、情報処理システム、並びにプログラム

Also Published As

Publication number Publication date
JP2019149094A (ja) 2019-09-05

Similar Documents

Publication Publication Date Title
US11257211B2 (en) Medical image processing apparatus, medical image processing system, and medical image processing method
WO2018070285A1 (ja) 画像処理装置、及び画像処理方法
Wazaefi et al. Evidence of a limited intra-individual diversity of nevi: intuitive perception of dominant clusters is a crucial step in the analysis of nevi by dermatologists
JP6843785B2 (ja) 診断支援システム、診断支援方法、及びプログラム
JP2020060857A (ja) 情報処理装置、医用画像表示装置及びプログラム
JP6948966B2 (ja) 診断支援システム、診断支援方法、及びプログラム
CN112219138A (zh) 断层图像预测装置及断层图像预测方法
CN113017674A (zh) 基于胸部ct图像的egfr基因突变检测方法和系统
JP4911029B2 (ja) 異常陰影候補検出方法、異常陰影候補検出装置
Dhanagopal et al. Channel‐Boosted and Transfer Learning Convolutional Neural Network‐Based Osteoporosis Detection from CT Scan, Dual X‐Ray, and X‐Ray Images
JP6882216B2 (ja) 診断支援システム、診断支援方法、及びプログラム
US11551351B2 (en) Priority judgement device, method, and program
JP7064430B2 (ja) 優先度判定装置、方法およびプログラム
US8737699B2 (en) Combinational computer aided diagnosis
JP2021182403A (ja) 変換装置、変換方法、及びプログラム
JP2021053256A (ja) 画像処理装置、医用画像診断装置及び画像処理プログラム
JP6862286B2 (ja) 情報処理装置、情報処理方法、情報処理システム及びプログラム
JP2025017450A (ja) 処理装置、処理プログラム、処理方法及び処理システム
US10839299B2 (en) Non-leading computer aided detection of features of interest in imagery
JP7472621B2 (ja) 医用画像経時比較プログラム、医用画像経時比較方法及び医用画像経時比較システム
Nair et al. Lung Cancer Detection from CT Images: Modified Adaptive Threshold Segmentation with Support Vector Machines and Artificial Neural Network Classifier
US20150201887A1 (en) Predictive intervertebral disc degeneration detection engine
Ishrat et al. Computer Simulation and the Practice of Oral Medicine and Radiology
Al-Hinnawi et al. Collaboration between interactive three-dimensional visualization and computer aided detection of pulmonary embolism on computed tomography pulmonary angiography views
EP4443384A1 (en) Method and system for comparing previous image and current image

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200121

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200529

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210216

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210413

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210831

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210921

R150 Certificate of patent or registration of utility model

Ref document number: 6948966

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250