JP7054787B2 - 制御方法、情報端末、及びプログラム - Google Patents
制御方法、情報端末、及びプログラム Download PDFInfo
- Publication number
- JP7054787B2 JP7054787B2 JP2017236876A JP2017236876A JP7054787B2 JP 7054787 B2 JP7054787 B2 JP 7054787B2 JP 2017236876 A JP2017236876 A JP 2017236876A JP 2017236876 A JP2017236876 A JP 2017236876A JP 7054787 B2 JP7054787 B2 JP 7054787B2
- Authority
- JP
- Japan
- Prior art keywords
- area
- lesion
- pixel
- pixels
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2413—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on distances to training or reference patterns
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—Two-dimensional [2D] image generation
- G06T11/60—Creating or editing images; Combining images with text
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/443—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering
- G06V10/449—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters
- G06V10/451—Biologically inspired filters, e.g. difference of Gaussians [DoG] or Gabor filters with interaction between the filter responses, e.g. cortical complex cells
- G06V10/454—Integrating the filters into a hierarchical structure, e.g. convolutional neural networks [CNN]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
- G06V10/464—Salient features, e.g. scale invariant feature transforms [SIFT] using a plurality of salient features, e.g. bag-of-words [BoW] representations
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
- G16H40/60—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices
- G16H40/63—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the operation of medical equipment or devices for local operation
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/70—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for mining of medical data, e.g. analysing previous cases of other patients
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
- G06T2207/10081—Computed x-ray tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20076—Probabilistic image processing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20092—Interactive image processing based on input by user
- G06T2207/20104—Interactive definition of region of interest [ROI]
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30061—Lung
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30096—Tumor; Lesion
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/03—Recognition of patterns in medical or anatomical images
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Public Health (AREA)
- Biomedical Technology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Data Mining & Analysis (AREA)
- Evolutionary Computation (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Databases & Information Systems (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Radiology & Medical Imaging (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Pathology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- Quality & Reliability (AREA)
- Business, Economics & Management (AREA)
- General Business, Economics & Management (AREA)
- Human Computer Interaction (AREA)
- Molecular Biology (AREA)
- Biodiversity & Conservation Biology (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Computational Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Apparatus For Radiation Diagnosis (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
(a)複数の画素を有する第1医用画像を受信させ、
(b)前記第1医用画像に含まれる病変がテクスチャ型の病変である場合、前記第1医用画像の前記複数の画素のそれぞれについて、前記複数の画素の画素値と、前記複数の画素のそれぞれの周囲の画素の画素値とを予め定められた前記テクスチャ型の病変を示す病変領域を識別するための識別器に入力することで、前記病変領域に含まれる確率値を算出させ、
前記テクスチャ型の病変は、複数の特定陰影のパターンを含む病変であり、
(c)前記ディスプレイに、前記第1医用画像に候補領域と前記候補領域の修正領域とが重畳されている第2医用画像を表示させ、
前記候補領域は、前記複数の画素のうち、第1閾値以上の確率値が算出された画素に基づいて決定されており、
前記修正領域は、前記複数の画素のうち、確率範囲に含まれる確率値が算出された画素に基づいて決定されており、
前記確率範囲は、前記第1閾値を含んでおり、
(d)前記ディスプレイに表示されている前記第2医用画像に対するユーザの入力を検知させ、
(e)前記第1医用画像に病変領域が重畳されている第3医用画像を表示させ、
前記病変領域は、前記ユーザの入力と前記修正領域とに基づいて、前記候補領域を修正して決定されている。
なお、この包括的または具体的な態様は、装置、システム、集積回路、コンピュータプログラムまたはコンピュータ読み取り可能な記録媒体で実現されてもよく、装置、システム、方法、集積回路、コンピュータプログラムおよびコンピュータ読み取り可能な記録媒体の任意な組み合わせで実現されてもよい。コンピュータ読み取り可能な記録媒体は、例えばCD-ROM(Compact Disc-Read Only Memory)などの不揮発性の記録媒体を含む。
近年、医用画像のデジタル化によって、大量の医用画像が容易に蓄積できるようになり、これらのデータを用いたコンピュータ支援診断もまた盛んに研究開発されている。コンピュータ支援診断の1つとして病変領域の自動検出がある。例えば、類似症例検索を利用する場合には検索対象となる病変領域を正確に指定することが必要となるが、複雑な形状の病変を正確にすばやく囲むことは難しい。そこで、病変領域を自動検出することで、病変領域の指定を簡便かつ正確に行なうことができる。
(a)複数の画素を有する第1医用画像を受信させ、
(b)前記第1医用画像に含まれる病変がテクスチャ型の病変である場合、前記第1医用画像の前記複数の画素のそれぞれについて、前記複数の画素の画素値と、前記複数の画素のそれぞれの周囲の画素の画素値とを予め定められた前記テクスチャ型の病変を示す病変領域を識別するための識別器に入力することで、前記病変領域に含まれる確率値を算出させ、
前記テクスチャ型の病変は、複数の特定陰影のパターンを含む病変であり、
(c)前記ディスプレイに、前記第1医用画像に候補領域と前記候補領域の修正領域とが重畳されている第2医用画像を表示させ、
前記候補領域は、前記複数の画素のうち、第1閾値以上の確率値が算出された画素に基づいて決定されており、
前記修正領域は、前記複数の画素のうち、確率範囲に含まれる確率値が算出された画素に基づいて決定されており、
前記確率範囲は、前記第1閾値を含んでおり、
(d)前記ディスプレイに表示されている前記第2医用画像に対するユーザの入力を検知させ、
(e)前記第1医用画像に病変領域が重畳されている第3医用画像を表示させ、
前記病変領域は、前記ユーザの入力と前記修正領域とに基づいて、前記候補領域を修正して決定されている。
前記分割された複数の領域は、それぞれ、前記領域から選択される2つの画素を結ぶ直線のうち、最大の長さを有する直線が、第2閾値以下の長さを有していてもよい。
前記(e)において、前記ユーザの入力により決定された候補領域を前記病変領域として表示してもよい。
前記(d)において、前記修正領域に含まれる画素に対するユーザの入力を検知させ、
前記(e)において、前記病変領域は、前記ユーザの入力に応じて、前記候補領域を、前記修正領域の一部まで拡大又は縮小された領域であってもよい。
前記第1画素は、前記第2画素に比べて、周辺の画素の確率値の傾きが大きい画素であってもよい。
前記(e)において、前記第1画素及び前記第2画素は、それぞれ、前記ドラッグ操作の開始地点の画素であり、前記候補領域を拡大又は縮小する量は、前記ドラッグ操作の移動量に比例し、前記傾きに反比例してもよい。
まず、本実施の形態で用いる用語を説明する。
(構成の説明)
以下、本開示の実施の形態1に係る情報端末について、図面を用いて詳細に説明する。
図2は、本開示の実施の形態1に係る情報端末100が実行する処理の全体的な流れを示すフローチャートである。まず、確率画像算出部102は、指定対象画像を症例検索システム101から取得し、取得した指定対象画像の各画素について、病変領域に含まれる確率を示す確率値を算出することで、確率画像を算出する(ステップS101)。
次に、本開示の実施の形態2について説明する。実施の形態2は、第1閾値の等値線をユーザにドラッグさせることで候補領域を修正するものである。なお、実施の形態2において、実施の形態1と同一の構成要素には同一の符号を付し、説明を省く。また、実施の形態2の情報端末100の構成は図2と同じである。
実施の形態2の情報端末100の動作を図2を用いて説明する。ステップS101における確率画像を算出する処理は実施の形態1と同じであるので、説明を省く。
なお、ここでは、ドラッグ操作の開始地点の画素の上下左右の確率値を用いて傾きが計算されたが、計算方法はこれに限定されない。例えば、ドラッグ操作の開始地点の画素に対し、上方向に隣接する画素と、右方向に隣接する画素との2画素のそれぞれの確率値を用いて傾きが計算されてもよい。
但し、これは一例であり、ドラッグ操作の開始地点の画素に対し、右方向に隣接する画素と下方向に隣接する画素との2画素の確率値、下方向に隣接する画素と左方向に隣接する画素との2画素の確率値、或いは左方向に隣接する画素と上方向に隣接する画素との2画素の確率値を用いて傾きが算出されてもよい。
=係数×(ドラッグ操作の移動量/ドラッグ操作の開始地点の傾き) (3)
係数としては、例えば1が採用できる。
101 症例検索システム
102 確率画像算出部
103 出力部
104 入力部
105 病変領域指定部
Claims (9)
- 医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末の制御方法であって、
(a)複数の画素を有する第1医用画像を受信させ、
(b)前記第1医用画像に含まれる病変がテクスチャ型の病変である場合、前記第1医用画像の前記複数の画素のそれぞれについて、前記複数の画素の画素値と、前記複数の画素のそれぞれの周囲の画素の画素値とを予め定められた前記テクスチャ型の病変を示す病変領域を識別するための識別器に入力することで、前記病変領域に含まれる確率値を算出させ、
前記テクスチャ型の病変は、複数の特定陰影のパターンを含む病変であり、
(c)前記ディスプレイに、前記第1医用画像に候補領域と前記候補領域の修正領域とが重畳されている第2医用画像を表示させ、
前記候補領域は、前記複数の画素のうち、第1閾値以上の確率値が算出された画素に基づいて決定されており、
前記修正領域は、前記複数の画素のうち、確率範囲に含まれる確率値が算出された画素に基づいて決定されており、
前記確率範囲は、前記第1閾値を含んでおり、
(d)前記ディスプレイに表示されている前記第2医用画像に対するユーザの入力を検知させ、
(e)前記第1医用画像に病変領域が重畳されている第3医用画像を表示させ、
前記病変領域は、前記ユーザの入力と前記修正領域とに基づいて、前記候補領域を修正して決定されており、
前記(c)において、前記修正領域は、前記候補領域を囲むように、表示されており、
前記(d)において、前記修正領域に含まれる画素に対するユーザの入力を検知させ、
前記(e)において、前記病変領域は、前記ユーザの入力に応じて、前記候補領域を、前記修正領域の一部まで拡大又は縮小された領域であり、
前記(e)において、第1画素に対して前記ユーザの入力を検知したとき、第2画素に対して前記ユーザの入力を検知したときに比べて、前記候補領域を拡大又は縮小する量を小さくし、
前記第1画素は、前記第2画素に比べて、周辺の画素の確率値の傾きが大きい画素である、
制御方法。 - 前記(c)において、前記第2医用画像に重畳される前記修正領域は、複数の領域に分割されており、
前記分割された複数の領域は、それぞれ、前記領域から選択される2つの画素を結ぶ直線のうち、最大の長さを有する直線が、第2閾値以下の長さを有する、
請求項1に記載の制御方法。 - 前記(d)において、前記分割された複数の領域に対して、前記候補領域に追加するか前記候補領域から除外するかのユーザの入力を検知し、
前記(e)において、前記ユーザの入力により決定された候補領域を前記病変領域として表示する、
請求項2に記載の制御方法。 - 前記(d)において、前記ユーザのドラッグ操作を前記入力として検知し、
前記(e)において、前記第1画素及び前記第2画素は、それぞれ、前記ドラッグ操作の開始地点の画素であり、前記候補領域を拡大又は縮小する量は、前記ドラッグ操作の移動量に比例し、前記傾きに反比例する、
請求項1に記載の制御方法。 - 医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末であって、
複数の画素を有する第1医用画像を受信し、前記第1医用画像に含まれる病変が複数の特定陰影のパターンを含むテクスチャ型の病変である場合、前記第1医用画像の前記複数の画素のそれぞれについて、前記複数の画素の画素値と、前記複数の画素のそれぞれの周囲の画素の画素値とを予め定められた病変領域を識別するための識別器に入力することで、前記病変領域に含まれる確率値を算出する確率画像算出部と、
前記第1医用画像に、前記複数の画素のうち第1閾値以上の確率値が算出された画素に基づいて候補領域を決定し、前記複数の画素のうち前記第1閾値を含む確率範囲に含まれる確率値が算出された画素に基づいて前記候補領域の修正領域を決定し、前記決定した候補領域と前記修正領域とを前記第1医用画像に重畳して第2医用画像を前記ディスプレイに表示させる出力部と、
前記ディスプレイに表示されている前記第2医用画像に対するユーザの入力を検知する入力部と、
前記入力部により検知された前記ユーザの入力と前記修正領域とに基づいて、前記候補領域を修正して病変領域を指定する病変領域指定部とを含み、
前記出力部は、前記病変領域が重畳されている第3医用画像を前記ディスプレイに表示させ、
前記出力部は、前記候補領域を囲むように前記修正領域を表示し、
前記入力部は、前記修正領域に含まれる画素に対するユーザの入力を検知し、
前記病変領域指定部は、前記ユーザの入力に応じて、前記候補領域を前記修正領域の一部まで拡大又は縮小させることで前記病変領域を決定し、
前記病変領域指定部は、第1画素に対して前記ユーザの入力を検知したとき、第2画素に対して前記ユーザの入力を検知したときに比べて、前記候補領域を拡大又は縮小する量を小さくし、
前記第1画素は、前記第2画素に比べて、周辺の画素の確率値の傾きが大きい画素である、
情報端末。 - 前記確率画像算出部は、前記第2医用画像に重畳される前記修正領域を、複数の領域に分割し、
前記分割された複数の領域は、それぞれ、前記領域から選択される2つの画素を結ぶ直線のうち最大の長さを有する直線が、第2閾値以下の長さを有する、
請求項5に記載の情報端末。 - 前記入力部は、前記分割された複数の領域に対して、前記候補領域に追加するか前記候補領域から除外するかのユーザの入力を検知し、
前記病変領域指定部は、前記ユーザの入力により決定された候補領域を前記病変領域として表示する、
請求項6に記載の情報端末。 - 前記入力部は、前記ユーザのドラッグ操作を前記入力として検知し、
前記第1画素及び前記第2画素は、それぞれ、前記ドラッグ操作の開始地点の画素であり、前記候補領域を拡大又は縮小する量は、前記ドラッグ操作の移動量に比例し、前記傾きに反比例する、
請求項5に記載の情報端末。 - 医用画像データベースを参照して医用画像を検索する症例検索システムに接続されており、ディスプレイを有する情報端末としてコンピュータを機能させるプログラムであって、
複数の画素を有する第1医用画像を受信し、前記第1医用画像に含まれる病変が複数の特定陰影のパターンを含むテクスチャ型の病変である場合、前記第1医用画像の前記複数の画素のそれぞれについて、前記複数の画素の画素値と、前記複数の画素のそれぞれの周囲の画素の画素値とを予め定められた病変領域を識別するための識別器に入力することで、前記病変領域に含まれる確率値を算出する確率画像算出部と、
前記第1医用画像に、前記複数の画素のうち第1閾値以上の確率値が算出された画素に基づいて候補領域を決定し、前記複数の画素のうち前記第1閾値を含む確率範囲に含まれる確率値が算出された画素に基づいて前記候補領域の修正領域を決定し、前記決定した候補領域と前記修正領域とを前記第1医用画像に重畳して第2医用画像を前記ディスプレイに表示させる出力部と、
前記ディスプレイに表示されている前記第2医用画像に対するユーザの入力を検知する入力部と、
前記入力部により検知された前記ユーザの入力と前記修正領域とに基づいて、前記候補領域を修正して病変領域を指定する病変領域指定部としてコンピュータを機能させ、
前記出力部は、前記病変領域が重畳されている第3医用画像を前記ディスプレイに表示させ、
前記出力部は、前記候補領域を囲むように前記修正領域を表示し、
前記入力部は、前記修正領域に含まれる画素に対するユーザの入力を検知し、
前記病変領域指定部は、前記ユーザの入力に応じて、前記候補領域を前記修正領域の一部まで拡大又は縮小させることで前記病変領域を決定し、
前記病変領域指定部は、第1画素に対して前記ユーザの入力を検知したとき、第2画素に対して前記ユーザの入力を検知したときに比べて、前記候補領域を拡大又は縮小する量を小さくし、
前記第1画素は、前記第2画素に比べて、周辺の画素の確率値の傾きが大きい画素である、
プログラム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016248992 | 2016-12-22 | ||
| JP2016248992 | 2016-12-22 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018102916A JP2018102916A (ja) | 2018-07-05 |
| JP7054787B2 true JP7054787B2 (ja) | 2022-04-15 |
Family
ID=62625614
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017236876A Active JP7054787B2 (ja) | 2016-12-22 | 2017-12-11 | 制御方法、情報端末、及びプログラム |
Country Status (2)
| Country | Link |
|---|---|
| US (2) | US10366785B2 (ja) |
| JP (1) | JP7054787B2 (ja) |
Families Citing this family (24)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2019008941A1 (ja) * | 2017-07-03 | 2019-01-10 | 富士フイルム株式会社 | 医療画像処理装置、内視鏡装置、診断支援装置、医療業務支援装置、及び、レポート作成支援装置 |
| JP6753622B2 (ja) * | 2018-06-27 | 2020-09-09 | 株式会社Cybo | 表示制御装置、表示制御方法及び表示制御プログラム |
| CN112513926A (zh) * | 2018-07-31 | 2021-03-16 | 奥林巴斯株式会社 | 图像解析装置及图像解析方法 |
| WO2020110774A1 (ja) | 2018-11-30 | 2020-06-04 | 富士フイルム株式会社 | 画像処理装置、画像処理方法、及びプログラム |
| CN109754389B (zh) * | 2018-12-07 | 2021-08-24 | 北京市商汤科技开发有限公司 | 一种图像处理方法、装置及设备 |
| US10937156B2 (en) * | 2019-01-31 | 2021-03-02 | Bay Labs, Inc. | Saliency mapping of imagery during artificially intelligent image classification |
| JP7151869B2 (ja) * | 2019-03-19 | 2022-10-12 | 日本電気株式会社 | 画像処理方法、画像処理装置、プログラム |
| JP7346051B2 (ja) * | 2019-03-27 | 2023-09-19 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
| EP3719746A1 (en) * | 2019-04-04 | 2020-10-07 | Koninklijke Philips N.V. | Identifying boundaries of lesions within image data |
| KR102889317B1 (ko) * | 2019-05-14 | 2025-11-24 | 주식회사 뷰노 | 의료 영상에서 병변의 시각화를 보조하는 방법 및 이를 이용한 장치 |
| KR102102255B1 (ko) * | 2019-05-14 | 2020-04-20 | 주식회사 뷰노 | 의료 영상에서 병변의 시각화를 보조하는 방법 및 이를 이용한 장치 |
| CN110490202B (zh) * | 2019-06-18 | 2021-05-25 | 腾讯科技(深圳)有限公司 | 检测模型训练方法、装置、计算机设备和存储介质 |
| US11157811B2 (en) * | 2019-10-28 | 2021-10-26 | International Business Machines Corporation | Stub image generation for neural network training |
| JP7514669B2 (ja) * | 2020-06-30 | 2024-07-11 | ジオテクノロジーズ株式会社 | 推論装置、推論方法、推論プログラム、およびコンピュータにより読み取り可能な記憶媒体 |
| JP7729717B2 (ja) * | 2020-10-22 | 2025-08-26 | キヤノンメディカルシステムズ株式会社 | 医用画像処理装置及び医用画像処理方法 |
| JP7584992B2 (ja) * | 2020-10-27 | 2024-11-18 | キヤノン株式会社 | 情報処理システム、情報処理装置、情報処理方法及びプログラム |
| CN112734697B (zh) * | 2020-12-24 | 2024-05-28 | 沈阳东软智能医疗科技研究院有限公司 | 图像处理方法、装置、存储介质和电子设备 |
| JP7823027B2 (ja) | 2021-04-02 | 2026-03-03 | 富士フイルム株式会社 | 医用画像処理装置、医用画像処理装置の作動方法、医用画像処理装置の作動プログラム |
| CN115171855A (zh) * | 2021-06-28 | 2022-10-11 | 杭州太美星程医药科技有限公司 | 一种医学影像阅片系统及其交互运行方法 |
| CN115731402B (zh) * | 2021-08-25 | 2026-04-10 | 北京小米移动软件有限公司 | 位置点确定方法、装置、电子设备及存储介质 |
| JP7642585B2 (ja) | 2022-03-24 | 2025-03-10 | 株式会社日立製作所 | 画像処理装置及び画像処理方法 |
| US20230401702A1 (en) * | 2022-06-09 | 2023-12-14 | Duke University | Object detection in paired imaging |
| JP2025050473A (ja) * | 2023-09-22 | 2025-04-04 | 株式会社日立製作所 | 画像処理装置及び画像処理方法 |
| WO2025150130A1 (ja) * | 2024-01-11 | 2025-07-17 | 富士通株式会社 | 病変識別方法および病変識別プログラム |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005028051A (ja) | 2003-07-11 | 2005-02-03 | Matsushita Electric Ind Co Ltd | 画像表示装置および画像表示方法 |
| JP2006334404A (ja) | 2005-05-31 | 2006-12-14 | Siemens Ag | 画像処理用の対話式ユーザアシスタントのためのデータ処理システムおよび方法ならびにコンピュータ読取可能な媒体 |
| JP2012090669A (ja) | 2010-10-25 | 2012-05-17 | Fujifilm Corp | 医用画像診断支援装置および方法、並びにプログラム |
| JP2016193295A (ja) | 2016-08-22 | 2016-11-17 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
Family Cites Families (35)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3046326B2 (ja) | 1990-06-15 | 2000-05-29 | 株式会社東芝 | 画像処理装置及び画像処理方法 |
| JP2003210441A (ja) | 2002-01-18 | 2003-07-29 | Canon Inc | 画像解析装置、画像解析システム、解析用データ作成装置、解析用データ作成システム、画像解析方法、解析用データ作成方法、コンピュータ可読記憶媒体及びプログラム |
| JP2004041694A (ja) | 2002-05-13 | 2004-02-12 | Fuji Photo Film Co Ltd | 画像生成装置およびプログラム、画像選択装置、画像出力装置、画像提供サービスシステム |
| US7474775B2 (en) * | 2005-03-31 | 2009-01-06 | University Of Iowa Research Foundation | Automatic detection of red lesions in digital color fundus photographs |
| US8517945B2 (en) * | 2005-04-28 | 2013-08-27 | Carestream Health, Inc. | Segmentation of lesions in ultrasound images |
| US7689016B2 (en) * | 2005-05-27 | 2010-03-30 | Stoecker & Associates, A Subsidiary Of The Dermatology Center, Llc | Automatic detection of critical dermoscopy features for malignant melanoma diagnosis |
| US8214177B2 (en) * | 2005-10-20 | 2012-07-03 | Syracuse University | Optimized stochastic resonance signal detection method |
| US9026404B2 (en) * | 2005-10-20 | 2015-05-05 | Syracuse University | Methods of improving detectors and classifiers using optimized stochastic resonance noise |
| US20070135999A1 (en) * | 2005-12-13 | 2007-06-14 | Applied Spectral Imaging Ltd. | Method, apparatus and system for characterizing pathological specimen |
| US7840046B2 (en) * | 2006-06-27 | 2010-11-23 | Siemens Medical Solutions Usa, Inc. | System and method for detection of breast masses and calcifications using the tomosynthesis projection and reconstructed images |
| JP5121204B2 (ja) * | 2006-10-11 | 2013-01-16 | オリンパス株式会社 | 画像処理装置、画像処理方法、および画像処理プログラム |
| US7876943B2 (en) * | 2007-10-03 | 2011-01-25 | Siemens Medical Solutions Usa, Inc. | System and method for lesion detection using locally adjustable priors |
| US8355553B2 (en) * | 2008-11-22 | 2013-01-15 | General Electric Company | Systems, apparatus and processes for automated medical image segmentation using a statistical model |
| US20100158332A1 (en) * | 2008-12-22 | 2010-06-24 | Dan Rico | Method and system of automated detection of lesions in medical images |
| GB2478329B (en) * | 2010-03-03 | 2015-03-04 | Samsung Electronics Co Ltd | Medical image processing |
| US9218661B2 (en) * | 2011-04-08 | 2015-12-22 | Algotec Systems Ltd. | Image analysis for specific objects |
| US9275453B2 (en) | 2011-10-03 | 2016-03-01 | Hitachi, Ltd. | Image processing device and image processing method |
| US9607392B2 (en) * | 2011-12-05 | 2017-03-28 | The Johns Hopkins University | System and method of automatically detecting tissue abnormalities |
| US9058647B2 (en) * | 2012-01-16 | 2015-06-16 | Canon Kabushiki Kaisha | Information processing apparatus, information processing method, and storage medium |
| US8923582B2 (en) * | 2012-05-31 | 2014-12-30 | General Electric Company | Systems and methods for computer aided detection using pixel intensity values |
| JP5993653B2 (ja) | 2012-08-03 | 2016-09-14 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
| US9378551B2 (en) * | 2013-01-03 | 2016-06-28 | Siemens Aktiengesellschaft | Method and system for lesion candidate detection |
| EP2772882A1 (en) * | 2013-03-01 | 2014-09-03 | Universite D'angers | Automatic measurement of lesions on medical images |
| US10238368B2 (en) * | 2013-09-21 | 2019-03-26 | General Electric Company | Method and system for lesion detection in ultrasound images |
| EP4057215A1 (en) * | 2013-10-22 | 2022-09-14 | Eyenuk, Inc. | Systems and methods for automated analysis of retinal images |
| KR20160012758A (ko) * | 2014-07-25 | 2016-02-03 | 삼성전자주식회사 | 영상 진단 보조 장치 및 방법 |
| KR20160049897A (ko) * | 2014-10-28 | 2016-05-10 | 삼성전자주식회사 | 연속적인 의료 영상을 이용한 컴퓨터 보조 진단 장치 및 방법 |
| US10068318B2 (en) * | 2015-01-06 | 2018-09-04 | Mayo Foundation For Medical Education And Research | Enhancing the detectability of objects in medical images |
| WO2016179310A1 (en) * | 2015-05-04 | 2016-11-10 | Smith Andrew Dennis | Computer-assisted tumor response assessment and evaluation of the vascular tumor burden |
| US11087459B2 (en) * | 2015-08-14 | 2021-08-10 | Elucid Bioimaging Inc. | Quantitative imaging for fractional flow reserve (FFR) |
| WO2017092615A1 (zh) * | 2015-11-30 | 2017-06-08 | 上海联影医疗科技有限公司 | 一种计算机辅助诊断系统及方法 |
| US10049451B2 (en) * | 2015-12-02 | 2018-08-14 | The Cleveland Clinic Foundation | Automated lesion segmentation from MRI images |
| US10282843B2 (en) * | 2016-10-27 | 2019-05-07 | International Business Machines Corporation | System and method for lesion analysis and recommendation of screening checkpoints for reduced risk of skin cancer |
| EP3629898A4 (en) * | 2017-05-30 | 2021-01-20 | Arterys Inc. | AUTOMATED LESION DETECTION, SEGMENTATION AND LENGTH IDENTIFICATION |
| US10115197B1 (en) * | 2017-06-06 | 2018-10-30 | Imam Abdulrahman Bin Faisal University | Apparatus and method for lesions segmentation |
-
2017
- 2017-12-11 JP JP2017236876A patent/JP7054787B2/ja active Active
- 2017-12-13 US US15/839,919 patent/US10366785B2/en active Active
-
2019
- 2019-06-13 US US16/440,443 patent/US10984907B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005028051A (ja) | 2003-07-11 | 2005-02-03 | Matsushita Electric Ind Co Ltd | 画像表示装置および画像表示方法 |
| JP2006334404A (ja) | 2005-05-31 | 2006-12-14 | Siemens Ag | 画像処理用の対話式ユーザアシスタントのためのデータ処理システムおよび方法ならびにコンピュータ読取可能な媒体 |
| JP2012090669A (ja) | 2010-10-25 | 2012-05-17 | Fujifilm Corp | 医用画像診断支援装置および方法、並びにプログラム |
| JP2016193295A (ja) | 2016-08-22 | 2016-11-17 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
Non-Patent Citations (1)
| Title |
|---|
| 鈴木 聡志 他2名,"びまん性肺疾患識別におけるDeep Convolutional Neural Network特徴の解析",情報処理学会研究報告(IPSJ SIG Technical Report),2015年06月24日,Vol.2015-MPS-103, No.29,pp.1-6 |
Also Published As
| Publication number | Publication date |
|---|---|
| US20190295711A1 (en) | 2019-09-26 |
| US10366785B2 (en) | 2019-07-30 |
| JP2018102916A (ja) | 2018-07-05 |
| US10984907B2 (en) | 2021-04-20 |
| US20180182481A1 (en) | 2018-06-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7054787B2 (ja) | 制御方法、情報端末、及びプログラム | |
| CN109409398B (zh) | 图像处理装置、图像处理方法以及存储介质 | |
| JP5618787B2 (ja) | レポート作成支援装置及びその作成支援方法、並びにプログラム | |
| CN101061509B (zh) | 用于医疗成像数据内的肿瘤边界的自动检测和分割的系统和方法 | |
| CN111445440B (zh) | 一种医学图像分析方法、设备和存储介质 | |
| JP6878034B2 (ja) | 情報処理装置、制御方法、およびプログラム | |
| JP5878924B2 (ja) | 画像処理装置、撮像装置および画像処理方法 | |
| JP7410619B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| JPWO2014196069A1 (ja) | 画像処理装置および画像処理方法 | |
| US20160379088A1 (en) | Apparatus and method for creating an image recognizing program having high positional recognition accuracy | |
| EP3373194B1 (en) | Image retrieval apparatus and image retrieval method | |
| EP4327333A1 (en) | Methods and systems for automated follow-up reading of medical image data | |
| KR102431173B1 (ko) | 진단 영상에서 심층신경망을 이용한 국소종양진행을 진단하기 위한 장치 및 국소종양진행 진단에 필요한 정보를 제공하는 방법 | |
| JP7500945B2 (ja) | コンピュータプログラム、細胞計数方法及び細胞計数装置 | |
| JP3978962B2 (ja) | 情報検索方法および情報検索装置 | |
| US20160140723A1 (en) | Partitioning an image | |
| JP6546385B2 (ja) | 画像処理装置及びその制御方法、プログラム | |
| JP7362568B2 (ja) | 画像検索装置、画像検索方法、およびプログラム | |
| JPWO2007013300A1 (ja) | 異常陰影候補検出方法及び異常陰影候補検出装置 | |
| JP2008259710A (ja) | 画像処理方法および装置ならびにプログラム | |
| CN114445338A (zh) | 图像处理方法、装置、存储介质及电子设备 | |
| JP7480997B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
| JP2005196702A (ja) | 画像を分割可能なプログラム及び画像分割方法 | |
| JP6098286B2 (ja) | 対応点決定装置、対応点決定方法、及びプログラム | |
| US20240062883A1 (en) | Document creation support apparatus, document creation support method, and document creation support program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200702 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210730 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210810 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211011 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220301 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220304 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 7054787 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |