JP6968843B2 - Medical diagnostic server, medical diagnostic method, and program - Google Patents
Medical diagnostic server, medical diagnostic method, and program Download PDFInfo
- Publication number
- JP6968843B2 JP6968843B2 JP2019030487A JP2019030487A JP6968843B2 JP 6968843 B2 JP6968843 B2 JP 6968843B2 JP 2019030487 A JP2019030487 A JP 2019030487A JP 2019030487 A JP2019030487 A JP 2019030487A JP 6968843 B2 JP6968843 B2 JP 6968843B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- patient
- diagnosis
- data
- medical
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000002405 diagnostic procedure Methods 0.000 title claims description 11
- 238000003745 diagnosis Methods 0.000 claims description 82
- 238000012790 confirmation Methods 0.000 claims description 41
- 238000010801 machine learning Methods 0.000 claims description 7
- 238000002059 diagnostic imaging Methods 0.000 description 31
- 238000004891 communication Methods 0.000 description 30
- 238000000034 method Methods 0.000 description 21
- 238000003384 imaging method Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 8
- 238000013500 data storage Methods 0.000 description 6
- 238000001839 endoscopy Methods 0.000 description 6
- 238000012545 processing Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 238000009206 nuclear medicine Methods 0.000 description 4
- 241000699670 Mus sp. Species 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 201000008482 osteoarthritis Diseases 0.000 description 3
- 238000002583 angiography Methods 0.000 description 2
- 238000002591 computed tomography Methods 0.000 description 2
- 238000007429 general method Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 206010041591 Spinal osteoarthritis Diseases 0.000 description 1
- 208000036319 cervical spondylosis Diseases 0.000 description 1
- 230000003412 degenerative effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 208000005801 spondylosis Diseases 0.000 description 1
Images
Landscapes
- Medical Treatment And Welfare Office Work (AREA)
Description
本発明は、患者の画像を撮影して診断を行う医療用診断システムに、診断に関する情報を出力させる手法に関する。 The present invention relates to a method of outputting information on diagnosis to a medical diagnostic system that takes an image of a patient and makes a diagnosis.
医療の現場においては、医師による素早く正確な判断が求められる。その、医師の業務を効率化するためには、例えば、医学的な画像診断を行う際に診断の参考となる情報を表示したり、また、画像診断後のレポート作成の際に入力の候補を表示したり、というサポートが考えられる。 In the medical field, quick and accurate judgment by doctors is required. In order to streamline the work of doctors, for example, information that can be used as a reference for diagnosis when performing medical diagnostic imaging is displayed, and input candidates are selected when creating a report after diagnostic imaging. Support such as displaying is conceivable.
医学的な画像診断を行う際の技術としては、医療画像の解像度の低さに起因する問題を解決する方法が提案されている(特許文献1)。 As a technique for performing medical image diagnosis, a method for solving a problem caused by a low resolution of a medical image has been proposed (Patent Document 1).
しかしながら、特許文献1の技術では、医療画像の解像度の低さに起因する問題を解決することは可能であるが、医師の業務を総合的に効率化するために、診断の参考となる情報を表示したり、レポートの入力を支援したり、という総合的なサポートが不十分である。 However, although the technique of Patent Document 1 can solve the problem caused by the low resolution of the medical image, in order to comprehensively improve the efficiency of the doctor's work, information that can be used as a reference for diagnosis is provided. Comprehensive support such as displaying and assisting in the input of reports is insufficient.
この課題に対し、本発明の発明者は、医師が画像診断を行う際に、画像の他に、患者の属性や撮影された部位の情報を事前に確認していること、他の患者の過去の類似のレポートを参照することに着眼した。また、医療画像の類似性の判断を行う際には、医療画像をハッシュ化して、画像同士のハミング距離を基にした判断が有効であることを確認した。 In response to this problem, the inventor of the present invention confirms in advance information on the attributes of the patient and the imaged site in addition to the image when the doctor makes an image diagnosis, and the past of other patients. I focused on referring to a similar report in. In addition, when determining the similarity of medical images, it was confirmed that the medical images were hashed and the determination based on the Hamming distance between the images was effective.
本発明は、患者の画像を撮影して診断を行う医療用診断システムに、患者の診断に関する情報を出力させることで、医師の業務を効率化する総合的なサポートが可能な医療用診断サーバ、医療用診断方法、及びプログラムを提供することを目的とする。 The present invention is a medical diagnostic server capable of providing comprehensive support for streamlining the work of a doctor by outputting information related to the patient's diagnosis to a medical diagnostic system that captures an image of the patient and makes a diagnosis. The purpose is to provide medical diagnostic methods and programs.
本発明では、以下のような解決手段を提供する。 The present invention provides the following solutions.
第1の特徴に係る発明は、
患者の画像を撮影して診断を行う医療用診断サーバであって、
撮影された前記患者の画像を取得する画像取得手段と、
当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得する事前確認データ取得手段と、
前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得する所見データ取得手段と、
前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させる診断出力手段と、
を備える医療用診断サーバを提供する。
The invention according to the first feature is
It is a medical diagnostic server that takes images of patients and makes a diagnosis.
An image acquisition means for acquiring an image of the patient taken, and
Attribute including gender and age of the patient, pre-confirmation data acquisition means to acquire pre-confirmation data including at least information on the imaged part, and
Finding data that is a doctor's finding on the image, or finding data acquisition means for acquiring a doctor's selection for the plurality of keywords.
A diagnostic output means for outputting information regarding the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
Provide a medical diagnostic server equipped with.
第1の特徴に係る発明によれば、患者の画像を撮影して診断を行う医療用診断サーバにおいて、撮影された前記患者の画像を取得する画像取得手段と、当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得する事前確認データ取得手段と、前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得する所見データ取得手段と、前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させる診断出力手段と、を備える。 According to the invention according to the first feature, in a medical diagnostic server that captures an image of a patient and makes a diagnosis, an image acquisition means for acquiring the captured image of the patient and the sex and age of the patient are determined. Pre-confirmation data acquisition means for acquiring pre-confirmation data including at least information on included attributes and photographed parts, finding data that is the findings of the doctor for the image, or findings for acquiring the selection of the doctor for the plurality of keywords. It includes a data acquisition means and a diagnostic output means for outputting information on the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
第1の特徴に係る発明は、医療用診断サーバのカテゴリであるが、医療用診断方法、及びプログラムであっても同様の作用、効果を奏する。 The invention according to the first feature is in the category of medical diagnostic server, but the same operation and effect can be obtained even with a medical diagnostic method and a program.
第2の特徴に係る発明は、第1の特徴に係る発明である医療用診断サーバであって、
前記所見データを取得する毎、又は、前記選択されたキーワードを取得する毎に、前記患者の診断に関する情報をリアルタイムで選択しなおして出力を更新する。
The invention according to the second feature is a medical diagnostic server according to the first feature.
Every time the finding data is acquired or the selected keyword is acquired, the information regarding the diagnosis of the patient is reselected in real time and the output is updated.
第2の特徴に係る発明によれば、第1の特徴に係る発明である医療用診断サーバにおいて、前記所見データを取得する毎、又は、前記選択されたキーワードを取得する毎に、前記患者の診断に関する情報をリアルタイムで選択しなおして出力を更新する。 According to the invention of the second aspect, the medical diagnosis server an invention according to the first aspect, each time acquiring the finding data, or for each to get the selected keyword, the patient Update the output by reselecting diagnostic information in real time.
第3の特徴に係る発明は、第1又は第2の特徴に係る発明である医療用診断サーバであって、
前記診断出力手段は、機械学習により選択した前記患者の診断に関する情報を所定の端末に出力させる。
The invention according to the third feature is a medical diagnostic server according to the first or second feature.
The diagnostic output means causes a predetermined terminal to output information regarding the diagnosis of the patient selected by machine learning.
第3の特徴に係る発明によれば、第1又は第2の特徴に係る発明である医療用診断サーバにおいて、前記診断出力手段は、機械学習により選択した前記患者の診断に関する情報を所定の端末に出力させる。 According to the invention of the third aspect, in the medical diagnosis server an invention according to the first or second aspect, the diagnostic output means, diagnosis of information prescribed for the patients selected by machine learning terminal To output to.
第4の特徴に係る発明は、
患者の画像を撮影して診断を行う医療用診断方法において、
撮影された前記患者の画像を取得するステップと、
当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得するステップと、
前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得するステップと、
前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させるステップと、
を備える医療用診断方法を提供する。
The invention according to the fourth feature is
In a medical diagnostic method that takes an image of a patient to make a diagnosis
The step of acquiring the image of the patient taken and
Attribute including gender and age of the patient, step to acquire prior confirmation data including at least information on the imaged part, and
A step of acquiring finding data which is a doctor's finding for the image or a doctor's selection for the plurality of keywords.
A step of outputting information regarding the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
Provide a medical diagnostic method.
第5の特徴に係る発明は、
患者の画像を撮影して診断を行う医療用診断サーバに、
撮影された前記患者の画像を取得するステップ、
当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得するステップ、
前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得するステップ、
前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させるステップ、
を実行させるためのプログラムを提供する。
The invention according to the fifth feature is
For medical diagnostic servers that take images of patients and make diagnoses,
Steps to acquire the image of the patient taken
Attribute including gender and age of the patient, step to acquire prior confirmation data including at least information on the imaged part,
A step of acquiring finding data which is a doctor's finding on the image or a doctor's selection for the plurality of keywords.
A step of outputting information regarding the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
Provide a program to execute.
本発明によれば、患者の画像を撮影して診断を行う医療用診断サーバに、患者の診断に関する情報を出力させることで、医師の業務を効率化する総合的なサポートが可能な医療用診断サーバ、医療用診断方法、及びプログラムを提供することが可能となる。 According to the present invention, a medical diagnosis server that captures an image of a patient and performs a diagnosis outputs information on the diagnosis of the patient, thereby providing comprehensive support for streamlining the work of a doctor. It will be possible to provide servers, medical diagnostic methods, and programs.
以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。 Hereinafter, the best mode for carrying out the present invention will be described with reference to the drawings. It should be noted that this is only an example, and the technical scope of the present invention is not limited to this.
[医療用診断システムの概要]
図1は、本発明の好適な実施形態の概要図である。この図1に基づいて、本発明の概要を説明する。医療用診断システムは、図2に示すように、サーバ100、端末200、医療用撮影装置300、通信網400から構成されてよい。サーバ100は、医療用診断システムを運用可能な装置であるとする。ここでは、デスクトップ型のコンピュータを図示しているが、ノートパソコン、スマートフォン、タブレット端末等であってよい。数は一つに限らず複数であってよく、また、実在する装置に限らず仮想的な装置やクラウドであってもよい。サーバ100は、制御部110、通信部120、記憶部130、入力部140、出力部150、から構成される。制御部110には、画像取得モジュール111、事前確認データ取得モジュール112、診断出力モジュール113を備える。制御部110は、各手段の実現のために、必要に応じて通信部120、記憶部130、入力部140、出力部150と協働する。端末200は、医療用診断システムを利用する医師が使用する端末である。ここでは、ディスプレイと一体型のコンピュータを図示しているが、デスクトップ型のコンピュータ、ノートパソコン、スマートフォン、タブレット端末、ウェアラブル端末等であってよい。数は一つに限らず複数であってよい。端末200は、制御部210、通信部220、記憶部230、入力部240、出力部250、から構成される。医療用撮影装置300は、医療用診断システムを利用する医師が、患者を撮影するために使用する医療用撮影装置である。例として、エックス線診断画像(X線撮影、血管造影等)の撮影装置、コンピュータ断層画像(CT、MRI等)の撮影装置、核医学診断画像(シンチグラフィ、PET等)の撮影装置、超音波検査の画像撮影装置、内視鏡検査の画像撮影装置、眼底カメラ、等が挙げられる。数は一つに限らず複数であってよい。医療用撮影装置300は、撮影部30、制御部310、通信部320、記憶部330、入力部340、出力部350、から構成される。医療用撮影装置300の撮影部30は、診断に十分な解像度の画像を撮影可能であるものとする。通信網400は、サーバ100と端末200と医療用撮影装置300間の通信を可能とする通信網である。
[Overview of medical diagnostic system]
FIG. 1 is a schematic diagram of a preferred embodiment of the present invention. The outline of the present invention will be described with reference to FIG. As shown in FIG. 2, the medical diagnostic system may be composed of a
図1の医療用診断システムにおいて、まず、サーバ100の画像取得モジュール111は、医療用撮影装置300から撮影された患者の画像を取得する(ステップS01)。ここで取得する画像は、エックス線診断画像、コンピュータ断層画像、核医学診断画像、超音波検査画像、内視鏡検査の像撮、眼底カメラによる画像等の、医療画像であるものとする。
In the medical diagnostic system of FIG. 1, first, the image acquisition module 111 of the
次に、サーバ100の事前確認データ取得モジュール112は、患者の事前確認データを取得する(ステップS02)。ここで取得する事前確認データには、少なくとも、性別や年齢等の患者の属性と、撮影された部位の情報とを含むものとする。事前確認データ取得モジュール112が事前確認データを取得する先は、端末200であってもよいし、その他の機器やデータベースやクラウドサービス等であってもよい。
Next, the prior confirmation data acquisition module 112 of the
最後に、サーバ100の診断出力モジュール113は、ステップS01で取得した患者の画像と、ステップS02で取得した事前確認データとに基づいて、患者の診断に関する情報を端末200に出力させる(ステップS03)。ここで、患者の診断に関する情報には、「過去の類似の所見データ」、「当該診断に関する関連画像」、「当該診断に関する参考情報」の少なくとも一つを含むものとする。「過去の類似の所見データ」は、他の患者のものであっても当該患者の過去のものであってもよい。また、「当該診断に関する参考画像」は、過去の類似の所見データに関連付けられた医療画像であるとする。また、「当該診断に関する参考情報」は、過去の類似の所見データの中の診断に関する参考文献や、過去の症例等であるとする。患者の診断に関する情報を抽出するために、まず、ステップS01で取得した患者の画像と類似の画像を、過去の医療画像から選択し、「当該診断に関する参考画像」とする。次に、選択した画像に関連付けられた所見データを、「過去の類似の所見データ」とする。最後に、所見データに含まれる診断結果に関する参考文献や、過去の症例等を抽出し、「当該診断に関する参考情報」とする。類似の過去の医療画像の検索先は、サーバ100の記憶部130であってもよいし、その他の機器やデータベースやクラウドサービス等であってもよい。ここで、ステップS01で取得した患者の画像と類似の画像を、過去の医療画像から選択するために、機械学習を使用してもよい。また、所見データに含まれる診断結果に関する参考文献や、過去の症例等を抽出する際に、機械学習を使用してもよい。
Finally, the diagnostic output module 113 of the
図6は、診断情報を出力する端末200の画面の一例である。医療用診断システムは、端末200に患者の診断に関する情報だけでなく、取得した患者の画像や事前確認データもあわせて表示する。また、医師による所見データの入力も可能とする。図6の例では、画面左の表示エリア601に、取得した事前確認データに基づき、患者情報を表示している。事前確認データである性別や年齢等の「患者の属性」と、「検査情報」として、撮影した部位についても表示する。また、その他に「診察券番号」や「検査の目的」、当該患者の過去の病歴がある場合には「過去の診断」の内容について等も併せて表示してよい。画面右上には、表示エリア602に、取得した患者の画像を表示している。あわせて、エックス線画像、CT画像等の画像の種類を表示してもよい。また、撮影日時を表示してもよい。複数の撮影画像がある場合には、代表的な画像を大きく表示して、その他の画像も選択可能としてよい。画面中央には、表示エリア603に参考情報として、患者の診断に関する情報を表示している。ここでは、類似の症例として、CT画像、患者情報、診断、所見を表示する例を示している。また、表示エリア604には、参考情報内のキーワードとなる単語を表示して、それを医師に選択させることによって、参考文献を表示することを可能とする。医師は、これらの患者情報、画像、参考情報を確認しながら、画面右下の表示エリア605に所見を入力することが可能である。また、医師が表示エリア603の参考情報が適切でないと考えた場合には、別の類似画像症例を表示ボタン607を選択することで、次に類似の医療画像とそれに関連付けられた所見データとに、表示エリア603を切り替えることを可能としてもよい。画面上部には、表示エリア606に、診察する医師の情報を表示している。医師は、所見の入力を終えた場合、入力完了ボタン609を選択することで、所見の入力を完了して、次の画面へと遷移することができる。また、メニューへボタン608を選択することで、医療用診断システムのメニュー画面に遷移する。
FIG. 6 is an example of the screen of the terminal 200 that outputs diagnostic information. The medical diagnosis system displays not only the information related to the diagnosis of the patient but also the acquired image of the patient and the prior confirmation data on the
以上のように、本発明によれば、患者の画像を撮影して診断を行う医療用診断システムに、患者の診断に関する情報を出力させることで、医師の業務を効率化する総合的なサポートが可能な医療用診断サーバ、医療用診断方法、及びプログラムを提供することが可能となる。 As described above, according to the present invention, comprehensive support for streamlining the work of a doctor is provided by outputting information on the diagnosis of a patient to a medical diagnostic system that takes an image of the patient and makes a diagnosis. It will be possible to provide possible medical diagnostic servers, medical diagnostic methods, and programs.
[各機能の説明]
図2は、医療用診断システムの概要と、サーバ100、端末200、医療用撮影装置300の機能ブロック図である。医療用診断システムは、サーバ100、端末200、医療用撮影装置300、通信網400から構成される。
[Explanation of each function]
FIG. 2 is an outline of a medical diagnostic system and a functional block diagram of a
サーバ100は、医療用診断システムを運用可能な装置であるとする。ここでは、デスクトップ型のコンピュータを図示しているが、ノートパソコン、スマートフォン、タブレット端末等であってよい。数は一つに限らず複数であってよく、また、実在する装置に限らず仮想的な装置やクラウドであってもよい。サーバ100は、制御部110、通信部120、記憶部130、入力部140、出力部150、から構成される。
It is assumed that the
サーバ100は、制御部110として、CPU(Central Processing Unit)、RAM(Random Access Memory)、ROM(Read Only Memory)等を備える。制御部110には、画像取得モジュール111、事前確認データ取得モジュール112、診断出力モジュール113を備える。制御部110は、各手段の実現のために、必要に応じて通信部120、記憶部130、入力部140、出力部150と協働する。
The
サーバ100は、通信部120として、他の機器と通信可能にするためのデバイス等を備える。通信方式は、無線であっても有線であってもよい。
The
サーバ100は、記憶部130として、データのストレージ部を備え、端末200から取得したデータ、医療撮影装置300から取得したデータ、過去の医療画像と所見データを関連付けたデータ、等の必要なデータを記憶する。データのストレージ部は、外部のサーバやクラウドにあってもよい。
The
サーバ100は、入力部140として、入力を実現するためのデバイスを備える。例として、キーボード、マウス、タッチパネル、ペンタブレット、マイク等である。通信部120を介して、他の端末等からの入力を実現してもよい。
The
サーバ100は、出力部150として、出力を実現するためのデバイスを備える。例としては、ディスプレイ、プロジェクタ、スピーカー等である。通信部120を介して他の機器への出力を実現してもよい。
The
端末200は、医療用診断システムを利用する医師が使用する端末である。ここでは、ディスプレイと一体型のコンピュータを図示しているが、デスクトップ型のコンピュータ、ノートパソコン、スマートフォン、タブレット端末、ウェアラブル端末等であってよい。数は一つに限らず複数であってよい。端末200は、制御部210、通信部220、記憶部230、入力部240、出力部250、から構成される。 The terminal 200 is a terminal used by a doctor who uses a medical diagnostic system. Although a computer integrated with a display is shown here, it may be a desktop computer, a laptop computer, a smartphone, a tablet terminal, a wearable terminal, or the like. The number is not limited to one and may be plural. The terminal 200 includes a control unit 210, a communication unit 220, a storage unit 230, an input unit 240, and an output unit 250.
端末200は、制御部210として、CPU、RAM、ROM等を備える。 The terminal 200 includes a CPU, RAM, ROM, and the like as a control unit 210.
端末200は、通信部220として、他の機器と通信可能にするためのデバイス等を備える。通信方式は、無線であっても有線であってもよい。 The terminal 200 includes a device or the like as a communication unit 220 for enabling communication with other devices. The communication method may be wireless or wired.
端末200は、記憶部230として、データのストレージ部を備え、入力されたデータ等の必要なデータを記憶する。データのストレージ部は、外部のサーバやクラウドにあってもよい。 The terminal 200 includes a data storage unit as a storage unit 230, and stores necessary data such as input data. The data storage unit may be in an external server or cloud.
端末200は、入力部240として、入力を実現するためのデバイスを備える。例として、キーボード、マウス、タッチパネル、ペンタブレット、マイク等である。 The terminal 200 includes a device for realizing input as an input unit 240. Examples are keyboards, mice, touch panels, pen tablets, microphones and the like.
端末200は、出力部250として、出力を実現するためのデバイスを備える。例としては、ディスプレイ、プロジェクタ、スピーカー等である。 The terminal 200 includes a device for realizing output as an output unit 250. Examples are displays, projectors, speakers and the like.
医療用撮影装置300は、医療用診断システムを利用する医師が、患者を撮影するために使用する医療用撮影装置である。例として、エックス線診断画像(X線撮影、血管造影等)の撮影装置、コンピュータ断層画像(CT、MRI等)の撮影装置、核医学診断画像(シンチグラフィ、PET等)の撮影装置、超音波検査の画像撮影装置、内視鏡検査の画像撮影装置、眼底カメラ、等が挙げられる。数は一つに限らず複数であってよい。医療用撮影装置300は、撮影部30、制御部310、通信部320、記憶部330、入力部340、出力部350、から構成される。医療用撮影装置300の撮影部30は、診断に十分な解像度の画像を撮影可能であるものとする。
The
医療用撮影装置300は、制御部310として、CPU、RAM、ROM等を備える。
The
医療用撮影装置300は、通信部320として、他の機器と通信可能にするためのデバイス等を備える。通信方式は、無線であっても有線であってもよい。
The
医療用撮影装置300は、記憶部330として、データのストレージ部を備え、撮影した医療画像等の必要なデータを記憶する。データのストレージ部は、外部のサーバやクラウドにあってもよい。
The
医療用撮影装置300は、入力部340として、入力を実現するためのデバイスを備える。例として、ハードウェアボタン、キーボード、マウス、タッチパネル、ペンタブレット、マイク等である。通信部320を介して、他の端末等からの入力を実現してもよい。
The
医療用撮影装置300は、出力部350として、出力を実現するためのデバイスを備える。例としては、ディスプレイ、プロジェクタ、スピーカー等である。通信部320を介して他の機器への出力を実現してもよい。
The
通信網400は、サーバ100と端末200と医療用撮影装置300間の通信を可能とする通信網である。
The
[診断情報出力処理]
図3は、診断情報出力処理のフローチャート図である。上述した各手段が実行する処理について、本フローチャートで説明する。
[Diagnostic information output processing]
FIG. 3 is a flowchart of the diagnostic information output process. The process executed by each of the above-mentioned means will be described in this flowchart.
図3の医療用診断システムにおいて、まず、医療用撮影装置300の操作者は、医療用診断システムにログインする(ステップS301)。医療用撮影装置300の操作者は、医師であっても専門の技師であってもよい。医療用撮影装置300の操作者は、医療用診断システムにログインを行うために、ユーザ登録が必要である。ここでのログイン方法に関しては、本発明を限定するものではなく、一般的な手法を用いてよい。
In the medical diagnostic system of FIG. 3, the operator of the
次に、医療用撮影装置300は、患者の医療画像の撮影を行う(ステップS302)。ここで撮影する画像は、エックス線診断画像、コンピュータ断層画像、核医学診断画像、超音波検査画像、内視鏡検査の像撮、眼底カメラによる画像等の、医療画像であるものとする。また、ここで撮影される医療画像は、診断に十分な解像度を備えるものとする。
Next, the
次に、サーバ100の画像取得モジュール111は、医療用撮影装置300から撮影された患者の画像を取得する(ステップS303)。画像を複数枚撮影する場合には、ステップS302とステップS303を、必要な枚数分繰り返すものとする。
Next, the image acquisition module 111 of the
次に、医療用診断システムを利用する医師は、端末200から医療用診断システムにログインする(ステップS304)。医療用診断システムを利用する医師は、医療用診断システムにログインを行うために、ユーザ登録が必要である。ここでのログイン方法に関しては、本発明を限定するものではなく、一般的な手法を用いてよい。また、前述のステップS301からステップS303のフローが行われている際にも、並行して、ステップS304以降の処理も可能であるものとする。 Next, the doctor who uses the medical diagnostic system logs in to the medical diagnostic system from the terminal 200 (step S304). A doctor who uses a medical diagnostic system needs to register as a user in order to log in to the medical diagnostic system. The login method here is not limited to the present invention, and a general method may be used. Further, even when the flow from step S301 to step S303 is being performed, the processes after step S304 can be performed in parallel.
次に、医療用診断システムを利用する医師は、端末200で事前確認データの入力を行う(ステップS305)。ここでの事前確認データには、少なくとも、性別や年齢等の患者の属性と、撮影された部位の情報とを含むものとする。事前確認データの入力は、端末200を使用するのではなく、他の端末から行ってもよい。また、事前データの入力は、必要に応じて医師ではなく、看護師やその他の作業者が行ってもよい。
Next, the doctor who uses the medical diagnostic system inputs the prior confirmation data on the terminal 200 (step S305). The prior confirmation data here shall include at least the attributes of the patient such as gender and age, and information on the part where the image was taken. The input of the prior confirmation data may be performed from another terminal instead of using the
次に、サーバ100の事前確認データ取得モジュール112は、事前確認データを取得する(ステップS306)。ここでは、事前確認データ取得モジュール112が事前確認データを取得する先は、端末200として図示しているが、他の端末や機器、データベースやクラウドサービス等であってもよい。
Next, the prior confirmation data acquisition module 112 of the
次に、サーバ100の診断出力モジュール113は、ステップS303で取得した患者の画像の類似の画像を、過去の医療画像から検索する(ステップS307)。過去の医療画像を所見データと関連付けたデータは、既にサーバ100の記憶部130や、その他の機器やデータベースやクラウドサービス等に蓄積してあるものとする。過去の医療画像と所見データだけでなく、更に患者情報も関連付けて記憶しておくことが望ましい。類似画像を検索する方法としては、ハッシュ法により画像をハッシュ化して、画像同士のハミング距離が近いものを類似であると判断する。ハッシュ法は、他の画像分類の手法よりも高速な処理が可能であるため、大量の画像から高精度に類似画像を検索するのに適していることを確認済である。
Next, the diagnostic output module 113 of the
図8は、類似画像を判定する場合の、ハッシュ値のイメージ図である。仮に、上の画像801のハッシュ値が「00003c7c7f3c000」であり、下の画像802のハッシュ値が「00003c7c8f3c0ab」であるとする。この場合、上の画像801と下の画像802とのハミング距離は「3」である。このハミング距離の値が小さいものほど類似度が高いと判断する。類似画像を検索する際には、ステップS306で取得した事前確認データを使用してもよい。画像の検索前に、事前確認データの撮影部位で、検索を行う過去の医療が像を絞り込んでよい。更に、撮影部位によっては、事前確認データの性別で、検索を行う過去の医療画像を絞り込んでよい。また、ハミング距離が同じ類似画像が複数ある場合には、事前確認データと当該患者の性別が同じものや、年齢がより近いものほど、類似度が高いと判断してもよい。
FIG. 8 is an image diagram of a hash value when determining a similar image. It is assumed that the hash value of the
図3に戻り、次に、サーバ100の診断出力モジュール113は、ステップS307で選択した類似画像と、ステップS306で取得した事前確認データを基に、診断に関する情報を抽出する(ステップS308)。ここで、診断に関する情報には、「過去の類似の所見データ」、「当該診断に関する関連画像」、「当該診断に関する参考情報」の少なくとも一つを含むものとする。「過去の類似の所見データ」は、ステップS307で検索した類似画像の所見データである。また、「当該診断に関する参考画像」は、ステップS307で検索した類似画像であるとする。また、「当該診断に関する参考情報」は、ステップS307で検索した類似画像の所見データの中の診断に関する参考文献や、過去の症例等であるとする。類似画像の所見データの中の診断に関する参考文献や、過去の症例等を抽出する際に、機械学習を使用してもよい。
Returning to FIG. 3, next, the diagnostic output module 113 of the
次に、サーバ100の診断出力モジュール113は、端末200に、ステップS308で抽出した診断に関する情報を送信する(ステップS309)。
Next, the diagnostic output module 113 of the
端末200は、サーバ100から診断に関する情報を受信する(ステップS310)。 The terminal 200 receives information about the diagnosis from the server 100 (step S310).
最後に、端末200は、ステップS310で受信した診断に関する情報を出力する(ステップS311)。 Finally, the terminal 200 outputs the information regarding the diagnosis received in step S310 (step S311).
図6は、診断情報を出力する端末200の画面の一例である。医療用診断システムは、端末200に患者の診断に関する情報だけでなく、取得した患者の画像や事前確認データもあわせて表示する。また、医師による所見データの入力も可能とする。図6の例では、画面左の表示エリア601に、取得した事前確認データに基づき、患者情報を表示している。事前確認データである性別や年齢等の「患者の属性」と、「検査情報」として、撮影した部位についても表示する。また、その他に「診察券番号」や「検査の目的」、当該患者の過去の病歴がある場合には「過去の診断」の内容について等も併せて表示してよい。画面右上には、表示エリア602に、取得した患者の画像を表示している。あわせて、エックス線画像、CT画像等の画像の種類を表示してもよい。また、撮影日時を表示してもよい。複数の撮影画像がある場合には、代表的な画像を大きく表示して、その他の画像も選択可能としてよい。画面中央には、表示エリア603に参考情報として、患者の診断に関する情報を表示している。ここでは、類似の症例として、CT画像、患者情報、診断、所見を表示する例を示している。また、表示エリア604には、参考情報内のキーワードとなる単語を表示して、それを医師に選択させることによって、参考文献を表示することを可能とする。医師は、これらの患者情報、画像、参考情報を確認しながら、画面右下の表示エリア605に所見を入力することが可能である。また、医師が表示エリア603の参考情報が適切でないと考えた場合には、別の類似画像症例を表示ボタン607を選択することで、次に類似の医療画像とそれに関連付けられた所見データとに、表示エリア603を切り替えることを可能としてもよい。画面上部には、表示エリア606に、診察する医師の情報を表示している。医師は、所見の入力を終えた場合、入力完了ボタン609を選択することで、所見の入力を完了して、次の画面へと遷移することができる。また、メニューへボタン608を選択することで、医療用診断システムのメニュー画面に遷移する。
FIG. 6 is an example of the screen of the terminal 200 that outputs diagnostic information. The medical diagnosis system displays not only the information related to the diagnosis of the patient but also the acquired image of the patient and the prior confirmation data on the
以上のように、本発明によれば、患者の画像を撮影して診断を行う医療用診断システムに、患者の診断に関する情報を出力させることで、医師の業務を効率化する総合的なサポートが可能な医療用診断サーバ、医療用診断方法、及びプログラムを提供することが可能となる。 As described above, according to the present invention, comprehensive support for streamlining the work of a doctor is provided by outputting information on the diagnosis of a patient to a medical diagnostic system that takes an image of the patient and makes a diagnosis. It will be possible to provide possible medical diagnostic servers, medical diagnostic methods, and programs.
[所見データを取得する場合の診断情報出力処理]
図4は、所見データを取得する場合の、医療用診断システムの概要と、サーバ100、端末200、医療用撮影装置300の機能ブロック図である。図2の構成に加えて、サーバ100の制御部110に、所見取得モジュール114を備える。
[Diagnostic information output processing when acquiring finding data]
FIG. 4 is an outline of a medical diagnostic system and a functional block diagram of a
図5は、所見データを取得する場合の、診断情報出力処理のフローチャート図である。
図5のステップS501以降は、図3のフローチャートのステップS311の後に続くフローとなる。
FIG. 5 is a flowchart of the diagnostic information output process when the finding data is acquired.
After step S501 in FIG. 5, the flow follows step S311 in the flowchart of FIG.
まず、端末200は、医療用診断システムに医師による所見の入力があったかどうかを確認する(ステップS501)。入力がなかった場合には、一定時間経過後に、再度ステップS501のフローを行う。入力があった場合には、次のステップS502に進む。 First, the terminal 200 confirms whether or not the medical diagnostic system has been input with the findings by the doctor (step S501). If there is no input, the flow of step S501 is performed again after a certain period of time has elapsed. If there is an input, the process proceeds to the next step S502.
次に、端末200は、入力された所見のデータをサーバ100に送信する(ステップS502)。 Next, the terminal 200 transmits the input data of the findings to the server 100 (step S502).
サーバ100の所見取得モジュール114は、端末200から所見のデータを受信する(ステップS503)。
The finding acquisition module 114 of the
次に、所見取得モジュール114は、ステップS303で受信した画像と、ステップS306で受信した事前確認データと、ステップS503で受信した所見データを基に、診断に関する情報を再度抽出する(ステップS504)。ここでの情報抽出には、例えば、所見データに含まれる単語が、ステップS308で抽出した診断に関する情報に含まれるかどうかを確認し、含まれる場合には強調したり、優先順位を上げたりすることが考えられる。また、ステップS307で検索済みの類似画像の所見データに、ステップS403で受信した所見データと同じものを含む場合には、類似度を上げるように変更を行ってもよい。ここで、診断に関する情報を再度抽出する際に、機械学習を使用してもよい。 Next, the finding acquisition module 114 re-extracts the information related to the diagnosis based on the image received in step S303, the prior confirmation data received in step S306, and the finding data received in step S503 (step S504). In the information extraction here, for example, it is confirmed whether or not the word included in the finding data is included in the information related to the diagnosis extracted in step S308, and if it is included, it is emphasized or the priority is raised. Can be considered. Further, when the finding data of the similar image searched in step S307 includes the same finding data received in step S403, the change may be made so as to increase the degree of similarity. Here, machine learning may be used to re-extract the diagnostic information.
次に、所見取得モジュール114は、ステップS504で再度抽出した診断に関する情報を端末200に送信する(ステップS505)。 Next, the finding acquisition module 114 transmits the information regarding the diagnosis extracted again in step S504 to the terminal 200 (step S505).
端末200は、サーバ100から診断に関する情報を受信する(ステップS506)。 The terminal 200 receives information about the diagnosis from the server 100 (step S506).
端末200は、ステップS506で受信した診断に関する情報を更新して出力する(ステップS507)。 The terminal 200 updates and outputs the information related to the diagnosis received in step S506 (step S507).
図7は、所見データ取得後に診断情報を更新した画面の一例である。図6の画面の状態から、医師が、所見の表示エリア605に「変形性頸椎症」と入力した場合、診断に関する情報を更新する。ここでは、画面中央の参考情報の表示エリア603の「診断:」にでてくる文章内の「変形性頸椎症」という単語に下線を引いて強調表示している。また、同じく表示エリア603の「所見:」に出てくる文章内の「変形性頸椎症」という単語に下線を引いて強調表示している。また、画面中央下部の表示エリア604の、参考情報内のキーワードとなる単語について、「変形性頸椎症」という単語を一番上の分かりやすい位置に並べ替え、また、下線を引いて強調表示している。図7では、入力した単語を強調して分かりやすく表示する例を示したが、ステップS504で、類似度が変更されて、最も類似度の高い「当該診断に関する関連画像」が変更された場合には、表示エリア603と表示エリア604の全表示を更新してもよい。
FIG. 7 is an example of a screen in which the diagnostic information is updated after the finding data is acquired. When the doctor inputs "degenerative cervical spondylosis" in the finding
図5に戻り、端末200は、所見の入力が完了したかどうかを確認する(ステップS508)。入力が完了していない場合には、ステップS501に戻ってフローを継続する。N入力が完了した場合には、ステップS509に進む。入力が完了したかどうかの判断は、図6又は図7で入力完了ボタン609が選択されたかどうかで判断してもよい。
Returning to FIG. 5, the terminal 200 confirms whether or not the input of the findings is completed (step S508). If the input is not completed, the process returns to step S501 to continue the flow. When the N input is completed, the process proceeds to step S509. The determination as to whether or not the input is completed may be determined by whether or not the
最後に、端末200は、サーバ100に対して入力の完了を通知する(ステップS509)。
Finally, the terminal 200 notifies the
以上のように、本発明によれば、患者の画像を撮影して診断を行う医療用診断システムに、患者の診断に関する情報を出力させ、さらに医師からの所見の入力に応じて患者の診断に関する情報を更新して出力する、医師の業務を効率化する総合的なサポートが可能な医療用診断サーバ、医療用診断方法、及びプログラムを提供することが可能となる。 As described above, according to the present invention, the medical diagnostic system that captures an image of a patient to make a diagnosis outputs information on the diagnosis of the patient, and further relates to the diagnosis of the patient in response to input of findings from a doctor. It will be possible to provide medical diagnostic servers, medical diagnostic methods, and programs that can update and output information and provide comprehensive support to streamline the work of doctors.
以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。 Although the embodiments of the present invention have been described above, the present invention is not limited to these embodiments described above. Further, the effects described in the embodiments of the present invention merely list the most suitable effects arising from the present invention, and the effects according to the present invention are limited to those described in the embodiments of the present invention. is not it.
100 サーバ、200 端末、300 医療用画像撮影装置、400 通信網 100 servers, 200 terminals, 300 medical imaging devices, 400 communication networks
Claims (5)
撮影された前記患者の画像を取得する画像取得手段と、
当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得する事前確認データ取得手段と、
前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得する所見データ取得手段と、
前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させる診断出力手段と、
を備える医療用診断サーバ。 In a medical diagnostic server that takes an image of a patient and makes a diagnosis
An image acquisition means for acquiring an image of the patient taken, and
Attribute including gender and age of the patient, pre-confirmation data acquisition means to acquire pre-confirmation data including at least information on the imaged part, and
Finding data that is a doctor's finding on the image, or finding data acquisition means for acquiring a doctor's selection for the plurality of keywords.
A diagnostic output means for outputting information regarding the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
Medical diagnostic server equipped with.
撮影された前記患者の画像を取得するステップと、
当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得するステップと、
前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得するステップと、
前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させるステップと、
を備える医療用診断方法。 In a medical diagnostic method that takes an image of a patient to make a diagnosis
The step of acquiring the image of the patient taken and
Attribute including gender and age of the patient, step to acquire prior confirmation data including at least information on the imaged part, and
A step of acquiring finding data which is a doctor's finding for the image or a doctor's selection for the plurality of keywords.
A step of outputting information regarding the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
Medical diagnostic method.
撮影された前記患者の画像を取得するステップ、
当該患者の性別と年齢とを含む属性、撮影された部位の情報を少なくとも含む事前確認データを取得するステップ、
前記画像に対する医師の所見である所見データ、又は、前記複数のキーワードに対する医師の選択を取得するステップ、
前記画像、前記事前確認データ、前記所見データ又は前記選択されたキーワードに基づいて、前記患者の診断に関する情報を所定の端末に出力させるステップ、
を実行させるためのプログラム。 For medical diagnostic servers that take images of patients and make diagnoses,
Steps to acquire the image of the patient taken
Attribute including gender and age of the patient, step to acquire prior confirmation data including at least information on the imaged part,
A step of acquiring finding data which is a doctor's finding on the image or a doctor's selection for the plurality of keywords.
A step of outputting information regarding the diagnosis of the patient to a predetermined terminal based on the image, the prior confirmation data, the finding data, or the selected keyword.
A program to execute.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019030487A JP6968843B2 (en) | 2019-02-22 | 2019-02-22 | Medical diagnostic server, medical diagnostic method, and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019030487A JP6968843B2 (en) | 2019-02-22 | 2019-02-22 | Medical diagnostic server, medical diagnostic method, and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020135621A JP2020135621A (en) | 2020-08-31 |
| JP6968843B2 true JP6968843B2 (en) | 2021-11-17 |
Family
ID=72278843
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019030487A Active JP6968843B2 (en) | 2019-02-22 | 2019-02-22 | Medical diagnostic server, medical diagnostic method, and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6968843B2 (en) |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP5739700B2 (en) * | 2011-03-23 | 2015-06-24 | 株式会社日立メディコ | Similar case browsing system, similar case browsing method |
| JP2015203920A (en) * | 2014-04-11 | 2015-11-16 | キヤノン株式会社 | Similar case retrieval system, similar case retrieval method and program |
| JP2016224793A (en) * | 2015-06-02 | 2016-12-28 | 東芝メディカルシステムズ株式会社 | Medical diagnosis support system, medical information display device, medical information management device, and medical image processing program |
| JP6180470B2 (en) * | 2015-07-13 | 2017-08-16 | 株式会社ワイズ・リーディング | Sentence candidate presentation terminal, sentence candidate presentation system, sentence candidate presentation method, and program |
| JP6818424B2 (en) * | 2016-04-13 | 2021-01-20 | キヤノン株式会社 | Diagnostic support device, information processing method, diagnostic support system and program |
| JP6596406B2 (en) * | 2016-12-09 | 2019-10-23 | 富士フイルム株式会社 | Diagnosis support apparatus, operation method and operation program thereof, and diagnosis support system |
| JP6646717B2 (en) * | 2018-09-03 | 2020-02-14 | キヤノン株式会社 | Medical document creation device, control method therefor, and program |
-
2019
- 2019-02-22 JP JP2019030487A patent/JP6968843B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020135621A (en) | 2020-08-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5455470B2 (en) | Medical image interpretation system | |
| JP5284032B2 (en) | Image diagnosis support system and image diagnosis support program | |
| JPH0512352A (en) | Medical diagnosis support system | |
| US11093699B2 (en) | Medical image processing apparatus, medical image processing method, and medical image processing program | |
| US11688498B2 (en) | Medical document display control apparatus, medical document display control method, and medical document display control program | |
| JP2015203920A (en) | Similar case retrieval system, similar case retrieval method and program | |
| US20190267120A1 (en) | Medical document creation support apparatus, method, and program | |
| JP2020081280A (en) | Image display control system, image display system and image analysis device | |
| JP7102509B2 (en) | Medical document creation support device, medical document creation support method, and medical document creation support program | |
| JP2011103095A (en) | Medical image display system and program | |
| JP6498018B2 (en) | Information processing apparatus, control method, and program | |
| JP2017068801A (en) | Medical report creation support system | |
| JP7604552B2 (en) | Information processing device, information processing method, and program | |
| WO2022230641A1 (en) | Document creation assisting device, document creation assisting method, and document creation assisting program | |
| JP6968843B2 (en) | Medical diagnostic server, medical diagnostic method, and program | |
| JP2008217336A (en) | Interpretation report creation support device | |
| JP4718658B2 (en) | Medical report system | |
| US20240029251A1 (en) | Medical image analysis apparatus, medical image analysis method, and medical image analysis program | |
| CN108984587B (en) | Information processing apparatus, information processing method, information processing system, and storage medium | |
| JP2017207793A (en) | Image display device and image display system | |
| JP6696305B2 (en) | Patient information display device and patient information display method | |
| JP2017208142A (en) | Image search support device and team medical support system | |
| US20240321415A1 (en) | Medical image display apparatus, medical image display system, medical image display method, and computer-readable recording medium storing program | |
| JP7826991B2 (en) | Medical image display device, medical image display system, medical image display method and program | |
| JP2014067351A (en) | Image display method and device and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190930 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20201027 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20201218 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210217 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210330 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210615 |
|
| C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20210615 |
|
| C11 | Written invitation by the commissioner to file amendments |
Free format text: JAPANESE INTERMEDIATE CODE: C11 Effective date: 20210706 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20210714 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20210826 |
|
| C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20210907 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20211005 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20211027 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6968843 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |