Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7253273B2 - 生殖医療支援システム - Google Patents
[go: Go Back, main page]

JP7253273B2 - 生殖医療支援システム - Google Patents

生殖医療支援システム Download PDF

Info

Publication number
JP7253273B2
JP7253273B2 JP2020548310A JP2020548310A JP7253273B2 JP 7253273 B2 JP7253273 B2 JP 7253273B2 JP 2020548310 A JP2020548310 A JP 2020548310A JP 2020548310 A JP2020548310 A JP 2020548310A JP 7253273 B2 JP7253273 B2 JP 7253273B2
Authority
JP
Japan
Prior art keywords
sperm
display
image
analysis
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020548310A
Other languages
English (en)
Other versions
JPWO2020059522A1 (ja
Inventor
寧 湯村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yokohama City University
Original Assignee
Yokohama City University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yokohama City University filed Critical Yokohama City University
Publication of JPWO2020059522A1 publication Critical patent/JPWO2020059522A1/ja
Application granted granted Critical
Publication of JP7253273B2 publication Critical patent/JP7253273B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N15/00Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
    • G01N15/10Investigating individual particles
    • G01N15/14Optical investigation techniques, e.g. flow cytometry
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N33/00Investigating or analysing materials by specific methods not covered by groups G01N1/00 - G01N31/00
    • G01N33/48Biological material, e.g. blood, urine; Haemocytometers

Landscapes

  • Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Pathology (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Immunology (AREA)
  • Physics & Mathematics (AREA)
  • Dispersion Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Hematology (AREA)
  • Molecular Biology (AREA)
  • Urology & Nephrology (AREA)
  • Food Science & Technology (AREA)
  • Medicinal Chemistry (AREA)
  • Investigating Or Analysing Biological Materials (AREA)

Description

本発明は、生殖医療支援システムに関する。
現在、先進国の生殖年齢にある夫婦(カップル)の6組に一組は不妊症であるとされる。さらに不妊カップルの48%は男性側にも原因があるとされている。男性不妊の治療を目的に行われる生殖医療には顕微授精や精巣内精子回収術が挙げられるが、いずれの治療法においても精子の探索や選別は人力に依存しているのが現状である。
また、生殖医療の現場で既に利用されている支援ツールとして精子運動解析装置(Computer assisted semen analyzer;CASA)が存在する。この支援ツールは、精子に関する種々のパラメータを測定可能であるものの、精子の探索作業や選別作業を直接的に支援するものではなく、その作業負担の軽減効果も限定的である。また、精子運動解析装置は、普及という観点から見ても、未だ十分とは言い難い状況である。
ところで、既に文献に開示されている生殖補助医療に係る支援ツールとしては、下記の特許文献1および特許文献2に記載されているものを例示することができる。
特許文献1には、液体サンプル中の生物学的粒子(卵母細胞や精子を含む)を分類することを目的として、機械学習(人工知能処理)によって訓練された分類器を用いて画像解析処理を行う技術が開示されている。
特許文献2には、胚(未受精二次卵母細胞と精子が融合したものを含む)をランク付け又はカテゴリ化することを目的として、機械学習によって訓練された分類器を用いて画像解析処理を行う技術が開示されている。
特開2016-505836号公報 特開2016-509845号公報
上記に例示したいずれの先行技術も開発途上のものであり、生殖医療の現場に実際に導入されるに至っておらず、生殖医療を支援するという点においては十分な成果を出しているものではない。
本発明は、上記の課題に鑑みなされたものであり、生殖医療に従事する関係者(特に、精子回収作業を行う胚培養士)を支援する生殖医療支援システムを提供するものである。
本発明によれば、精子を含有する検査対象物に関する検査作業を支援する生殖医療支援システムであって、前記検査対象物を拡大表示している第一映像を含む作業画面が表示される表示手段と、前記第一映像として前記作業画面に表示されている領域より広い領域が撮影されている映像データを取得し、前記映像データに対して画像解析処理を行う解析手段と、を備え、前記画像解析処理には、前記映像データに撮影されている精子を判別する判別処理と、前記判別処理によって判別された精子を解析する解析処理と、が含まれ、前記表示手段は、前記判別処理によって判別され且つ前記第一映像の表示領域内に表示されている精子に係る前記解析処理に基づく第一付加表示と、前記判別処理によって判別された精子の全部に係る前記解析処理又は前記判別処理によって判別され且つ前記第一映像の表示領域外である精子に係る前記解析処理に基づく第二付加表示と、を前記作業画面の表示領域内に表示する生殖医療支援システムが提供される。
上記発明によれば、検査対象物を拡大表示している映像(第一映像)内に表示された精子に関する解析結果を示す表示(第一付加表示)の他に、当該映像に表される領域より広域の領域に表示された精子に関する解析結果を示す表示(第二付加表示)も表示されるので、より多くの有用な情報に基づいて検査作業を行うことができる。
本発明によれば、生殖医療に従事する関係者(特に、精子回収作業を行う胚培養士)を支援する生殖医療支援システムが提供される。
顕微授精時における検体セットを拡大撮影した画像の一具体例である。 精子運動解析装置に係る高精細カメラによって検体セットを拡大撮影した画像の一具体例である。 生殖医療支援システムの構成図である。 表示ユニットに表示される作業画面の具体例を示す図である。 表示ユニットに表示される作業画面の具体例を示す図である。 表示ユニットに表示される作業画面の具体例を示す図である。 モニタに表示される作業画面の具体例を示す図である。 モニタに表示される作業画面の具体例を示す図である。 モニタに表示される作業画面の具体例を示す図である。
以下、本発明の実施形態(生殖医療支援システム100)について、図面を用いて説明する。なお、すべての図面において、同様の構成要素には同一の符号を付し、適宜に説明を省略する。
<生殖医療支援システム100の支援対象となる検査作業について>
本発明に係る生殖医療支援システム100の支援対象となる検査作業は、精子を含有する検査対象物(以下、検体セット)に関するものであれば足り、特に制限されない。その具体例として、以下の説明においては(i)顕微授精(運動精子回収法)に係る作業及び(ii)精巣内精子回収術に係る作業が、生殖医療支援システム100の支援対象とする。
顕微授精とは、射精した精液を洗浄して得られる検体セットを顕微鏡下で観察し、当該検体セットから健全な運動精子を1つ選択して回収し(運動精子回収法)、回収した運動精子を予め採取していた卵細胞に対して直接注入すること(卵細胞質内精子注入法)によって、人工的に授精を促す生殖医療である。顕微授精は、一般的には、体外受精を行ったとしても授精が成立しないケースにおいて行われる治療法である。
図1は、顕微授精時における検体セットを拡大撮影した画像の一具体例である。なお、当該画像は、400倍に拡大して撮影されたものであり、その拡大率は顕微授精時における一般的な拡大率に等しい。なお、顕微授精時における検体セットの拡大倍率は、400倍より低倍率とする場合や400倍より高倍率とする場合もあり、必ずしも一定とは限らない。
精巣内精子回収術とは、外科手術によって陰嚢を切開して精巣中の精細管を顕微鏡下で観察し、比較的健全と見られる精細管を採取した後に、採取した精細管から精子を回収する生殖医療である。精巣内精子回収術は、一般的には、上記の運動精子回収法によって精子を回収できない場合に行われる治療法である。
精巣内精子回収術は、精細管から精子を回収する場合、血液に含まれる他の細胞(赤血球や白血球)及び精細管を構成する組織細胞等が含まれる。従って、精巣内精子回収術は、検体セットに精子とは異なる浮遊物が多数混在すること、或いは治療対象となる患者が無精子症であるケースがほとんどであるため検体セットに含まれる精子の数が少ないこと、という点において運動精子回収法と相違する。
<精子運動解析装置について>
上述したように、生殖医療に関する検査作業を支援する装置として、精子運動解析装置(Computer assisted semen analyzer;CASA)がある。
精子運動解析装置は、検体セットを高精細カメラによって撮影し、画像解析処理によって検体セットに含有される精子の健全性(精子の数や運動量等)を自動解析して、その解析結果を表示出力又は印字出力することによって、胚培養士の検査及び計測にかける負担を軽減することができる。
図2は、精子運動解析装置に係る高精細カメラによって検体セットを拡大撮影した画像の一具体例である。なお、当該画像は、位相差顕微鏡によって撮影されたものである。また、当該画像は、図1の画像に係る検体セットとは別の検体セットを撮影されたものであり、含有されている精子の数は相違する。
撮影された環境が相違するので単純比較できるものではないが、各精子単体で見たときの大きさから、図2の画像は図1の画像に比べて低い拡大率で撮影されていることがわかる。運動精子回収法においては1つの精子を回収することを目的とする為、その視野に収まる領域は比較的狭いことが好ましい。一方で、精子運動解析装置においては高精度に解析処理を行うことを目的とする為、解析対象となる領域(高精細カメラによる撮影領域)は比較的広いことが好ましい。このように相互に目的が異なるので、精子運動解析装置における拡大率は、運動精子回収法における拡大率に比べて、一般的に低く設定する傾向がある。
<生殖医療支援システム100の構成について>
上述したような従来行われている検査において、精子の回収作業における作業者(胚培養士)の視野と、精子運動解析装置の解析結果を示す表示とは、必ずしも一致するものではない。
本実施形態における生殖医療支援システム100は、精子の回収作業における作業者の視野に収まる表示領域内に、拡張現実(Augmented Reality;AR)を適用することによって、精子運動解析装置の解析結果を表示させることを目的とするものである。これにより、当該作業者の負担を従来の手法に比べてより軽減することができる。
以下、生殖医療支援システム100の構成について具体的に説明する。
図3は、生殖医療支援システム100の構成図である。
生殖医療支援システム100は、顕微鏡10と、解析装置20と、モニタ30と、を備える。
顕微鏡10には、図3に図示するとおり、倒立型顕微鏡を採用する。但し、本発明の実施において、顕微鏡10は必ずしも倒立型顕微鏡である必要はなく、他の種別の顕微鏡であってもよい。なお、図3において顕微鏡10に重畳して図示されている破線は、顕微鏡10の光学経路を模式的に示すものであり、外形的に確認されるものではない。
顕微鏡10の光学経路は、不図示のミラーやレンズによって複数に分岐されるように構成されており、顕微鏡10の光学経路の途中には、撮影ユニット11と、表示ユニット12と、が組み込まれている。
撮影ユニット11は、検体セット(精子を含有する検査対象物)を拡大して撮影する構成である。
表示ユニット12は、撮影ユニット11によって生成された映像データを顕微鏡10の接眼レンズの視野内に表示する、或いは当該映像データに対して、後述する解析装置20の解析結果を反映した拡張現実画像からなる作業画面を顕微鏡10の接眼レンズの視野内に表示する構成であり、本発明に係る表示手段を実現するものである。
顕微鏡10が上記のような構成を有している為、顕微鏡10を接眼レンズから覗いている作業者は検体セットを顕微鏡下で観察しながら、解析装置20の解析結果を確認することができる。なお、表示ユニット12に表示される作業画面の詳細については、後述する。
なお、本実施形態における顕微鏡10は、位相差顕微鏡であることを前提として説明するが、本発明の実施はこれに限られず、他の形式の顕微鏡(明視野顕微鏡等)を用いることを許容する。
また、撮影ユニット11や表示ユニット12が設けられる位置は、上記の機能を実現する範囲において、適宜変更可能である。
解析装置20は、撮影ユニット11によって生成された映像データを取得し、取得した映像データに対して画像解析処理を行う構成であり、本発明に係る解析手段を実現するものである。
解析装置20による画像解析処理は、映像データの取得と並行して随時(リアルタイムに)行われ、顕微鏡10を覗いている作業者は最新の解析結果を反映した作業画面を確認することができる。
解析装置20による画像解析処理には、例えば、以下のものが含まれる。
(i)映像データに撮影されている精子を判別する処理(以下、判別処理と称する)。
(ii)精子の移動軌跡を導出する処理(以下、移動解析処理と称する)。
(iii)判別処理によって判別された精子を計数する処理(以下、計数解析処理と称する)。
(iv)判別処理によって判別された精子を、複数にランク分けされた健全性によって分類する処理(以下、健全性解析処理と称する)。
(v)判別処理によって判別された精子の輪郭を抽出する処理(以下、輪郭解析処理と称する)。
なお、本発明の実施においては、本発明の目的に反しない限りにおいて、ここで挙げた各処理の少なくとも一部が省かれてもよく、ここで挙げていない他の処理が追加されてもよい。
また、ここで挙げた各処理(画像解析処理に含まれる処理)のうち少なくとも一部については、機械学習(ディープラーニング等)によって生成される学習済みモデルに基づいて実現されることが好ましい。特に、判別処理及び健全性解析処理については、上記の学習済みモデルに基づいて実現することによって高精度の解析結果を得ることが期待される。
解析装置20には、作業者等による操作を受け付ける操作入力手段として、キーボード21やマウス22が付設されている。なお、キーボード21やマウス22は、解析装置20に係る操作入力手段の具体例に過ぎず、他の構成に代えてもよい。例えば、解析装置20に係る操作入力手段として、後述のモニタ30と同等の機能を有する表示装置と位置入力装置とが一体に構成されたタッチパネルを設けてもよい。
モニタ30は、上述した表示ユニット12と同様に、撮影ユニット11によって生成された映像データに対して解析装置20の解析結果を反映した拡張現実画像からなる作業画面を表示する構成であり、本発明に係る表示手段を実現するものである。なお、モニタ30に表示される作業画面の詳細については、後述する。
モニタ30は、顕微鏡10を覗いている作業者とは別の者(作業補助者等)が顕微鏡下の様子を視認する為に設けられるものであり、表示ユニット12と同じ内容が表示されてもよいし、表示される内容の一部が変更されてもよい。
<表示ユニット12に表示される作業画面について>
図4~図6は、表示ユニット12に表示される作業画面の具体例を示す図である。なお、図4~図6は模式図であり、図示した各表示の寸法の大きさや比率は必ずしも厳密なものではない。
表示ユニット12に表示される作業画面は、図4~図6に図示されるとおり、メイン画面G1と、サブ画面G2と、を含んでいる。
メイン画面G1は、検体セット(検査対象物)を拡大表示している映像(以下、第一映像と称する)を含んでいる。第一映像は、撮影ユニット11によって生成された映像データの撮影領域の一部を拡大したものである。言い換えれば、撮影ユニット11によって生成された映像データには、第一映像として作業画面に表示されている領域より広い領域が撮影されている。
例えば、図4に図示するメイン画面G1の表示領域内には、3つの精子が表示されている。これらの精子は、それぞれ上記の判別処理によって判別されたものであり、且つ、健全性解析処理に基づいて表示G11~G13がそれぞれに対して付されている。
具体的には、表示G11は、最も健全性に優れているランクAに分類された精子であることを示す指標「A」を表示するものである。表示G12は、ランクAに次いで優れているランクBに分類された精子であることを示す指標「B」を表示するものである。表示G13は、ランクBに次いで優れているランクCに分類された精子であることを示す指標「C」を表示するものである。
上述したように、表示G11~G13は、判別処理によって判別され且つ第一映像の表示領域内に表示されている精子に係る解析処理に基づく表示である為、本発明に係る第一付加表示に相当する表示であり、特に健全性解析処理によって分類された精子の健全性を示すものである。図4では、これらの精子の健全性を示す指標を、第一映像の表示領域内に表示されている精子ごとに付して第一付加表示とする表示態様を図示したが、本発明の実施はこれに限られず、例えば、それぞれの精子を色分けする等して区別することによって、健全性に係るランク分けを視認可能にしてもよい。
なお、本実施形態では精子の健全性の優劣を示す指標について「ランク」と表現しているが、「ランク」に類似する表現(例えば、レベル、グレード、クラス)に置換することを許容する。また、当該指標の順位(等級)を示すものとして英字(A~D)を使用しているが、作業者に対して同様の内容を認識させうる有意な表示(数字やグラフ等)に置換することを許容する。
サブ画面G2は、撮影ユニット11によって撮影された映像データの撮影領域全体の様子を表示する画面である。サブ画面G2に表示される画像は、当該映像データの内容そのものであってもよいし、当該映像データの撮影領域における位置座標を容易に視認できるようにグリッド線等による補助線が加えられたものであってもよい。
例えば、図4に図示するサブ画面G2の表示領域内には、撮影ユニット11によって生成された映像データの撮影領域全体における第一映像の位置を示す表示G21と、精子の健全性に係る複数のランクのうちランクAに分類された精子の位置を示す表示G22~G25と、が表示されている。
具体的には、表示G22は、第一映像の表示領域内に表示されている精子のうちランクAに分類されているもの(表示G11が付されている精子)の位置を示している。また、表示G23~G25は、第一映像の表示領域外に表示されている精子のうちランクAに分類されているものの位置を示している。
上述したように、表示G22~G25は、判別処理によって判別された精子の全部に係る解析処理(健全性解析処理)に基づく表示であり、特に表示G23~G25に限って言えば、判別処理によって判別され且つ第一映像の表示領域外である精子に係る解析処理(健全性解析処理)に基づく表示である為、これらの表示は本発明に係る第二付加表示に相当するものと言える。このようにメイン画面G1(第一映像の表示領域)とは別に設けられたサブ画面G2(第二映像領域)に、ランクAに分類された精子の位置を示すことによって、作業者はメイン画面G1の表示領域外に位置する健全性に優れた精子を容易に探索することができるようになる。
なお、本実施形態では、精子の健全性に係る複数のランクのうちランクAに分類される精子の位置のみをサブ画面G2に表示する表示態様を図示したが、他のランクに分類される精子の位置をサブ画面G2に表示してもよい。
図5は、図4において表示G11が付されていた精子が、作業者によって回収される(ガラス管で吸い取られる)瞬間を図示している。
このとき、当然ながら、メイン画面G1から表示G11が消失すると共に、サブ画面G2から表示G22が消失する。
図6は、図4において作業画面に表示されていた精子に関する移動解析処理の結果(移動軌跡)が表示されている状態を図示している。なお、図6において破線で示すものが移動軌跡に相当する表示である。
図4において表示G11が付されていた精子は、図6に示す状態においてはメイン画面G1の表示領域外に移動しており、メイン画面G1の表示領域内には当該精子の移動軌跡のみが残るのみである。このような場合であっても、作業者は当該精子の移動軌跡に基づいて当該精子の移動方向を確認することができると共に、サブ画面G2で現在の位置も確認することができる。
ここでメイン画面G1に表示されている精子(表示G12が付されている精子と表示G13が付されている精子)の移動軌跡は、上記の移動解析処理によって導出されるものであって、第一映像の表示領域内に表示されている精子に係る移動軌跡である為、本発明に係る第一付加表示に相当するものと言える。また、メイン画面G1及びサブ画面G2に跨がって表示されている精子(表示G22が付されている精子)の移動軌跡は、上記の移動解析処理によって導出されるものであって、第一映像の表示領域内から当該表示領域外に移動した精子に係る移動軌跡である為、本発明に係る第二付加表示に相当するものと言える。更に、サブ画面G2に表示されている他の精子(表示G23が付されている精子と表示G24が付されている精子)の移動軌跡は、上記の移動解析処理によって導出されるものであって、第一映像の表示領域外に表示された精子に係る移動軌跡である為、本発明に係る第二付加表示に相当するものと言える。
<モニタ30に表示される作業画面について>
図7は、モニタ30に表示される作業画面の具体例を示す図である。なお、図7は模式図であり、図示した各表示の寸法の大きさや比率は必ずしも厳密なものではない。
モニタ30に表示される作業画面は、図7に図示されるとおり、メイン画面G3と、サブ画面G4と、サイド表示G5と、マーキングアイコンG61と、マーキング解除アイコンG62と、を含んでいる。
メイン画面G3の表示領域内には、メイン画面G1と同様に、第一映像が表示されている。例えば、図7に図示するメイン画面G3の表示領域内には、図4に図示したメイン画面G1に表示されている第一映像と同じものが表示されており、表示されている3つの精子には健全性解析処理に基づく指標(第一付加表示に相当するもの)がそれぞれ付されている。
サブ画面G4の表示領域内には、サブ画面G2に表示されているものの他に、後述するマーキングアイコンG61による表示が追加されうる。例えば、図7に図示するサブ画面G4の表示領域内には、図4に図示するサブ画面G2の表示領域内に表示されているものに加えて、後述するマーキングアイコンG61の操作に応じてマーキングされた精子の位置を示す表示G41が表示されている。
サイド表示G5の表示領域内には、上記の計数解析処理によって計数された精子の数が表示され、これらは本発明に係る第二付加表示に相当する。当然ながら、サイド表示G5に表示されている各数値は計数解析処理に応じて変動するものであり、固定値ではない。
具体的には、上記の判別処理によって判別された精子の全部の数(撮影ユニット11によって撮影された映像データ内に含まれる精子の全数)と、上記の健全性解析処理によって分類された精子の健全性に係るランク別(即ち、ランクA、ランクB、ランクC及びランクDごと)に計数された精子の数を表示する。ここでランクDとは、健全性解析処理による分類において最も健全性が劣っていることを示す指標である。
これにより、作業者は、映像データ内に撮影されている精子の数に基づく判断をしながら、精子の回収作業を行うことができる。
なお、ここで挙げたものは、計数解析処理に基づく第二付加表示の具体例であり、本発明の実施において一部の表示内容が削除又は変更されてもよい。例えば、映像データ内に撮影されている精子の数に、所定の係数を乗算することによって、検体セット全体に含有されている精子の総数を導出して、サイド表示G5に第二付加表示として表示してもよい。
マーキングアイコンG61は、解析装置20に付設された操作入力手段(キーボード21やマウス22)が受け付けた作業者による選択操作に基づいて判別処理によって判別された精子のいずれかを任意に選択した後に、当該精子にマーキングする為のアイコン表示である。即ち、マーキングアイコンG61は、本発明に係るマーキング手段を実現する為のアイコン表示である。
マーキング解除アイコンG62は、解析装置20に付設された操作入力手段が受け付けた作業者による選択操作に基づいて既にマーキングされた精子のいずれかを任意に選択した後に、当該精子にされたマーキングを解除する為のアイコン表示である。
図7に図示するとおり、マーキングされた精子の位置を示す表示G41は、サブ画面G2における他の表示(ランクAに分類された精子の位置を示す表示)とは区別可能に表示されることが好ましい。
解析装置20によって自動的に判別された精子と、作業者の意思で選択した精子と、を区別可能にする為である。
また、図7に図示するとおり、マーキングされた精子の位置を示す表示G41と、ランクAに分類された精子の位置を示す表示と、がメイン画面G3と別に設けられたサブ画面G4に表示される。言い換えれば、モニタ30は、マーキングされた精子の位置を示す表示と、特定のランクに分類された精子の位置を示す第二付加表示と、を第二映像領域に表示するものと言える。
これにより、解析装置20によって自動的に行われる解析処理の結果に関わらず、作業者の意思で選択した精子の位置についても、作業者はメイン画面G3(第一映像)の表示領域外まで確認することができる。
なお、図7においては、サブ画面G4にのみマーキングされた精子の位置が表示されている例を図示したが、マーキングされた精子がメイン画面G3に表示されている場合、当該精子と他の精子が区別可能であるように表示してもよい。
<精巣内精子回収術における作業画面について>
精巣内精子回収術における作業画面についても、上述した運動精子回収法における作業画面(図4~図7に図示した作業画面)と同様の表示がなされてよい。
しかしながら、上述したように、精巣内精子回収術では、検体セットに精子とは異なる浮遊物が多数混在すること、又は検体セットに含まれる精子の数が少ないケースが多い、という点において運動精子回収法と相違し、必ずしも運動精子回収法における作業画面と同様の表示内容では適切ではないケースも想定される。
図8及び図9は、モニタ30に表示される作業画面の具体例を示す図である。なお、図8及び図9は模式図であり、図示した各表示の寸法の大きさや比率は必ずしも厳密なものではない。また、図8及び図9におけるサイド表示G5に表示されている各数値は、図7におけるサイド表示G5と等しくなっているが、当然ながら各数値は計数解析処理に応じて変動するものであり、固定値ではない。
図8に図示する作業画面に係るメイン画面G7及び図9に図示する作業画面に係るメイン画面G8は、それぞれ精巣内精子回収術における検体セットを撮影した第一映像を表示領域内に表示するものである。
メイン画面G7に表示される第一映像については、精子の他に、赤血球や白血球、精巣を構成する組織片などが含有しており、図7に図示した第一映像に比べて、精子の輪郭(形状)を識別しがたい。
これを視認容易にする為に、上記の輪郭解析処理によって抽出された精子の輪郭を強調表示したものがメイン画面G8に表示される第一映像である。具体的には、輪郭解析処理によって抽出された精子の輪郭と背景表示のコントラスト比を大きくする画像処理によって精子の輪郭を明瞭にしたものである。また、当該画像処理に加えて、輪郭解析処理によって抽出された精子の輪郭を除く表示については、背景表示とのコントラスト比を小さくする画像処理を行って、精子以外の浮遊物の輪郭を不明瞭にすることによって、より精子を明瞭に視認することができるようになる。
なお、メイン画面G8における精子の輪郭の強調表示は、輪郭解析処理に基づく表示である為、本発明に係る第一付加表示に相当するものと言える。
以上説明したように、本実施形態に係る生殖医療支援システム100は、解析装置20によって実現される種々の解析処理の結果を反映する拡張現実を適用した作業画面を、表示ユニット12又はモニタ30に表示するので、精子を回収する作業に係る負担を軽減することができる。
<本発明の変形例について>
ここまで各図を用いて説明される実施形態に即して本発明を説明したが、本発明は上述の実施形態に限定されるものではなく、本発明の目的が達成される限りにおける種々の変形、改良等の態様も含む。
上記の実施形態における生殖医療支援システム100では、顕微鏡10、解析装置20及びモニタ30を備える構成としたが、本発明の実施はこれに限られない。
例えば、顕微鏡10を省いた構成としてもよい。この変形例において解析装置20の解析対象となる映像データは別の構成から取得してもよく、当該構成は生殖医療支援システム100に含まれなくてもよい。また、この変形例においてモニタ30が本発明に係る表示手段に相当し、解析装置20が本発明に係る解析手段に相当する。
或いは、モニタ30を省いた構成としてもよい。この変形例において顕微鏡10の表示ユニット12が本発明に係る表示手段に相当し、解析装置20が本発明に係る解析手段に相当する。
上記の実施形態において用いられる顕微鏡10は、撮影ユニット11と表示ユニット12とを有するものとして説明したが、少なくとも一方を備えない顕微鏡に代えてもよい。例えば顕微鏡は表示ユニット12を有して撮影ユニット11を有さないものとし、撮影ユニット11は顕微鏡とは別のカメラ装置として提供されてもよい。
上記の実施形態において説明した作業画面(図4~図9に図示した作業画面)のレイアウトは適宜変更可能であり、これらのレイアウトは作業者によって任意に調整可能であること(レイアウトのカスタマイズ機能を有すること)がより好ましい。
上記の実施形態では表示ユニット12の表示内容(図4~図6の作業画面に関する内容)と、モニタ30の表示内容(図7~図9の作業画面に関する内容)と、が一部相違する実施例を説明したが、本発明の実施においては一方の表示内容が他方の表示内容に転用されることを許容する。
上記の実施形態における健全性解析処理では、精子の健全性に係るランクを4段階(A~D)に分類する処理として説明したが、当該ランクは2段階以上であればよく、本発明の実施においてその段階数は特に制限されない。
本実施形態は以下の技術思想を包含する。
(1)精子を含有する検査対象物に関する検査作業を支援する生殖医療支援システムであって、前記検査対象物を拡大表示している第一映像を含む作業画面が表示される表示手段と、前記第一映像として前記作業画面に表示されている領域より広い領域が撮影されている映像データを取得し、前記映像データに対して画像解析処理を行う解析手段と、を備え、前記画像解析処理には、前記映像データに撮影されている精子を判別する判別処理と、前記判別処理によって判別された精子を解析する解析処理と、が含まれ、前記表示手段は、前記判別処理によって判別され且つ前記第一映像の表示領域内に表示されている精子に係る前記解析処理に基づく第一付加表示と、前記判別処理によって判別された精子の全部に係る前記解析処理又は前記判別処理によって判別され且つ前記第一映像の表示領域外である精子に係る前記解析処理に基づく第二付加表示と、を前記作業画面の表示領域内に表示する生殖医療支援システム。
(2)前記解析処理には、精子の移動軌跡を導出する処理が含まれ、前記表示手段は、前記解析処理によって導出された精子の移動軌跡のうち、前記第一映像の表示領域内に表示されている精子に係る移動軌跡を前記第一付加表示として表示し、前記第一映像の表示領域内から当該表示領域外に移動した精子に係る移動軌跡を前記第二付加表示として表示する(1)に記載の生殖医療支援システム。
(3)前記解析処理には、前記判別処理によって判別された精子を計数する処理が含まれ、前記表示手段は、前記解析処理によって計数された精子の数を前記第二付加表示として表示する(1)又は(2)に記載の生殖医療支援システム。
(4)前記解析処理には、前記判別処理によって判別された精子を、複数にランク分けされた健全性によって分類する処理が含まれ、前記表示手段は、前記解析処理によって分類された精子の健全性を示す前記第一付加表示を表示する(1)から(3)のいずれか一つに記載の生殖医療支援システム。
(5)前記表示手段は、前記解析処理によって分類された精子の健全性を示す指標を、前記第一映像の表示領域内に表示されている精子ごとに付し、当該指標を前記第一付加表示として表示する(4)に記載の生殖医療支援システム。
(6)前記表示手段は、前記解析処理によって分類された精子の健全性に係るランク別に計数された精子の数を前記第二付加表示として表示する(3)に従属している(4)又は(5)に記載の生殖医療支援システム。
(7)前記表示手段は、前記判別処理によって判別され且つ前記第一映像の表示領域外である精子のうち、精子の健全性に係る複数のランクにおける特定のランクに分類された精子の位置を示す前記第二付加表示を、前記第一映像の表示領域とは別に設けられた第二映像領域に表示する(4)から(6)のいずれか一つに記載の生殖医療支援システム。
(8)前記判別処理によって判別された精子を、作業者による選択操作によって任意にマーキングするマーキング手段を備え、前記表示手段は、前記マーキング手段によってマーキングされた精子の位置を前記作業画面の表示領域内に表示する(1)から(7)のいずれか一つに記載の生殖医療支援システム。
(9)前記表示手段は、前記マーキング手段によってマーキングされた精子の位置を示す表示と、前記特定のランクに分類された精子の位置を示す前記第二付加表示と、を前記第二映像領域に表示する(7)に従属している(8)に記載の生殖医療支援システム。
(10)前記解析処理には、前記判別処理によって判別された精子の輪郭を抽出する処理が含まれ、前記表示手段は、前記解析処理によって抽出された精子の輪郭の強調表示を、前記第一付加表示として表示する(1)から(9)のいずれか一つに記載の生殖医療支援システム。
(11)前記画像解析処理に含まれる処理のうち少なくとも一部が、機械学習によって生成される学習済みモデルに基づいて実現される(1)から(10)のいずれか一つに記載の生殖医療支援システム。
この出願は、2018年9月21日に出願された日本出願特願2018-177672を基礎とする優先権を主張し、その開示のすべてをここに取り込む。
100 生殖医療支援システム
10 顕微鏡
11 撮影ユニット
12 表示ユニット
20 解析装置
21 キーボード
22 マウス
30 モニタ

Claims (11)

  1. 精子を含有する検査対象物に関する検査作業を支援する生殖医療支援システムであって、
    前記検査対象物を拡大表示している第一映像を含む作業画面が表示される表示手段と、
    前記第一映像として前記作業画面に表示されている領域より広い領域が撮影されている映像データを取得し、前記映像データに対して画像解析処理を行う解析手段と、
    を備え、
    前記画像解析処理には、
    前記映像データに撮影されている精子を判別する判別処理と、
    前記判別処理によって判別された精子を解析する解析処理と、
    が含まれ、
    前記表示手段は、前記判別処理によって判別され且つ前記第一映像の表示領域内に表示されている精子に係る前記解析処理に基づく第一付加表示と、前記判別処理によって判別された精子の全部に係る前記解析処理又は前記判別処理によって判別され且つ前記第一映像の表示領域外である精子に係る前記解析処理に基づく第二付加表示と、を前記作業画面の表示領域内に表示する生殖医療支援システム。
  2. 前記解析処理には、精子の移動軌跡を導出する処理が含まれ、
    前記表示手段は、前記解析処理によって導出された精子の移動軌跡のうち、前記第一映像の表示領域内に表示されている精子に係る移動軌跡を前記第一付加表示として表示し、前記第一映像の表示領域内から当該表示領域外に移動した精子に係る移動軌跡を前記第二付加表示として表示する請求項1に記載の生殖医療支援システム。
  3. 前記解析処理には、前記判別処理によって判別された精子を計数する処理が含まれ、
    前記表示手段は、前記解析処理によって計数された精子の数を前記第二付加表示として表示する請求項1又は2に記載の生殖医療支援システム。
  4. 前記解析処理には、前記判別処理によって判別された精子を、複数にランク分けされた健全性によって分類する処理が含まれ、
    前記表示手段は、前記解析処理によって分類された精子の健全性を示す前記第一付加表示を表示する請求項1から3のいずれか一項に記載の生殖医療支援システム。
  5. 前記表示手段は、前記解析処理によって分類された精子の健全性を示す指標を、前記第一映像の表示領域内に表示されている精子ごとに付し、当該指標を前記第一付加表示として表示する請求項4に記載の生殖医療支援システム。
  6. 前記表示手段は、前記解析処理によって分類された精子の健全性に係るランク別に計数された精子の数を前記第二付加表示として表示する請求項3に従属している請求項4又は5に記載の生殖医療支援システム。
  7. 前記表示手段は、前記判別処理によって判別され且つ前記第一映像の表示領域外である精子のうち、精子の健全性に係る複数のランクにおける特定のランクに分類された精子の位置を示す前記第二付加表示を、前記第一映像の表示領域とは別に設けられた第二映像領域に表示する請求項4から6のいずれか一項に記載の生殖医療支援システム。
  8. 前記判別処理によって判別された精子を、作業者による選択操作によって任意にマーキングするマーキング手段を備え、
    前記表示手段は、前記マーキング手段によってマーキングされた精子の位置を前記作業画面の表示領域内に表示する請求項1から7のいずれか一項に記載の生殖医療支援システム。
  9. 前記表示手段は、前記マーキング手段によってマーキングされた精子の位置を示す表示と、前記特定のランクに分類された精子の位置を示す前記第二付加表示と、を前記第二映像領域に表示する請求項7に従属している請求項8に記載の生殖医療支援システム。
  10. 前記解析処理には、前記判別処理によって判別された精子の輪郭を抽出する処理が含まれ、
    前記表示手段は、前記解析処理によって抽出された精子の輪郭の強調表示を、前記第一付加表示として表示する請求項1から9のいずれか一項に記載の生殖医療支援システム。
  11. 前記画像解析処理に含まれる処理のうち少なくとも一部が、機械学習によって生成される学習済みモデルに基づいて実現される請求項1から10のいずれか一項に記載の生殖医療支援システム。
JP2020548310A 2018-09-21 2019-09-05 生殖医療支援システム Active JP7253273B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2018177672 2018-09-21
JP2018177672 2018-09-21
PCT/JP2019/034980 WO2020059522A1 (ja) 2018-09-21 2019-09-05 生殖医療支援システム

Publications (2)

Publication Number Publication Date
JPWO2020059522A1 JPWO2020059522A1 (ja) 2021-08-30
JP7253273B2 true JP7253273B2 (ja) 2023-04-06

Family

ID=69887421

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020548310A Active JP7253273B2 (ja) 2018-09-21 2019-09-05 生殖医療支援システム

Country Status (2)

Country Link
JP (1) JP7253273B2 (ja)
WO (1) WO2020059522A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3904937B1 (en) * 2018-12-28 2025-04-09 Evident Corporation Microscope system
JPWO2021200003A1 (ja) * 2020-03-31 2021-10-07
CN115552309A (zh) * 2020-03-31 2022-12-30 仪景通株式会社 显微镜系统、投影单元以及检卵辅助方法
JPWO2023127001A1 (ja) * 2021-12-27 2023-07-06
JPWO2025206104A1 (ja) * 2024-03-27 2025-10-02

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012118083A (ja) 2012-01-11 2012-06-21 M E S Medical Electronic Systems Ltd 精液分析
JP2012198249A (ja) 2012-07-27 2012-10-18 Chiba Univ 精子機能の検査方法
JP2016505836A (ja) 2012-12-19 2016-02-25 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 流体サンプル中の粒子の分類のためのシステム及び方法
WO2017183190A1 (ja) 2016-04-22 2017-10-26 佐藤 忠男 試料観察用キット、及び試料観察用キットを用いた精液試料の観察方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012118083A (ja) 2012-01-11 2012-06-21 M E S Medical Electronic Systems Ltd 精液分析
JP2012198249A (ja) 2012-07-27 2012-10-18 Chiba Univ 精子機能の検査方法
JP2016505836A (ja) 2012-12-19 2016-02-25 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 流体サンプル中の粒子の分類のためのシステム及び方法
WO2017183190A1 (ja) 2016-04-22 2017-10-26 佐藤 忠男 試料観察用キット、及び試料観察用キットを用いた精液試料の観察方法

Also Published As

Publication number Publication date
JPWO2020059522A1 (ja) 2021-08-30
WO2020059522A1 (ja) 2020-03-26

Similar Documents

Publication Publication Date Title
JP7253273B2 (ja) 生殖医療支援システム
US11636627B2 (en) System for histological examination of tissue specimens
EP3776458B1 (en) Augmented reality microscope for pathology with overlay of quantitative biomarker data
EP4130843A1 (en) Microscope system, projection unit, and sperm sorting assistance method
US6148096A (en) Specimen preview and inspection system
US10083340B2 (en) Automated cell segmentation quality control
ES2213750T3 (es) Metodos de clasificacion automatica de especimenes citologicos.
JP4864709B2 (ja) 分散プロット分布を用いてスライドの染色品質を決定するシステム
JP7580169B1 (ja) 精子選別補助装置、精子選別補助システム、及び精子選別補助プログラム
Chuter et al. Deep learning identifies high-quality fundus photographs and increases accuracy in automated primary open angle glaucoma detection
US8478018B2 (en) Method for sample cell analysis using a virtual analysis plate
KR101106386B1 (ko) 산점도 분포를 사용한 슬라이드를 분류하기 위한 시스템
US20120243755A1 (en) Method for automatically seeding previously-classified images among images of objects of interest from a specimen
JP4578135B2 (ja) 標本画像の表示方法および標本画像表示用プログラム
JP7751345B1 (ja) 精子選別補助装置、投影装置、及び顕微鏡システム
CN115629072A (zh) 一种骨髓涂片图像分析诊断方法及病理切片扫描仪装置
JP7793293B2 (ja) 画像処理装置、画像処理装置の制御方法およびプログラム
Samuel et al. Design to automate the detection and counting of Tuberculosis (TB) bacilli
JP4785347B2 (ja) 標本画像の表示方法および標本画像表示用プログラム
JP3654835B2 (ja) 検体の下調べ機能を備えた検査体系
JP5048038B2 (ja) 血液細胞分類結果の表示方法および血液細胞分類結果表示用プログラム
Sergeev et al. Development of automated computer vision methods for cell counting and endometrial gland detection for medical images processing
EP4549910A1 (en) Particle detection method, particle detection apparatus, and program
Ersoy et al. Eye gaze pattern analysis of whole slide image viewing behavior in pathedex platform
JP2025158211A (ja) 顕微鏡システム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220607

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230307

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230317

R150 Certificate of patent or registration of utility model

Ref document number: 7253273

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250