JP7384231B2 - 情報処理装置、情報処理システム、医療支援方法及びプログラム - Google Patents

Description

この発明は、情報処理装置、情報処理システム、医療支援方法及びプログラムに関する。

医療現場における手術では様々な医療器械が利用されている。手術を遂行する医師及び看護師等（以下、「医療者」とも呼ぶ）がすべての医療器械に精通することは困難であるため、例えば医療器械メーカの担当者等（以下、「支援者」とも呼ぶ）が手術に立ち会い、必要なタイミングにおける適切な医療器械の指示、又はその用途の説明等により、医療者を支援することが行われている。また、このような支援を遠隔から実施することが検討されている。

例えば、特許文献１には、手術室に設置又は医師に装着したカメラから得られる画像を用いて、手術の内容を遠隔地と共有する技術が開示されている。

しかしながら、従来技術では、遠隔から医療者を支援する際の現場の医療者や支援者の負担が大きい、という課題がある。例えば、支援者が遠隔から手術室に存在する医療器械を把握するために、手術室にあるカメラで医療器械の画像を共有しながら支援者が確認することは可能である。しかしながら、手術に必要な医療器械は多岐に渡ることから、医療器械を把握できるまで医療者と支援者との間で都度確認して照合する必要が生じる。手術を遂行しながらこのような確認作業を行うことは、大きな負担となる。

本発明の一実施形態は、上記のような技術的課題に鑑みて、遠隔から医療者を支援する際の現場の医療者や支援者の負担を軽減することを目的とする。

上記の課題を解決するために、この発明の一実施形態である情報処理装置は、手術と手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶する手術情報管理部と、手術を行う手術室に存在する取得装置によって取得された器械情報であって、手術室に存在する医療器械を識別可能な器械情報を受信する通信制御部と、を備え、手術情報管理部は、受信した器械情報によって識別された医療器械と、手術情報に含まれる医療器械との照合を行う。

本発明の一実施形態によれば、遠隔から医療者を支援する際の現場の医療者や支援者の負担を軽減することができる。

第１実施形態における医療支援システムの全体構成の一例を示す図である。 一実施形態における全天球撮影装置のハードウェア構成の一例を示す図である。 一実施形態におけるスマートフォンのハードウェア構成の一例を示す図である。 一実施形態におけるコンピュータのハードウェア構成の一例を示す図である。 第１実施形態における医療支援システムの機能構成の一例を示す図である。 ルーム管理情報の一例を示す図である。 ユーザ管理情報の一例を示す図である。 デバイス管理情報の一例を示す図である。 コンテンツ管理情報の一例を示す図である。 器械画像情報の一例を示す図である。 手術情報の一例を示す図である。 用途情報の一例を示す図である。 第１実施形態における医療支援方法の処理手順の一例を示す図である。 照合結果画面の一例を示す図である。 用途情報画面の一例を示す図である。 第２実施形態における医療支援システムの全体構成の一例を示す図である。 第２実施形態における医療支援システムの機能構成の一例を示す図である。 第２実施形態における医療支援方法の処理手順の一例を示す図である。 第３実施形態における医療支援システムの全体構成の一例を示す図である。 第３実施形態における医療支援システムの機能構成の一例を示す図である。 第３実施形態における医療支援方法の処理手順の一例を示す図である。 用途情報画面の一例を示す図である。 第４実施形態における医療支援システムの全体構成の一例を示す図である。 第４実施形態における医療支援システムの機能構成の一例を示す図である。 第４実施形態における医療支援方法の処理手順の一例を示す図である。 変形例１における医療支援システムの機能構成の一例を示す図である。 変形例１における医療支援方法の処理手順の一例を示す図である。 変形例２における医療支援システムの機能構成の一例を示す図である。 変形例２における医療支援方法の処理手順の一例を示す図である。 器械識別情報の一例を示す図である。 変形例３における医療支援システムの機能構成の一例を示す図である。 変形例３における医療支援方法の処理手順の一例を示す図である。

以下、図面を参照しながら、この発明の実施の形態について、詳細に説明する。なお、図面中において同じ機能を有する構成部には同じ番号を付し、重複説明を省略する。

［背景］
医療現場における手術は、例えば医師及び看護師等の様々な役割を持つ医療者が参加するチームによって遂行される。例えば、看護師においては、様々な医療器械を手術の進行に合わせて医師に手渡す「器械出し」と呼ばれる役割がある。器械出しでは、手術の流れに応じて、医師が手を出したら必要な医療器械を即座に手渡すことが求められる。そのため、器械出しを担当する看護師は、次に必要となる医療器械を常に手元に準備しておく必要がある。

器械出しに際して、医療器械の用途を誤らないように、例えば医療器械メーカの担当者等の支援者が手術に立ち会うことがある。支援者は、どのタイミングでどの器械が必要か等を指示することで、器械出しを担当する看護師を支援する。

医療現場では、様々な場所及び時間で日々手術が行われているため、現場に立ち会って支援することは、支援者にとっても負担となっている。そのため、近年では、こうした支援を遠隔からも実施できるようにすることが検討されている。

しかしながら、遠隔からの支援を実現するためには、医療者及び支援者に新たな負担が発生する。例えば、看護師は、手術室に設置された、もしくは看護師が携行しているカメラ等に、医療器械を都度撮影するといった行為が必要となる。このとき、看護師は、医療器械がカメラで正しく撮影できているかどうかを確認する作業に神経を注がなければならなくなる。この確認作業では、例えば、医療器械がカメラの撮影範囲に入っているか、自分が適切な撮影位置にいるか、その位置において医療器械を撮影する向きは適切か、撮影する時間の長さは適切か等といった様々な観点が必要とされる。

また、手術に必要な医療器械は、たとえ一品種であっても、その種類や用途は多岐にわたる。そのため、医療器械をカメラで撮影することが増えると、遠隔地の支援者が都度確認する負担も増える。

このように、手術室における医療器械の取り扱い等について遠隔から支援する場合、器械出しを担当する看護師及び遠隔地の支援者への負担軽減が課題となる。しかしながら、従来の技術では、その実現は困難であった。

本発明の一実施形態における医療支援システムは、手術室に存在する医療器械を識別可能な情報を取得し、手術室に存在する医療器械と手術で用いる医療器械との照合結果を、遠隔地にいる支援者が用いる端末又は手術室にいる医療者が用いる端末に表示する。このとき、手術で用いる医療器械に、その用途を説明するための情報を関連付けて表示してもよい。これにより、支援者は、遠隔から手術室に存在する医療器械を把握し、医療者に対して用途に関する情報を提供することを、大きな負担なく行うことができる。すなわち、支援者が遠隔から医療者を支援する際の負担を軽減することができる。

［第１実施形態］
本発明の第１実施形態は、手術室に存在する医療器械を撮影した画像に基づいて、手術室に存在する医療器械に関する情報を、遠隔地にいる支援者及び手術室にいる医療者に提供する医療支援システムである。本実施形態における医療支援システムは、支援者に対しては、手術室に存在する医療器械と手術で用いる医療器械との照合結果を示す画面（以下、「照合結果画面」とも呼ぶ）を表示する。また、本実施形態における医療支援システムは、医療者に対しては、手術で用いる医療器械の用途を説明するための情報（以下、「用途情報」とも呼ぶ）を示す画面（以下、「用途情報画面」とも呼ぶ）を表示する。

＜医療支援システムの全体構成＞
まず、本実施形態における医療支援システム１の全体構成について、図１を参照しながら説明する。図１は、本実施形態における医療支援システム１の全体構成の一例を示す図である。

図１に示されているように、本実施形態における医療支援システム１は、取得装置１０、表示装置１１、支援者端末２０及びサービス提供サーバ３０を含む。取得装置１０、表示装置１１、支援者端末２０及びサービス提供サーバ３０は、それぞれ通信ネットワークＮ１に接続している。通信ネットワークＮ１は、接続されている各装置が相互に通信可能となるように構成されている。

通信ネットワークＮ１は、例えば、インターネット、ＬＡＮ（Local Area Network）、又はＷＡＮ（Wide Area Network）などの有線通信によるネットワークによって構築されている。通信ネットワークＮ１は、有線通信だけでなく、例えば、無線ＬＡＮ、又は近距離無線通信等の無線通信、もしくはＷｉＭＡＸ（Worldwide Interoperability for Microwave Access）、ＬＴＥ（Long Term Evolution）、又は５Ｇ（5th Generation）等の移動体通信によるネットワークが含まれていてもよい。

取得装置１０及び表示装置１１は、利用環境Ｅ１に存在する。支援者端末２０は、支援環境Ｅ２に設置される。サービス提供サーバ３０は、サービス提供環境Ｅ３に設置される。利用環境Ｅ１、支援環境Ｅ２及びサービス提供環境Ｅ３は、異なる遠隔地に構築される。利用環境Ｅ１、支援環境Ｅ２及びサービス提供環境Ｅ３は、通信ネットワークＮ１を介して相互に通信可能である。

利用環境Ｅ１は、例えば、医療者がいる手術室等、医療器械を利用する環境である。支援環境Ｅ２は、例えば、医療器械メーカのオフィス等、支援者が支援業務を行う環境である。サービス提供環境Ｅ３は、例えば、データセンタ等、通信ネットワークＮ１を介して、利用環境Ｅ１及び支援環境Ｅ２に対してサービスを提供する環境である。

取得装置１０は、利用環境Ｅ１に存在する医療器械を識別可能な情報（以下、「器械情報」とも呼ぶ）を取得する電子機器である。本実施形態における器械情報は、医療器械を撮影した画像（以下、「器械画像」とも呼ぶ）である。取得装置１０の一例は、全天球撮影装置である。取得装置１０の他の一例は、スマートフォン又はタブレット端末等の携帯端末、もしくはスマートグラス又はアクションカメラ等のウェアラブルデバイスである。

表示装置１１は、利用環境Ｅ１にいる医療者に対して医療器械に関する情報を表示する電子機器である。本実施形態における表示装置１１が表示する情報は、手術で用いる医療器械の用途情報である。表示装置１１の一例は、コンピュータである。表示装置１１の他の一例は、スマートフォン又はタブレット端末等の携帯端末である。

支援者端末２０は、支援環境Ｅ２にいる支援者が用いる情報処理端末である。支援者端末２０は、手術室に存在する医療器械と手術で用いる医療器械との照合結果を表示する。また、支援者端末２０は、支援者の操作に応じて、手術で用いる医療器械の用途情報の送信を表示装置１１に要求する。支援者端末２０の一例は、コンピュータである。

サービス提供サーバ３０は、支援者が医療者を支援するために用いるサービスを提供する情報処理装置である。サービス提供サーバ３０は、手術室に存在する医療器械と手術で用いる医療器械との照合結果を、支援者端末２０に出力する。また、サービス提供サーバ３０は、手術で用いる医療器械の用途情報を、表示装置１１に出力する。サービス提供サーバ３０の一例は、コンピュータである。

取得装置１０及び表示装置１１は、それぞれが備えるべき機能を兼ね備えた１台の情報処理端末として構成してもよい。例えば、ラップトップ型のパーソナルコンピュータ、スマートフォン又はタブレット端末等、カメラ及びディスプレイ、並びに通信機能を備えたコンピュータを用いれば、取得装置１０及び表示装置１１の機能を兼ね備えた情報処理端末を実現することができる。

取得装置１０は、通信ネットワークＮ１には接続せず、有線又は無線の通信経路により、表示装置１１と接続してもよい。この場合、取得装置１０は、表示装置１１を介して通信ネットワークＮ１と接続し、他の装置、端末又はサーバとの通信を行う。

なお、取得装置１０、表示装置１１、支援者端末２０及びサービス提供サーバ３０は、通信機能を備えた装置であれば、全天球撮影装置、スマートフォン又はコンピュータに限られない。取得装置１０、表示装置１１、支援者端末２０及びサービス提供サーバ３０は、例えば、ＰＪ（Projector：プロジェクタ）、ＩＷＢ（Interactive White Board：相互通信が可能な電子式の黒板機能を有する白板）、デジタルサイネージ等の出力装置、ＨＵＤ（Head Up Display）装置、産業機械、撮像装置、集音装置、医療機器、ネットワーク家電、自動車（Connected Car）、ノートＰＣ（Personal Computer）、携帯電話、スマートフォン、タブレット端末、ゲーム機、ＰＤＡ（Personal Digital Assistant）、デジタルカメラ、ウェアラブルＰＣまたはデスクトップＰＣ等であってもよい。

＜医療支援システムのハードウェア構成＞
次に、本実施形態における医療支援システム１に含まれる各装置のハードウェア構成について、図２から図４を参照しながら説明する。

≪全天球撮影装置のハードウェア構成≫
図２は、取得装置１０が全天球撮影装置で実現される場合のハードウェア構成の一例を示す図である。以下では、全天球撮影装置は、２つの撮像素子を使用した全天球（全方位）撮影装置とするが、撮像素子は２つ以上であればいくつでもよい。また、必ずしも全方位撮影専用の装置である必要はなく、通常のデジタルカメラやスマートフォン等に後付けの全方位の撮像ユニットを取り付けることで、実質的に全天球撮影装置と同じ機能を有するようにしてもよい。

図２に示されているように、一実施形態における全天球撮影装置は、撮像ユニット６０１、画像処理ユニット６０４、撮像制御ユニット６０５、マイク６０８、音処理ユニット６０９、ＣＰＵ(Central Processing Unit)６１１、ＲＯＭ(Read Only Memory)６１２、ＳＲＡＭ(Static Random Access Memory)６１３、ＤＲＡＭ(Dynamic Random Access Memory)６１４、操作部６１５、外部機器接続Ｉ／Ｆ６１６、通信部６１７、アンテナ６１７ａ、加速度・方位センサ６１８、ジャイロセンサ６１９、加速度センサ６２０、及びMicro USB用の凹状の端子６２１によって構成されている。

このうち、撮像ユニット６０１は、各々半球画像を結像するための１８０°以上の画角を有する広角レンズ（いわゆる魚眼レンズ）６０２ａ，６０２ｂと、各広角レンズに対応させて設けられている２つの撮像素子６０３ａ，６０３ｂを備えている。撮像素子６０３ａ，６０３ｂは、魚眼レンズ６０２ａ，６０２ｂによる光学像を電気信号の画像データに変換して出力するＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサやＣＣＤ(Charge Coupled Device)センサなどの画像センサ、この画像センサの水平又は垂直同期信号や画素クロックなどを生成するタイミング生成回路、この撮像素子の動作に必要な種々のコマンドやパラメータなどが設定されるレジスタ群などを有している。

撮像ユニット６０１の撮像素子６０３ａ，６０３ｂは、各々、画像処理ユニット６０４とパラレルＩ／Ｆバスで接続されている。一方、撮像ユニット６０１の撮像素子６０３ａ，６０３ｂは、撮像制御ユニット６０５とは、シリアルＩ／Ｆバス（Ｉ２Ｃバス等）で接続されている。画像処理ユニット６０４、撮像制御ユニット６０５及び音処理ユニット６０９は、バス６１０を介してＣＰＵ６１１と接続される。さらに、バス６１０には、ＲＯＭ６１２、ＳＲＡＭ６１３、ＤＲＡＭ６１４、操作部６１５、外部機器接続Ｉ／Ｆ(Interface)６１６、通信部６１７、及び加速度・方位センサ６１８なども接続される。

画像処理ユニット６０４は、撮像素子６０３ａ，６０３ｂから出力される画像データをパラレルＩ／Ｆバスを通して取り込み、それぞれの画像データに対して所定の処理を施した後、これらの画像データを合成処理して、正距円筒射影画像のデータを作成する。

撮像制御ユニット６０５は、一般に撮像制御ユニット６０５をマスタデバイス、撮像素子６０３ａ，６０３ｂをスレーブデバイスとして、Ｉ２Ｃバスを利用して、撮像素子６０３ａ，６０３ｂのレジスタ群にコマンド等を設定する。必要なコマンド等は、ＣＰＵ６１１から受け取る。また、撮像制御ユニット６０５は、同じくＩ２Ｃバスを利用して、撮像素子６０３ａ，６０３ｂのレジスタ群のステータスデータ等を取り込み、ＣＰＵ６１１に送る。

また、撮像制御ユニット６０５は、操作部６１５のシャッターボタンが押下されたタイミングで、撮像素子６０３ａ，６０３ｂに画像データの出力を指示する。全天球撮影装置によっては、ディスプレイ（例えば、スマートフォンのディスプレイ）によるプレビュー表示機能や動画表示に対応する機能を持つ場合もある。この場合は、撮像素子６０３ａ，６０３ｂからの画像データの出力は、所定のフレームレート（フレーム／分）によって連続して行われる。

また、撮像制御ユニット６０５は、後述するように、ＣＰＵ６１１と協働して撮像素子６０３ａ，６０３ｂの画像データの出力タイミングの同期をとる同期制御手段としても機能する。なお、本実施形態では、全天球撮影装置にはディスプレイが設けられていないが、表示部を設けてもよい。

マイク６０８は、音を音（信号）データに変換する。音処理ユニット６０９は、マイク６０８から出力される音データをＩ／Ｆバスを通して取り込み、音データに対して所定の処理を施す。

ＣＰＵ６１１は、全天球撮影装置の全体の動作を制御すると共に必要な処理を実行する。ＲＯＭ６１２は、ＣＰＵ６１１のための種々のプログラムを記憶している。ＳＲＡＭ６１３及びＤＲＡＭ６１４はワークメモリであり、ＣＰＵ６１１で実行するプログラムや処理途中のデータ等を記憶する。特にＤＲＡＭ６１４は、画像処理ユニット６０４での処理途中の画像データや処理済みの正距円筒射影画像のデータを記憶する。

操作部６１５は、シャッターボタン６１５ａなどの操作ボタンの総称である。ユーザは操作部６１５を操作することで、種々の撮影モードや撮影条件などを入力する。

外部機器接続Ｉ／Ｆ６１６は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリやＰＣ(Personal Computer)等である。ＤＲＡＭ６１４に記憶された正距円筒射影画像のデータは、この外部機器接続Ｉ／Ｆ６１６を介して外付けのメディアに記録されたり、必要に応じて外部機器接続Ｉ／Ｆ６１６を介してスマートフォン等の外部端末（装置）に送信されたりする。

通信部６１７は、全天球撮影装置に設けられたアンテナ６１７ａを介して、Wi-Fi、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の近距離無線通信技術によって、スマートフォン等の外部端末（装置）と通信を行う。この通信部６１７によっても、正距円筒射影画像のデータをスマートフォン等の外部端末（装置）に送信することができる。

加速度・方位センサ６１８は、地球の磁気から全天球撮影装置の方位を算出し、方位情報を出力する。この方位情報はExifに沿った関連情報（メタデータ）の一例であり、撮影画像の画像補正等の画像処理に利用される。なお、関連情報には、画像の撮影日時、及び画像データのデータ容量の各データも含まれている。また、加速度・方位センサ６１８は、全天球撮影装置６の移動に伴う角度の変化（Roll角、Pitch角、Yaw角）を検出するセンサである。角度の変化はExifに沿った関連情報（メタデータ）の一例であり、撮像画像の画像補正等の画像処理に利用される。

更に、加速度・方位センサ６１８は、３軸方向の加速度を検出するセンサである。全天球撮影装置は、加速度・方位センサ６１８が検出した加速度に基づいて、自装置（全天球撮影装置）の姿勢（重力方向に対する角度）を算出する。全天球撮影装置に、加速度・方位センサ６１８が設けられることによって、画像補正の精度が向上する。

≪スマートフォンのハードウェア構成≫
図３は、取得装置１０及び表示装置１１がスマートフォンで実現される場合のハードウェア構成の一例を示す図である。

図３に示されているように、一実施形態におけるスマートフォンは、ＣＰＵ４０１、ＲＯＭ４０２、ＲＡＭ４０３、ＥＥＰＲＯＭ４０４、ＣＭＯＳセンサ４０５、撮像素子Ｉ／Ｆ４０６、加速度・方位センサ４０７、メディアＩ／Ｆ４０９、ＧＰＳ受信部４１１を備えている。

これらのうち、ＣＰＵ４０１は、スマートフォン全体の動作を制御する。ＲＯＭ４０２は、ＣＰＵ４０１やＩＰＬ等のＣＰＵ４０１の駆動に用いられるプログラムを記憶する。ＲＡＭ４０３は、ＣＰＵ４０１のワークエリアとして使用される。ＥＥＰＲＯＭ４０４は、ＣＰＵ４０１の制御にしたがって、スマートフォン用プログラム等の各種データの読み出し又は書き込みを行う。ＣＭＯＳ(Complementary Metal Oxide Semiconductor)センサ４０５は、ＣＰＵ４０１の制御に従って被写体（主に自画像）を撮像して画像データを得る内蔵型の撮像手段の一種である。なお、ＣＭＯＳセンサではなく、ＣＣＤ(Charge Coupled Device)センサ等の撮像手段であってもよい。

撮像素子Ｉ／Ｆ４０６は、ＣＭＯＳセンサ４０５の駆動を制御する回路である。加速度・方位センサ４０７は、地磁気を検知する電子磁気コンパスやジャイロコンパス、加速度センサ等の各種センサである。メディアＩ／Ｆ４０９は、フラッシュメモリ等の記録メディア４０８に対するデータの読み出し又は書き込み（記憶）を制御する。ＧＰＳ受信部４１１は、ＧＰＳ衛星からＧＰＳ信号を受信する。

また、スマートフォンは、遠距離通信回路４１２、ＣＭＯＳセンサ４１３、撮像素子Ｉ／Ｆ４１４、マイク４１５、スピーカ４１６、音入出力Ｉ／Ｆ４１７、ディスプレイ４１８、外部機器接続Ｉ／Ｆ(Interface)４１９、近距離通信回路４２０、近距離通信回路４２０のアンテナ４２０ａ、及びタッチパネル４２１を備えている。

これらのうち、遠距離通信回路４１２は、通信ネットワークＮ１を介して、他の機器と通信する回路である。ＣＭＯＳセンサ４１３は、ＣＰＵ４０１の制御に従って被写体を撮像して画像データを得る内蔵型の撮像手段の一種である。撮像素子Ｉ／Ｆ４１４は、ＣＭＯＳセンサ４１３の駆動を制御する回路である。マイク４１５は、音を電気信号に変える内蔵型の回路である。スピーカ４１６は、電気信号を物理振動に変えて音楽や音声などの音を生み出す内蔵型の回路である。音入出力Ｉ／Ｆ４１７は、ＣＰＵ４０１の制御に従ってマイク４１５及びスピーカ４１６との間で音信号の入出力を処理する回路である。

ディスプレイ４１８は、被写体の画像や各種アイコン等を表示する液晶や有機ＥＬ(Electro Luminescence)などの表示手段の一種である。外部機器接続Ｉ／Ｆ４１９は、各種の外部機器を接続するためのインターフェースである。近距離通信回路４２０は、ＮＦＣ(Near Field Communication)やＢｌｕｅｔｏｏｔｈ（登録商標）等の通信回路である。タッチパネル４２１は、利用者がディスプレイ４１８を押下することで、スマートフォンを操作する入力手段の一種である。

また、スマートフォンは、バスライン４１０を備えている。バスライン４１０は、図３に示されているＣＰＵ４０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

≪コンピュータのハードウェア構成≫
図４は、支援者端末２０及びサービス提供サーバ３０がコンピュータで実現される場合のハードウェア構成の一例を示す図である。

図４に示されているように、一実施形態におけるコンピュータは、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ５０４、ＨＤＤ(Hard Disk Drive)コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ(Interface)５０８、ネットワークＩ／Ｆ５０９、バスライン５１０、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ５１４、メディアＩ／Ｆ５１６を備えている。

これらのうち、ＣＰＵ５０１は、コンピュータ全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。ＨＤ５０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。

ディスプレイ５０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリやプリンタ等である。ネットワークＩ／Ｆ５０９は、通信ネットワークＮ１を利用してデータ通信をするためのインターフェースである。バスライン５１０は、図４に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

また、キーボード５１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＤＶＤ－ＲＷドライブ５１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ５１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－Ｒ等であってもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。

＜医療支援システムの機能構成＞
次に、本実施形態における医療支援システム１の機能構成の一例について、図５を参照しながら説明する。図５は、本実施形態における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

≪取得装置の機能構成≫
図５に示されているように、本実施形態における取得装置１０は、通信制御部１０１及び情報取得部１０２を備える。

通信制御部１０１は、通信ネットワークＮ１を介してサービス提供サーバ３０と各種データの送受信を行う。通信制御部１０１は、例えば、図２に示されているＲＯＭ６１２からＳＲＡＭ６１３上に展開されたプログラムがＣＰＵ６１１及び外部機器接続Ｉ／Ｆ６１６に実行させる処理によって実現される。

情報取得部１０２は、手術室に存在する医療器械を撮影し、当該医療器械を含む画像を生成する。情報取得部１０２は、動画（すなわち、画像の時系列）を生成してもよい。情報取得部１０２は、例えば、図２に示されているＲＯＭ６１２からＳＲＡＭ６１３上に展開されたプログラムがＣＰＵ６１１及び撮像制御ユニット６０５に実行させる処理によって実現される。

≪表示装置の機能構成≫
図５に示されているように、本実施形態における表示装置１１は、通信制御部１１１及び画面表示部１１２を備える。

通信制御部１１１は、通信ネットワークＮ１を介してサービス提供サーバ３０と各種データの送受信を行う。通信制御部１１１は、例えば、図３に示されているＥＥＰＲＯＭ４０４からＲＡＭ４０３上に展開されたプログラムがＣＰＵ４０１及び遠距離通信回路４１２に実行させる処理によって実現される。

画面表示部１１２は、サービス提供サーバ３０から受信した画面情報に基づいて、各画面を表示する。画面表示部１１２は、例えば、図３に示されているＥＥＰＲＯＭ４０４からＲＡＭ４０３上に展開されたプログラムがＣＰＵ４０１及びディスプレイ４１８に実行させる処理によって実現される。画面表示部１１２の一例は、ブラウザである。

≪支援者端末の機能構成≫
図５に示されているように、本実施形態における支援者端末２０は、通信制御部２０１及び画面表示部２０２を備える。

通信制御部２０１は、通信ネットワークＮ１を介してサービス提供サーバ３０と各種データの送受信を行う。通信制御部２０１は、例えば、図４に示されているＨＤ５０４からＲＡＭ５０３上に展開されたプログラムがＣＰＵ５０１及びネットワークＩ／Ｆ５０９に実行させる処理によって実現される。

画面表示部２０２は、サービス提供サーバ３０から受信した画面情報に基づいて、各画面を表示する。画面表示部２０２は、例えば、図４に示されているＨＤ５０４からＲＡＭ５０３上に展開されたプログラムがＣＰＵ５０１及びディスプレイ５０６に実行させる処理によって実現される。画面表示部２０２の一例は、ブラウザである。

≪サービス提供サーバの機能構成≫
図５に示されているように、本実施形態におけるサービス提供サーバ３０は、通信制御部３０１、画面情報生成部３０２、画面情報記憶部３０３、ルーム管理部３０４、ルーム情報記憶部３０５、コンテンツ配信部３０６、コンテンツ記憶部３０７、メッセージ処理部３０８、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６を備える。

通信制御部３０１は、通信ネットワークＮ１を介して取得装置１０、表示装置１１及び支援者端末２０と各種データの送受信を行う。通信制御部３０１は、例えば、図４に示されているＨＤ５０４からＲＡＭ５０３上に展開されたプログラムがＣＰＵ５０１及びネットワークＩ／Ｆ５０９に実行させる処理によって実現される。

画面情報生成部３０２、ルーム管理部３０４、コンテンツ配信部３０６、メッセージ処理部３０８、画像認識部３１１、手術情報管理部３１３及び用途情報管理部３１５は、例えば、図２に示されているＨＤ５０４からＲＡＭ５０３上に展開されたプログラムがＣＰＵ５０１及びＨＤＤコントローラ５０５に実行させる処理によって実現される。

画面情報記憶部３０３、ルーム情報記憶部３０５、コンテンツ記憶部３０７、画像情報記憶部３１２、手術情報記憶部３１４及び用途情報記憶部３１６は、例えば、図４に示されているＨＤ５０４を用いて実現される。ＨＤ５０４が記憶するデータの読み込み又は書き込みは、例えば、ＨＤＤコントローラ５０５を介して行われる。

なお、画面情報記憶部３０３、ルーム情報記憶部３０５、コンテンツ記憶部３０７、画像情報記憶部３１２、手術情報記憶部３１４及び用途情報記憶部３１６は、サービス提供サーバ３０が備えず、外部の記憶装置を用いてもよい。外部の記憶装置の一例は、ＮＡＳ（Network Attached Storage）又はオンラインストレージサービスである。

画面情報生成部３０２は、画面情報記憶部３０３に記憶されている画面情報に基づいて、表示装置１１及び支援者端末２０に提供する画面情報を生成する。画面情報生成部３０２が生成する各画面情報は、例えば、ＨＴＭＬ（HyperText Markup Language）等で記述された画面情報であり、JavaScript（登録商標）等で記述されたアプリケーションを含んでもよい。

画面情報記憶部３０３は、画面情報生成部３０２が表示装置１１及び支援者端末２０に提供する画面情報を記憶する。

ルーム管理部３０４は、ルーム情報記憶部３０５に記憶されているルーム情報を管理する。ルームとは、取得装置１０（以下、「デバイス」とも呼ぶ）が撮影した画像又は動画の配信先（接続先）を管理する単位である。ルームは予め生成しておいてもよいし、支援者端末２０等からの要求に応じて一時的に生成してもよい。

具体的には、ルーム管理部３０４は、以下の処理を実行する。第１に、デバイスとルームとを関連付ける設定登録を行う。第２に、ルームに対するユーザの入退室の情報を更新する。すなわち、各ルームに現在入室しているユーザを管理する。

ルーム情報記憶部３０５は、ルーム管理部３０４が管理するルーム情報を記憶する。ルーム情報には、ルーム管理情報、ユーザ管理情報及びデバイス管理情報が含まれる。ルーム情報は、ユーザ及び／又はデバイスを複数含む宛先リストを管理するための宛先管理情報を含んでもよい。

ルーム管理情報は、ルームと当該ルームに入室しているユーザ及びデバイスとを関連付ける情報である。本実施形態におけるルーム管理情報は、後述するルーム管理テーブルに格納される。

ユーザ管理情報は、サービス提供サーバ３０に登録されているユーザの属性情報及び状態情報を管理するための情報である。本実施形態におけるユーザ管理情報は、後述するユーザ管理テーブルに格納される。

デバイス管理情報は、サービス提供サーバ３０に登録されているデバイスの属性情報及び状態情報を管理するための情報である。本実施形態におけるデバイス管理情報は、後述するデバイス管理テーブルに格納される。

ここで、本実施形態におけるルーム情報について、図６から図８を参照しながら説明する。図６は、本実施形態におけるルーム管理テーブルの一例を示す概念図である。

図６に示されているように、本実施形態におけるルーム管理テーブル１０００は、データ項目として、ルームを識別するルームＩＤ、当該ルームに入室しているユーザを識別する入室ユーザＩＤ、及び当該ルームに入室しているデバイスを識別する入室デバイスＩＤ等を有する。

図７は、本実施形態におけるユーザ管理テーブルの一例を示す概念図である。図７に示されているように、本実施形態におけるユーザ管理テーブル１１００は、データ項目として、ユーザを識別するユーザＩＤ、当該ユーザの表示名、当該ユーザの通信状態、及び当該ユーザの接続元のＩＰアドレス等を有する。

図８は、本実施形態におけるデバイス管理テーブルの一例を示す概念図である。図８に示されているように、本実施形態におけるデバイス管理テーブル１２００は、データ項目として、デバイスを識別するデバイスＩＤ、当該デバイスの表示名、及び当該デバイスのＩＰアドレス等を有する。

図５に戻って説明する。コンテンツ配信部３０６は、ルームに入室しているユーザが用いる端末に、ルームに入室しているデバイスで撮影されたコンテンツ（例えば、静止画又は動画等）を配信する。具体的には、コンテンツ配信部３０６は、以下の処理を実行する。第１に、デバイスから受信した静止画又は動画データを、同じルームに入室しているユーザにストリーミング配信する。第２に、コンテンツ記憶部３０７に記憶されている静止画又は動画データをユーザの要求に応じて配信する。

コンテンツ記憶部３０７は、コンテンツ配信部３０６が配信するコンテンツを記憶する。また、コンテンツ記憶部３０７は、コンテンツと当該コンテンツの属性情報とを関連付けるコンテンツ管理情報を記憶する。本実施形態におけるコンテンツ管理情報は、後述するコンテンツ管理テーブルに格納される。

コンテンツ記憶部３０７に記憶されるコンテンツは、デバイスにより撮影された静止画又は動画の生データである。コンテンツが全天球撮影装置により撮影された場合、視点情報もコンテンツとして記憶される。具体的には、ライブ配信中にデバイスによって撮影された静止画又は動画データがコンテンツとして記憶される。また、コンテンツがパノラマ画像又は動画の場合には、閲覧拠点の視点情報（例えば、視点の座標、閲覧時間及び拠点の識別情報等）がコンテンツに関連付けて記憶される。

ここで、本実施形態におけるコンテンツ管理情報について、図９を参照しながら説明する。図９は、本実施形態におけるコンテンツ管理テーブルの一例を示す概念図である。

図９に示されているように、本実施形態におけるコンテンツ管理テーブル１３００は、データ項目として、コンテンツを識別するデータＩＤ、当該コンテンツの名称、撮影日時、ルームＩＤ、撮影者、入室ユーザＩＤ、パノラマ画像の視点情報及び実データの保存場所等を有する。

図５に戻って説明する。メッセージ処理部３０８は、ルームに接続しているデバイスへのメッセージを処理する。メッセージの一例は、デバイスへの撮影命令、デバイスが撮影した画像の受信、デバイスのプレゼンスの受信（例えば、映像の配信状況、カメラやマイクの状態、画面共有の有無等）、各拠点の３６０度映像又は画像の視点情報の受信等である。

画像認識部３１１は、取得装置１０から受信した器械画像から、当該画像に含まれる医療器械を認識する。画像認識部３１１は、画像情報記憶部３１２に記憶されている医療器械の画像を用いて認識を行う。

画像情報記憶部３１２は、医療器械の画像と当該医療器械の種類とを関連付ける器械画像情報を記憶する。本実施形態における器械画像情報は、後述する器械画像管理テーブルに格納される。

ここで、本実施形態における器械画像情報について、図１０を参照しながら説明する。図１０は、本実施形態における器械画像管理テーブルの一例を示す概念図である。

図１０に示されているように、本実施形態における器械画像管理テーブル１４００は、データ項目として、医療器械の画像及び医療器械の種類等を有する。画像は、画像データそのものでもよいし、画像データの保存場所を表す情報（例えば、ＵＲＬ（Uniform Resource Locator）等）でもよい。

図５に戻って説明する。手術情報管理部３１３は、手術情報記憶部３１４に記憶されている手術情報を管理する。手術情報は、手術室を表す情報と、当該手術室で予定されている手術を表す情報と、当該手術が行われる時間帯を表す情報と、当該手術で用いる医療器械を表す情報とを関連付ける情報である。

手術情報記憶部３１４は、手術情報管理部３１３が管理する手術情報を記憶する。本実施形態における手術情報は、後述する手術管理テーブルに格納される。

ここで、本実施形態における手術情報について、図１１を参照しながら説明する。図１１は、本実施形態における手術管理テーブルの一例を示す概念図である。

図１１に示されているように、本実施形態における手術管理テーブル１５００は、データ項目として、手術が行われる場所、当該場所から画像を送信するデバイスを識別する送信デバイスＩＤ、当該手術で医療器械が使用される時間帯（使用予定時間）、及び当該手術で使用される医療器械（使用器械）等を有する。

図５に戻って説明する。用途情報管理部３１５は、用途情報記憶部３１６に記憶されている用途管理情報を管理する。用途管理情報は、医療器械を表す情報と、当該医療器械の用途を説明するための用途情報とを関連付ける情報である。

用途情報記憶部３１６は、用途情報管理部３１５が管理する用途管理情報を記憶する。本実施形態における用途管理情報は、後述する用途管理テーブルに格納される。

ここで、本実施形態における用途管理情報について、図１２を参照しながら説明する。図１２は、本実施形態における用途管理テーブルの一例を示す概念図である。

図１２に示されているように、本実施形態における用途管理テーブル１６００は、データ項目として、医療器械の種類及び用途情報等を有する。用途情報は、文字情報でもよいし、音声データへのリンク（例えば、ＵＲＬ等）でもよいし、動画データへのリンク（例えば、ＵＲＬ等）でもよい。

＜医療支援方法の処理手順＞
次に、本実施形態における医療支援システム１が実行する医療支援方法の詳細について、図１３を参照しながら説明する。図１３は、本実施形態における医療支援方法の一例を示すシーケンス図である。

ステップＳ１０１において、取得装置１０が備える通信制御部１０１は、医療者の操作に応じて、ルームへの接続要求をサービス提供サーバ３０に送信する。当該接続要求には、ルームＩＤが含まれる。具体的には、医療者は、全天球撮影装置の操作部６１５において、所定の接続操作を行う。接続先のルームＩＤは、予め取得装置１０に設定されている。

ステップＳ２０１において、支援者端末２０が備える通信制御部２０１は、支援者の操作に応じて、ルームへの接続要求をサービス提供サーバ３０に送信する。当該接続要求には、ルームＩＤが含まれる。具体的には、支援者は、支援者端末２０にインストールされたブラウザから所定のＵＲＬにアクセスする。接続先のルームＩＤは、接続先のＵＲＬにより特定される。

ステップＳ３０１において、サービス提供サーバ３０が備える通信制御部３０１は、取得装置１０及び支援者端末２０から接続要求を受信する。次に、通信制御部３０１は、受信した接続要求をルーム管理部３０４に送る。

ルーム管理部３０４は、受け取った接続要求からルームＩＤを取得する。次に、ルーム管理部３０４は、取得したルームＩＤで識別されるルーム管理情報に、取得装置１０及び支援者端末２０に関する情報を追加する。

ステップＳ１０２において、取得装置１０が備える情報取得部１０２は、手術室に存在する医療器械を撮影し、器械画像を生成する。次に、情報取得部１０２は、生成した器械画像を、通信制御部３０１に送る。通信制御部３０１は、受け取った器械画像をサービス提供サーバ３０に送信する。

医療器械は、例えば、手術室に設置された器械設置台に並べられている。取得装置１０が全天球撮影装置である場合、器械設置台の全体が画角に入るように、取得装置１０を設置しておけばよい。取得装置１０がスマートフォン等の携帯端末である場合、器械出しを担当する看護師等がスマートフォンのカメラで器械設置台の上方から全体が画角に入るように撮影すればよい。取得装置１０がスマートグラス等のウェアラブルデバイスである場合、当該ウェアラブルデバイスを装着した看護師等が器械設置台の方向に視線を向ければよい。

ステップＳ３０２において、サービス提供サーバ３０が備える通信制御部３０１は、取得装置１０から器械画像を受信する。次に、通信制御部３０１は、受信した器械画像をルーム管理部３０４及び画像認識部３１１に送る。

ルーム管理部３０４は、ルーム情報記憶部３０５に記憶されているルーム情報に基づいて、器械画像の配信先であるルームＩＤを特定する。次に、ルーム管理部３０４は、ルームＩＤ及び器械画像をコンテンツ配信部３０６に送る。

具体的には、ルーム管理部３０４は、デバイス管理情報を用いて、器械画像を送信した取得装置１０のＩＰアドレスからデバイスＩＤを特定する。次に、ルーム管理部３０４は、ルーム管理情報を用いて、当該デバイスＩＤが入室しているルームＩＤを特定する。続いて、ルーム管理部３０４は、特定したデバイスＩＤを手術情報管理部３１３に送る。

コンテンツ配信部３０６は、ルーム管理部３０４から受け取った器械画像をコンテンツ記憶部３０７に記憶する。次に、コンテンツ配信部３０６は、ルーム管理部３０４から受け取ったルームＩＤ及び器械画像に関する属性情報を含むコンテンツ管理情報を、コンテンツ記憶部３０７に記憶する。続いて、コンテンツ配信部３０６は、当該ルームに入室しているユーザＩＤで識別される支援者端末２０に器械画像を送信する。

ステップＳ３０３において、サービス提供サーバ３０が備える画像認識部３１１は、取得装置１０から受信した器械画像に基づいて、手術室に存在する医療器械を認識する。次に、画像認識部３１１は、医療器械の認識結果を手術情報管理部３１３に送る。

医療器械の認識には、画像情報記憶部３１２に記憶されている器械画像情報を用いる。具体的には、画像認識部３１１は、器械画像から医療器械の画像を抽出する。次に、画像認識部３１１は、抽出された医療器械の画像それぞれについて、器械画像情報に含まれる医療器械の画像それぞれと比較する。続いて、画像認識部３１１は、最も類似する医療器械の画像を含む器械画像情報を特定し、当該器械画像情報に含まれる医療器械の種類を取得する。

画像認識部３１１は、画像認識モデルを用いて、器械画像から抽出した医療器械の画像それぞれについて、当該医療器械の種類を推定してもよい。当該画像認識モデルは、例えば、画像情報記憶部３１２に記憶されている器械画像情報を学習データとして、医療器械の画像と種類との関係を学習した機械学習モデルである。

ステップＳ３０４において、サービス提供サーバ３０が備える手術情報管理部３１３は、ルーム管理部３０４から受け取ったデバイスＩＤで識別される手術情報を、手術情報記憶部３１４から取得する。

ステップＳ３０５において、サービス提供サーバ３０が備える手術情報管理部３１３は、画像認識部３１１から医療器械の認識結果を受け取る。次に、手術情報管理部３１３は、受け取った認識結果に含まれる医療器械と、取得した手術情報に含まれる使用器械とを照合する。すなわち、手術情報管理部３１３は、手術情報に含まれる使用器械それぞれが、認識結果に含まれる医療器械の中に存在するか否かを判定する。次に、手術情報管理部３１３は、医療器械と使用器械との照合結果を画面情報生成部３０２に送る。

ステップＳ３０６において、サービス提供サーバ３０が備える画面情報生成部３０２は、手術情報管理部３１３から医療器械と使用器械との照合結果を受け取る。次に、画面情報生成部３０２は、受け取った照合結果に基づいて、照合結果画面の画面情報を生成する。照合結果画面は、照合結果を表示するための画面である。

具体的には、画面情報生成部３０２は、画面情報記憶部３０３に記憶されている照合結果画面の画面情報を取得する。次に、画面情報生成部３０２は、取得した画面情報に、手術情報管理部３１３から受け取った照合結果を埋め込む。

続いて、画面情報生成部３０２は、生成した照合結果画面の画面情報を通信制御部３０１に送る。通信制御部３０１は、画面情報生成部３０２から受け取った画面情報を支援者端末２０に送信する。

ステップＳ２０２において、支援者端末２０が備える通信制御部２０１は、サービス提供サーバ３０から照合結果画面の画面情報を受信する。次に、通信制御部２０１は、受信した画面情報を画面表示部２０２に送る。画面表示部２０２は、通信制御部２０１から受け取った画面情報に基づいて、照合結果画面をディスプレイ５０６に表示する。

ここで、本実施形態における照合結果画面について、図１４を参照しながら説明する。図１４は、本実施形態における照合結果画面の一例を示す概念図である。

図１４に示されているように、本実施形態における照合結果画面２０００は、デバイス表示欄２００１、照合結果表示欄２００２、連絡ボタン２００３及び送信ボタン２００４を有する。

デバイス表示欄２００１には、器械画像を送信した取得装置１０に関する情報が表示される。照合結果表示欄２００２には、医療器械の識別情報、医療器械の画像及び照合結果が表示される。照合結果には、手術情報に含まれる使用器械のうち、器械画像から認識された医療器械には「ＯＫ」と表示され、器械画像から認識されなかった医療器械には「ＮＧ」と表示される。

照合結果の表示方法は、文字情報に限定されず、不足している医療器械が認識可能な方法で表示されていれば、どのような方法であってもよい。例えば、不足している医療機器の文字色又は背景色を変えてもよいし、不足している医療器械がある旨を示す文言を、例えばポップアップ又はマーキー等で表示してもよい。

支援者が照合結果画面２０００において連絡ボタン２００３を押下すると、支援者から医療者への連絡が可能となる。連絡は、サービス提供サーバ３０が備えるメッセージ処理部３０８により、支援者端末２０から表示装置１１へメッセージを送信してもよいし、予め設定されている電話番号に架電することで音声通話を行ってもよい。当該連絡は、例えば、照合結果がＮＧとなった医療器械があった場合に、支援者が医療者に確認又は通知するため等に用いることができる。

支援者が照合結果画面２０００において送信ボタン２００４を押下すると、用途情報の送信要求がサービス提供サーバ３０に送信される。当該送信要求には、照合結果表示欄２００２に表示されている医療器械を識別する情報が含まれる。

図１３に戻って説明する。ステップＳ２０３において、支援者端末２０が備える通信制御部２０１は、支援者の操作に応じて、用途情報の送信要求をサービス提供サーバ３０に送信する。具体的には、支援者は照合結果画面において送信ボタン２００４を押下する。

ステップＳ３０７において、サービス提供サーバ３０が備える通信制御部３０１は、支援者端末２０から用途情報の送信要求を受信する。次に、通信制御部３０１は、受信した送信要求を用途情報管理部３１５に送る。

用途情報管理部３１５は、支援者端末２０から受信した送信要求に基づいて、用途情報を取得する。具体的には、用途情報管理部３１５は、送信要求から医療器械を識別する情報を取得する。次に、用途情報管理部３１５は、取得した医療器械に関連付けられた用途情報を用途情報記憶部３１６から取得する。続いて、用途情報管理部３１５は、取得した用途情報を画面情報生成部３０２に送る。

画面情報生成部３０２は、用途情報管理部３１５から用途情報を受け取る。次に、画面情報生成部３０２は、受け取った用途情報に基づいて、用途情報画面の画面情報を生成する。用途情報画面は、用途情報を表示するための画面である。

具体的には、画面情報生成部３０２は、画面情報記憶部３０３に記憶されている用途情報画面の画面情報を取得する。次に、画面情報生成部３０２は、取得した画面情報に、用途情報管理部３１５から受け取った用途情報を埋め込む。

続いて、画面情報生成部３０２は、生成した用途情報画面の画面情報を通信制御部３０１に送る。通信制御部３０１は、画面情報生成部３０２から受け取った画面情報を表示装置１１に送信する。

ステップＳ１１１において、表示装置１１が備える通信制御部１１１は、サービス提供サーバ３０から用途情報画面の画面情報を受信する。次に、通信制御部１１１は、受信した画面情報を画面表示部１１２に送る。画面表示部１１２は、通信制御部１１１から受け取った画面情報に基づいて、用途情報画面をディスプレイ５０６に表示する。

ここで、本実施形態における用途情報画面について、図１５を参照しながら説明する。図１５は、本実施形態における用途情報画面の一例を示す概念図である。

図１５に示されているように、本実施形態における用途情報画面２１００は、用途情報表示欄２１０１を有する。

用途情報表示欄２１０１には、医療器械の画像及び用途情報が表示される。用途情報は、文字情報、音声データへのリンク、動画データへのリンク及びそれらの組み合わせである。用途情報がリンクである場合、当該リンクからリンク先の音声データ又は動画データを再生することができる。

＜第１実施形態の効果＞
本実施形態におけるサービス提供サーバは、取得装置から受信した医療器械の画像から手術室に存在する医療器械を認識し、認識結果に含まれる医療器械と手術で用いる医療器械との照合結果を支援者端末に表示する。したがって、本実施形態における医療支援システムによれば、支援者は遠隔から手術室に存在する医療器械を把握することができる。

また、本実施形態におけるサービス提供サーバは、手術で用いる医療器械に用途情報を関連付けて表示装置に表示する。したがって、本実施形態における医療支援システムによれば、支援者は遠隔から手術で用いる医療器械の用途情報を医療者に提供することができる。

［第２実施形態］
第１実施形態における医療支援システム１は、コンテンツの配信を行うサービス提供サーバ３０が、手術室に存在する医療器械に関する情報の提供も行うように構成した。第２実施形態における医療支援システム１は、支援環境Ｅ２に設置したアプリケーションサーバが、サービス提供サーバ３０が提供するＡＰＩ（Application Programming Interface）を利用して、手術室に存在する医療器械に関する情報の生成を行うように構成する。

以下、本実施形態における医療支援システム１について、第１実施形態における医療支援システム１との相違点を中心に説明する。

＜医療支援システムの全体構成＞
まず、本実施形態における医療支援システム１の全体構成について、図１６を参照しながら説明する。図１６は、本実施形態における医療支援システム１の全体構成の一例を示す図である。

図１６に示されているように、本実施形態における医療支援システム１は、第１実施形態における医療支援システム１（図１参照）と比較して、アプリケーションサーバ２１が含まれる点が異なる。アプリケーションサーバ２１は、支援環境Ｅ２に設置され、通信ネットワークＮ１に接続している。

アプリケーションサーバ２１は、サービス提供サーバ３０が提供するサービスを利用して、支援環境Ｅ２にいる支援者が利用環境Ｅ１にいる医療者を支援するためのアプリケーションを実行する情報処理装置である。アプリケーションサーバ２１は、手術室に存在する医療器械と手術で用いる医療器械との照合結果を、支援者端末２０に出力する。また、アプリケーションサーバ２１は、手術で用いる医療器械の用途情報を、表示装置１１に出力する。アプリケーションサーバ２１の一例は、コンピュータである。

＜医療支援システムの機能構成＞
次に、本実施形態における医療支援システム１の機能構成の一例について、図１７を参照しながら説明する。図１７は、本実施形態における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

≪サービス提供サーバの機能構成≫
図１７に示されているように、本実施形態におけるサービス提供サーバ３０は、通信制御部３０１、ルーム管理部３０４、ルーム情報記憶部３０５、コンテンツ配信部３０６、コンテンツ記憶部３０７、メッセージ処理部３０８及び正当性確認部３０９を備える。

すなわち、本実施形態におけるサービス提供サーバ３０は、第１実施形態におけるサービス提供サーバ３０（図５参照）と比較して、画面情報生成部３０２、画面情報記憶部３０３、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６を備えず、正当性確認部３０９を備える点が異なる。

正当性確認部３０９は、アプリケーションサーバ２１に実装されたアプリケーションが真正なアプリケーションであるか否かを確認する。例えば、アプリケーションサーバ２１に実装されたアプリケーションが、サービス提供サーバ３０が提供する各種機能を呼び出したとき、正当なアプリケーションであるか否かを予め登録してある契約情報に基づいて判定する。

≪アプリケーションサーバの機能構成≫
図１７に示されているように、本実施形態におけるアプリケーションサーバ２１は、通信制御部２１１、画面情報生成部３０２、画面情報記憶部３０３、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６を備える。

通信制御部２１１は、通信ネットワークＮ１を介して表示装置１１、支援者端末２０及びサービス提供サーバ３０と各種データの送受信を行う。通信制御部２１１は、例えば、図４に示されているＨＤ５０４からＲＡＭ５０３上に展開されたプログラムがＣＰＵ５０１及びネットワークＩ／Ｆ５０９に実行させる処理によって実現される。

画面情報生成部３０２、画面情報記憶部３０３、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６は、第１実施形態におけるサービス提供サーバ３０が備えた各部と同様である。

＜医療支援方法の処理手順＞
次に、本実施形態における医療支援システム１が実行する医療支援方法の詳細について、図１８を参照しながら説明する。図１８は、本実施形態における医療支援方法の一例を示すシーケンス図である。

ステップＳ２１１において、アプリケーションサーバ２１が備える通信制御部２１１は、サービス提供サーバ３０が提供するＡＰＩを利用して、ルームへの接続要求をサービス提供サーバ３０に送信する。当該接続要求には、ルームＩＤが含まれる。接続先のルームＩＤは、ＡＰＩに予め設定されている。

ステップＳ３１１において、サービス提供サーバ３０が備える通信制御部３０１は、アプリケーションサーバ２１から接続要求を受信する。次に、通信制御部３０１は、アプリケーションサーバ２１から受信した接続要求を正当性確認部３０９に送る。

正当性確認部３０９は、アプリケーションサーバ２１から受信した接続要求に基づいて、真正なアプリケーションであるか否かを確認する。正当性確認部３０９は、真正なアプリケーションであることを確認できない場合、接続を拒否する。正当性確認部３０９は、真正なアプリケーションであることを確認できた場合、アプリケーションサーバ２１から受信した接続要求をルーム管理部３０４に送る。ここでは、真正なアプリケーションであることを確認できたものとして説明を続ける。

ステップＳ３０１において、サービス提供サーバ３０が備える通信制御部３０１は、取得装置１０から接続要求を受信する。次に、通信制御部３０１は、取得装置１０から受信した接続要求をルーム管理部３０４に送る。

ルーム管理部３０４は、受け取った接続要求からルームＩＤを取得する。次に、ルーム管理部３０４は、取得したルームＩＤで識別されるルーム管理情報に、取得装置１０及びアプリケーションサーバ２１に関する情報を追加する。

ステップＳ１０２において、取得装置１０が備える情報取得部１０２は、手術室に存在する医療器械を撮影した器械画像を、通信制御部３０１を経由してサービス提供サーバ３０に送信する。

サービス提供サーバ３０では、通信制御部３０１が、取得装置１０から受信した器械画像を、ルーム管理部３０４に送る。ルーム管理部３０４は、ルーム情報に基づいて特定したルームＩＤ及び器械画像をコンテンツ配信部３０６に送る。コンテンツ配信部３０６は、器械画像をコンテンツ記憶部３０７に記憶すると共に、アプリケーションサーバ２１にデバイスＩＤ及び器械画像を送信する。

ステップＳ２１２において、アプリケーションサーバ２１が備える通信制御部２１１は、サービス提供サーバ３０からデバイスＩＤ及び器械画像を受信する。次に、通信制御部２１１は、受信した器械画像を画像認識部３１１に送る。続いて、通信制御部２１１は、受信したデバイスＩＤを手術情報管理部３１３に送る。

ステップＳ２１３において、アプリケーションサーバ２１が備える画像認識部３１１は、サービス提供サーバ３０から受信した器械画像に基づいて、手術室に存在する医療器械を認識する。次に、画像認識部３１１は、医療器械の認識結果を手術情報管理部３１３に送る。

ステップＳ２１４において、アプリケーションサーバ２１が備える手術情報管理部３１３は、サービス提供サーバ３０から受信したデバイスＩＤで識別される手術情報を、手術情報記憶部３１４から取得する。

ステップＳ２１５において、アプリケーションサーバ２１が備える手術情報管理部３１３は、画像認識部３１１から医療器械の認識結果を受け取る。次に、手術情報管理部３１３は、受け取った認識結果に含まれる医療器械と、取得した手術情報に含まれる使用器械とを照合する。続いて、手術情報管理部３１３は、医療器械と使用器械との照合結果を画面情報生成部３０２に送る。

ステップＳ２１６において、アプリケーションサーバ２１が備える画面情報生成部３０２は、手術情報管理部３１３から医療器械と使用器械との照合結果を受け取る。次に、画面情報生成部３０２は、受け取った照合結果に基づいて、照合結果画面の画面情報を生成する。次に、画面情報生成部３０２は、生成した照合結果画面の画面情報を、通信制御部３０１を経由して支援者端末２０に送信する。

ステップＳ２０２において、支援者端末２０が備える画面表示部２０２は、アプリケーションサーバ２１から受信した照合結果画面の画面情報に基づいて、照合結果画面をディスプレイ５０６に表示する。

ステップＳ２０３において、支援者端末２０が備える通信制御部２０１は、支援者の操作に応じて、用途情報の送信要求をアプリケーションサーバ２１に送信する。

ステップＳ２１７において、アプリケーションサーバ２１が備える用途情報管理部３１５は、支援者端末２０から受信した用途情報の送信要求に基づいて、送信要求から取得された医療器械に関連付けられた用途情報を、用途情報記憶部３１６から取得する。次に、用途情報管理部３１５は、取得した用途情報を画面情報生成部３０２に送る。

画面情報生成部３０２は、用途情報管理部３１５から受け取った用途情報に基づいて、用途情報画面の画面情報を生成する。次に、画面情報生成部３０２は、生成した用途情報画面の画面情報を、通信制御部３０１を経由して表示装置１１に送信する。

ステップＳ１１１において、表示装置１１が備える画面表示部１１２は、アプリケーションサーバ２１から受信した用途情報画面の画面情報に基づいて、用途情報画面をディスプレイ５０６に表示する。

＜第２実施形態の効果＞
本実施形態における医療支援システムは、支援環境に設置されたアプリケーションサーバが、手術室に存在する医療器械に関する情報を、支援者及び医療者に提供する。本実施形態におけるアプリケーションサーバは、ＡＰＩ経由でサービス提供サーバが提供するサービスを利用する。

したがって、本実施形態における医療支援システムによれば、サービス提供サーバを変更することなく実装することができる。また、アプリケーションサーバとサービス提供サーバとで処理を分担するため、コンテンツの配信先が増加した場合でもサービス提供サーバの負荷を低減することができる。

［第３実施形態］
第１実施形態における医療支援システム１は、支援環境Ｅ２に設置された支援者端末２０に医療器械の照合結果を表示し、支援者の操作に応じて医療器械の用途情報を利用環境Ｅ１に設置された表示装置１１に表示するように構成した。第３実施形態における医療支援システム１では、支援環境Ｅ２を構築せず、利用環境Ｅ１に設置された表示装置１１に医療器械の照合結果を表示するように構成する。

以下、本実施形態における医療支援システム１について、第１実施形態における医療支援システム１との相違点を中心に説明する。

＜医療支援システムの全体構成＞
まず、本実施形態における医療支援システム１の全体構成について、図１９を参照しながら説明する。図１９は、本実施形態における医療支援システム１の全体構成の一例を示す図である。

図１９に示されているように、本実施形態における医療支援システム１は、取得装置１０、表示装置１１及びサービス提供サーバ３０を含む。すなわち、本実施形態における医療支援システム１は、第１実施形態における医療支援システム１（図１参照）と比較して、支援者端末２０を含まない点が異なる。

＜医療支援システムの機能構成＞
次に、本実施形態における医療支援システム１の機能構成の一例について、図２０を参照しながら説明する。図２０は、本実施形態における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

図２０に示されているように、本実施形態における取得装置１０、表示装置１１及びサービス提供サーバ３０は、第１実施形態における取得装置１０、表示装置１１及びサービス提供サーバ３０と同様の機能構成を有する。

＜医療支援方法の処理手順＞
次に、本実施形態における医療支援システム１が実行する医療支援方法の詳細について、図２１を参照しながら説明する。図２１は、本実施形態における医療支援方法の一例を示すシーケンス図である。

図２１に示されているように、本実施形態における医療支援方法は、第１実施形態における医療支援方法（図１３参照）と比較して、サービス提供サーバ３０が実行するステップＳ３０６、及び支援者端末２０が実行するステップＳ２０１からＳ２０３を行わない点が異なる。

また、本実施形態における医療支援方法は、ステップＳ３０７において、画面情報生成部３０２が生成する画面情報の構成が異なる。

ステップＳ３０７において、本実施形態における画面情報生成部３０２は、手術情報管理部３１３から医療器械と使用器械との照合結果を受け取る。次に、画面情報生成部３０２は、用途情報管理部３１５から用途情報を受け取る。

続いて、画面情報生成部３０２は、画面情報記憶部３０３に記憶されている用途情報画面の画面情報を取得する。次に、画面情報生成部３０２は、取得した画面情報に、照合結果及び用途情報を埋め込む。

ここで、本実施形態における用途情報画面について、図２２を参照しながら説明する。図２２は、本実施形態における用途情報画面の一例を示す概念図である。

図２２に示されているように、本実施形態における用途情報画面２２００は、用途情報表示欄２２０１を有する。用途情報表示欄２２０１には、医療器械の画像、用途情報及び照合結果が表示される。用途情報画面２２００に表示される、医療器械の画像、用途情報及び照合結果は、第１実施形態における照合結果画面２０００及び用途情報画面２１００と同様である。

＜第３実施形態の効果＞
本実施形態におけるサービス提供サーバは、手術で用いる医療器械に、手術で用いる医療器械との照合結果及び用途情報を関連付けて表示装置に表示する。したがって、本実施形態における医療支援システムによれば、支援者の操作を必要とせず、自動的に医療器械に関する情報を医療者に提供することができる。

［第４実施形態］
第２実施形態における医療支援システム１は、支援環境Ｅ２に設置された支援者端末２０に医療器械の照合結果を表示し、支援者の操作に応じて医療器械の用途情報を利用環境Ｅ１に設置された表示装置１１に表示するように構成した。第４実施形態における医療支援システム１では、支援環境Ｅ２を構築せず、利用環境Ｅ１に設置された表示装置１１に医療器械の照合結果を表示するように構成する。

以下、本実施形態における医療支援システム１について、第２実施形態における医療支援システム１との相違点を中心に説明する。

＜医療支援システムの全体構成＞
まず、本実施形態における医療支援システム１の全体構成について、図２３を参照しながら説明する。図２３は、本実施形態における医療支援システム１の全体構成の一例を示す図である。

図２３に示されているように、本実施形態における医療支援システム１は、取得装置１０、表示装置１１、アプリケーションサーバ２１及びサービス提供サーバ３０を含む。すなわち、本実施形態における医療支援システム１は、第２実施形態における医療支援システム１（図１６参照）と比較して、支援者端末２０を含まない点が異なる。

＜医療支援システムの機能構成＞
次に、本実施形態における医療支援システム１の機能構成の一例について、図２４を参照しながら説明する。図２４は、本実施形態における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

図２４に示されているように、本実施形態における取得装置１０、表示装置１１、アプリケーションサーバ２１及びサービス提供サーバ３０は、第２実施形態における取得装置１０、表示装置１１、アプリケーションサーバ２１及びサービス提供サーバ３０と同様の機能構成を有する。

＜医療支援方法の処理手順＞
次に、本実施形態における医療支援システム１が実行する医療支援方法の詳細について、図２５を参照しながら説明する。図２５は、本実施形態における医療支援方法の一例を示すシーケンス図である。

図２５に示されているように、本実施形態における医療支援方法は、第２実施形態における医療支援方法（図１８参照）と比較して、アプリケーションサーバ２１が実行するステップＳ２１６、及び支援者端末２０が実行するステップＳ２０２及びＳ２０３を行わない点が異なる。

また、本実施形態における医療支援方法は、ステップＳ２１７において、画面情報生成部３０２が生成する画面情報の構成が異なる。なお、本実施形態における用途情報画面は、第３実施形態における用途情報画面２２００（図２２参照）と同様である。

＜第４実施形態の効果＞
本実施形態における医療支援システムは、支援環境に設置されたアプリケーションサーバが、手術室に存在する医療器械に関する情報を、医療者に提供する。したがって、本実施形態における医療支援システムによれば、サービス提供サーバを変更することなく実装することができる。また、コンテンツの配信先が増加した場合でもサービス提供サーバの負荷を低減することができる。

また、本実施形態におけるアプリケーションサーバは、手術で用いる医療器械に、手術で用いる医療器械との照合結果及び用途情報を関連付けて表示装置に表示する。したがって、本実施形態における医療支援システムによれば、支援者の操作を必要とせず、自動的に医療器械に関する情報を医療者に提供することができる。

［変形例１］
第１実施形態における医療支援システム１は、コンテンツの配信を行うサービス提供サーバ３０が、手術室に存在する医療器械に関する情報の提供も行うように構成した。変形例１における医療支援システム１は、支援者端末２０が、手術室に存在する医療器械に関する情報を生成し、手術に用いる医療器械の照合結果を表示するように構成する。

以下、本変形例における医療支援システム１について、第１実施形態における医療支援システム１との相違点を中心に説明する。

＜医療支援システムの機能構成＞
まず、本変形例における医療支援システム１の機能構成の一例について、図２６を参照しながら説明する。図２６は、本変形例における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

≪サービス提供サーバの機能構成≫
図２６に示されているように、本変形例におけるサービス提供サーバ３０は、通信制御部３０１、ルーム管理部３０４、ルーム情報記憶部３０５、コンテンツ配信部３０６、コンテンツ記憶部３０７及びメッセージ処理部３０８を備える。

すなわち、本変形例におけるサービス提供サーバ３０は、第１実施形態におけるサービス提供サーバ３０（図５参照）と比較して、画面情報生成部３０２、画面情報記憶部３０３、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６を備えない点が異なる。

≪支援者端末の機能構成≫
図２６に示されているように、本変形例における支援者端末２０は、通信制御部２０１、画面表示部２０２、画面情報生成部３０２、画面情報記憶部３０３、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６を備える。

画面情報記憶部３０３、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６は、第１実施形態におけるサービス提供サーバ３０が備えた各部と同様である。

＜医療支援方法の処理手順＞
次に、本変形例における医療支援システム１が実行する医療支援方法の詳細について、図２７を参照しながら説明する。図２７は、本変形例における医療支援方法の一例を示すシーケンス図である。

ステップＳ２０４において、支援者端末２０が備える通信制御部２０１は、サービス提供サーバ３０からデバイスＩＤ及び器械画像を受信する。次に、通信制御部２０１は、受信した器械画像を画像認識部３１１に送る。続いて、通信制御部２０１は、受信したデバイスＩＤを手術情報管理部３１３に送る。

ステップＳ２０５において、支援者端末２０が備える画像認識部３１１は、サービス提供サーバ３０から受信した器械画像に基づいて、手術室に存在する医療器械を認識する。次に、画像認識部３１１は、医療器械の認識結果を手術情報管理部３１３に送る。

ステップＳ２０６において、支援者端末２０が備える手術情報管理部３１３は、サービス提供サーバ３０から受信したデバイスＩＤで識別される手術情報を、手術情報記憶部３１４から取得する。

ステップＳ２０７において、支援者端末２０が備える手術情報管理部３１３は、画像認識部３１１から医療器械の認識結果を受け取る。次に、手術情報管理部３１３は、受け取った認識結果に含まれる医療器械と、取得した手術情報に含まれる使用器械とを照合する。続いて、手術情報管理部３１３は、医療器械と使用器械との照合結果を画面表示部２０２に送る。

ステップＳ２０２において、支援者端末２０が備える画面情報生成部３０２は、手術情報管理部３１３から医療器械と使用器械との照合結果を受け取る。次に、画面情報生成部３０２は、受け取った照合結果に基づいて、照合結果画面の画面情報を生成する。続いて、画面表示部２０２は、画面情報生成部３０２が生成した照合結果画面の画面情報に基づいて、照合結果画面をディスプレイ５０６に表示する。

＜第２実施形態に適用した変形例１＞
上記の変形例１では、第１実施形態に対して適用した例を用いて説明したが、第２実施形態に対しても、同様にして適用することができる。

第２実施形態に適用した変形例１では、支援者端末２０は、通信制御部２０１、画面表示部２０２、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５及び用途情報記憶部３１６を備える。

第２実施形態に適用した変形例１では、アプリケーションサーバ２１は、通信制御部２１１、画面情報生成部３０２及び画面情報記憶部３０３を備える。サービス提供サーバ３０は、第２実施形態におけるサービス提供サーバ３０と同様である。

＜変形例１の効果＞
本変形例における医療支援システムは、支援者端末が、手術室に存在する医療器械に関する情報を生成し、支援者及び医療者に提供する。したがって、本変形例における医療支援システムによれば、サービス提供サーバを変更することなく実装することができる。また、支援者端末とサービス提供サーバとで処理を分担するため、コンテンツの配信先が増加した場合でもサービス提供サーバの負荷を低減することができる。

［変形例２］
第１実施形態における取得装置１０は、器械情報として手術室に存在する医療器械を撮影した画像をサービス提供サーバ３０に送信するように構成した。変形例２における取得装置１０は、医療器械に表示された識別情報を撮影した画像をサービス提供サーバ３０に送信するように構成する。

以下、本変形例における医療支援システム１について、第１実施形態における医療支援システム１との相違点を中心に説明する。

＜医療支援システムの機能構成＞
まず、本変形例における医療支援システム１の機能構成の一例について、図２８を参照しながら説明する。図２８は、本変形例における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

≪サービス提供サーバの機能構成≫
図２８に示されているように、本変形例におけるサービス提供サーバ３０は、通信制御部３０１、画面情報生成部３０２、画面情報記憶部３０３、ルーム管理部３０４、ルーム情報記憶部３０５、コンテンツ配信部３０６、コンテンツ記憶部３０７、メッセージ処理部３０８、画像認識部３１１、画像情報記憶部３１２、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５、用途情報記憶部３１６、識別情報認識部３１７及び識別情報記憶部３１８を備える。

すなわち、本変形例におけるサービス提供サーバ３０は、第１実施形態におけるサービス提供サーバ３０（図５参照）と比較して、識別情報認識部３１７及び識別情報記憶部３１８を備える点が異なる。

識別情報認識部３１７は、取得装置１０から受信した器械画像から、当該画像に含まれる識別情報を認識する。識別情報認識部３１７は、識別情報記憶部３１８に記憶されている医療器械の識別情報を用いて認識を行う。

識別情報記憶部３１８は、医療器械の識別情報と当該医療器械の種類とを関連付ける器械識別情報を記憶する。本変形例における器械識別情報は、後述する識別情報管理テーブルに格納される。

ここで、本変形例における器械識別情報について、図２９を参照しながら説明する。図２９は、本変形例における識別情報管理テーブルの一例を示す概念図である。

図２９に示されているように、本変形例における識別情報管理テーブル１７００は、データ項目として、医療器械の識別情報及び医療器械の種類等を有する。

＜医療支援方法の処理手順＞
次に、本変形例における医療支援システム１が実行する医療支援方法の詳細について、図３０を参照しながら説明する。図３０は、本変形例における医療支援方法の一例を示すシーケンス図である。

ステップＳ１０２において、取得装置１０が備える情報取得部１０２は、手術室に存在する医療器械を撮影し、器械画像を生成する。このとき、情報取得部１０２は、医療器械に表示された識別情報が映り込むように撮影する。

識別情報は、例えば、シリアル番号、バーコード又は二次元コード等を用いることができる。識別情報を医療器械に表示する方法は、例えば、識別情報を印刷したシールの貼布、又は識別情報をレーザー等で刻印するダイレクトマーキング等を用いることができる。これらの識別情報の表示方法は一例であって、光学的に識別可能な方式で表示されていれば、どのような方式でもよい。

ステップＳ３１１において、サービス提供サーバ３０が備える識別情報認識部３１７は、取得装置１０から受信した器械画像に基づいて、手術室に存在する医療器械を認識する。次に、識別情報認識部３１７は、医療器械の認識結果を手術情報管理部３１３に送る。

具体的には、識別情報認識部３１７は、器械画像から医療器械の識別情報を抽出する。次に、識別情報認識部３１７は、抽出された医療器械の識別情報それぞれについて、器械識別情報に含まれる医療器械の識別情報それぞれと比較する。続いて、識別情報認識部３１７は、器械画像から抽出した識別番号により器械識別情報を特定し、当該器械識別情報に含まれる医療器械の種類を取得する。

ステップＳ３０５において、サービス提供サーバ３０が備える手術情報管理部３１３は、識別情報認識部３１７から受け取った認識結果と、画像認識部３１１から受け取った認識結果とを統合する。次に、手術情報管理部３１３は、統合された認識結果に含まれる医療器械と、取得した手術情報に含まれる使用器械とを照合する。次に、手術情報管理部３１３は、医療器械と使用器械との照合結果を画面情報生成部３０２に送る。

以降の処理は、第１実施形態における医療支援方法と同様である。

＜変形例２の効果＞
本変形例における医療支援システムは、取得装置が、医療器械に表示された識別情報を含むように器械画像を撮影し、サービス提供サーバが、器械画像に含まれる識別情報を認識する。識別情報の認識は、画像認識等と比較して、高精度に認識を行うことができる。したがって、本変形例における医療支援システムによれば、手術室に存在する医療器械を高精度に識別することができる。

［変形例３］
第１実施形態における取得装置１０は、器械情報として手術室に存在する医療器械を撮影した画像をサービス提供サーバ３０に送信するように構成した。変形例３における取得装置１０は、医療器械に埋め込まれた識別情報を取得し、サービス提供サーバ３０に送信するように構成する。

以下、本変形例における医療支援システム１について、第１実施形態における医療支援システム１との相違点を中心に説明する。

＜医療支援システムの機能構成＞
まず、本変形例における医療支援システム１の機能構成の一例について、図３１を参照しながら説明する。図３１は、本変形例における医療支援システム１に含まれる各装置の機能構成を例示するブロック図である。

≪サービス提供サーバの機能構成≫
図３１に示されているように、本変形例におけるサービス提供サーバ３０は、通信制御部３０１、画面情報生成部３０２、画面情報記憶部３０３、ルーム管理部３０４、ルーム情報記憶部３０５、コンテンツ配信部３０６、コンテンツ記憶部３０７、メッセージ処理部３０８、手術情報管理部３１３、手術情報記憶部３１４、用途情報管理部３１５、用途情報記憶部３１６及び識別情報記憶部３１８を備える。

すなわち、本変形例におけるサービス提供サーバ３０は、第１実施形態におけるサービス提供サーバ３０（図５参照）と比較して、画像認識部３１１及び画像情報記憶部３１２を備えず、識別情報記憶部３１８を備える点が異なる。

＜医療支援方法の処理手順＞
次に、本変形例における医療支援システム１が実行する医療支援方法の詳細について、図３２を参照しながら説明する。図３２は、本変形例における医療支援方法の一例を示すシーケンス図である。

ステップＳ１２１において、取得装置１０が備える情報取得部１０２は、手術室に存在する医療器械に設定された識別情報を取得する。次に、情報取得部１０２は、取得した識別情報を、通信制御部３０１を経由してサービス提供サーバ３０に送信する。

識別情報の取得は、例えば、ＲＦＩＤ等を用いることができる。識別情報を医療器械に設定する方法は、例えば、製造時に識別情報が書き込まれたＲＤＩＦタグを医療器械内部に埋め込んでもよいし、使用する際に識別情報が書き込まれたＲＤＩＦタグを医療器械表面に貼布してもよい。これらの識別情報の設定方法は一例であって、取得装置１０が無線通信で識別情報を取得可能な方式で埋め込まれていれば、どのような方式でもよい。

ステップＳ３２１において、サービス提供サーバ３０が備える通信制御部３０１は、取得装置１０から識別情報を受信する。次に、通信制御部３０１は、受信した識別情報をルーム管理部３０４及び手術情報管理部３１３に送る。

ステップＳ３０４において、サービス提供サーバ３０が備える手術情報管理部３１３は、ルーム管理部３０４から受け取ったデバイスＩＤで識別される手術情報を、手術情報記憶部３１４から取得する。

ステップＳ３０５において、サービス提供サーバ３０が備える手術情報管理部３１３は、通信制御部３０１から受け取った識別情報について、器械識別情報に含まれる医療器械の識別情報それぞれと比較する。次に、手術情報管理部３１３は、器械画像から抽出した識別番号により器械識別情報を特定し、当該器械識別情報に含まれる医療器械の種類を取得する。

続いて、手術情報管理部３１３は、特定した医療器械と、取得した手術情報に含まれる使用器械とを照合する。次に、手術情報管理部３１３は、医療器械と使用器械との照合結果を画面情報生成部３０２に送る。

以降の処理は、第１実施形態における医療支援方法と同様である。

＜変形例３の効果＞
本変形例における医療支援システムは、取得装置が、医療器械に設定された識別情報を取得し、サービス提供サーバに送信する。本変形例における医療支援システムは、画像認識等を用いず医療器械から直接識別情報を取得するため、高精度に識別情報を取得することができる。したがって、本変形例における医療支援システムによれば、手術室に存在する医療器械を高精度に識別することができる。

［補足］
上記各実施形態において、医療支援システム１は情報処理システムの一例である。支援者端末２０、アプリケーションサーバ２１及びサービス提供サーバ３０は情報処理装置の一例である。取得装置１０は情報処理端末の一例である。画面表示部２０２、画面情報生成部３０２は結果出力部の一例である。

上記で説明した各変形例は、第１実施形態に対して適用した例を用いて説明したが、第２実施形態から第４実施形態に対しても、同様にして適用することができる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたＡＳＩＣ（Application Specific Integrated Circuit）、ＤＳＰ（digital signal processor）、ＦＰＧＡ（field programmable gate array）や従来の回路モジュール等のデバイスを含むものとする。

実施形態に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。

ある実施形態では、サービス提供サーバは、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。同様に、アプリケーションサーバは、互いに通信するように構成された複数のコンピューティングデバイスを含むことができる。

さらに、サービス提供サーバ及びアプリケーションサーバは、開示された処理ステップを様々な組み合わせで共有するように構成できる。例えば、所定のユニットによって実行されるプロセスは、サービス提供サーバによって実行され得る。同様に、所定のユニットの機能は、アプリケーションサーバによって実行することができる。また、サービス提供サーバ及びアプリケーションサーバの各要素は、１つのサーバ装置にまとめられていてもよいし、複数の装置に分けられていてもよい。

以上、本発明の実施の形態について詳述したが、本発明はこれらの実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形又は変更が可能である。

１ 医療支援システム
１０ 取得装置
１１ 表示装置
２０ 支援者端末
２１ アプリケーションサーバ
３０ サービス提供サーバ
１０１ 通信制御部
１０２ 情報取得部
１１１ 通信制御部
１１２ 画面表示部
２０１ 通信制御部
２０２ 画面表示部
２１１ 通信制御部
３０１ 通信制御部
３０２ 画面情報生成部
３０３ 画面情報記憶部
３０４ ルーム管理部
３０５ ルーム情報記憶部
３０６ コンテンツ配信部
３０７ コンテンツ記憶部
３０８ メッセージ処理部
３１１ 画像認識部
３１２ 画像情報記憶部
３１３ 手術情報管理部
３１４ 手術情報記憶部
３１５ 用途情報管理部
３１６ 用途情報記憶部
３１７ 識別情報認識部
３１８ 識別情報記憶部

特許第６６９３５０７号公報

Claims (9)

1. 手術室に存在する第１の情報処理端末、及び前記手術室とは異なる空間に存在する支援者が利用する第２の情報処理端末とネットワークを介して通信可能な情報処理装置であって、
   前記手術室に存在する取得装置によって取得された器械情報であって、当該手術室に存在する医療器械を識別可能な器械情報を受信する通信制御部と、
   前記取得装置によって撮影され画像を前記第２の情報処理端末に配信するコンテンツ配信部と、
   前記手術室で行われる手術と当該手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶し、前記器械情報によって識別された前記医療器械と、前記手術情報に含まれる前記医療器械との照合を行う手術情報管理部と、
   前記医療器械の用途を表す用途情報を記憶部に記憶し、前記支援者からの要求に応じて前記用途情報を取得する用途情報管理部と、
   前記照合を行った照合結果を前記第２の情報処理端末に送信し、前記用途情報を前記第１の情報処理端末に送信する結果出力部と、
   を備える情報処理装置。
2. 請求項１に記載の情報処理装置であって、
   前記器械情報は、前記手術室に存在する前記医療器械を撮影した画像を含み、
   前記画像に含まれる前記医療器械を認識する画像認識部をさらに備える、
   情報処理装置。
3. 請求項２に記載の情報処理装置であって、
   前記画像は、前記手術室に存在する前記医療器械に表示された識別情報を撮影したものであり、
   前記画像に含まれる前記識別情報を認識する識別情報認識部をさらに備える、
   情報処理装置。
4. 請求項１に記載の情報処理装置であって、
   前記器械情報は、前記手術室に存在する前記医療器械に設定された識別情報である、
   情報処理装置。
5. 手術室に存在する第１の情報処理端末と、前記手術室とは異なる空間に存在する支援者が利用する第２の情報処理端末と、情報処理装置とがネットワークを介して通信可能な情報処理システムであって、
   前記第１の情報処理端末は、
   前記手術室に存在する医療器械を識別可能な器械情報及び前記手術室で撮影された画像を前記情報処理装置に送信する第１の通信制御部と、
   前記情報処理装置から受信した、前記医療器械の用途を表す用途情報を表示する第１の画面表示部と、
   を備え、
   前記情報処理装置は、
   前記器械情報及び前記画像を前記第１の情報処理端末から受信する第２の通信制御部と、
   前記画像を前記第２の情報処理端末に配信するコンテンツ配信部と、
   前記手術室で行われる手術と当該手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶し、前記器械情報によって識別された前記医療器械と、前記手術情報に含まれる前記医療器械との照合を行う手術情報管理部と、
   前記用途情報を記憶部に記憶し、前記支援者からの要求に応じて前記用途情報を取得する用途情報管理部と、
   前記照合を行った照合結果を前記第２の情報処理端末に送信し、前記用途情報を前記第１の情報処理端末に送信する結果出力部と、
   を備え、
   前記第２の情報処理端末は、
   前記情報処理装置から受信した前記照合結果及び前記画像を表示する第２の画面表示部と、
   前記支援者の操作に応じて、前記用途情報の送信要求を前記情報処理装置に送信する第３の通信制御部と、
   を備える、
   情報処理システム。
6. 手術室に存在する情報処理端末と、前記手術室とは異なる空間に存在する支援者が利用する情報処理装置とがネットワークを介して通信可能な情報処理システムであって、
   前記情報処理端末は、
   前記手術室に存在する医療器械を識別可能な器械情報及び前記手術室で撮影された画像を前記情報処理装置に送信する第１の通信制御部と、
   前記情報処理装置から受信した、前記医療器械の用途を表す用途情報を表示する第１の画面表示部と、
   を備え、
   前記情報処理装置は、
   前記器械情報及び前記画像を受信し、前記用途情報を前記情報処理端末に送信する第２の通信制御部と、
   前記手術室で行われる手術と当該手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶し、前記器械情報によって識別された前記医療器械と、前記手術情報に含まれる前記医療器械との照合を行う手術情報管理部と、
   前記用途情報を記憶部に記憶し、前記支援者からの要求に応じて前記用途情報を取得する用途情報管理部と、
   前記手術情報管理部によって行われた照合の結果及び前記画像を表示する第２の画面表示部と、
   を備える、
   情報処理システム。
7. 手術室に存在する第１の情報処理端末と、前記手術室とは異なる空間に存在する支援者が利用する第２の情報処理端末と、第１の情報処理装置と、第２の情報処理装置とがネットワークを介して通信可能な情報処理システムであって、
   前記第１の情報処理端末は、
   前記手術室に存在する医療器械を識別可能な器械情報及び前記手術室で撮影された画像を前記第１の情報処理装置に送信する第１の通信制御部と、
   前記第２の情報処理装置から受信した、前記医療器械の用途を表す用途情報を表示する第１の画面表示部と、
   を備え、
   前記第１の情報処理装置は、
   前記第１の情報処理端末から受信した前記器械情報及び前記画像を前記第２の情報処理装置に送信する第２の通信制御部を備え、
   前記第２の情報処理装置は、
   前記器械情報及び前記画像を前記第１の情報処理装置から受信する第３の通信制御部と、
   前記画像を前記第２の情報処理端末に配信するコンテンツ配信部と、
   前記手術室で行われる手術と当該手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶し、前記器械情報によって識別された前記医療器械と、前記手術情報に含まれる前記医療器械との照合を行う手術情報管理部と、
   前記用途情報を記憶部に記憶し、前記支援者からの要求に応じて前記用途情報を取得する用途情報管理部と、
   前記照合を行った照合結果を前記第２の情報処理端末に送信し、前記用途情報を前記第１の情報処理端末に送信する結果出力部と、
   を備え、
   前記第２の情報処理端末は、
   前記情報処理装置から受信した前記照合結果及び前記画像を表示する第２の画面表示部と、
   前記支援者の操作に応じて、前記用途情報の送信要求を前記第２の情報処理装置に送信する第４の通信制御部と、
   を備える、
   情報処理システム。
8. 手術室に存在する第１の情報処理端末、及び前記手術室とは異なる空間に存在する支援者が利用する第２の情報処理端末とネットワークを介して通信可能なコンピュータが、
   前記手術室で行われる手術と当該手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶する手順と、
   前記医療器械の用途を表す用途情報を記憶部に記憶する手順と、
   前記手術室に存在する取得装置によって取得された器械情報であって、当該手術室に存在する前記医療器械を識別可能な器械情報を受信する手順と、
   前記取得装置によって撮影された画像を前記第２の情報処理端末に配信する手順と、
   前記器械情報によって識別された前記医療器械と、前記手術情報に含まれる前記医療器械との照合を行う手順と、
   前記照合を行った照合結果を前記第２の情報処理端末に送信する手順と、
   前記支援者からの要求に応じて前記用途情報を取得する手順と、
   前記用途情報を前記第１の情報処理端末に送信する手順と、
   を実行する医療支援方法。
9. 手術室に存在する第１の情報処理端末、及び前記手術室とは異なる空間に存在する支援者が利用する第２の情報処理端末とネットワークを介して通信可能なコンピュータに、
   前記手術室で行われる手術と当該手術で用いる医療器械とを関連付ける手術情報を記憶部に記憶する手順と、
   前記医療器械の用途を表す用途情報を記憶部に記憶する手順と、
   前記手術室に存在する取得装置によって取得された器械情報であって、当該手術室に存在する前記医療器械を識別可能な器械情報を受信する手順と、
   前記取得装置によって撮影された画像を前記第２の情報処理端末に配信する手順と、
   前記器械情報によって識別された前記医療器械と、前記手術情報に含まれる前記医療器械との照合を行う手順と、
   前記照合を行った照合結果を前記第２の情報処理端末に送信する手順と、
   前記支援者からの要求に応じて前記用途情報を取得する手順と、
   前記用途情報を前記第１の情報処理端末に送信する手順と、
   を実行させるためのプログラム。

Images