JP7445653B2 - 選択的データ提供を備えた修理グラス - Google Patents

Description

（関連出願）
本出願、２０１８年１１月９日に米国特許庁に出願された、「Ｓｅｒｖｉｃｅ Ｇｌａｓｓｅｓ ｗｉｔｈ Ｓｅｌｅｃｔｉｖｅ Ｄａｔａ Ｐｒｏｖｉｓｉｏｎ」と題された仮特許出願第６２／７５８１４７号に関連し、その利益を主張するものである。本出願の全体は、参照により本明細書に組み込まれる。

（発明の分野）
本明細書に開示される技術は、研究室機器に適用可能であり得る。

時々、患者からの血液サンプルを分析するために使用される機器などの研究室機器は、機器の場所で対処するには個人の能力を超える問題に直面し得る。これに対処するために、高度な専門知識を有する外部の修理要員が、オンサイト支援又はリモート支援のいずれかを提供することに関与し得る。しかしながら、研究室機器が、高度に選別された母集団（これにはこれらの外部修理要員を含まない可能性がある）以外に曝されるべきではない極秘データを生成又は表示することができるという事実から、外部修理要員が関与することを困難にし得る。したがって、外部修理要員を極秘データに曝すことを防止しながら、外部修理要員が研究室機器に関連する問題を解決する支援を提供することを可能にし得る技術が必要とされている。

本明細書に開示される実施形態を使用して、秘密情報を不適切に曝すことなく、研究室機器に修理を提供するための方法及びマシンを実装し得る。例えば、本明細書に開示される実施形態を使用して、ヘッドマウントカメラの着用者の視野の画像をキャプチャすることと、一組のステップを実行することによって修正された画像を生成することと、を含む方法を実行し得る。このようなステップは、着用者の視野内の１つ以上のディスプレイ画面を識別することを含み得る。このようなステップはまた、１つ以上のディスプレイ画面のそれぞれに関して、事前定義されたインターフェースライブラリからのアイテムと一致するインターフェースがそのディスプレイ画面上に表示されているか否かを判定することを含み得る。このようなステップはまた、事前定義されたインターフェースライブラリからの一致するアイテムを有する表示インターフェースごとに、事前定義されたインターフェースライブラリからの、インターフェースに対応する画像を重ね合わせることか、又は、そのインターフェース内の１つ以上の秘密情報の位置を示す事前定義されたインターフェースライブラリからの情報に基づいて、そのインターフェース内の秘密情報をマスキングすること、のいずれかを含み得る。このような方法はまた、修正された画像を提示することを含み得、この提示することは、修正された画像をリモート修理技術者に送信すること、又はヘッドマウントカメラが組み込まれた拡張現実ヘッドピースのディスプレイ上に修正された画像を表示することを含み得る。

他の実施形態もまた可能である。例えば、開示される技術を使用して、ヘッドマウントカメラ及びプロセッサを備えるシステムを実装し得る。このようなシステムでは、プロセッサは、一組のコンピュータ命令で構成されてもよく、一組のコンピュータ命令は、実行されると、ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能である。いくつかの実施形態では、このような判定は、ヘッドマウントカメラがアクティブ化された後に行われ得る。追加的に、この種のシステムのいくつかの実施形態では、プロセッサを構成するコンピュータ命令は、ヘッドマウントカメラによってキャプチャされた画像が、その画像がキャプチャされる前に、非即時的閲覧用に利用可能とされるべきであるとの判定が行われ、かつ、ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきであるとの直近の判定よりも最近において、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの判定が行われなかった場合、及びその場合のみ、ヘッドマウントカメラによってキャプチャされた画像を、非即時閲覧用に利用可能にすることを動作可能にし得る。

開示される技術がどのように潜在的に実装され得るかについてのさらなる情報が本明細書に記載されており、実施例の変形形態は、本明細書に記載されているデータに基づいて当業者には直ちに明らかになり、過度の実験を行うことなく実施され得る。したがって、本概要に記載された例示的な方法及びマシンは、単なる例示であると理解されるべきであり、この本明細書又は任意の関連文書によって提供される保護の範囲を限定するものとして扱われるべきではない。
本発明は、例えば、以下の項目を提供する。
（項目１）
方法であって、
ａ）ヘッドマウントカメラの視野の画像をキャプチャすることと、
ｂ）ほぼリアルタイムで、修正された画像を自動的に生成することであって、前記生成することが、
ｉ）マスキングされる、前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することと、
ｉｉ）前記１つ以上の識別された部分のそれぞれをマスキングすることと、を含むステップを実行することによって行われる、生成することと、
ｃ）前記修正された画像を提示することであって、前記修正された画像を提示することが、
ｉ）前記修正された画像をリモート修理技術者に表示することと、
ｉｉ）前記修正された画像を拡張現実ヘッドピースのディスプレイ上に表示することとを含み、前記ヘッドマウントカメラが、前記拡張現実ヘッドピースと統合されている、提示することと、を含む、方法。
（項目２）
マスキングされる、前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することが、
ａ）前記視野内の１つ以上のディスプレイ画面を識別することと、
ｂ）前記１つ以上のディスプレイ画面のそれぞれについて、事前定義されたインターフェースライブラリからのアイテムと一致するインターフェースがそのディスプレイ画面上に表示されているか否かを判定することと、
ｃ）前記事前定義されたインターフェースライブラリからの少なくとも１つの一致するアイテムを有する各表示されたインターフェースについて、前記事前定義されたインターフェースライブラリからの前記一致したアイテムからの情報に基づいて、マスキングされる前記画像の部分として、そのインターフェースの１つ以上の部分を識別することと、を含む、項目１に記載の方法。
（項目３）
前記１つ以上の識別された部分のそれぞれをマスキングすることが、前記事前定義されたインターフェースライブラリからの少なくとも１つの一致するアイテムを有する前記１つ以上のディスプレイ画面のそれぞれについて、前記事前定義されたインターフェースライブラリからの、そのインターフェースに対応する画像を重ね合わせることを含む、項目２に記載の方法。
（項目４）
マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することが、
ａ）前記ヘッドマウントカメラの焦点距離を決定することと、
ｂ）前記決定された焦点距離よりも前記ヘッドマウントカメラから遠い前記ヘッドマウントカメラの前記視野の前記画像の各部分を、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の前記１つ以上の部分のうちの１つとして識別することと、を含む、項目１～３のいずれか一項に記載の方法。
（項目５）
ａ）前記方法が、前記ヘッドマウントカメラの前記視野の前記画像をキャプチャする前に、１つ以上の表記媒体標本画像を提供することを含み、
ｂ）マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することが、
ｉ）前記表記媒体標本画像からの情報に基づいて、前記視野内の１つ以上の表記媒体を識別することと、
ｉｉ）前記視野内の前記１つ以上の表記媒体のそれぞれを、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の前記１つ以上の部分のうちの１つとして識別することと、を含む、項目１～４のいずれか一項に記載の方法。
（項目６）
前記表記媒体標本画像からの前記情報が、１つ以上の表記媒体標本色を含む、項目５に記載の方法。
（項目７）
ａ）前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に送信することを含み、
ｂ）前記方法が、
ｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャする前に、研究室の撮像可能領域を指定することと、
ｉｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャした後に、前記撮像可能領域の境界に位置する１つ以上のワイヤレス送受信機に基づいて、前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置するか否かを判定することと、
ｉｉｉ）前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置していないとの判定に基づいて、前記ヘッドマウントカメラの送信機能を自動的に非アクティブ化することと、を含む、項目１～６のいずれか一項に記載の方法。
（項目８）
前記ヘッドマウントカメラの前記送信機能が、前記ヘッドマウントカメラを自動的に非アクティブ化することによって自動的に非アクティブ化される、項目１～７のいずれか一項に記載の方法。
（項目９）
ａ）前記修正された画像を提示することが、前記修正された画像を前記リモート技術者に表示することを含み、
ｂ）前記方法が、
ｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャする前に、研究室の撮像可能領域を指定することと、
ｉｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャした後に、前記撮像可能領域の内側に位置するワイヤレス送受信機からの距離に基づいて、前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置するか否かを判定することと、
ｉｉｉ）前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置していないとの判定に基づいて、前記ヘッドマウントカメラの送信機能を自動的に非アクティブ化することと、を含む、項目１～８のいずれか一項に記載の方法。
（項目１０）
ａ）前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に表示することを含み、
ｂ）前記方法が、インターネット接続を使用して、前記修正された画像を前記リモート修理技術者に送信することを含む、項目１～９のいずれか一項に記載の方法。
（項目１１）
ａ）前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に表示することを含み、
ｂ）前記方法が、前記修正された画像を前記リモート修理技術者に表示すると同時に、前記ヘッドマウントカメラの前記視野の前記画像を前記拡張現実ヘッドピースの前記ディスプレイ上に表示することを含み、前記ヘッドマウントカメラが前記拡張現実ヘッドピースと一体化されている、項目１～１０のいずれか一項に記載の方法。
（項目１２）
ａ）前記画像がビデオストリームの一部分としてキャプチャされ、
ｂ）前記方法が、前記修正された画像を前記リモート修理技術者に送信することを含み、
ｃ）前記修正された画像を前記リモート修理技術者に送信することが、前記キャプチャされた画像ではなく、前記修正された画像を含むビデオストリームのバージョンを送信することによって実行される、項目１～１１のいずれか一項に記載の方法。
（項目１３）
前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後１０秒以内に完了する、項目１～１２のいずれか一項に記載の方法。
（項目１４）
前記修正された画像をほぼリアルタイムで自動的に生成することが、リアルタイムで前記修正された画像を自動的に生成することを含む、項目１～１３のいずれか一項に記載の方法。
（項目１５）
前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後５秒以内に完了する、項目１～１４のいずれか一項に記載の方法。
（項目１６）
前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後１秒以内に完了する、項目１～１５のいずれか一項に記載の方法。
（項目１７）
前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後０．５秒以内に完了する、項目１～１６のいずれか一項に記載の方法。
（項目１８）
前記ヘッドマウントカメラの前記視野の前記画像が、マスキングされる部分として識別される前記１つ以上の部分の外側に秘密情報を含む、項目１～１７のいずれか一項に記載の方法。
（項目１９）
前記ヘッドマウントカメラが、一対の計装安全眼鏡によって構成される、項目１～１８のいずれか一項に記載の方法。
（項目２０）
ａ）前記修正された画像を提示することが、前記修正された画像を前記リモート技術者に表示することを含み、
ｂ）前記方法は、
ｉ）前記リモート技術者が、前記修正された画像に基づいて、前記ヘッドマウントカメラの前記視野内の研究室機器における問題に対処するための情報を含む修復オーバーレイを生成することと、
ｉｉ）前記研究室機器のディスプレイ上に前記修復オーバーレイを含む画像を表示することと、を含む、項目１～１９のいずれか一項に記載の方法。
（項目２１）
システムであって、
ａ）ヘッドマウントカメラと、
ｂ）プロセッサと、を備え、
前記プロセッサは、一組のコンピュータ命令で構成されており、前記一組のコンピュータ命令が、実行されると、
Ａ）前記ヘッドマウントカメラがアクティブ化された後、前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきか否かを判定し、
Ｂ）前記ヘッドマウントカメラによってキャプチャされた画像を、
Ｉ）前記画像が、非即時閲覧用に利用可能にされるべきであるとの判定が行われ、かつ／又は、
ＩＩ）
１）前記ヘッドマウントカメラによってキャプチャされた画像が、その画像がキャプチャされる前に、非即時閲覧用に利用可能にされるべきであるとの判定が行われたことと、
２）前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの直近の判定よりも最近において、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきでないとの判定が行われなかったことと、の両方の命令文が真である場合かつその場合のみ、非即時閲覧用に利用可能にするように、動作可能である、システム。
（項目２２）
前記コンピュータ命令が、実行されると、
ａ）前記ヘッドマウントカメラが事前定義された領域内に位置するか否かを判定することと、
ｂ）前記ヘッドマウントカメラが前記事前定義された領域内に位置していないとの判定に基づいて、前記ヘッドマウントカメラによってキャプチャされた画像は、非即時閲覧用に利用可能にされるべきではないと判定することと、を含む一組のステップを実行することによって、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能である、項目２１に記載のシステム。
（項目２３）
ａ）前記システムが、前記事前定義された領域の内側に位置するワイヤレス送受信機を備え、
ｂ）前記ヘッドマウントカメラが前記事前定義された領域内に位置していないとの前記判定が、前記ヘッドマウントカメラと前記ワイヤレス送受信機との間の距離に基づく、項目２２に記載のシステム。
（項目２４）
ａ）前記システムが、前記事前定義された領域の境界に位置する１つ以上のワイヤレス送受信機を備え、
ｂ）前記ヘッドマウントカメラが前記事前定義された領域内に位置していないとの前記判定は、前記ヘッドマウントカメラが前記事前定義された領域の前記境界を横切ることを検出することに基づく、請求２２又は２３に記載のシステム。
（項目２５）
ａ）前記システムが研究室機器を備え、
ｂ）前記コンピュータ命令が、実行されると、
ｉ）前記研究室機器に対する前記ヘッドマウントカメラの向きを判定することと、
ｉｉ）前記ヘッドマウントカメラの前記向きが、前記研究室機器から９０度以上オフセットされているとの判定に基づいて、前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきではないと判定することと、を含む一組のステップを実行することによって、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能である、項目２１～２４のいずれか一項に記載のシステム。
（項目２６）
前記コンピュータ命令が、実行されると、認可アクションの直近の発生からの経過時間がしきい値持続時間よりも長いとの判定に基づいて、前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきではないと判定すること、を含む一組のステップを実行することによって、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にするべきか否かを判定するように動作可能である、項目２１～２５のいずれか一項に記載のシステム。
（項目２７）
前記システムが、前記ヘッドマウントカメラとワイヤレス通信するように構成された研究室機器を備える、項目２１～２６のいずれか一項に記載のシステム。
（項目２８）
前記システムが、前記ヘッドマウントカメラによってキャプチャされた画像を暗号化するように構成された研究室機器を備える、項目２１～２７のいずれか一項に記載のシステム。
（項目２９）
ａ）前記ヘッドマウントカメラが外部光源を含み、
ｂ）前記ヘッドマウントカメラは、前記ヘッドマウントカメラがアクティブ化されたとき、かつ前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの判定が行われたときに、前記外部光源をアクティブ化するように構成されており、
ｃ）前記ヘッドマウントカメラは、前記ヘッドマウントカメラが非アクティブ化されたとき、及び前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきではないとの判定が行われたときに、前記外部光源を非アクティブ化するように構成されている、項目２１～２８のいずれか一項に記載のシステム。
（項目３０）
マシンであって、
ａ）ヘッドマウントカメラと、
ｂ）前記ヘッドマウントカメラによってキャプチャされた画像に含まれる秘密情報を含まない修正された画像を生成する手段と、を備える、マシン。

いくつかの実施形態で使用され得る一対の計装安全眼鏡を示す。

本開示技術の態様が展開され得る例示的な環境を示す。

研究室機器のオペレータが、リモート技術者を研究室機器によって表示され得る秘密情報に曝すことなく、リモート技術者に有用な修理情報を提供することを可能にするための、いくつかの実施形態で使用され得るプロセスを示す。

いくつかの実施形態においてジェスチャセンサによって認識され得、コマンドに関連付けられ得る例示的なジェスチャを示す。

例示的な非修正インターフェース画面画像を示す。

いくつかの実施形態において作成され得るような、例示的な修正インターフェース画面画像を示す。

いくつかの実施形態において作成され得るような、例示的な修正インターフェース画面画像を示す。

本明細書に開示される技術は、秘密情報の露出を防止しながら、研究室機器を修理することに関する問題に対処するために使用され得る。

第１の態様によれば、いくつかの実施形態は、ヘッドマウントカメラの着用者の視野の画像をキャプチャすることと、リアルタイムで修正された画像を自動的に生成することと、修正された画像を提示することと、を含む方法を含み得る。このような方法では、修正された画像を自動的に生成することは、マスキングされるヘッドマウントカメラの着用者の視野の画像の１つ以上の部分を識別すること、及び１つ以上の識別された部分のそれぞれをマスキングすることなどのステップを含み得る。追加的に、上述に言及されたような方法では、修正された画像を提示することは、修正された画像をリモート修理技術者に送信することと、拡張現実ヘッドピースのディスプレイ上に修正された画像を表示することであって、ヘッドマウントカメラが拡張現実ヘッドピースと統合されている、表示することと、又は修正された画像を研究室機器のディスプレイ上に表示すること、を含み得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、マスキングされるヘッドマウントカメラの着用者の視野の画像の１つ以上の部分を識別するステップは、一組のステップを含み得る。このようなステップは、着用者の視野内の１つ以上のディスプレイ画面を識別することを含み得る。このようなステップはまた、１つ以上のディスプレイ画面のそれぞれについて、事前定義されたインターフェースライブラリからのアイテムと一致するインターフェースが、そのディスプレイ画面上に表示されているか否かを判定することを含み得る。このようなステップはまた、事前定義されたインターフェースライブラリからのアイテムと一致する各表示されたインターフェースについて、そのインターフェースの１つ以上の部分を、事前定義されたインターフェースライブラリからの一致するアイテムからの情報に基づいて、マスキングされるべき画像の部分として識別することを含み得る。いくつかのこのような実施形態では、１つ以上の識別された部分のそれぞれをマスキングすることは、事前定義されたインターフェースライブラリからの一致するアイテムを有する１つ以上のディスプレイ画面のそれぞれに対して、事前定義されたインターフェースライブラリからの、そのインターフェースに対応する画像を重ね合わせることを含み得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、マスキングされるヘッドマウントカメラの着用者の視野の画像の１つ以上の部分を識別することは、ヘッドマウントカメラの焦点距離を決定することと、マスキングされるヘッドマウントカメラの着用者の視野の画像の一部分として、識別された焦点距離よりもヘッドマウントカメラから遠いヘッドマウントカメラの着用者の視野の画像の各部分を識別することと、を含み得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、本方法は、ヘッドマウントカメラの着用者の視野の画像をキャプチャする前に、１つ以上の表記媒体標本画像を提供することを含み得る。更に、このような実施形態では、マスキングされるヘッドマウントカメラの着用者の視野の画像の１つ以上の部分を識別することは、表記媒体標本画像からの情報に基づいて、着用者の視野内の１つ以上の表記媒体を識別することと、着用者の視野内の各表記媒体を、マスキングされる着用者の視野の画像の一部分として識別することと、を含み得る。同様に、いくつかのこのような実施形態では、表記媒体標本画像からの情報は、１つ以上の表記媒体標本色を含み得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、本方法は、ヘッドマウントカメラの着用者の視野の画像をキャプチャする前に、研究室の撮像可能領域を指定することを含み得る。このような実施形態では、本方法はまた、ヘッドマウントカメラの着用者の視野の画像をキャプチャした後、ヘッドマウントカメラが研究室の撮像可能領域内に位置するか否かを判定すること（この判定は、撮像可能領域の境界に位置する１つ以上のワイヤレス送受信機に基づき得、又は、撮像可能領域内に位置するワイヤレス送受信器からの距離に基づき得る）を含み得る。追加的に、修正された画像を提示することが、修正された画像をリモート修理技術者に送信することを含むいくつかの実施形態では、ヘッドマウントカメラが研究室の撮像可能領域内に位置していないとの判定に基づいて、本方法は、ヘッドマウントカメラの送信機能を自動的に非アクティブ化することを含み得る。いくつかのこのような実施形態では、ヘッドマウントカメラの伝送機能を非アクティブ化することは、ヘッドマウントカメラを非アクティブ化することによって行われ得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、修正された画像を提示することは、インターネット接続を使用して、修正された画像をリモート修理技術者に送信することを含み得る。追加的に、いくつかのこのような実施形態では、本方法は、修正された画像をリモート修理技術者に送信すると同時に、拡張現実ヘッドピースのディスプレイ上にヘッドマウントカメラの着用者の視野の画像を表示することを含み得る。いくつかのこのような実施形態では、ヘッドマウントカメラは、拡張現実ヘッドピースと一体化され得る。追加的に、いくつかの実施形態では、ヘッドマウントカメラは、一対の計装安全眼鏡によって構成され得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、ヘッドマウントカメラの着用者の視野の画像は、ビデオストリームの一部分としてキャプチャされ得る。いくつかのこのような実施形態では、本方法は、修正された画像をリモート修理技術者に送信することを含み得、この送信は、キャプチャされた画像ではなく、修正された画像を含むビデオストリームのバージョンを送信することによって実行され得る。

第１の態様の文脈で説明されるようないくつかの実施形態では、修正された画像の自動生成は、ヘッドマウントカメラの着用者の視野の画像のキャプチャ後１０秒以内に完了され得る。いくつかのこのような実施形態では、ヘッドマウントカメラの着用者の視野をキャプチャしてから、修正された画像の生成を完了するまでの遅延は、５秒以下、１秒以下、０．５秒以下、又は０．１秒以下であり得る。追加的に、第１の態様の文脈で説明されるようないくつかの実施形態では、ヘッドマウントカメラの着用者の視野の画像は、マスキングされる部分として識別された１つ以上の部分の外側の秘密情報を含み得る。

第２の態様によれば、いくつかの実施形態は、ヘッドマウントカメラ及びプロセッサを備えるシステムを含み得る。このような実施形態では、プロセッサは、一組のコンピュータ命令で構成されてもよく、一組のコンピュータ命令は、実行されると、様々なステップを実行するように動作可能である。このようなステップは、ヘッドマウントカメラがアクティブ化された後、ヘッドマウントカメラによってキャプチャされた画像が非即時的な観察のために利用可能にされるべきか否かを判定することと、様々な条件が充足された場合、及びその場合にのみ、ヘッドマウントカメラによってキャプチャされた画像を非即時閲覧用に利用可能にすることを含み得る。このような条件は、いくつかの実施形態では、その画像が非即時閲覧用に利用可能にするべきであるとの判定が行われ、かつ／又は以下の命令文の両方が真である。（１）ヘッドマウントカメラによってキャプチャされた画像が、その画像がキャプチャされる前に、非即時閲覧用に利用可能にされるべきであるとの判定が行われたこと、及び（２）ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの直近の判定よりも最近において、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきでないとの判定が行われなかったこと。

第２の態様の文脈で説明されるようないくつかの実施形態では、コンピュータ命令は、実行されると、ヘッドマウントカメラが事前定義された領域内に位置しているか否かを判定することを含む一組のステップを実行することによって、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能であり得る。このような一組のステップはまた、ヘッドマウントカメラが事前定義された領域内に位置していないとの判定に基づいて、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきではないと判定することを含み得る。いくつかのそのような実施形態では、システムは、事前定義された領域内に位置するワイヤレス送受信機を備え得、ヘッドマウントカメラが事前定義された領域内に位置していないとの判定は、ヘッドマウントカメラとワイヤレス送受信機との距離に基づく。いくつかの他のそのような実施形態では、システムは、事前定義された領域の境界に位置する１つ以上のワイヤレス送受信機を備え得、ヘッドマウントカメラが事前定義された領域内に位置していないとの判定は、事前定義された領域の境界を横切るヘッドマウントカメラの検出に基づく。

第２の態様の文脈で説明されるようないくつかの実施形態では、システムは、研究室機器を含み得、コンピュータ命令は、実行されると、ヘッドマウントカメラによってキャプチャされた画像が、一組のステップを実行することによって、非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能であり得る。このようなステップは、研究室機器に対するヘッドマウントカメラの向きを判定することと、ヘッドマウントカメラの向きが、研究室機器から９０度以上オフセットされているとの判定に基づいて、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきではないと判定することと、を含み得る。

第２の態様の文脈で説明されるようないくつかの実施形態では、コンピュータ命令は、実行されると、認可アクションの直近の発生からの経過時間がしきい値持続時間よりも長いとの判定に基づいて、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきではないと判定することを含む、一組のステップを実行することによって、ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるか否かを判定するように動作可能であり得る。

第２の態様の文脈で説明されるようないくつかの実施形態では、システムは、ヘッドマウントカメラとワイヤレス通信するように、及び／又はヘッドマウントカメラによってキャプチャされた画像を暗号化するように構成された研究室機器を備え得る。

第２の態様の文脈で説明されるようないくつかの実施形態では、ヘッドマウントカメラは、外部光源を備え得る。このような実施形態では、ヘッドマウントカメラは、ヘッドマウントカメラがアクティブ化された場合、及びヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの判定が行われた場合に、外部光源をアクティブ化するように構成され得る。同様に、いくつかのこのような実施形態では、ヘッドマウントカメラは、ヘッドマウントカメラが非アクティブ化された場合、及びヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきではないとの判定が行われた場合に、外部光源を非アクティブ化するように構成され得る。

第３の態様では、いくつかの実施形態は、ヘッドマウントカメラ、及びヘッドマウントカメラによってキャプチャされた画像に含まれる秘密情報を含まない修正画像を生成するための手段を備えるマシンを含み得る。

様々な他の態様及び実施形態も可能であり、本明細書に記載される開示に基づいて過度の実験を行うことなく、当業者によって実施され得る。したがって、上述の考察及び本明細書に記載された実施例からの特徴は、本明細書よって、又は本開示の利益を主張する任意の他の文書によって提供される保護に対する制限を示唆するものとして扱われるべきではない。

ここで図１を参照すると、この図は、いくつかの実施形態で使用され得る一対の計装安全眼鏡１０１を示す。当業者には理解されるように、研究室機器のオペレータは、機器を操作するときに常に安全眼鏡を着用することが期待され（かつ、一般的に必要とされ）得、したがって、そのような安全眼鏡は、オペレータが、そのような技術者に秘密情報を曝すことなく、リモート修理技術者から支援を得ることを可能にする技術のための便利なプラットフォームを提供し得る。図１に示されるように、一対の計装安全眼鏡１０１は、カメラ１０３、ＬＥＤインジケータ１０２、ジェスチャセンサ１０４、スピーカー１０５、電源１０６、及びマイクロフォン１０７を含み得る。いくつかの実施形態では、一対の計装眼鏡１０１上のカメラ１０３は、眼鏡１０１を着用している個人の視野内の画像をキャプチャするように構成され得る。ＬＥＤインジケータ１０２は、カメラ１０３が記録中又は送信中のいずれかであったときに自動的に点灯するように構成され得、その結果、近傍の他者は、それらの知識なしに記録されないであろう。ジェスチャセンサ１０４は、計装眼鏡１０１のハンズフリー操作を可能にするために、一組の事前定義されたジェスチャを認識するようにプログラムされたプロセッサ及びソフトウェアを使用して実装され得る。このようなジェスチャの実施例が図４に示されているが、いくつかの実施形態では、他のジェスチャ及び関連するアクションが含まれ（例えば、ユーザーによる時計回り／反時計回りの円をビデオフィードをオン／オフにするコマンドとして扱う）得、したがって、図４に示される実施例は、開示される技術の実施形態によってサポートされ得るジェスチャ又は関連するコマンドの種類に対する制限を示唆するように処理されるべきではないことを理解されたい。好ましくは骨伝導スピーカーとして実装されるスピーカー１０５は、計装眼鏡１０１を装着した個人が、自身の近傍の他の個人を乱すことなく聴覚情報（例えば、リモート修理技術者からの説明又は質問）を受信することを可能にし得る。電源１０６は、計装眼鏡１０１（例えば、カメラ１０３ ＬＥＤインジケータ１０２など）の他の構成要素に電力を提供し得るＵＳＢ充電可能及び／又は交換可能な電池を使用して実装され得る。マイクロフォン１０７は、エレクトレット又は他の種類のマイクロフォンであり得、一対の計装眼鏡１０１のステム上などの様々な場所に配置する、又はユーザーの口に近接して配置するアーム上のヘッドセットマイクロフォン（図１には図示せず）として配置し得、計装眼鏡１０１の着用者とリモート修理技術者との会話中に音声入力をキャプチャするなど、様々な目的のために使用され得る。

図１は、一対の計装安全眼鏡１０１に含まれ得る様々な構成要素を示しているが、いくつかの実施形態では、他の構成要素又は異なる構成要素が含まれ得、図１の計装安全眼鏡は、限定的なものとして扱われるのではなく、単に例示的なものとして見られるべきであることを理解されたい。例えば、一対の計装眼鏡１０１は、外部デバイス及びリモート修理技術者などのエンティティとのデータ通信を可能にするように構成された送受信機、又は送信機と受信機の対を含むことが好ましい。このような送受信機は、リモート技術者との直接通信を可能にし得（例えば、セルラー送受信機の場合）、又は、代わりに間接通信を容易にし得る（例えば、別個のセルラー電話又はコンピュータを介した接続を確立し得るような、Ｂｌｕｅｔｏｏｔｈ（登録商標）送受信機又はＷｉＦｉ送受信機の場合）。更に、いくつかの実施形態では、一対の計装眼鏡１０１は、そのユーザーの視野内に配置された別個の半透明スクリーンを介して、又は光学ディスプレイ素子を計装眼鏡１０１自体のレンズに組み込むことを介してなど、拡張現実情報を提示する能力を提供し得る。構成要素の代替的配置（例えば、ステム上ではなく、眼鏡のブリッジ上へのカメラ１０３の配置）又は構成要素の省略（例えば、ジェスチャセンサ１０４の省略）などのさらなる変形も可能であり、本明細書に記載される明示的な開示に照らして、当業者には直ちに明らかとなるであろう。

当然ながら、上述の構成要素の構成のように、図１に示されるような計装安全眼鏡１０１は、例示的なものに過ぎず、開示される技術の様々な実施形態で使用され得る物理デバイスの種類に限定するものとして理解されるべきではないことを理解されたい。例えば、いくつかの実施形態は、ＡＲＣｏｒｅ拡張現実フレームワークを使用して作成されたソフトウェアなどのソフトウェアを利用して、スマートフォンが、潜在的にはスマートフォンディスプレイがそのユーザーの視野を占有することを可能にするヘッドギアと組み合わされて、図１に示されるような計装眼鏡１０１の代わりに使用されることを可能にし得る。代替的に、いくつかの実施形態では、Ｏｃｕｌｕｓ ＶＲ，ＬＬＣ社のＲｉｆｔなどの市販の拡張現実デバイスが使用され得る。更に別の代替として、開示される技術の好ましい実施形態は、ユーザーによるハンズフリーのインタラクションを可能にする方法で実装されるが、いくつかの実施形態は、開示される技術の様々な態様からの機能を提供するために、ハンドヘルドデバイス（例えば、タブレット、ヘッドセットなしのスマートフォン）を利用し得る。したがって、図１の計装安全眼鏡１０１は、単なる例示であると理解されるべきであり、限定するものとして扱われるべきではない。

ここで図２を参照すると、この図は、開示される技術の態様が展開され得る例示的な環境を示す。この環境では、ネットワーク２０１を使用して、研究室２０２とリモートサポートプロバイダ２０３との接続を確立する。この種類の環境では、研究室機器２０４は、研究室２０２とサポートプロバイダ２０３とのＶＰＮ接続をバッファリング、暗号化、及び／又は確立するなどの機能を提供し得る専用ハードウェアインターフェース２０５を介してリモートサポートプロバイダ２０３と間接的に接続する通信経路を有し得る。追加的に、図２に示されるような環境で展開されるいくつかの実施形態では、ハードウェアネットワークインターフェース２０５はまた、図１に示されるような計装眼鏡１０１と通信するために使用され得るワイヤレスアクセスポイント２０６、及び／又はそのような計装眼鏡の機能をサポートするためにいくつかの実装形態で使用され得るローカルコンピュータ２０７に接続され得る。

いくつかの実施形態が、図１に示される計装眼鏡１０１から変化するデバイスを使用し得ることが可能であるように、様々な実施形態が、図２に示されるものとは異なるデバイス及び／又はデバイスの組み合わせを使用し得ることが可能であることを理解されたい。例えば、いくつかの実施形態では、別個のハードウェアインターフェース２０５を含むのではなく、研究室機器２０４及び／又はローカルコンピュータ２０７は、図２の別個のハードウェアインターフェース２０５と同様の機能を提供する仮想マシンを用いて構成されることによってなど、リモートサポートプロバイダ２０３に直接接続され得る。同様に、いくつかの実施形態では、研究室機器２０４とは別個のローカルコンピュータ２０７が省略され得、その代わりに、開示される技術の機能性は、一組の計装眼鏡の処理能力によって（例えば、ジェスチャセンサ１０４について先に説明した同一のプロセッサ及びソフトウェアを使用して）、及び／又は研究室機器２０４自体によってサポートされ得る。追加的に、いくつかの実施形態では、ローカルコンピュータ２０７及び／又は一組の計装眼鏡によって提供され得る機能は、代わりに、リモートサポートプロバイダ２０３又は他のリモートシステム（例えば、研究室機器２０４及びリモートサポートプロバイダ２０３の両方から遠隔にある別個のサーバ）によってサポートされ得る。例えば、いくつかの実施形態では、研究室機器の一対の計装眼鏡上のカメラによってキャプチャされた画像は、暗号化された形態でリモートサポートプロバイダ（又は別個のリモートサーバ）に送信され、研究室機器自体、又はその近傍のコンピュータによってではなく、その場所で（例えば、本明細書でより詳細に記載されるように、秘密情報を除去することによって）処理され得る。したがって、図２の環境は、例示的なものに過ぎないと理解されるべきであり、限定的なものとして扱われるべきではない。

ここで図３を参照すると、この図は、いくつかの実施形態において使用され得、研究室機器の操作者がリモート技術者に有用な修理情報を、そのリモート技術者を不注意に秘密情報に曝すことなく提供することを可能にするプロセスを示している。最初に、図３のプロセスでは、ユーザーの視野の画像（例えば、ユーザーが一対の計装安全眼鏡１０１を装着している実施形態では、この視野は、必ずしもユーザーの実際の視野と同一ではなく、カメラ１０３の視野であり得ることを理解されたい）がキャプチャされる３０１。次いで、画像がリモート技術者に提供されるべきではない秘密情報を含むか否かの判定３０２が行われ得る。これは、例えば、画像を解析して、その画像に秘密情報が書き込まれ得るような付箋であると思われる部分を識別することによって、画像を解析して、バーコードであるように見える部分を識別することによって、画像を解析して、秘密情報を表示し得る画面又は他のインターフェースを識別することによって、及び／又は画像を分析して、ユーザーの視野内であり得るが、リモート技術者のサポート要件に重要ではない人間の顔を識別することによって、行われ得る。このような情報が存在すると識別される場合は、キャプチャされた画像内で不明瞭化され得る３０３（例えば、人間の顔、コンピュータディスプレイ、バーコード、及び／又は紙のメモはぼかしがかけられ得る）。また、図３に示すように、いくつかの実施形態はまた、ユーザーの視野の画像から異質データを自動的に除去する３０４追加のステップを含み得る。これは、例えば、深度に関してオブジェクト間を区別し、ユーザーからしきい値距離未満であったものを除く全てのオブジェクトをぼかすことによって、又はカメラの焦点距離を識別し、その距離よりもユーザーから遠い全てのオブジェクトをぼかすことによって行われ得る。最後に、識別された秘密情報が不明瞭化され３０３、異質データが除去される３０４と、修正された画像はリモート技術者に提供され得３０５、その結果、リモート技術者はユーザーが見ているものについての情報を使用してサポートを提供することができるようになる。

図１及び図２の眼鏡１０１及び環境と同様に、図３のプロセスは、例示的なものに過ぎないことを理解すべきであり、そのプロセスの変形又は逸脱がいくつかの実施形態に含まれ得る。図示するために、個々の画像とは対照的に、図３の文脈において上述したような技術をビデオストリームの処理に適用することについて検討する。画像がビデオストリームの形態でキャプチャされるいくつかの実施形態では、秘密情報が除去された修正されたビデオストリームを生成するために、図３に示されるようなプロセスがフレーム単位で各フレームに適用され得る。しかしながら、他の実施形態では（例えば、修正された画像を生成する処理負担を最小化するために）、図３に示すような処理は、ビデオストリーム内の全ての画像よりも少ない画像に対して実行され得る。例えば、いくつかの実施形態では、５つごとの画像を処理して不明瞭であるべき画像の部分を識別し得、次いで、不明瞭化は、ストリーム内の各画像についてマスキングされる画像の部分を独立して判定するのではなく、その次の４つの画像に繰り返され、適用され得る。同様に、ビデオストリームが、キーフレーム及びデルタを使用する形態で符号化される場合には、図３に示すような処理は、フレーム間のデルタとして表されるストリーム内の画像ではなく、キーフレームにのみ適用され得る。

ビデオ処理の最適化に加えて（又は代替的）、他の種類の変形も可能である。例えば、いくつかの実施形態では、画像が非即時閲覧（すなわち、画像をリモート修理技術者に送信することによって、又は後のレビューのために保存することによって、画像をローカル以外でリアルタイムに閲覧可能にする）用に提供されるべきか否かを判定し、その判定の結果に対して、図３に示されるようなステップの実行を調整する追加のステップが含まれ得る。例えば、いくつかの実施形態では、ユーザーは、機器２０４を収容するハウジング２０８などの許容可能な撮像領域を定義することを許可（又は、要求）され得、画像の提供３０５（及び、場合によっては、描写された画像の解析及び修正などの他のステップ）が、画像が許容可能な撮像領域内でキャプチャされたか否かを条件とし得る。このようにして、画像撮像装置が許容可能な撮像領域から不注意に移動された場合（例えば、計装眼鏡を着用している誰かがそれらをオフにすることなくトイレ２０９に行った場合）、通信されるべきではない情報を不注意に提供することを回避するように、自動的に（完全に、又は画像送信の自動停止によってなど、非即時的な閲覧を可能にする機能性のみを非アクティブ化することを通じてのいずれかにより）非アクティブ化され得る。この種類の機能をサポートするために、いくつかの実施形態では、許容可能な視野の入口及び出口には、画像撮像装置の通過を検出し、それ（又は、その機能の態様）を適宜、非アクティブ化（及び、いくつかの実施形態では、再アクティブ化）し得る、ビーコンを装備し得る。

代替的に、いくつかの実施形態では、画像撮像装置（及び／又は画像送信機能又は記憶機能などのその機器の様々な機能）は、所定の半径内（これは、好ましくは、ユーザーによって構成可能であり得る）にあるか、又は、アクセスポイント２０６又は機器２０４．の関連部品に組み込まれた送受信器などの撮像領域内の設定点の設定公差（例えば、９０度以内）内に配向されている限りにおいてのみ、アクティブのままであるように構成され得る。別の代替として、いくつかの実施形態では、画像撮像装置は、１つ以上の加速度計及び／又はＧＰＳ受信機などのナビゲーション測定機器を装備し得、その機器を使用して、建物内のその現在位置が許容可能な撮像領域内にあるか否かを判定し得る。いくつかの実施形態では、画像のキャプチャ、処理、及び／又は提供機能を自動的にアクティブ化／非アクティブ化するための非位置ベースのアプローチも（又は、代替的に）含まれ得る。例えば、いくつかの実施形態では、一対の計装安全眼鏡の動作を制御するソフトウェアは、予め定められた記号についてキャプチャされた画像を自動的にチェックし、その記号が認識されない限り、それらの眼鏡の機能の一部又は全てを（例えば、リモート技術者への画像の送信を中止することによって）非アクティブ化するように構成され得る。このような実施形態では、関連する記号は、好ましくは、修理を必要とし得る研究室機器に貼付されるか、又は表示され、その結果、計装眼鏡の着用者が、修理が終了した後に、眼鏡をオフにすることなく、マシンに関連しない何かを行った場合には、眼鏡は、そのユーザーがもはやマシンを見ていないという事実に基づいて、画像をキャプチャする（又は、他のタスクを実行する）ことを自動的に停止し得る。

いくつかの実施形態において存在し得る種類の変形の別の実施例として、いくつかの場合には、図３に示されるような方法は、機微情報のより効果的な識別及びふるい分けを可能にする、様々な事前の構成／設定ステップによって補完され得る。許容可能な撮像領域のユーザー構成（その機能がサポートされている実施形態において）などのこれのいくつかの実施例が、既に言及されている。しかしながら、これは、様々な実施形態において許可／必要とされ得る全ての種類の事前構成の網羅的な説明として理解されるべきではない。例えば、一組の計装眼鏡の動作を維持するために特定の記号の周期的認識が必要であるいくつかの実施形態では、記号及び／又は記号がチェックされた周期（例えば、Ｘ分）が、ユーザーによって構成可能であり得る。別の実施例として、いくつかの実施形態では、秘密情報を含み得る付箋又は他の表記媒体の識別及びぼかしを可能にする機能をサポートするために、付箋の一組の画像及び／又は付箋を含む一組の画像がキャプチャされ、訓練コーパスとして使用されることにより、画像がキャプチャされると、その画像内の任意の付箋が（例えば、形状及び色に基づいて）効果的に識別され、ぼかしをかけられるか、さもなければふるい分けされ得る。同様に、いくつかの実施形態では、ユーザーは、キャプチャされる可能性が高く、リモート修理要員に関連するオブジェクト（例えば、研究室機器それ自体）をキャプチャすることによって事前構成を実行し得、更に、一対の計装眼鏡の動作を制御するソフトウェアはその情報を使用して、キャプチャされた画像内の関連するオブジェクトを認識し、他の全てを無関係として自動的に処理し得る（例えば、リモート技術者に提供される画像から、それをぼかしをかけるか又はふるい分けすることによって）。

当然ながら、上述の事前構成のステップも例示的であることが意図されており、限定として扱われるべきではないことを理解されたい。事前構成に関する代替的なアプローチの実施例として、計装安全眼鏡が研究室機器の製造業者によって提供され、これらの機器の動作寿命の間に製造業者が顧客に修理を提供するのを支援する、というシナリオを検討する。このようなシナリオでは、製造業者は、そのマシンによって提示されるインターフェースのライブラリを維持し得、一対の計装眼鏡がマシンの画像をキャプチャしたとき、マシンによって提示されるインターフェースはライブラリに対して照合され得る。次いで、一致することが判明した場合、キャプチャされた画像内のインターフェースの写真は、ライブラリからの一般的なインターフェース画像と重ね合わされ得るか、又はキャプチャされた画像内のインターフェースの特定の態様は、秘密情報が表示される関連インターフェース内の位置を示すライブラリ内の情報に基づいてマスキングされ得る。この種類の選択的マスキングの実施例が図５及び図６に示されており、図５は例示的な非マスキングスクリーンを示し、図６は秘密情報を含むと予想されるスクリーンの部分を識別するインターフェースライブラリに含まれ得るような情報を示す。当然ながら、図５及び図６の実施例は、例示的のみを意図しており、限定として扱われるべきではないこと、及び図７に示されるような他のレベルの選択性を有する他の種類のマスキングもいくつかの実施形態で使用され得ることを理解されたい。同様に、いくつかの実施形態では、一対の計装安全眼鏡の動作を制御するソフトウェアは、キャプチャされた画像をリモート修理プロバイダーに送信する前に、キャプチャされた画像内でその製造業者の機械を認識して他の全てをふるい落とすように、製造業者によって構成され得る。

更に別の変形例として、いくつかの実施形態では、この種類の事前定義されたインターフェースライブラリは、機器製造業者ではなく、ユーザーによって構成可能及び／又は作成され得る。例えば、ユーザーは、自分の研究室内の機器によって表示されるインターフェースのサンプルをアップロードし得るインターフェースを提供され得、次いで、それらのインターフェースがどのようにマスキングされるべきかを指定し得る（例えば、個々の、又は他の秘密情報を識別、接触、又は位置特定するために使用され得る情報を表示するインターフェースの１つ以上の部分を選択することによって、及び、インターフェース全体がマスキングされるべきであると指定することによってなど）。当然ながら、いくつかの実施形態では、製造業者がこの種類の構成インターフェースを使用して、例えば、他の製造業者のマシンによって提示されるインターフェースを事前定義されたインターフェースライブラリに追加することも可能である。したがって、事前構成の上述の議論は、一対の計装眼鏡の動作及び構成要素の考察のように、本開示の利益を主張する本明細書又は任意の他の文書によって提供される保護の範囲に対する制限を意味するものとして扱われるべきではない。

いくつかの実施形態によってサポートされ得る種類の変形の別の実施例は、開示される技術の態様が、関連する研究室機器に対してリモートではなくローカルに所在する技術者によって利用されることを可能にするように適合され得る機能である。例えば、秘密情報がオンサイト修理技術者に不注意に曝されることを防止するために、このような技術者は、自分の視覚を遮断し、上述したような方法で生成された修正画像と置き換える仮想現実ヘッドギアを装着することを要求され得、その結果、その技術者は、依然として、秘密保持性を破壊するリスクなしに関連するマシンを修理し得る。同様に、いくつかの実施形態では、開示される技術の態様を使用して、リモート技術者が研究室機器のオペレータにガイダンスを提供することを可能にして、さもなければそのオペレータが専門技術者の修理を必要とするであろう修理を実行できるようにし得る。例えば、研究室機器のオペレータが拡張又は仮想現実ヘッドギアを装備している場合、いくつかの実施形態では、リモート修理技術者は、自分がヘッドギアによってキャプチャされた視野画像の部分を強調することを可能にし得るインターフェースを提供され得、次いで、その強調は、機器を修理するためのガイダンスとして、リモート修理技術者に提示され得る（潜在的に、リモート修理技術者に提示されたものと一致するように秘密情報が取り除かれた画像上のオーバーレイとして、又は、リモート技術者に利用可能にされたものとは異なるであろうという事実にもかかわらず、元の画像上のオーバーレイとして）。この種類のアプローチはまた、仮想現実のヘッドギアが利用可能であるコンテクストにおいて、例えば、さもなければ研究室機器のユーザーに提示されるであろう情報を、拡張現実ヘッドギアを使用して表示することによって、代わりに（又は、追加して）研究室機器自体のディスプレイ上に、及び／又は研究室機器に近接するデバイス（例えば、オペレータによって保持されたタブレット、ローカルコンピュータなど）のディスプレイ上に提示されるように適用され得る。

開示される技術の代替的な用途の種類の別の実施例として、一対の計装眼鏡又は他の種類の記録ヘッドギアによってキャプチャされた画像が、保存され、後続の訓練及び／又は評価のためのデータとして使用され得、そのような訓練及び評価が、その情報にアクセスすべきでない者に秘密情報を曝さないように、上述のようなアプローチを使用して不要なデータが除去され得る。したがって、開示される技術を使用して秘密を維持しながらリモート修理を容易にすることの説明は、例示的なものとしてのみ理解されるべきであり、限定するものとして扱われるべきではない。

本発明者らの技術のさらなる変形、特徴、及び潜在的な実装及び用途は、本開示を照らして当業者には明らかであり、過度の実験を伴わずに実施され得る。したがって、本明細書、又は本明細書の開示の利益を主張するいずれの文献も、本明細書に記載される発明者の技術の特定の実施形態に限定されるものとして扱われるべきではない。

本明細書で使用される場合、単数形「ａ」、「ａｎ」、及び「ｔｈｅ」は、文脈がそうでない旨を明確に指示しない限り、複数の指示対象を含む。本発明は、明確さ及び理解の目的のために詳細に説明されている。しかしながら、添付の特許請求の範囲内で特定の変更及び修正が実施され得ることが理解されるであろう。

本明細書で使用される場合、用語「基づく」は、あるものが、「基づく」として示されるものによって少なくとも部分的に決定されることを意味する。何かが何か他のものに基づいて完全に決定されなければならないことを示すために、それは、それが完全に決定されているものに「排他的に」に基づくものとして説明される。

本明細書で使用される場合、「カメラ」という用語は、視覚画像をキャプチャ及び／又は記録するためのデバイスを意味する。「カメラ」の実施例としては、電荷結合デバイス及び／又は相補的な金属酸化物半導体センサを使用して画像をキャプチャするデジタルカメラが挙げられる。

本明細書で使用される場合、「コンピュータ」は、結果を生成するためにデータに対して１つ以上の論理演算及び／又は物理演算を実行するための命令を記憶及び実行することが可能なデバイス群（例えば、プロセッサ及びメモリを備えるデバイス）を指すものと理解されるべきである。「コンピュータ」は、例えば、シングルコア又はマルチコアマイクロコントローラ又はマイクロコンピュータ、デスクトップ、ラップトップ若しくはタブレットコンピュータ、スマートフォン、サーバ、又は上述のデバイス群（例えば、冗長性及び可用性などの目的のためにデータに対して演算を行うために組み合わせて使用されるサーバのクラスタ）を含み得る。特許請求の範囲において、「サーバ」という単語は、「コンピュータ」と同義語であるものとして理解されるべきであり、異なる語の使用は、特許請求の範囲の可読性を向上させることを意図したものであり、「サーバ」がコンピュータではないことを意味するものではないと理解されるべきである。同様に、特許請求の範囲において「サーバ」及び「コンピュータ」という単語に先行する様々な形容詞は、可読性を向上させることを意図しており、限定として扱われるべきではない。

本明細書で使用される場合、「マシン」という用語は、デバイス又はデバイスの組み合わせを指す。

本明細書で使用される場合、「ヘッドマウントカメラによってキャプチャされた画像に含まれる秘密情報を含まない修正された画像を生成する手段」は、３５Ｕ．Ｓ．Ｃ．§１１２（ｆ）で提供されるような指定された機能を実行するための手段として記載される限定として理解されるべきであり、機能は「ヘッドマウントカメラによってキャプチャされた画像に含まれる秘密情報の欠落している修正された画像を生成すること」であり、対応する構造は、段落３４及び３７～３９に記載され、図３に示されるように構成されたコンピュータである。

本明細書で使用される場合、「ネットワーク」という用語は、標準プロトコルを使用したネットワークの任意の集合を指す。例えば、この用語は、グローバル分散ネットワークを形成するために、一組の標準プロトコル（ＴＣＰ／ＩＰ、ＨＴＴＰなど）によって互いにリンクされる相互接続された（パブリック及び／又はプライベート）ネットワークの集合を含む。この用語はまた、既存の標準プロトコルに対数する変更及び追加、又は他の媒体（例えば、テレビ、ラジオなど）との統合を含む、将来に行われ得る変形を包含することが意図される。

本明細書で使用される場合、「サンプル」という用語は、任意の生体サンプルを指し、語句「生体サンプル」は、動物又はヒトの身体などの自然環境から単離された生体物質の任意の標本を含むことを意味する。これは、組織、骨、靱帯などの固体形態であり得る。また、血液、脊髄液などの液体形態であり得る。

本明細書で使用される場合、「組」という用語は、同様の性質、設計、又は機能のゼロ以上の数、群、又は組み合わせを指す。

本明細書で使用される場合、「第１」、「第２」などの修飾語句は、可読性を向上させるために使用される単なるラベルであり、それらが修飾する項目間の任意の時間的又は実質的な差異を意味することを意図するものではない。例えば、特許請求の範囲において「第１のプログラム」及び「第２のプログラム」として項目を参照することは、「第１のプログラム」が最初に作成されるか、又は２つのプログラムが、コンピュータによって実行されるときに、必然的に異なることを生じさせることになることを示すと理解されるべきではない。同様に、特許請求の範囲で使用される場合、「コンピュータ」及び「サーバ」という単語は、同義語であると理解されるべきであり、異なる用語は、特許請求の範囲の可読性を向上させるために使用され、それらの異なる用語を使用して言及される項目間の任意の物理的又は機能的差を意味するものではない。

本明細書で使用される場合、「研究室」は、医療診断又は治療の目的のために、ヒト又は動物から収集された生体物質の試料などの物質に対して実験又は試験が行われる施設として理解されるべきである。

Claims (28)

1. ヘッドマウントカメラおよびプロセッサを備えるシステムにおいて実行される方法であって、前記方法は、
   ａ）前記ヘッドマウントカメラが、前記ヘッドマウントカメラの視野の画像をキャプチャすることと、
   ｂ）前記プロセッサが、ほぼリアルタイムで、修正された画像を自動的に生成することであって、前記生成することが、
   ｉ）前記プロセッサが、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することであって、前記マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することは、
   ａ）前記プロセッサが、前記視野内の１つ以上のディスプレイ画面を識別することと、
   ｂ）前記１つ以上のディスプレイ画面のそれぞれについて、前記プロセッサが、事前定義されたインターフェースライブラリからのアイテムと一致するインターフェースがそのディスプレイ画面上に表示されているか否かを判定することと、
   ｃ）前記事前定義されたインターフェースライブラリからの少なくとも１つの一致するアイテムを有する各表示されたインターフェースについて、前記プロセッサが、前記事前定義されたインターフェースライブラリからの前記一致したアイテムからの情報に基づいて、マスキングされる前記画像の部分として、そのインターフェースの１つ以上の部分を識別することと
   を含む、ことと、
   ｉｉ）前記プロセッサが、前記１つ以上の識別された部分のそれぞれをマスキングすることと
   を含むステップを実行することによって行われる、ことと、
   ｃ）前記プロセッサが、前記修正された画像を提示することであって、前記プロセッサが、前記修正された画像を提示することが、
   ｉ）前記修正された画像をリモート修理技術者に表示することと、
   ｉｉ）前記修正された画像を拡張現実ヘッドピースのディスプレイ上に表示することと
   を含み、前記ヘッドマウントカメラが、前記拡張現実ヘッドピースと統合されている、ことと
   を含む、方法。
2. 前記プロセッサが、前記１つ以上の識別された部分のそれぞれをマスキングすることが、前記事前定義されたインターフェースライブラリからの少なくとも１つの一致するアイテムを有する前記１つ以上のディスプレイ画面のそれぞれについて、前記事前定義されたインターフェースライブラリからの、そのインターフェースに対応する画像を重ね合わせることを含む、請求項１に記載の方法。
3. 前記プロセッサが、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することが、
   ａ）前記ヘッドマウントカメラの焦点距離を決定することと、
   ｂ）前記決定された焦点距離よりも前記ヘッドマウントカメラから遠い前記ヘッドマウントカメラの前記視野の前記画像の各部分を、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の前記１つ以上の部分のうちの１つとして識別することと
   を含む、請求項１～２のいずれか一項に記載の方法。
4. ａ）前記方法が、前記ヘッドマウントカメラの前記視野の前記画像をキャプチャする前に、前記プロセッサが、１つ以上の表記媒体標本画像を提供することを含み、
   ｂ）前記プロセッサが、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の１つ以上の部分を識別することが、
   ｉ）前記表記媒体標本画像からの情報に基づいて、前記視野内の１つ以上の表記媒体を識別することと、
   ｉｉ）前記視野内の前記１つ以上の表記媒体のそれぞれを、マスキングされる前記ヘッドマウントカメラの前記視野の前記画像の前記１つ以上の部分のうちの１つとして識別することと
   を含む、請求項１～３のいずれか一項に記載の方法。
5. 前記表記媒体標本画像からの前記情報が、１つ以上の表記媒体標本色を含む、請求項４に記載の方法。
6. ａ）前記プロセッサが、前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に送信することを含み、
   ｂ）前記方法が、
   ｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャする前に、前記プロセッサが、研究室の撮像可能領域を指定することと、
   ｉｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャした後に、前記プロセッサが、前記撮像可能領域の境界に位置する１つ以上のワイヤレス送受信機に基づいて、前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置するか否かを判定することと、
   ｉｉｉ）前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置していないとの判定に基づいて、前記プロセッサが、前記ヘッドマウントカメラの送信機能を自動的に非アクティブ化することと
   を含む、請求項１～５のいずれか一項に記載の方法。
7. 前記ヘッドマウントカメラの前記送信機能が、前記プロセッサが前記ヘッドマウントカメラを自動的に非アクティブ化することによって自動的に非アクティブ化される、請求項６に記載の方法。
8. ａ）前記プロセッサが、前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に表示することを含み、
   ｂ）前記方法が、
   ｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャする前に、前記プロセッサが、研究室の撮像可能領域を指定することと、
   ｉｉ）前記ヘッドマウントカメラの前記視野の前記画像をキャプチャした後に、前記プロセッサが、前記撮像可能領域の内側に位置するワイヤレス送受信機からの距離に基づいて、前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置するか否かを判定することと、
   ｉｉｉ）前記ヘッドマウントカメラが前記研究室の前記撮像可能領域内に位置していないとの判定に基づいて、前記プロセッサが、前記ヘッドマウントカメラの送信機能を自動的に非アクティブ化することと
   を含む、請求項１～７のいずれか一項に記載の方法。
9. ａ）前記プロセッサが、前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に表示することを含み、
   ｂ）前記方法が、前記プロセッサが、インターネット接続を使用して、前記修正された画像を前記リモート修理技術者に送信することを含む、請求項１～８のいずれか一項に記載の方法。
10. ａ）前記プロセッサが、前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に表示することを含み、
    ｂ）前記方法が、前記修正された画像を前記リモート修理技術者に表示すると同時に、前記プロセッサが、前記ヘッドマウントカメラの前記視野の前記画像を前記拡張現実ヘッドピースの前記ディスプレイ上に表示することを含み、前記ヘッドマウントカメラが前記拡張現実ヘッドピースと一体化されている、請求項１～９のいずれか一項に記載の方法。
11. ａ）前記画像がビデオストリームの一部分としてキャプチャされ、
    ｂ）前記方法が、前記プロセッサが、前記修正された画像を前記リモート修理技術者に送信することを含み、
    ｃ）前記プロセッサが、前記修正された画像を前記リモート修理技術者に送信することが、前記キャプチャされた画像ではなく、前記修正された画像を含むビデオストリームのバージョンを送信することによって実行される、請求項１～１０のいずれか一項に記載の方法。
12. 前記プロセッサが、前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後１０秒以内に完了する、請求項１～１１のいずれか一項に記載の方法。
13. 前記プロセッサが、前記修正された画像をほぼリアルタイムで自動的に生成することが、リアルタイムで前記修正された画像を自動的に生成することを含む、請求項１～１２のいずれか一項に記載の方法。
14. 前記プロセッサが、前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後５秒以内に完了する、請求項１～１３のいずれか一項に記載の方法。
15. 前記プロセッサが、前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後１秒以内に完了する、請求項１～１４のいずれか一項に記載の方法。
16. 前記プロセッサが、前記修正された画像を自動的に生成することが、前記ヘッドマウントカメラの前記視野の前記画像のキャプチャ後０．５秒以内に完了する、請求項１～１５のいずれか一項に記載の方法。
17. 前記ヘッドマウントカメラの前記視野の前記画像が、マスキングされる部分として識別される前記１つ以上の部分の外側に秘密情報を含む、請求項１～１６のいずれか一項に記載の方法。
18. 前記ヘッドマウントカメラが、一対の計装安全眼鏡によって構成される、請求項１～１７のいずれか一項に記載の方法。
19. ａ）前記プロセッサが、前記修正された画像を提示することが、前記修正された画像を前記リモート修理技術者に表示することを含み、
    ｂ）前記方法は、
    ｉ）前記リモート修理技術者による入力および前記修正された画像に基づいて、前記プロセッサが、前記ヘッドマウントカメラの前記視野内の研究室機器における問題に対処するための情報を含む修復オーバーレイを生成することと、
    ｉｉ）前記研究室機器のディスプレイ上に前記修復オーバーレイを含む画像を表示することと
    を含む、請求項１～１８のいずれか一項に記載の方法。
20. システムであって、
    ａ）ヘッドマウントカメラと、
    ｂ）プロセッサと
    を備え、
    前記プロセッサは、一組のコンピュータ命令で構成されており、前記一組のコンピュータ命令が、実行されると、
    Ａ）前記ヘッドマウントカメラがアクティブ化された後、前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきか否かを判定することであって、前記判定することが、
    ａ）前記ヘッドマウントカメラが事前定義された領域内に位置するか否かを判定することと、
    ｂ）前記ヘッドマウントカメラが前記事前定義された領域内に位置していないとの判定に基づいて、前記ヘッドマウントカメラによってキャプチャされた画像は、非即時閲覧用に利用可能にされるべきではないと判定することと
    を含む一組のステップを実行することによって行われる、ことと、
    Ｂ）前記ヘッドマウントカメラによってキャプチャされた画像を、
    Ｉ）前記画像が、非即時閲覧用に利用可能にされるべきであるとの判定が行われ、かつ／又は、
    ＩＩ）
    １）前記ヘッドマウントカメラによってキャプチャされた画像が、その画像がキャプチャされる前に、非即時閲覧用に利用可能にされるべきであるとの判定が行われたことと、
    ２）前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの直近の判定よりも最近において、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきでないとの判定が行われなかったことと
    の両方の命令文が真である
    場合かつその場合のみ、非即時閲覧用に利用可能にすることと
    を行うように、動作可能である、システム。
21. ａ）前記システムが、前記事前定義された領域の内側に位置するワイヤレス送受信機を備え、
    ｂ）前記ヘッドマウントカメラが前記事前定義された領域内に位置していないとの前記判定が、前記ヘッドマウントカメラと前記ワイヤレス送受信機との間の距離に基づく、請求項２０に記載のシステム。
22. ａ）前記システムが、前記事前定義された領域の境界に位置する１つ以上のワイヤレス送受信機を備え、
    ｂ）前記ヘッドマウントカメラが前記事前定義された領域内に位置していないとの前記判定は、前記ヘッドマウントカメラが前記事前定義された領域の前記境界を横切ることを検出することに基づく、請求項２０～２１のいずれか一項に記載のシステム。
23. ａ）前記システムが研究室機器を備え、
    ｂ）前記コンピュータ命令が、実行されると、
    ｉ）前記研究室機器に対する前記ヘッドマウントカメラの向きを判定することと、
    ｉｉ）前記ヘッドマウントカメラの前記向きが、前記研究室機器から９０度以上オフセットされているとの判定に基づいて、前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきではないと判定することと
    を含む一組のステップを実行することによって、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能である、請求項２０～２２のいずれか一項に記載のシステム。
24. 前記コンピュータ命令が、実行されると、認可アクションの直近の発生からの経過時間がしきい値持続時間よりも長いとの判定に基づいて、前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきではないと判定すること、を含む一組のステップを実行することによって、前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきか否かを判定するように動作可能である、請求項２０～２３のいずれか一項に記載のシステム。
25. 前記システムが、前記ヘッドマウントカメラとワイヤレス通信するように構成された研究室機器を備える、請求項２０～２４のいずれか一項に記載のシステム。
26. 前記システムが、前記ヘッドマウントカメラによってキャプチャされた画像を暗号化するように構成された研究室機器を備える、請求項２０～２５のいずれか一項に記載のシステム。
27. ａ）前記ヘッドマウントカメラが外部光源を含み、
    ｂ）前記ヘッドマウントカメラは、前記ヘッドマウントカメラがアクティブ化されたとき、かつ前記ヘッドマウントカメラによってキャプチャされた画像が非即時閲覧用に利用可能にされるべきであるとの判定が行われたときに、前記外部光源をアクティブ化するように構成されており、
    ｃ）前記ヘッドマウントカメラは、前記ヘッドマウントカメラが非アクティブ化されたとき、かつ前記ヘッドマウントカメラによってキャプチャされた画像が、非即時閲覧用に利用可能にされるべきではないとの判定が行われたときに、前記外部光源を非アクティブ化するように構成されている、請求項２０～２６のいずれか一項に記載のシステム。
28. マシンであって、
    ａ）画像をキャプチャするためのヘッドマウントカメラと、
    ｂ）前記ヘッドマウントカメラによってキャプチャされた画像に含まれる秘密情報を含まない修正された画像を生成する手段と
    を備え、前記修正された画像を生成する手段は、プロセッサを含み、前記修正された画像は、
    ｉ）前記プロセッサが、マスキングされる前記ヘッドマウントカメラによってキャプチャされた前記画像の１つ以上の部分を識別することであって、前記マスキングされる前記ヘッドマウントカメラによってキャプチャされた前記画像の１つ以上の部分を識別することは、
    ａ）前記プロセッサが、前記ヘッドマウントカメラによってキャプチャされた前記画像内の１つ以上のディスプレイ画面を識別することと、
    ｂ）前記１つ以上のディスプレイ画面のそれぞれについて、前記プロセッサが、事前定義されたインターフェースライブラリからのアイテムと一致するインターフェースがそのディスプレイ画面上に表示されているか否かを判定することと、
    ｃ）前記事前定義されたインターフェースライブラリからの少なくとも１つの一致するアイテムを有する各表示されたインターフェースについて、前記プロセッサが、前記事前定義されたインターフェースライブラリからの前記一致したアイテムからの情報に基づいて、マスキングされる前記画像の部分として、そのインターフェースの１つ以上の部分を識別することと
    を含む、ことと、
    ｉｉ）前記プロセッサが、前記１つ以上の識別された部分のそれぞれをマスキングすることと
    によって生成される、マシン。
    
    

Images