Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP6968689B2 - 電子機器、ウェアラブル機器及び表示制御方法 - Google Patents
[go: Go Back, main page]

JP6968689B2 - 電子機器、ウェアラブル機器及び表示制御方法 - Google Patents

電子機器、ウェアラブル機器及び表示制御方法 Download PDF

Info

Publication number
JP6968689B2
JP6968689B2 JP2017250968A JP2017250968A JP6968689B2 JP 6968689 B2 JP6968689 B2 JP 6968689B2 JP 2017250968 A JP2017250968 A JP 2017250968A JP 2017250968 A JP2017250968 A JP 2017250968A JP 6968689 B2 JP6968689 B2 JP 6968689B2
Authority
JP
Japan
Prior art keywords
wearable device
orientation
display unit
sensor
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017250968A
Other languages
English (en)
Other versions
JP2019117505A (ja
Inventor
林三 岩本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dynabook Inc
Original Assignee
Dynabook Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dynabook Inc filed Critical Dynabook Inc
Priority to JP2017250968A priority Critical patent/JP6968689B2/ja
Priority to US15/977,937 priority patent/US10628104B2/en
Publication of JP2019117505A publication Critical patent/JP2019117505A/ja
Application granted granted Critical
Publication of JP6968689B2 publication Critical patent/JP6968689B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0176Head mounted characterised by mechanical features
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/3827Portable transceivers
    • H04B1/385Transceivers carried on the body, e.g. in helmets
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B2027/0178Eyeglass type
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2330/00Aspects of power supply; Aspects of display protection and defect management
    • G09G2330/02Details of power systems and of start or stop of display operation
    • G09G2330/026Arrangements or methods related to booting a display
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0464Positioning
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00Aspects of interface with display user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B1/00Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/3827Portable transceivers
    • H04B1/385Transceivers carried on the body, e.g. in helmets
    • H04B2001/3866Transceivers carried on the body, e.g. in helmets carried on the head

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Eyeglasses (AREA)

Description

本発明の実施形態は、電子機器の表示画面向き制御に関する。
最近、多くのモノがインターネットでつながるIoT時代となり、オフィス、工場、その他様々な場面において、ネットワークコミュニケーションや情報共有のツールとしてエッジコンピューティングと呼ばれる技術が求められている。このエッジコンピューティングを実現するためにはデータセンター(或いはクラウド)とは別に作業者(ユーザ)がその場で使用可能な、高度の汎用性と処理能力を持つ実用的なモバイルエッジコンピューティングデバイスの開発が必要とされている。これにより、作業現場等での業務効率化や生産性向上、或いは、データの負荷分散やネットワーク環境の改善等を図ることが期待される。
また、従来、携帯電話、スマートフォン、携帯ゲーム機等のモバイル機器において、ユーザによるモバイル機器の持ち方に従って、表示画面の向き(画面内の表示内容の上下方向)の制御を行う場合がある。表示画面の向きは、ユーザが機器をどのように持つかに依存し、予め表示画面の向きを設定するものではない。そのため、機器の姿勢を検出するモーションセンサを機器に内蔵し、モーションセンサの検出結果に応じて表示画面の向きを制御することが行われている。
従来のモバイル機器の表示画面の向き制御においては、モーションセンサの設定によってはモバイル機器の姿勢の変化が僅かであっても反応し、表示画面の向きが意図せずに頻繁に変更されてしまう場合があった。
特開2012-093897号公報 特開2010-113503号公報
本発明は、実用的なモバイルエッジコンピューティングを実現することを目的とし、そのために、表示画面の向きをユーザの状況に応じて適切に制御することができる電子機器、ウェアラブル機器及び表示制御方法を提供する。
実施形態によれば、電子機器はウェアラブル機器に接続可能である。ウェアラブル機器は表示部と装着センサと姿勢センサとを具備する。電子機器は、ウェアラブル機器がユーザに装着されたことを装着センサにより検出すると、表示部の画面の向きを姿勢センサにより検出されるウェアラブル機器の姿勢に基づいて制御する様に、例えば、ウェアラブル機器に指示する表示画面向き制御部を具備する。
他の実施形態によれば、ウェアラブル機器は表示部と装着センサと姿勢センサとを具備する。ウェアラブル機器は、ユーザに装着されたことを装着センサにより検出すると、表示部の画面の向きを姿勢センサにより検出されるウェアラブル機器の姿勢に基づいて制御する。
実施形態の電子機器を含む遠隔支援システムの一例を示すブロック図である。 図1中のオペレータ端末12の一例を示すブロック図である。 図1中のモバイルPC16に接続されるウェアラブルデバイス23の外観の一例を示す。 ウェアラブルデバイス23の本体24の外観の一例を示す。 モバイルPC16とウェアラブルデバイス本体24との接続の一例を示す。 ウェアラブルデバイス本体24の一例を示すブロック図である。 モバイルPC16の外観の一例を示す。 モバイルPC16の一例を示すブロック図である。 モバイルPC16による表示画面の向きの自動調整制御の一例を示すフローチャートである。 表示画面の向きの自動調整後に表示される確認テキストの一例を示す。
以下、実施の形態について図面を参照して説明する。なお、開示はあくまで一例にすぎず、以下の実施形態に記載した内容により発明が限定されるものではない。当業者が容易に想到し得る変形は、当然に開示の範囲に含まれる。説明をより明確にするため、図面において、各部分のサイズ、形状等を実際の実施態様に対して変更して模式的に表す場合もある。複数の図面において、対応する要素には同じ参照数字を付して、詳細な説明を省略する場合もある。
[遠隔支援システム]
図1は、エッジコンピューティングを実現するための遠隔支援システムの一例を示すブロック図である。遠隔支援システムは、ユーザ、例えば作業現場の作業者を後方のオペレータが遠隔地から支援するためのシステムである。現場の作業の例は、複雑なメンテナンス業務、物流倉庫のピッキング作業、作業現場の監視、災害救助・医療サポート等がある。作業現場の作業者側をフロントエンド、後方のオペレータ側をバックエンドとも称する。遠隔支援システムは、作業者が携帯するモバイルパーソナルコンピュータ(PC)(モバイルエッジコンピューティングデバイスと呼ぶこともある)16と作業者から離れた位置にある遠隔支援センター(データセンター)18をネットワーク22を介して相互に接続され、通信可能となっている。モバイルPC16と遠隔支援センター18は有線のLANケーブルによりネットワーク22に接続されてもよいし、無線LAN、ブルートゥース(登録商標)等によりネットワーク22に接続されてもよい。
ウェアラブルデバイス23はモバイルPC16と接続される。図1では、ウェアラブルデバイス23はケーブルによりモバイルPC16に接続される例を示すが、ウェアラブルデバイス23は無線LAN、ブルートゥース等によりモバイルPC16と接続されてもよい。ウェアラブルデバイス23はカメラ、ディスプレイを備え、カメラで撮影した画像をモバイルPC16に送信し、モバイルPC16から送信される画像をディスプレイで表示する。
図1に示すように複数の作業者がネットワークを介して相互に通信することも可能である。この場合、遠隔支援センターを経由してもよいし、遠隔支援センターのオペレータを介さずに作業者同士のみで通信するようにすることも可能である。
遠隔支援センター18はオペレータ端末12とサーバ14を備える。遠隔支援センター18はモバイルPC16(及びウェアラブルデバイス23)とオペレータ端末12間で音声通話を行う又は情報をやり取りする。モバイルPC16に接続されるウェアラブルデバイス23のリアルタイム映像をオペレータ端末12にビデオ配信することや、モバイルPC16とオペレータ端末12間で画像を相互に送受信することができる。また、オペレータ端末12からモバイルPC16にテキストメッセージを送信することもできる。例えば、物流倉庫ピッキング作業では、メガネ型のウェアラブルデバイス23にピッキング品の場所を表示させ、ハンズフリーでのピッキングを実現できる。
遠隔支援としては、典型的には、例えば以下の機能を含む。
(1)モバイルPC16とオペレータ端末12との双方向の音声通話を行う音声通話機能。
(2)音声通話中にウェアラブルデバイス23のリアルタイム映像をオペレータ端末12にビデオ配信するライブ映像配信機能。
(3)音声通話中にモバイルPC16とオペレータ端末12間で静止画を送受信する静止画像の送受信機能(モバイルPC16は撮影した静止画やビデオ配信中のキャプチャ画像をオペレータ端末12に送信し、オペレータ端末12は受信した画像に文字や絵などを書き込み、編集した画像をモバイルPC16に送信する機能。モバイルPC16で受信した静止画像は、モバイルPC16内のフォルダーに保存され、閲覧可能である)。
(4)音声通話中にオペレータ端末12のデスクトップ画面全体又は任意のアプリケーションのウィンドウをウェアラブルデバイス23に表示する画面共有機能。
(5)オペレータ端末12からモバイルPC16に対してテキストメッセージを送信するテキストメッセージの送信機能。
サーバ14は遠隔支援のための処理をオペレータ端末12に代わって又は協働して行うものであり、プロセッサ(CPU)28、ROM30、RAM32、ハードディスクドライブ(HDD)又はソリッドステートドライブ(SSD)からなるストレージデバイス34、インターフェース36を備える。なお、サーバ14の機能を全てオペレータ端末12に持たせ、サーバ14を省略してもよい。
[オペレータ端末12]
図2はオペレータ端末12の一例を示すブロック図である。オペレータ端末12はデスクトップ型PC又はノートブック型PC等からなる。
オペレータは、オペレータ端末12を用いて作業現場の状況をリアルタイム映像で確認しながら、会話や画像によってモバイルPC16の作業者に指示を行う。オペレータは、オペレータ端末12を用いてモバイルPC16から受信した画像ファイルに絵や文字などの書き込みを行い、編集した画像ファイルをモバイルPC16に送信することや、オペレータ端末12に保存することができる。
オペレータ端末12は、プロセッサを含むシステムコントローラ42を備え、システムコントローラ42には、主メモリ44、BIOS−ROM50、HDD又はSSDからなるストレージデバイス52、オーディオコーデック54、グラフィクスコントローラ62、タッチパネル70、USB(登録商標)コネクタ72、無線LANデバイス74、ブルートゥースデバイス76、有線LANデバイス78、PCIExpress(登録商標)カードコントローラ80、メモリカードコントローラ82、エンベデッドコントローラ/キーボードコントローラ(EC/KBC)84等が接続される。
システムコントローラ42はストレージデバイス52から主メモリ44にロードされる様々なプログラムを実行する。これらプログラムは、オペレーティングシステム(OS)46、遠隔支援のためのバックエンドアプリケーションプログラム48を含む。システムコントローラ42は不揮発性メモリであるBIOS−ROM50に格納された基本入出力システム(BIOS)も実行する。BIOSはハードウェア制御のためのシステムプログラムである。
オーディオコーデック54は、再生対象のデジタルのオーディオ信号をアナログのオーディオ信号に変換して、ヘッドフォン58又はスピーカ60に供給する。また、オーディオコーデック54は、マイク56から入力されるアナログのオーディオ信号をデジタル信号に変換する。マイク56とヘッドフォン58は単独で設けてもよいが、インカムとして一体的に設けてもよい。
グラフィックスコントローラ62は、オペレータ端末12のディスプレイモニタとして使用される液晶表示器(LCD)64を制御する。LCD64の画面上にタッチパネル70が重ねられ、LCD64の画面にタッチペン等により手書き入力操作が行えるように構成されている。グラフィックスコントローラ62にはHDMI(登録商標)コントローラ66も接続される。HDMIコントローラ66は外部の表示デバイスとの接続のためのHDMIコネクタ68に接続される。
無線LANデバイス74は、ネットワーク22との接続のためにIEEE802.11規格の無線LAN通信を実行する。ブルートゥースデバイス76は、外部機器との接続のためにブルートゥース規格の無線通信を実行する。有線LANデバイス78は、ネットワーク22との接続のためにIEEE802.3規格の有線LAN通信を実行する。このように、オペレータ端末12とネットワーク22との接続は無線通信によってもよいし、有線通信によってもよい。
PCIExpressカードコントローラ80はオペレータ端末12と外部機器との間でPCIExpress規格の通信を行なう。メモリカードコントローラ82は、記憶媒体、例えばSDカード(登録商標)等のメモリカードにデータを書き込み、メモリカードからデータを読み出す。
EC/KBC84は電力管理コントローラであり、キーボード88を制御するキーボードコントローラも内蔵したワンチップマイクロコンピュータとして実現されている。EC/KBC84は、電源スイッチ86の操作に応じてオペレータ端末12をパワーオン又はパワーオフする機能を有する。パワーオン及びパワーオフの制御は、EC/KBC84と電源回路90との協働動作によって実行される。EC/KBC84はオペレータ端末12がパワーオフされている期間中も、バッテリ92又はACアダプタ94からの電力によって動作する。電源回路90は、バッテリ92からの電力又は外部電源として接続されるACアダプタ94からの電力を用いて、各コンポーネントへ供給すべき電力を生成する。
[ウェアラブルデバイス23]
図3はモバイルPC16に接続されるウェアラブルデバイス23の外観の一例を示す。ウェアラブルデバイス23はメガネフレーム142とウェアラブルデバイス本体24を備える。メガネフレーム142は一般的なメガネからレンズを取り除いた形状でもよく、作業者の顔に装着される。メガネフレーム142はメガネが取り付けられる構造としてもよい。作業者がメガネを常用する場合、常用しているメガネと同様な度数のレンズがメガネフレーム142に取り付けられてもよい。
メガネフレーム142はウェアラブルデバイス本体24が着脱される取付具144を左右のテンプルに備える。図3では作業者の右側のテンプルの取付具144はウェアラブルデバイス本体24に隠されているので、図示されない。上述したようにウェアラブルデバイス本体24はディスプレイ124(図4に示す)を備え、ディスプレイ124は片目で目視されるようになっているので、ウェアラブルデバイス本体24が利き目側に取り付けられるように取付具144は左右のテンプルに備えられている。なお、ウェアラブルデバイス本体24を取付具144によりメガネフレーム142に着脱自在に取り付ける必要はなく、ウェアラブルデバイス本体24がメガネフレーム142に固定された右眼用、左眼用のウェアラブルデバイス23を用意してもよい。さらに、ウェアラブルデバイス本体24をメガネフレーム142ではなく、ヘルメット、ゴーグル等を用いて作業者の頭部に装着してもよい。
ウェアラブルデバイス本体24は、その係合片128(図4に示す)が取付具144の上下の枠内に押し込まれることにより、メガネフレーム142に取り付けられる。ウェアラブルデバイス本体24をメガネフレーム142から取り外す場合は、ウェアラブルデバイス本体24が取付具144から引き抜かれる。
ウェアラブルデバイス本体24は取付具144に取り付けられた状態で、係合片128は取付具144内で前後に多少は移動可能である。このため、作業者の焦点がディスプレイ124に合うようにウェアラブルデバイス本体24は前後位置が調整可能である。さらに、取付具144はテンプルに直交する軸144Aを中心に回転可能であり、ウェアラブルデバイス本体24がメガネフレーム142に取り付けられた後、ディスプレイ124が作業者の視線上に位置するように上下位置が調整可能である。さらに、取付具144の回転角度は90度程度であり、取付具144を上方向に大きく回転することにより、ウェアラブルデバイス本体24をメガネフレーム142からはね上げることができる。これにより、ウェアラブルデバイス本体24により視野が邪魔され実物を見ることが困難な場合や、狭い場所でウェアラブルデバイス本体24が周囲の物体に干渉する場合でも、ウェアラブルデバイス23全体を顔から外す/再装着することなく、ウェアラブルデバイス本体24を作業者の視野から一時的に外す/戻すことができる。
[ウェアラブルデバイス本体24]
ウェアラブルデバイス本体24はメガネフレーム142のテンプルに沿った側面部と作業者の一方の眼球の視線上に位置する前面部とからなる。側面部に対する前面部の角度は調節可能である。
図3に示すように、前面部の外側表面にはカメラ116、ライト118、カメラLED120が設けられる。ライト118は暗部の撮影時に発光する補助照明である。カメラLED120は写真や動画の撮影時に点灯し、撮影対象者に撮影していることを認識させるためのものである。
右側のテンプルに取り付けられたウェアラブルデバイス本体24の側面部の上側面に第1、第2、第3ボタン102、104、106が設けられる。なお、作業者の利き目が左眼の場合、ウェアラブルデバイス本体24は左側のテンプルに取り付けられる。右側に取り付けられるか左側に取り付けられるかで、ウェアラブルデバイス本体24の上下が反転するので、側面部の上側面と下側面の両面に第1、第2、第3ボタン102、104、106を設けてもよい。
側面部の外側表面にはタッチパッド110、第4ボタン108、マイク112、照度センサ114が設けられる。タッチパッド110と第4ボタン108は人差し指で操作可能である。ボタン102、104、106は、ウェアラブルデバイス本体24が右側に取り付けられた際、それぞれ人差し指、中指、薬指で操作可能な位置に配置される。タッチパッド110は、その表面上で矢印に示すように作業者が指を上下前後に移動させたことを検出できるようにしている。この移動の検出は、指を接触したまま移動するドラッグの動きに加え指をさっと擦るフリックの動きも含む。タッチパッド110は、作業者の指の上下前後移動を検出すると、コマンドを入力する。本明細書では、コマンドとはウェアラブルデバイス本体24に対する特定の処理の実行指令のことである。第1〜第4ボタン102、104、106、108、タッチパッド110の操作方法はアプリケーションプログラムによって決められている。
例えば、
第3ボタン106が1回押されると、項目の選択/項目の実行がなされ、
第3ボタン106が長押しされると、起動中のアプリケーションの一覧が表示され、
第2ボタン104が1回押されると、ホーム画面に戻り、
第2ボタン104が長押しされると、クイックセッティングのメニューが表示され、
第1ボタン102が1回押されると、操作の取り消し(キーボードのEscキーと同様の動作)が実行される。
タッチパッド110の操作に関しては、例えば、
上下にドラッグされると、カーソルが上下に移動され、
前にフリックされると、左のアイコンが選択され(連続してスクロール)、
後ろにフリックされると、右のアイコンが選択され(連続してスクロール)、
前にドラックされると、左のアイコンが選択され(1項目ずつスクロール)、
後ろにドラックされると、右のアイコンが選択され(1項目ずつスクロール)る。
第1ボタン102は人差し指、第2ボタン104は中指、第3ボタン106は薬指、第4ボタン108は小指で操作できるような位置に配置される。なお、第4ボタン108が側面部の上部ではなく、側面部の外側表面に設けられるのは、スペースの関係上であり、第4ボタン108も第1〜第3ボタン102、104、106と同様に側面部の上部で設けられてよい。照度センサ114はディスプレイの明るさを自動調整するために周囲の照度を検出する。
図4はウェアラブルデバイス本体24の裏面の外観の一例を示す。前面部の内側にはLCDからなるディスプレイ124が設けられる。側面部の内側にはマイク126、スピーカ130、係合片128が設けられる。マイク126は側面部の前方に、スピーカ130は側面部の後方に、係合片128は側面部の後方に設けられる。スピーカ130の代わりにヘッドフォンを用いてもよい。その場合、オペレータ端末12と同様にマイクとヘッドフォンをインカムとして一体的に設けてもよい。
図5はモバイルPC16とウェアラブルデバイス本体24との接続の一例を示す。側面部の後方にはUSBtype−C(登録商標)規格のケーブル146の一端のプラグ146Aが挿入されるレセプタクル132が設けられる。USBtype−C規格のケーブル146の他端のプラグ146BはモバイルPC16の上部端面のUSBtype−C規格のコネクタ207に挿入される。このようにウェアラブルデバイス本体24はUSBtype−C規格のケーブル146を介してモバイルPC16に接続され、画像信号等がウェアラブルデバイス本体24とモバイルPC16の間で伝送される。ウェアラブルデバイス本体24は無線LAN、ブルートゥース等の無線通信によりモバイルPC16に接続されてもよい。
実施形態ではウェアラブルデバイス本体24は駆動電源としてのバッテリ又はDC端子を備えず、駆動電源はモバイルPC16からUSBtype−Cケーブル146を介してウェアラブルデバイス本体24に供給される。しかし、ウェアラブルデバイス本体24が駆動電源を備えてもよい。
図6はウェアラブルデバイス本体24の一例を示すブロック図である。USBtype−Cコネクタ132がミキサ166に接続される。ディスプレイコントローラ170と124とUSBハブ164がミキサ166の第1端子、第2端子にそれぞれ接続される。ディスプレイ124がディスプレイコントローラ170に接続される。カメラコントローラ168、オーディオコーデック172、センサコントローラ162がUSBハブ164に接続される。カメラ116とライト118とカメラLED120がカメラコントローラ168に接続される。マイク112、126からのオーディオ信号がオーディオコーデック172に入力され、オーディオコーデック172からのオーディオ信号がアンプ174を介してスピーカ130に入力される。
センサコントローラ162に、モーションセンサ(例えば、加速度/地磁気/重力/ジャイロセンサ等)176、照度センサ114、近接センサ178、タッチパッド110、第1〜第4ボタン102、104、106、108、GPSセンサ180が接続される。センサコントローラ162はモーションセンサ176、照度センサ114、近接センサ178、タッチパッド110、第1〜第4ボタン102、104、106、108、GPSセンサ180からの検出信号を処理して、モバイルPC16へコマンドを供給する。図4には示していないが、モーションセンサ176、近接センサ178はウェアラブルデバイス本体24の内部に配置される。モーションセンサ176はウェアラブルデバイス本体24の動き、向き、姿勢等を検出する。近接センサ178は作業者の顔、指等の接近によりウェアラブルデバイス23の装着を検出する。
[モバイルPC16]
図7はモバイルPC(モバイルエッジコンピューティングデバイス)16の外観の一例を示す。モバイルPC16は片手で持てる小型PCであり、そのサイズは、幅が約10cm以下、高さが約18cm以下、厚さが2cm程度であり、重量は約300g程度と、小型で軽量である。このため、モバイルPC16は作業着のポケット、ベルトに装着されるホルスタあるいはショルダーケースに収納でき、ウェアラブルである。モバイルPC16はCPUや半導体メモリ等の半導体チップやSSD(Solid State Disk)等のストレージデバイスを収納するが、ディスプレイと文字入力用のハードウェアキーボードは備えない。
モバイルPC16の正面にはアップボタン202a、ライトボタン202b、ダウンボタン202c、レフトボタン202d、決定ボタン(センターボタン、エンターボタンとも称する)202eからなる5ボタン202が配置され、その下に指紋センサ204が配置される。文字入力用のハードウェアキーボードが備わっておらず暗証番号(PINとも称する)を入力することができないので、指紋センサ204はモバイルPC16のログイン時のユーザ認証のために用いられる。5ボタン202はコマンドを入力できる。
なお、5ボタン202の各ボタン202a〜202dに数字を割り当て、5ボタン202を用いて暗証番号を入力することにより、ログイン時のユーザ認証を行ってもよい。この場合、指紋センサ204は省略可能である。決定ボタン202e以外の4つのボタンに数字を割り当てるので、数字の種類は4つしかないので、ランダムに入力した数字が暗証番号に一致する可能性がある。しかし、暗証番号の桁数を大きくすれば、ランダムに入力した数字が暗証番号に一致する確率を小さくすることができる。指紋センサ204を備えるモバイルPC16でも5ボタン202による認証も可能としてもよい。1台のモバイルPC16を複数の作業者で共有することがあるが、指紋認証だけではこのような場合に対応できない。
5ボタン202はウェアラブルデバイス本体24のボタン102、104、106、108とタッチパッド110の操作と同じ操作が可能である。ウェアラブルデバイス本体24のボタン102、104、106、108とタッチパッド110は操作している様子を作業者は見ることができないので、作業者によっては意図した操作をするには慣れが必要な場合もある。また、ボタン102、104、106、108とタッチパッド110は小型であるので、操作しづらい場合もある。実施形態では、モバイルPC16の5ボタン202でも同じ操作ができるので、上記の懸念は解消される。5ボタン202の操作方法はアプリケーションによって決められている。
例えば、
決定ボタン202eが1回押されると、項目の選択/項目の実行がなされ(ウェアラブルデバイス本体24では、第3ボタン106の1回押しに対応)、
決定ボタン202eが長押しされると、終了又は操作の取り消しがなされ(ウェアラブルデバイス本体24では、第1ボタン102の1回押しに対応)、
アップボタン202aが1回押されると、カーソルが上に移動され(ウェアラブルデバイス本体24では、タッチバッド110で上にドラッグに対応)、
アップボタン202aが長押しされると、起動中のアプリケーションの一覧が表示され(ウェアラブルデバイス本体24では、第3ボタン106の長押しに対応)、
ダウンボタン202cが1回押されると、カーソルが下に移動され(ウェアラブルデバイス本体24では、タッチバッド110で下にドラッグに対応)、
ダウンボタン202cが長押しされると、クイックセッティングメニュー(後述)が表示され(ウェアラブルデバイス本体24では、第2ボタン104の長押しに対応)、
レフトボタン202dが1回押されると、右のアイコンが選択され(ウェアラブルデバイス本体24では、タッチバッド110で後ろにドラッグ/フリックに対応)、
ライトボタン202bが1回押されると、左のアイコンが選択される(ウェアラブルデバイス本体24では、タッチバッド110で前にドラッグ/フリックに対応)。
モバイルPC16の上部側面には、USB3.0規格のコネクタ206とUSBtype−C規格のコネクタ207とオーディオジャック208が設けられる。
モバイルPC16の一方の側面(正面から見て左側の側面)には、メモリカード用のカードスロット218が設けられる。メモリカードは、例えばSDカード、マイクロSDカード(登録商標)等を含む。
モバイルPC16の他方の側面(正面から見て右側の側面)には、ケンジントンロック(登録商標)のためのスロット210、電源スイッチ212、パワーLED213、DC IN/バッテリLED214、DC端子216、冷却用の通風口222が設けられる。パワーLED213は電源スイッチ212の周囲に配置され、電源オンの期間点灯する。DC IN/バッテリLED214はバッテリが充電中であるか否か等のモバイルPC16の状態とバッテリの残量を表示する。モバイルPC16はバッテリで駆動可能であるが、DC端子216にACアダプタを接続した状態でも駆動可能である。図示しないが、裏面はワンタッチでバッテリが交換可能に構成されている。
図8はモバイルPC16の一例を示すブロック図である。モバイルPC16はウェアラブルデバイス本体24で撮影した映像をオペレータ端末12へビデオ配信することや、オペレータ端末12から受信した画像を閲覧することができる。このため、モバイルPC16はカメラ機能とビューワ機能を備える。カメラ機能はウェアラブルデバイス本体24のカメラ116で写真やビデオを撮影する機能である。撮影した写真やビデオはカメラフォルダに保存され、ビューワ機能で閲覧できる。ビューワ機能はカメラフォルダに保存されているファイルを閲覧する機能である。ファイルの種類は、画像、動画、PDFファイル、カメラ機能で撮影した写真やビデオ、オペレータ端末12から受信した画像、オペレータ端末12へ送信した画像、ユーザフォルダに保存されたファイルがある。
モバイルPC16はシステムコントローラ302を備え、システムコントローラ302はプロセッサ(CPU)とコントローラ・ハブからなる。プロセッサには、主メモリ308、パワーLED213、DC IN/バッテリLED214、USBコントローラ322が接続される。コントローラ・ハブには、フラッシュメモリ326、メモリカードコントローラ328、HDD又はSSDからなるストレージデバイス330、USB切替器324、オーディオコーデック334、3G/LTE/GPSデバイス336、指紋センサ204、USB3.0コネクタ206、ブルートゥースデバイス338、無線LANデバイス340、EC/KBC344が接続される。
システムコントローラ302はストレージデバイス330から主メモリ308にロードされる様々なプログラムを実行する。これらプログラムは、OS316、遠隔支援のためのフロントエンドアプリケーションプログラム314を含む。
オーディオコーデック334は、再生対象のデジタルのオーディオ信号をアナログのオーディオ信号に変換して、オーディオジャック208に供給する。また、オーディオコーデック334は、オーディオジャック208から入力されるアナログのオーディオ信号をデジタル信号に変換する。
メモリカードコントローラ328はメモリカードスロット218に挿入されるメモリカード、例えばSDカードにアクセスして、SDカードに対するデータの読み書きを制御する。
USBコントローラ322はUSBtype−Cコネクタ207に接続されるUSBtype−Cケーブル又はUSB3.0コネクタ206に接続されるUSB3.0ケーブル(図示せず)に対するデータの送受信を制御する。
図示しないが、USBtype−Cコネクタ207にはポート拡張アダプタも接続可能であり、HDMI等のインターフェースが使用可能である。
ブルートゥースデバイス338はネットワーク22との接続のためにブルートゥース規格の無線通信を実行する。無線LANデバイス340は、ネットワーク22との接続のためにIEEE802.11規格の無線LAN通信を実行する。なお、ネットワーク22との接続は無線通信によらず、IEEE802.3規格の有線LAN通信によってもよい。
指紋センサ204はモバイルPC16の起動時の指紋認証のために使用される。
EC/KBC344には、サブプロセッサ346、電源スイッチ212及び5ボタン202が接続される。EC/KBC344は、電源スイッチ212の操作に応じてモバイルPC16をパワーオン又はパワーオフする機能を有する。パワーオン及びパワーオフの制御は、EC/KBC344と電源回路350との協働動作によって実行される。EC/KBC344はモバイルPC16がパワーオフされている期間中も、バッテリ352又はACアダプタ358からの電力によって動作する。電源回路350は、バッテリ352からの電力又は外部電源として接続されるACアダプタ358からの電力を用いて、各コンポーネントへ供給すべき電力を生成する。電源回路350は電圧レギュレータモジュール356を含み、電圧レギュレータモジュール356はシステムコントローラ302内のプロセッサに接続される。
なお、モバイルPC16をウェアラブルデバイス本体24と別体として構成したが、モバイルPC16をウェアラブルデバイス本体24内に組み込んで、両者を一体として構成してもよい。
[表示画面向き制御]
図3を参照して上述したように、ウェアラブルデバイス本体24はメガネフレーム142の利き目側のテンプルに取り付けられる。ウェアラブルデバイス本体24を右側に取り付けた場合と左側に取り付けた場合とで表示画面の上下が反転する。例えば、ウェアラブルデバイス本体24を作業者の右側のテンプルに取り付けた場合、表示画面は上向きであるが、ウェアラブルデバイス本体24を作業者の左側のテンプルに取り付けた場合、表示画面は下向きとなり、上下が反転され、見づらい画面となる。
このため、実施形態は、ウェアラブルデバイス本体24がメガネフレーム142の右側に取り付けられるか左側に取り付けられるかに応じて表示画面の向き(画面内の表示内容の上下方向)を制御する。例えば、スマートフォン等のモバイル機器と同様に、モーションセンサによりウェアラブルデバイス本体24の姿勢、すなわちウェアラブルデバイス本体24がメガネフレーム142の右側に取り付けられるか又は左側に取り付けられるかを検出し、検出結果に応じて表示画面の向きを制御することが考えられる。しかし、この方法では、作業者の作業内容によっては作業者の意図しない向きで画面が表示されることがある。例えば、自動車の整備作業においては、作業者は頭を下げて覗き込んだり、自動車の下に潜り込んで仰向けに寝転がって作業したりする場合がある。この時、作業者の頭が僅かでも水平面から鉛直下方向に向けられると、モーションセンサが姿勢の変更を検出し、表示画面が反転してしまう。また、ウェアラブルデバイス本体24をはね上げた場合も、モーションセンサが姿勢の変更を検出し、表示画面が反転してしまう場合がある。
実施形態のウェアラブルデバイス本体24は加速度/地磁気/重力/ジャイロセンサ等のモーションセンサ176と近接センサ178を備え、これらのセンサの検出結果をモバイルPC16に送信する。モバイルPC16は上記の状況が生じないように、これらのセンサの検出結果に基づいて表示画面の向きを制御する。
図9は画面制御処理の一例を示すフローチャートである。図5を参照して上述したように、ウェアラブルデバイス本体24は駆動電源を備えず、モバイルPC16とウェアラブルデバイス本体24がUSBtype−Cケーブル146を介して互いに接続されると、モバイルPC16からウェアラブルデバイス本体24に電源が供給され、ウェアラブルデバイス本体24の電源がオンされる。モバイルPC16はステップ502でウェアラブルデバイス本体24に画像信号を供給し、ディスプレイ124で画像を表示させる。この時は、画像の上側が図3の状態のディスプレイ124の上側となるように表示画面の向きが制御されているとする。そのため、ウェアラブルデバイス本体24が作業者の右側のテンプルに取り付けられている場合、表示画面は上向きであるが、ウェアラブルデバイス本体24が作業者の左側のテンプルに取り付けられている場合、表示画面は下向きとなる。なお、ステップ502で画像の上側が図3の状態のディスプレイ124の下側となるように初期状態の表示画面の向きが制御されてもよい。
モバイルPC16はステップ504で近接センサ178の検出結果が非近接から近接に変化したか否かを判定する。近接センサ178は人体の接近を検出するので、近接センサ178の検出結果が非近接から近接に変化した場合、モバイルPC16は作業者がウェアラブルデバイス23を装着したと判定する。近接センサ178が近接を検出しない場合、ステップ504の判定が繰り返される。
上述したように、上記の自動車の整備作業の例等において作業者はウェアラブルデバイス本体24により視野が邪魔される場合、ウェアラブルデバイス本体24を一時的にはね上げることがある。ウェアラブルデバイス本体24がはね上げられると、近接センサ178の検出結果は非近接となり、ウェアラブルデバイス23は非装着状態と判断される。その後、ウェアラブルデバイス本体24が「はね上げ」から元の状態に戻されると、近接センサ178の検出結果は近接となる。このため、モバイルPC16は作業者がウェアラブルデバイス23を装着したと判定してしまう。
「はね上げ/はね下げ」(はね上げた後にはね下げる)による近接検出と、ウェアラブルデバイス23の装着による近接検出とを区別するために、モバイルPC16はステップ504で近接を検出すると、近接センサ178の近接検出前にウェアラブルデバイス本体24の「はね上げ/はね下げ」動作が検出されていたか否かをモーションセンサ176の出力に基づいてステップ506で判定する。この判定のため、モバイルPC16はモーションセンサ176の出力を一定時間、例えば数10分程度主メモリ308に保存している。「はね上げ/はね下げ」動作はメガネフレーム142のテンプルの取付具144を中心とするウェアラブルデバイス本体24の上下運動である。
「はね上げ/はね下げ」動作が検出されていた場合、ステップ504の判定が繰り返される。
近接センサ178の近接検出前に「はね上げ/はね下げ」動作がモーションセンサ176により検出されていない場合、モバイルPC16はステップ508でモーションセンサ176の出力に基づいてウェアラブルデバイス本体24の取り付け方向が上向きである、すなわち作業者の右側のテンプルに装着されているか否かを判定する。ウェアラブルデバイス本体24の取り付け方向が上向きであることを検出した場合、モバイルPC16はステップ512で表示画面の向きを上向きに設定する。表示画面の向きが上向きの場合、画像の上側がディスプレイ124の上辺となる。ウェアラブルデバイス本体24の取り付け方向が上向きでない、すなわち作業者の左側のテンプルに装着されていることを検出した場合、モバイルPC16はステップ514で表示画面の向きを下向きに設定する。表示画面の向きが下向きの場合、画像の上側がディスプレイ124の下辺となる。表示画面の向きはモバイルPC16において制御してもよいが、実施形態ではウェアラブルデバイス本体24のディスプレイコントローラ170で表示画面の向きを制御する。
ステップ512、514でモバイルPC16はウェアラブルデバイス本体24のディスプレイコントローラ170に表示画面向き制御信号を送信する。図示しないが、ディスプレイコントローラ170はフレームメモリを備え、ディスプレイ124に供給される画像信号はフレームメモリに一旦書き込まれる。表示画面の向きを反転する際は、フレームメモリから画像信号を読み出す際、各画素を書き込みの順番と逆の順番で読み出す。なお、モバイルPC16側において表示画面の向きを制御する場合は、主メモリ308にフレームメモリを設け、同様な処理を行なえばよい。
ステップ512又は514の後、ステップ516でモバイルPC16は近接センサ178の近接検出(モバイルデバイス23の装着検出)の時点から一定時間、例えば数秒間が経過したか否かを判定する。一定時間が経過するまではステップ508に戻り、ウェアラブルデバイス本体24のメガネフレーム142のテンプルへの取り付け方向のモーションセンサ176による判定と、取り付け方向に応じた表示画面の向きの設定が繰り返される。そのため、モバイルデバイス23の装着を検出してから一定時間が経過するまでは、表示画面の向き反転が繰り返されることがある。これは、モーションセンサ176の検出精度を高めるためと、表示画面の向きを自動調整している期間であることを作業者に知らせるためである。作業者は表示画面の向きの自動調整期間であることを認識すると、モーションセンサ176が誤検出しないように頭を静止することができる。このため、モーションセンサ176の検出精度をさらに高めることができる。
装着検出の時点から一定時間が経過すると、モバイルPC16はステップ518で表示画面の向きを固定する。すなわち、これ以降は、モーションセンサ176の検出結果、すなわち作業者の姿勢に関わらず、表示画面の向きは変わらない。
以上の動作により、モバイルPC16はウェアラブルデバイス23の装着を検出してから一定時間はモーションセンサ176の検出結果に基づいて表示画面の向きを制御する。そして、一定時間経過すると表示画面の向きを固定し、それ以降はモーションセンサ176の検出結果に基づく表示画面の向きの制御を実行しない。これにより、ウェアラブルデバイス23が作業者に装着されると、メガネフレーム142へのウェアラブルデバイス本体24の取り付け方向がモーションセンサ176により検出され、検出結果に応じてウェアラブルデバイス本体24のディスプレイの表示画面の向きが自動的に調整される。自動調整は一定時間継続し、一定時間経過後は表示画面の向きは固定される。そのため、作業者が作業中にどのような姿勢(例えば、頭を下げて覗き込む姿勢又は自動車の下に潜り込んで仰向けに寝転がる姿勢)をとっても、表示画面の向きが反転することがなく、表示画面は常に作業者の意図した向きで表示される。
図9はステップ518の後、ステップ522、524、526を含むが、上述したようにステップ518までで表示画面の向きの自動調整処理は完結しており、ステップ522、524、526の処理は省略してもよい。
ステップ522で、モバイルPC16はウェアラブルデバイス本体24のディスプレイ124に表示向きの自動調整結果が適切であるか否かを作業者に判断させるために「表示画面の向き確認テキスト」を表示させる。「表示画面の向き確認テキスト」の一例を図10に示す。例えば、テキストは「画面の向きを自動調整しました。この画面は○○秒後に自動的に閉じます。」を含む。テキストの下に「画面の向きを変える」ボタンが表示される。「画面の向き確認テキスト」が表示されると、カーソルは「画面の向きを変える」ボタンに位置し、モバイルPC16の決定ボタン202eが1回押される又はウェアラブルデバイス本体24の第3ボタン106が1回押されると、ステップ524で「画面の向きを変える」ボタンが選択され、ステップ526で表示画面の反転指示がモバイルPC16からディスプレイコントローラ170に供給され、表示画面の反転処理が行われる。このように、自動調整後に作業者の手動操作によりさらに表示画面を反転することもできるので、表示画面の向きの自動調整が困難な場合でも、表示画面の向きを適切に設定することができる。
本実施形態の処理はコンピュータプログラムによって実現することができるので、このコンピュータプログラムを格納したコンピュータ読み取り可能な記憶媒体を通じてこのコンピュータプログラムをコンピュータにインストールして実行するだけで、本実施形態と同様の効果を容易に実現することができる。
なお、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。更に、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
例えば、実施形態のウェアラブルデバイス本体24は電源を備えていないので、モバイルPC16に接続され、モバイルPC16から電源が供給されるとともに、表示向き制御等の処理やウェアラブルデバイス本体24で撮影された画像信号やウェアラブルデバイス本体24で表示される画像信号の処理等はモバイルPC16で行われているが、モバイルPC16の機能と電源をウェアラブルデバイス本体24に含めて、モバイルPC16を省略し、ウェアラブルデバイス本体24で処理するように構成してもよい。この場合のシステム構成は、図1、図5からモバイルPC16が省略され、図6に示すウェアラブルデバイス本体24のブロック回路図に図8に示すモバイルPC16の回路構成を組み合わせるものとなる。
12…オペレータ端末、14…サーバ、16…モバイルPC、18…遠隔支援サーバ、23…ウェアラブルデバイス、24…ウェアラブルデバイス本体、102、104、106、108…ボタン、110…タッチパッド、116…カメラ、124…ディスプレイ、126…マイク、128…係合片、130…スピーカ、132…USBコネクタ、142…メガネフレーム、144…取付具、176…モーションセンサ、178…近接センサ、202…5ボタン。

Claims (20)

  1. 表示部と装着センサと姿勢センサとを具備するウェアラブル機器に接続可能な電子機器であって、
    ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した時点から所定時間は、前記表示部の画面の向きを前記姿勢センサにより検出された前記ウェアラブル機器の姿勢に基づいて制御する表示画面向き制御部を具備する電子機器。
  2. 前記表示画面向き制御部は、前記ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した時点から前記所定時間の経過後、前記表示部の画面の向きを固定する請求項1記載の電子機器。
  3. 前記表示画面向き制御部は、前記表示部の画面の向きを前記姿勢センサにより検出された前記ウェアラブル機器の姿勢に基づいて制御した後、前記画面の向きに関するテキスト情報を前記表示部で表示させる請求項1又は請求項2記載の電子機器。
  4. 前記表示画面向き制御部は、前記テキスト情報の表示後、前記ユーザの指示入力に基づいて前記表示部の画面の向きを反転する請求項3記載の電子機器。
  5. 前記ウェアラブル機器は、
    メガネフレームと、
    前記表示部と前記装着センサと前記姿勢センサとを備え、前記メガネフレームに取り付け可能な機器本体とを具備し、
    前記機器本体は、前記表示部が前記ユーザの視野内に位置する第1位置と前記表示部が前記ユーザの視野外に位置する第2位置とで切り替えられるように前記メガネフレームに取り付け可能なものである請求項2記載の電子機器。
  6. 前記表示画面向き制御部は、前記機器本体が前記第2位置から前記第1位置に変化した後に前記ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した場合、前記表示部の画面の向きを維持する請求項5記載の電子機器。
  7. 前記姿勢センサは重力センサ、地磁気センサ、加速度センサ又はジャイロセンサを具備する請求項2記載の電子機器。
  8. 表示部と装着センサと姿勢センサとを具備するウェアラブル機器であって、
    ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した時点から所定時間は、前記表示部の画面の向きを前記姿勢センサにより検出される前記ウェアラブル機器の姿勢に基づいて制御する表示画面向き制御部を具備するウェアラブル機器。
  9. 前記表示画面向き制御部は、前記ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した時点から前記所定時間の経過後、前記表示部の画面の向きを固定する請求項8記載のウェアラブル機器。
  10. 前記表示画面向き制御部は、前記表示部の画面の向きを前記姿勢センサにより検出される前記ウェアラブル機器の姿勢に基づいて制御した後、前記画面の向きに関するテキストを前記表示部で表示させる請求項8又は請求項9記載のウェアラブル機器。
  11. 前記表示画面向き制御部は、前記テキストの表示後、前記ユーザの指示入力に基づいて前記表示部の画面の向きを反転する請求項10記載のウェアラブル機器。
  12. 前記ウェアラブル機器は、
    メガネフレームと、
    前記表示部と前記装着センサと前記姿勢センサとを備え、前記メガネフレームに取り付け可能な機器本体とを具備し、
    前記機器本体は、前記表示部がユーザの視野内に位置する第1位置と前記表示部が前記前記ユーザの視野外に位置する第2位置とで切り替えられるように前記メガネフレームに取り付け可能なものである請求項8乃至請求項11のいずれか一項記載のウェアラブル機器。
  13. 前記表示画面向き制御部は、前記機器本体が前記第2位置から前記第1位置に変化した後に前記ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した場合、前記表示部の画面の向きを維持する請求項12記載のウェアラブル機器。
  14. 前記姿勢センサは重力センサ、地磁気センサ、加速度センサ又はジャイロセンサを具備する請求項8乃至請求項13のいずれか一項記載のウェアラブル機器。
  15. 表示部と装着センサと姿勢センサとを具備するウェアラブル機器の表示制御方法であって、
    ユーザが前記ウェアラブル機器を装着したことを前記装着センサにより検出し、
    前記装着センサが検出した時点から所定時間は、前記表示部の画面の向きを前記姿勢センサにより検出される前記ウェアラブル機器の姿勢に基づいて制御する表示制御方法。
  16. 前記ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した時点から前記所定時間の経過後、前記表示部の画面の向きを固定する請求項15記載の表示制御方法。
  17. 前記表示部の画面の向きを前記姿勢センサにより検出される前記ウェアラブル機器の姿勢に基づいて制御した後、前記画面の向きに関するテキストを前記表示部で表示させる請求項15又は請求項16記載の表示制御方法。
  18. 前記テキストの表示後、前記ユーザの指示入力に基づいて前記表示部の画面の向きを反転する請求項17記載の表示制御方法。
  19. 前記ウェアラブル機器は、
    メガネフレームと、
    前記表示部と前記装着センサと前記姿勢センサとを備え、前記メガネフレームに取り付け可能な機器本体とを具備し、
    前記機器本体は、前記表示部が前記ユーザの視野内に位置する第1位置と前記表示部が前記ユーザの視野外に位置する第2位置とで切り替えられるように前記メガネフレームに取り付け可能なものである請求項15乃至請求項18のいずれか一項記載の表示制御方法。
  20. 前記機器本体が前記第2位置から前記第1位置に変化した後に前記ユーザが前記ウェアラブル機器を装着したことを前記装着センサが検出した場合、前記表示部の画面の向きを維持する請求項19記載の表示制御方法。
JP2017250968A 2017-12-27 2017-12-27 電子機器、ウェアラブル機器及び表示制御方法 Active JP6968689B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2017250968A JP6968689B2 (ja) 2017-12-27 2017-12-27 電子機器、ウェアラブル機器及び表示制御方法
US15/977,937 US10628104B2 (en) 2017-12-27 2018-05-11 Electronic device, wearable device, and display control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017250968A JP6968689B2 (ja) 2017-12-27 2017-12-27 電子機器、ウェアラブル機器及び表示制御方法

Publications (2)

Publication Number Publication Date
JP2019117505A JP2019117505A (ja) 2019-07-18
JP6968689B2 true JP6968689B2 (ja) 2021-11-17

Family

ID=66950309

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017250968A Active JP6968689B2 (ja) 2017-12-27 2017-12-27 電子機器、ウェアラブル機器及び表示制御方法

Country Status (2)

Country Link
US (1) US10628104B2 (ja)
JP (1) JP6968689B2 (ja)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7622421B2 (ja) 2020-12-23 2025-01-28 富士フイルムビジネスイノベーション株式会社 情報処理装置、情報処理システムおよびプログラム
WO2023229199A1 (ko) * 2022-05-24 2023-11-30 삼성전자 주식회사 전자 장치의 화면 표시 모드를 결정하는 동작 방법 및 전자 장치

Family Cites Families (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4869575A (en) * 1986-05-12 1989-09-26 Iota Instrumentation Company Headwear-mounted periscopic display device
TW362207B (en) * 1997-05-08 1999-06-21 Shimadzu Corp Display system
JP2007219116A (ja) * 2006-02-16 2007-08-30 Nikon Corp ヘッドマウントディスプレイ
JP4999408B2 (ja) * 2006-09-11 2012-08-15 スカラ株式会社 ヘッドマウント型表示装置、及び画像表示装置
US7631968B1 (en) * 2006-11-01 2009-12-15 Motion Research Technologies, Inc. Cell phone display that clips onto eyeglasses
WO2008088691A2 (en) * 2007-01-12 2008-07-24 Kopin Corporation Head mounted monocular display device
US9217868B2 (en) * 2007-01-12 2015-12-22 Kopin Corporation Monocular display device
JP2010113503A (ja) 2008-11-06 2010-05-20 Sharp Corp 携帯端末装置
JP2010226660A (ja) * 2009-03-25 2010-10-07 Olympus Corp 眼鏡装着型画像表示装置
JP5245981B2 (ja) * 2009-03-30 2013-07-24 ブラザー工業株式会社 ヘッドマウントディスプレイ
JP5825771B2 (ja) * 2010-10-26 2015-12-02 京セラ株式会社 携帯端末、画面方向制御プログラムおよび画面方向制御方法
US9142062B2 (en) * 2011-03-29 2015-09-22 Qualcomm Incorporated Selective hand occlusion over virtual projections onto physical surfaces using skeletal tracking
JP5594258B2 (ja) * 2011-08-23 2014-09-24 ブラザー工業株式会社 ヘッドマウントディスプレイ
JP2013070194A (ja) * 2011-09-21 2013-04-18 Kyocera Corp 携帯端末装置、プログラムおよび表示制御方法
JP2013206412A (ja) * 2012-03-29 2013-10-07 Brother Ind Ltd ヘッドマウントディスプレイ及びコンピュータプログラム
JP2014022937A (ja) * 2012-07-18 2014-02-03 Nikon Corp 頭部装着型情報入出力装置、及び頭部装着型情報入出力方法
JP6353214B2 (ja) * 2013-11-11 2018-07-04 株式会社ソニー・インタラクティブエンタテインメント 画像生成装置および画像生成方法
US20150145887A1 (en) * 2013-11-25 2015-05-28 Qualcomm Incorporated Persistent head-mounted content display
JP6349744B2 (ja) * 2014-01-28 2018-07-04 株式会社Jvcケンウッド 表示装置、表示方法および表示プログラム
US20170090557A1 (en) * 2014-01-29 2017-03-30 Google Inc. Systems and Devices for Implementing a Side-Mounted Optical Sensor
JP6177998B2 (ja) * 2014-04-08 2017-08-09 日立マクセル株式会社 情報表示方法および情報表示端末
JP2016004340A (ja) * 2014-06-16 2016-01-12 セイコーエプソン株式会社 情報配信システム、頭部装着型表示装置、頭部装着型表示装置の制御方法、および、コンピュータープログラム
JP6455520B2 (ja) * 2014-09-30 2019-01-23 コニカミノルタ株式会社 ヘッドマウントディスプレイ及びウェアラブルコンピューター
US10001857B2 (en) * 2015-05-13 2018-06-19 Seiko Epson Corporation Display apparatus and method of controlling display apparatus
US10877298B2 (en) * 2015-06-16 2020-12-29 Maxell, Ltd. Head-mounted display device
KR102697559B1 (ko) * 2016-12-22 2024-08-23 삼성전자주식회사 영상 표시 방법, 저장 매체 및 전자 장치
US11163161B2 (en) * 2016-12-30 2021-11-02 Gopro, Inc. Wearable imaging device
JP6919222B2 (ja) * 2017-02-27 2021-08-18 セイコーエプソン株式会社 表示装置、及び、表示装置の制御方法
CA3084546C (en) * 2017-12-03 2023-01-31 Frank Jones Enhancing the performance of near-to-eye vision systems

Also Published As

Publication number Publication date
US20190196769A1 (en) 2019-06-27
US10628104B2 (en) 2020-04-21
JP2019117505A (ja) 2019-07-18

Similar Documents

Publication Publication Date Title
JP7080636B2 (ja) システム
JP7073122B2 (ja) 電子機器、制御方法及びプログラム
KR102492560B1 (ko) 전자 장치 및 그의 입력 제어 방법
US11061565B2 (en) Electronic device and control method
WO2022134632A1 (zh) 作品处理方法及装置
WO2022057644A1 (zh) 设备交互方法、电子设备及交互系统
US11145304B2 (en) Electronic device and control method
US10552360B2 (en) Electronic device, connection method, and storage medium
JP6968689B2 (ja) 電子機器、ウェアラブル機器及び表示制御方法
US20200098361A1 (en) Electronic device, recognition method, and non-transitory computer-readable storage medium
JP6995650B2 (ja) ウェアラブル機器及びその操作方法
US10852548B2 (en) Electronic device, wearable device, and setting method
US10705726B2 (en) Electronic device, wearable device, and character input control method
US11068573B2 (en) Electronic device and method of starting electronic device
US20200226893A1 (en) Electronic edge computing device
US20190236260A1 (en) Electronic apparatus, control system, control method, and storage medium
JP6995651B2 (ja) 電子機器、ウェアラブル機器および表示制御方法
US11042705B2 (en) Electronic device, recognition method, and non-transitory computer-readable storage medium
US11063822B2 (en) Electronic apparatus and control method

Legal Events

Date Code Title Description
A80 Written request to apply exceptions to lack of novelty of invention

Free format text: JAPANESE INTERMEDIATE CODE: A80

Effective date: 20180123

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20181207

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20201209

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211004

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211012

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211027

R150 Certificate of patent or registration of utility model

Ref document number: 6968689

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150