Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7346331B2 - 近接検出装置及び情報処理システム - Google Patents
[go: Go Back, main page]

JP7346331B2 - 近接検出装置及び情報処理システム - Google Patents

近接検出装置及び情報処理システム Download PDF

Info

Publication number
JP7346331B2
JP7346331B2 JP2020035466A JP2020035466A JP7346331B2 JP 7346331 B2 JP7346331 B2 JP 7346331B2 JP 2020035466 A JP2020035466 A JP 2020035466A JP 2020035466 A JP2020035466 A JP 2020035466A JP 7346331 B2 JP7346331 B2 JP 7346331B2
Authority
JP
Japan
Prior art keywords
approach
hand
user
detection
data processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020035466A
Other languages
English (en)
Other versions
JP2021140286A (ja
Inventor
雅人 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alpine Electronics Inc
Original Assignee
Alpine Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc filed Critical Alpine Electronics Inc
Priority to JP2020035466A priority Critical patent/JP7346331B2/ja
Priority to US17/167,239 priority patent/US11619999B2/en
Priority to EP21157933.9A priority patent/EP3926444B1/en
Priority to CN202110216503.2A priority patent/CN113341423B/zh
Publication of JP2021140286A publication Critical patent/JP2021140286A/ja
Application granted granted Critical
Publication of JP7346331B2 publication Critical patent/JP7346331B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/04Systems determining the presence of a target
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22Display screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional [3D], e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/141Activation of instrument input devices by approaching fingers or pens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143Touch sensitive instrument input devices
    • B60K2360/1438Touch screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • B60K2360/14643D-gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/1523Matrix displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/332Light emitting diodes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/40Hardware adaptations for dashboards or instruments
    • B60K2360/48Sensors
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/741Instruments adapted for user detection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77Instrument locations other than the dashboard
    • B60K2360/782Instrument locations other than the dashboard on the steering wheel
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Electromagnetism (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Description

本発明は、ユーザの手のディスプレイの表示面への接近を検出する技術に関するものである。
ユーザの手のディスプレイの表示面への接近を検出する技術としては、ディスプレイの表示面の下辺の下方に左右に並べて配置した複数の赤外線LEDからディスプレイの表示面の前方に赤外光を照射し、フォトダイオードで、ユーザの手による赤外光の反射光を検出することにより、ユーザの手のディスプレイの表示面への接近を検知し、ディスプレイに対する操作として受け付ける技術が知られている(たとえば、特許文献1)。
ここで、この技術では、ディスプレイは、自動車のダッシュボードの運転席と助手席の間の位置に配置されており、主として運転者であるユーザのディスプレイに対する操作を受け付ける。
特開2019-74465号公報
ディスプレイとして、上述した運転席と助手席の間に配置されたディスプレイのようにユーザの正面に配置されていないディスプレイを用いる場合、ユーザの手首や腕による赤外光の反射のために正しくディスプレイに対する操作を受け付けられないことがある。
すなわち、たとえば、ディスプレイに接近させた手を左から右に所定のしきい値より大きく移動する動作を、ディスプレイに対する操作として受け付ける場合、操作するユーザがディスプレイの左側に着席したユーザであるときには、図7aのように、ユーザが左から右に手を移動していくと右に進むに従ってユーザの手や腕の傾きが大きくなる。そして、ディスプレイより右側にユーザの手が移動しているにも関わらず、ユーザの手首や腕で反射した反射光によってディスプレイの右端より左側の位置がユーザの手が接近している位置として誤検出されてしまうことがある。
図7bは、ディスプレイの右方向を正のx方向、ディスプレイの左端のx座標を0、右端のx座標をLとして、図7aの左から右への手の移動に対して検出される位置の推移を表したものである。この図では、図7aの移動に対して、手の接近の検出が開始されたディスプレイの左端の位置Sからディスプレイの右端近くの位置Pに移動する位置の推移の検出に引き続いて、手の検出が終了した位置Eまで手が左側に戻っていく位置の推移が誤検出されている。
次に、図7bのように検出された位置の推移に対して、手の接近の検出が開始された位置Sから手の検出が終了した位置Eまでの移動量を、手の移動量として算出すると、図7cに示す移動量Δxが算出される。
そして、この移動量Δxが所定量Thと比較され、移動量Δxがしきい値より大きい場合に、ユーザが行った手の移動がディスプレイに対する操作として受け付けられることとなるが、図7cに示す移動量Δxは、図7bに示すPからEの間の左側に戻っていく位置の推移の誤検出のため、ユーザが実際に行った手の移動の移動量より減少しており、この減少のために、移動量Δxがしきい値を超えずにユーザが行った手の移動がディスプレイに対する操作として受け付けられないことが生じる。
そこで、本発明は、ディスプレイに接近させた手を一方向に所定の距離以上移動する動作を、ディスプレイに対する操作として受け付ける場合に、手をディスプレイ外に移動した後に発生したユーザの手首や腕による反射による位置の誤検出による操作の受け付け漏れを抑制することを課題とする。
前記課題達成のために、本発明は、データ処理装置の入力装置として利用される、前記データ処理装置のディスプレイの表示面へのユーザの手の接近を検出する近接検出装置に、ディスプレイの表示面の外側に配置された前記表示面の前方を通る赤外光を出射する赤外光源と、前記表示面の外側に配置された前記赤外光の反射光を検出する光検出器とを用いて、前記表示面へのユーザの手の接近の有無と、手が接近した左右方向の位置を検出する接近検出手段と、前記接近検出手段がユーザの手の接近を検出していないときに非検出を前記データ処理装置に出力し、前記接近検出手段がユーザの手の接近を検出しているときに前記接近検出手段が検出した前記左右方向の位置を前記データ処理装置に出力する通知手段とを設けたものである。ここで、左方向と右方向とのうちの一つの方向を第1方向として、前記通知手段は、前記接近検出手段がユーザの手の接近を検出していることを検出している期間中における、当該接近検出手段が検出した位置の第1方向への移動量が所定のしきい値を超えた後に減少したときに、非検出を前記データ処理装置に出力する。
ここで、このような近接検出装置は、前記接近検出手段を、前記ディスプレイの表示面の下方に左右方向に並べて配置した複数の前記赤外光源と、前記ディスプレイの表示面の下方に左右方向に並べて配置した複数の前記光検出器とを備え、前記複数の赤外光源を順番に点灯し、各赤外光源が点灯しているときに前記各光検出器が検出した前記反射光より、前記表示面へのユーザの手の接近の有無と、手が接近した左右方向の位置を検出するものとしてもよい。
このような近接検出装置によれば、第1方向への手の移動量がしきい値を超えた後に減少する場合に、減少の開始時に非検出をデータ処理装置に出力することにより、移動量が減少を開始する直前の位置を移動の終了位置としてデータ処理装置に認識させることができる。
したがって、手を第1方向にしきい値超移動してディスプレイ外に移動した後に発生したユーザの手首や腕による反射による位置の誤検出によって第1方向と逆方向への手の位置の戻りが発生した場合にも、データ処理装置に、第1方向へのしきい値以上の移動に対応するユーザ操作を受け付けさせることができ、当該ユーザ操作の受け付け漏れを抑制することができる。
また、本発明は、併せて、以上の近接検出装置と、前記データ処理装置とを備えた情報処理システムも提供する、ここで、前記データ処理装置は、前記近接検出装置においてユーザの手の接近の検出が開始されたときに前記近接検出装置から出力された前記左右方向の位置を開始位置とし、前記近接検出装置から非検出が出力される直前に前記近接検出装置から出力された前記左右方向の位置を終了位置として、前記開始位置から前記終了位置までの前記第1方向の移動量が前記しきい値を超えている場合に、所定のユーザ操作の受け付けを行うユーザ操作受付手段を備えている。
また、本発明は、前記課題達成のために、データ処理装置の入力装置として利用される、前記データ処理装置のディスプレイの表示面へのユーザの手の接近を検出する近接検出装置に、ディスプレイの表示面の外側に配置された前記表示面の前方を通る赤外光を出射する赤外光源と、前記表示面の外側に配置された前記赤外光の反射光を検出する光検出器とを用いて、前記表示面へのユーザの手の接近の有無と、手が接近した上下方向の位置を検出する接近検出手段と、前記接近検出手段がユーザの手の接近を検出していないときに非検出を前記データ処理装置に出力し、前記接近検出手段がユーザの手の接近を検出しているときに前記接近検出手段が検出した前記上下方向の位置を前記データ処理装置に出力する通知手段とを備えたものである。ここで、上方向を第1方向として、前記通知手段は、前記接近検出手段がユーザの手の接近を検出していることを検出している期間中における、当該接近検出手段が検出した位置の第1方向への移動量が所定のしきい値を超えた後に減少したときに、非検出を前記データ処理装置に出力する。
このような、近接検出装置によれば、左方向もしくは右方向を第1方向とする上述した近接検出装置と同様に、上方向である第1方向へのしきい値以上の移動に対応するユーザ操作の受け付け漏れを抑制することができる。
また、併せて本発明は、このような近接検出装置と、前記データ処理装置とを備えた情報処理システムを提供する。ここで、前記データ処理装置は、前記近接検出装置においてユーザの手の接近の検出が開始されたときに前記近接検出装置から出力された前記上下方向の位置を開始位置とし、前記近接検出装置から非検出が出力される直前に前記近接検出装置から出力された前記上下方向の位置を終了位置として、前記開始位置から前記終了位置までの前記第1方向の移動量が前記しきい値を超えている場合に、所定のユーザ操作の受け付けを行うユーザ操作受付手段を備えている。
なお、以上の情報処理システムは、自動車に搭載されるものであってよく、前記データ処理装置のディスプレイは、前記自動車の運転席と助手席の間に配置されているものであってよい。
以上のように、本発明によれば、ディスプレイに接近させた手を一方向に所定の距離以上移動する動作を、ディスプレイに対する操作として受け付ける場合に、手をディスプレイ外に移動した後に発生したユーザの手首や腕による反射による位置の誤検出による操作の受け付け漏れを抑制することができる。
本発明の実施形態に係る情報処理システムの構成を示すブロック図である。 本発明の実施形態に係るディスプレイの配置を示す図である。 本発明の実施形態に係る近接検出センサの配置を示す図である。 本発明の実施形態に係る通知処理を示すフローチャートである。 本発明の実施形態に係る通知処理の処理例を示す図である。 本発明の実施形態に係る近接検出センサの他の配置を示す図である。 本発明の課題を示す図である。
以下、本発明の実施形態について説明する。
図1に、本実施形態に係る情報処理システムの構成を示す。
情報処理システムは自動車に搭載されるシステムであり、カーナビゲーションアプリケーションやメディアプレイヤアプリケーション等の各種アプリケーションを実行するデータ処理装置1、データ処理装置1が映像表示に用いるディスプレイ2、近接検出装置3、データ処理装置1が利用する、その他の周辺装置4を備えている。
ディスプレイ2は、図2に示すように、タッチパネル付のディスプレイ2は近接検出装置3と一体化されたディスプレイユニット10の形態で、自動車のダッシュボードの運転席と助手席の間の位置に表示面を後方に向けて配置される。
ここで、ディスプレイ2は、データ処理装置1が座標入力に用いるタッチパネルを表示面上に備えたタッチパネル付きディスプレイ2であってもよい。
なお、図示した例では、自動車は左ハンドルの自動車であり、情報処理システムの主たるユーザである運転者は、ディスプレイ2の左側からディスプレイ2に対する操作を行う。
図1に戻り、近接検出装置3は、近接検出センサ31と近接検出コントローラ32を備えている。
近接検出センサ31は、LED1、LED2、LED3、LED4、LED5の5つの赤外線LEDと、PD1とPD2の、赤外光を検出する2つのフォトダイードを備えている。
また、近接検出コントローラ32は、LED1、LED2、LED3、LED4を駆動して発光させる駆動部321、PD1とPD2が出力する電流信号をPD1とPD2に入射した赤外光の強度を表す強度信号に変換し出力する検出部322、検出制御部323とを備えている。
次に、図3a、bに示すように、ディスプレイ2に対して、左右方向、上下方向、前後方向を定めるものとして、LED1、LED2、LED3、LED4、LED5は、当該順序で左から右に向かって、ディスプレイ2の下辺の少し下の位置に配置されている。ただし、前方向はディスプレイ2の表示方向である。
また、PD1は、LED2とLED3の間の位置に配置され、入射する赤外光の反射光を電流信号に変換し、PD2は、LED3とLED4の間の位置に配置され、それぞれ入射する赤外光の反射光を電流信号に変換し出力する。
図3a、b中の矢印は、LED1、LED2、LED3、LED4、LED5の指向角の中心軸を表しており、LED1、LED2、LED3、LED4、LED5は、ディスプレイ2の前方上方に向けて斜めに赤外光を照射する。
次に、近接検出コントローラ32の検出制御部323は、駆動部321と検出部322の動作を制御すると共に検出部322が出力する強度信号が表す赤外光の強度より、ユーザの手のディスプレイ2の表示面への接近の有無と接近した位置を検出する検出処理を繰り返し行う。
この検出処理において、検出制御部323は、LED1、LED2、LED3、LED4、LED5を順次一つずつ点灯し、PD1、PD2の出力からPD1、PD2の位置に入射した赤外光の反射光の強度を検出し、検出したPD1、PD2の位置の反射光の強度とから、ユーザの手のディスプレイ2の表示面への接近の有無を検出すると共に、LED1、LED2、LED3、LED4、LED5の位置と、検出したPD1、PD2の位置の反射光の強度との関係から、ディスプレイ2の表示面に接近しているユーザの手の左右方向の位置を算出する。
次に、近接検出コントローラ32の検出制御部323が、検出処理で検出した内容をデータ処理装置1に通知するために行う通知処理について説明する。
図4に、この通知処理の手順を示す。
図示するように、検出制御部323は、まず、検出処理において、ユーザの手のディスプレイ2の表示面への接近が検出されているかどうかを調べ(ステップ402)、検出されていなければ、非検出をデータ処理装置1に通知し(ステップ424)、ステップ402の処理に戻る。
一方、検出処理において接近が検出されている場合には(ステップ402)、検出処理で算出されたディスプレイ2の表示面に接近しているユーザの手の左右方向の位置を現在位置として取得し(ステップ404)、取得した現在位置を開始位置として記憶する(ステップ406)、そして、データ処理装置1に現在位置を通知する(ステップ408)。
次に、検出制御部323は、再び、検出処理において、ユーザの手のディスプレイ2の表示面への接近が検出されているかどうかを調べ(ステップ410)、検出されていなければ、非検出をデータ処理装置1に通知し(ステップ424)、ステップ402の処理に戻る。
一方、検出処理において接近が検出されている場合には(ステップ410)、検出処理で算出されたディスプレイ2の表示面に接近しているユーザの手の左右方向の位置を現在位置として取得し(ステップ412)、記憶されている開始位置から取得した現在位置までの距離を移動量として算出する(ステップ414)。
そして、移動量が所定のしきい値Thを超えているかどうかを調べる(ステップ416)。ここで、しきい値Thは、たとえば、ディスプレイ2の横幅Lの70%の値0.7Lとする。
そして、移動量がしきい値Thを超えていなければ(ステップ416)、ステップ412で取得した現在位置を前回位置として記憶し(ステップ418)、データ処理装置1にステップ412で取得した現在位置を通知し(ステップ420)、ステップ410からの処理に戻る。
一方、ステップ416で、移動量がしきい値Thを超えていると判定された場合には、位置戻りが発生しているかどうかを調べる(ステップ422)。
ここで、ステップ422では、前回位置が記憶されており、ステップ412で取得した現在位置が前回位置よりも開始位置に近い場合に位置戻りが発生していると判定し、他の場合に位置戻りが発生していないと判定する。なお、前回位置が記憶されていない場合も、位置戻りが発生していないと判定する。
そして、位置戻りが発生していなければ(ステップ422)、ステップ412で取得した現在位置を前回位置として記憶し(ステップ418)、データ処理装置1にステップ412で取得した現在位置を通知し(ステップ420)、ステップ410からの処理に戻る。
一方、位置戻りが発生している場合には、非検出をデータ処理装置1に通知し(ステップ424)、ステップ402からの処理に戻る。
以上、検出制御部323が行う通知処理について説明した。
さて、データ処理装置1は、このような通知処理による検出制御部323からの通知に基づいてユーザの操作を受け付ける。
すなわち、データ処理装置1は、手の接近の検出が開始されたときの現在位置から、手の接近の非検出が通知される直前に通知された現在位置までの右方向への移動量が、上述したしきい値Thを超えている場合に、ユーザの右移動ジェスチャ操作を受け付けて、右移動ジェスチャ操作に予め対応づけられている所定の処理を行う。
ここで、手の接近の検出が開始されたときの現在位置とは、検出制御部323からの接近の非検出が通知された後に最初に通知された現在位置、または、非検出が通知されなくなったときの現在位置である。
なお、手の接近の検出が開始されたときの現在位置を、検出制御部323からの接近の非検出が通知された後に最初に通知された現在位置とする場合には、起動時には、最初に通知された現在位置を、手の接近の検出が開始されたときの現在位置とする。
また、データ処理装置1は、右移動ジェスチャ操作に対応づけられている所定の処理としては、たとえば、アクティブアプリケーションの切り替えや、ディスプレイ2に表示する画面の切り替えなどを行う。
図5に、上述した検出制御部323の通知処理の処理例を示す。
いま、ユーザが、ディスプレイ2の左側に着席した運転者であるユーザが、図5aに示すように、右移動ジェスチャ操作を行うことを意図して、ディスプレイ2に接近させた手を、ディスプレイ2の左端の位置からディスプレイ2よりも右側の位置までの右方向に移動したものとする。
そして、ディスプレイ2より右側にユーザの手が移動した後に、ユーザの手首や腕で反射した反射光によってディスプレイ2の右端より左側の位置が、ユーザの手が接近している位置として誤検出されたものとする。
この場合、検出制御部323の検出処理によって、ディスプレイ2の右方向を正のx方向、ディスプレイ2の左端のx座標を0、右端のx座標をLとして、図5aの左から右への手の移動に対して、図5bに示すように、ディスプレイ2の左端の位置からディスプレイ2の右端近くの位置に移動し、その後、手が左側に戻っていく位置の推移が検出される。
また、図5bに示す位置の推移に対して検出制御部323の通知処理のステップ414算出される移動量は図5cに示すように、右方向への移動量dxが漸増した後に、減少していくものとなる。
ここで、通知処理のステップ416で用いるしきい値Thが、ディスプレイ2の横幅Lの70%の値0.7Lであるものとすると、ユーザは右移動ジェスチャ操作を行うことを意図して、図5aのように手を左から右へしきい値Thの0.7L以上大きく動かすので、図5cに示すように、右方向への移動量dxの最大値、すなわわち、減少を始める直前の移動量dxはしきい値Thの0.7Lを超える。そして、図5bの移動量dxがしきい値Th0.7Lを超えた後の減少を始める時点Pdで、通知処理のステップ422で位置戻りの発生が検出される
この場合、接近の検出の開始点Sの時点から、位置戻りの発生が検出されるPdまでは、検出処理で検出したユーザの手の左右方向の位置である現在位置が検出制御部323からデータ処理装置1に通知され、位置戻りの発生が検出されるPdの時点で、非検出が検出制御部323からデータ処理装置1に通知される。
結果、データ処理装置1では、図5dに示すように、手の接近の検出が開始されたときの現在位置xSから、手の接近の非検出が通知されるPdの時点の直前に通知された現在位置xPd-1までの右方向への移動量が移動量Δxとして算出され、この移動量Δxは、移動量dxが減少を始める直前の移動量dxとなるので、しきい値Thの0.7Lを超え、データ処理装置1おいて、ユーザの右移動ジェスチャ操作が受け付けられる。
よって、本実施形態によれば、ディスプレイ2に接近させた手を右方向にしきい値Th移動する動作を、ユーザの右移動ジェスチャ操作として受け付ける場合に、手をディスプレイ2外に移動した後に発生したユーザの手首や腕による反射による位置の誤検出によるユーザの右移動ジェスチャ操作の受け付け漏れを抑制することができる。
なお、検出制御部323の通知処理では、位置戻りの発生が検出されたPdの時点で非検出をデータ処理装置1に通知した後は、検出処理で検出した現在位置のデータ処理装置1への通知を再開する。そして、データ処理装置1において、図5dに示す、Pdの時点で非検出を通知された後に最初に通知された現在位置xPd+1から次の非検出通知直前の現在位置xEまでの移動量に応じて、ユーザ操作の受け付けが行われることとなるが、ディスプレイ2より右側にユーザの手が移動した後にユーザの手首や腕で反射した反射光によって誤検出される位置の変化は小さいので、手の小さい移動に対して受け付けるユーザ操作を設けないことにより、誤検出された位置の移動に対してユーザ操作を受け付けてしまうことを抑止できる。
以上、本発明の実施形態について説明した。
なお、以上の実施形態は、ディスプレイ2に接近させた手を右方向にしきい値Th超移動する動作を、ユーザの右移動ジェスチャ操作として受け付ける場合について説明したが、本実施形態は、データ処理装置1において、ディスプレイ2に接近させた手を左方向にしきい値Th超移動する動作を、ユーザの左移動ジェスチャ操作として受け付ける場合にも、以上の説明の左と右を置換することにより同様に適用することができる。
また、本実施形態は、以上の説明の左を下に右を上に置換して適用してもよい。すなわち、この場合には、図6a、bに示すように、赤外線LEDとフォトダイードをディスプレイ2の左辺の外側に上下に並べて配置して、検出制御部323の検出処理によって、接近した手の上下方向の位置を検出し、データ処理装置1において、ディスプレイ2に接近させた手を上方向にしきい値Th超移動する動作を、ユーザの上移動ジェスチャ操作として受け付けて所定の処理を行う。ただし、赤外線LEDとフォトダイードは、ディスプレイ2の右辺の外側に上下に並べて配置するようにしてもよい。
ここで、ユーザがディスプレイ2に接近させた手を上方向に移動する上移動ジェスチャ操作を行った場合、図6cに示すように、ディスプレイ2より上側にユーザの手が移動しているにも関わらず、ユーザの手首や腕で反射した反射光によってディスプレイ2の上端より下側の位置がユーザの手が接近している位置として誤検出され、上述した右移動ジェスチャ操作と同様に、検出される手の位置がディスプレイ2の下側の位置からディスプレイ2の上端近くの位置に移動した後下側に戻っていく位置戻りが発生することがある。
そして、本実施形態を適用することにより、このような位置戻りが発生した場合にも、通知処理により、検出された手の位置の上方への移動量がしきい値を超えた後に減少を開始する時点で非検出がデータ処理装置に通知されるので、上移動ジェスチャ操作の受け付け漏れを抑制することができる。
また、以上では、自動車のダッシュボードの運転席と助手席の間の位置にディスプレイ2を設けた情報処理システムへの適用を例にとり説明したが、本実施形態は、任意の情報処理システムに同様に適用することができる。
1…データ処理装置、2…ディスプレイ、3…近接検出装置、4…周辺装置、10…ディスプレイユニット、31…近接検出センサ、32…近接検出コントローラ、321…駆動部、322…検出部、323…検出制御部。

Claims (6)

  1. データ処理装置の入力装置として利用される、前記データ処理装置のディスプレイの表示面へのユーザの手の接近を検出する近接検出装置であって、
    ディスプレイの表示面の外側に配置された前記表示面の前方を通る赤外光を出射する赤外光源と、前記表示面の外側に配置された前記赤外光の反射光を検出する光検出器とを用いて、前記表示面へのユーザの手の接近の有無と、手が接近した左右方向の位置を検出する接近検出手段と、
    前記接近検出手段がユーザの手の接近を検出していないときに非検出を前記データ処理装置に出力し、前記接近検出手段がユーザの手の接近を検出しているときに前記接近検出手段が検出した前記左右方向の位置を前記データ処理装置に出力する通知手段とを有し、
    左方向と右方向とのうちの一つの方向を第1方向として、前記通知手段は、前記接近検出手段がユーザの手の接近を検出していることを検出している期間中における、当該接近検出手段が検出した位置の第1方向への移動量が所定のしきい値を超えた後に減少したときに、非検出を前記データ処理装置に出力することを特徴とする近接検出装置。
  2. 請求項1記載の近接検出装置であって、
    前記接近検出手段は、前記ディスプレイの表示面の下方に左右方向に並べて配置した複数の前記赤外光源と、前記ディスプレイの表示面の下方に左右方向に並べて配置した複数の前記光検出器とを備え、前記複数の赤外光源を順番に点灯し、各赤外光源が点灯しているときに前記各光検出器が検出した前記反射光より、前記表示面へのユーザの手の接近の有無と、手が接近した左右方向の位置を検出することを特徴とする近接検出装置。
  3. 請求項1または2記載の近接検出装置と、前記データ処理装置とを備えた情報処理システムであって、
    前記データ処理装置は、前記近接検出装置においてユーザの手の接近の検出が開始されたときに前記近接検出装置から出力された前記左右方向の位置を開始位置とし、前記近接検出装置から非検出が出力される直前に前記近接検出装置から出力された前記左右方向の位置を終了位置として、前記開始位置から前記終了位置までの前記第1方向の移動量が前記しきい値を超えている場合に、所定のユーザ操作の受け付けを行うユーザ操作受付手段を有することを特徴とする情報処理システム。
  4. データ処理装置の入力装置として利用される、前記データ処理装置のディスプレイの表示面へのユーザの手の接近を検出する近接検出装置であって、
    ディスプレイの表示面の外側に配置された前記表示面の前方を通る赤外光を出射する赤外光源と、前記表示面の外側に配置された前記赤外光の反射光を検出する光検出器とを用いて、前記表示面へのユーザの手の接近の有無と、手が接近した上下方向の位置を検出する接近検出手段と、
    前記接近検出手段がユーザの手の接近を検出していないときに非検出を前記データ処理装置に出力し、前記接近検出手段がユーザの手の接近を検出しているときに前記接近検出手段が検出した前記上下方向の位置を前記データ処理装置に出力する通知手段とを有し、
    上方向を第1方向として、前記通知手段は、前記接近検出手段がユーザの手の接近を検出していることを検出している期間中における、当該接近検出手段が検出した位置の第1方向への移動量が所定のしきい値を超えた後に減少したときに、非検出を前記データ処理装置に出力することを特徴とする近接検出装置。
  5. 請求項4記載の近接検出装置と、前記データ処理装置とを備えた情報処理システムであって、
    前記データ処理装置は、前記近接検出装置においてユーザの手の接近の検出が開始されたときに前記近接検出装置から出力された前記上下方向の位置を開始位置とし、前記近接検出装置から非検出が出力される直前に前記近接検出装置から出力された前記上下方向の位置を終了位置として、前記開始位置から前記終了位置までの前記第1方向の移動量が前記しきい値を超えている場合に、所定のユーザ操作の受け付けを行うユーザ操作受付手段を有することを特徴とする情報処理システム。
  6. 請求項3または5記載の情報処理システムであって、
    当該情報処理システムは、自動車に搭載されており、
    前記データ処理装置のディスプレイは、前記自動車の運転席と助手席の間に配置されていることを特徴とする情報処理システム。
JP2020035466A 2020-03-03 2020-03-03 近接検出装置及び情報処理システム Active JP7346331B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2020035466A JP7346331B2 (ja) 2020-03-03 2020-03-03 近接検出装置及び情報処理システム
US17/167,239 US11619999B2 (en) 2020-03-03 2021-02-04 Proximity detection device and information processing system
EP21157933.9A EP3926444B1 (en) 2020-03-03 2021-02-18 Proximity detection device and information processing system
CN202110216503.2A CN113341423B (zh) 2020-03-03 2021-02-26 接近检测装置及信息处理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2020035466A JP7346331B2 (ja) 2020-03-03 2020-03-03 近接検出装置及び情報処理システム

Publications (2)

Publication Number Publication Date
JP2021140286A JP2021140286A (ja) 2021-09-16
JP7346331B2 true JP7346331B2 (ja) 2023-09-19

Family

ID=74668745

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020035466A Active JP7346331B2 (ja) 2020-03-03 2020-03-03 近接検出装置及び情報処理システム

Country Status (4)

Country Link
US (1) US11619999B2 (ja)
EP (1) EP3926444B1 (ja)
JP (1) JP7346331B2 (ja)
CN (1) CN113341423B (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11893959B2 (en) * 2021-05-17 2024-02-06 Samsung Electronics Co., Ltd. Electronic device including proximity sensor having a plurality of light receiving elements and method of controlling the same

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010237766A (ja) 2009-03-30 2010-10-21 Toshiba Corp 情報処理装置、コマンド実行制御方法及びコマンド実行制御プログラム
US20120312956A1 (en) 2011-06-11 2012-12-13 Tom Chang Light sensor system for object detection and gesture recognition, and object detection method
JP2017194767A (ja) 2016-04-19 2017-10-26 株式会社東海理化電機製作所 ジェスチャ判定装置
JP2018173907A (ja) 2017-03-31 2018-11-08 キヤノン株式会社 情報処理装置、および情報処理装置の制御方法、プログラム
JP2019074465A (ja) 2017-10-18 2019-05-16 アルパイン株式会社 検知システム及び判定方法
JP2019168863A (ja) 2018-03-22 2019-10-03 株式会社東海理化電機製作所 ジェスチャ検出装置

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9229540B2 (en) * 2004-01-30 2016-01-05 Electronic Scripting Products, Inc. Deriving input from six degrees of freedom interfaces
US20160098095A1 (en) * 2004-01-30 2016-04-07 Electronic Scripting Products, Inc. Deriving Input from Six Degrees of Freedom Interfaces
JP2008114772A (ja) * 2006-11-07 2008-05-22 Denso Corp 表示装置
DE102009036369A1 (de) 2009-08-06 2011-02-10 Volkswagen Ag Verfahren zum Betreiben einer Bedienvorrichtung und Bedienvorrichtung in einem Fahrzeug
JP2013218549A (ja) * 2012-04-10 2013-10-24 Alpine Electronics Inc 電子機器
JP2013242655A (ja) * 2012-05-18 2013-12-05 Panasonic Corp 情報端末の表示制御装置および表示制御方法
JP6181373B2 (ja) * 2013-01-18 2017-08-16 東芝メディカルシステムズ株式会社 医用情報処理装置及びプログラム
US10198080B1 (en) * 2013-03-11 2019-02-05 Amazon Technologies, Inc. Virtual user interface
EP2860612B1 (en) 2013-10-04 2019-04-24 ams AG Optical sensor arrangement and method for gesture detection
US9996160B2 (en) * 2014-02-18 2018-06-12 Sony Corporation Method and apparatus for gesture detection and display control
DE102014204800A1 (de) 2014-03-14 2015-09-17 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer graphischen Nutzerschnittstelle in einem Fahrzeug
US20160187651A1 (en) * 2014-03-28 2016-06-30 Osterhout Group, Inc. Safety for a vehicle operator with an hmd
US9753136B2 (en) * 2015-02-11 2017-09-05 Motorola Mobility Llc Portable electronic device with proximity sensors for gesture control and contact detection
US20170228138A1 (en) * 2016-02-08 2017-08-10 University Of Ontario Institute Of Technology System and method for spatial interaction for viewing and manipulating off-screen content
CN109070803B (zh) * 2016-04-14 2021-10-08 金泰克斯公司 提供深度信息的车辆显示系统
KR101809925B1 (ko) * 2016-04-25 2017-12-20 엘지전자 주식회사 차량용 디스플레이 장치 및 차량
US10037626B2 (en) * 2016-06-30 2018-07-31 Microsoft Technology Licensing, Llc Interaction with virtual objects based on determined restrictions
JP2018132986A (ja) 2017-02-16 2018-08-23 株式会社東海理化電機製作所 画像認識装置
WO2020003914A1 (ja) 2018-06-26 2020-01-02 京セラ株式会社 電子機器、移動体、プログラムおよび制御方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010237766A (ja) 2009-03-30 2010-10-21 Toshiba Corp 情報処理装置、コマンド実行制御方法及びコマンド実行制御プログラム
US20120312956A1 (en) 2011-06-11 2012-12-13 Tom Chang Light sensor system for object detection and gesture recognition, and object detection method
JP2017194767A (ja) 2016-04-19 2017-10-26 株式会社東海理化電機製作所 ジェスチャ判定装置
JP2018173907A (ja) 2017-03-31 2018-11-08 キヤノン株式会社 情報処理装置、および情報処理装置の制御方法、プログラム
JP2019074465A (ja) 2017-10-18 2019-05-16 アルパイン株式会社 検知システム及び判定方法
JP2019168863A (ja) 2018-03-22 2019-10-03 株式会社東海理化電機製作所 ジェスチャ検出装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
近接覚センサを搭載したマニピュレータの遠隔操作方式の研究-近接覚センサ出力に基づく電気刺激方式による触覚呈示手法の検証- A Research of Teleoperation System for Manipulator Mounted Proximity Sensors-Verification of Electrotactile Stimulation Method based on Proximity Sensor Outputs-,ロボティクスメカトロニクス講演会2016講演会論文集,一般社団法人日本機械学会,2016年06月08日,2421~2424

Also Published As

Publication number Publication date
US11619999B2 (en) 2023-04-04
CN113341423B (zh) 2025-09-05
JP2021140286A (ja) 2021-09-16
US20210278907A1 (en) 2021-09-09
CN113341423A (zh) 2021-09-03
EP3926444A1 (en) 2021-12-22
EP3926444B1 (en) 2023-10-18

Similar Documents

Publication Publication Date Title
US20110279369A1 (en) Hybrid pointing device
JP7259896B2 (ja) タッチパネル装置およびタッチパネル制御プログラム
US7442916B2 (en) Lift detection adapted for navigation on a transparent structure
JP2013218549A (ja) 電子機器
JP2006031499A (ja) 情報入力表示装置
CN113189665B (zh) 接近检测装置、显示器单元及信息处理系统
JP7346331B2 (ja) 近接検出装置及び情報処理システム
JP5813690B2 (ja) 座標位置検出装置及び表示入力装置
JP2006302239A (ja) 一次元及び二次元モード支援の接触検出装置及びその制御方法
JP2016526213A (ja) スイッチ作動装置、移動機器、および、非触覚並進ジェスチャによるスイッチの作動方法
JP2009134444A (ja) 光学式タッチパネル入力装置
EP4498214A1 (en) Touching operator identification system and information processing system
JP2017142596A (ja) ジェスチャ検出装置
WO2017013186A1 (en) Apparatus and method for detecting gestures on a touchpad
JP2024057925A (ja) 近接位置検出装置、ディスプレイユニット及び情報処理システム
JP6146737B2 (ja) 光学式タッチパネル装置
WO2018216760A1 (ja) タッチコントローラ、ホスト装置及び方法
JP4637927B2 (ja) 入力装置のスキャン制御方法、その装置及び記録媒体
JP6204791B2 (ja) タッチパネル入力装置
JP2024170626A (ja) 物体検出装置
US8648836B2 (en) Hybrid pointing device
JP7661819B2 (ja) タッチパネル
JP2025029364A (ja) 接近検出システム及び情報処理システム
JP2022061242A (ja) 近接位置検出装置、ディスプレイユニット及び情報処理システム
KR20240067694A (ko) 디바이스

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230721

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230829

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230906

R150 Certificate of patent or registration of utility model

Ref document number: 7346331

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150