JP7070105B2

JP7070105B2 - Control system and control program

Info

Publication number: JP7070105B2
Application number: JP2018106997A
Authority: JP
Inventors: 裕樹保立; 清彦古林
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2018-06-04
Filing date: 2018-06-04
Publication date: 2022-05-18
Anticipated expiration: 2038-06-04
Also published as: JP2019211970A

Description

本発明は、視覚障害者が使用可能な制御システム、および制御プログラムに関する。 The present invention relates to a control system and a control program that can be used by the visually impaired.

一般に、通常のタッチパネルでは視覚障害者は操作ができない。このような問題に対して、特許文献１に開示された技術では、通常モードと視覚障害者モードとを切り替え可能なタッチパネル装置が開示されている。この装置では、ユーザーがヘッドフォンを装着することで、または決定スイッチを操作することで視覚障害者モードに切り替わる。そして、視覚障害者モードでは、タッチパネルにユーザーが触れた際、タッチ情報を制御手段に通知せずに、タッチした位置情報のみを制御手段に通知する。制御手段は、位置情報に相当する画面情報を音声で案内し、希望の画面情報であればユーザーはタッチパネルとは別の決定スイッチをＯＮする。決定スイッチのＯＮに応じてタッチパネル装置は、タッチ情報を制御手段に通知することで、通常モードと同様の操作を行えるようにしている。 Generally, a visually impaired person cannot operate a normal touch panel. To solve such a problem, the technique disclosed in Patent Document 1 discloses a touch panel device capable of switching between a normal mode and a visually impaired person mode. The device switches to visually impaired mode by the user wearing headphones or operating the enter switch. Then, in the visually impaired mode, when the user touches the touch panel, the touch information is not notified to the control means, but only the touched position information is notified to the control means. The control means voice-guides the screen information corresponding to the position information, and if the desired screen information is used, the user turns on a decision switch different from the touch panel. When the decision switch is turned on, the touch panel device notifies the control means of the touch information so that the same operation as in the normal mode can be performed.

また特許文献２に開示された技術では、無線通信可能な指キャップを装着したユーザーを用いた入力装置が開示され、以下の処理を実行している。指キャップを装着したユーザーがタッチパネルにタッチすると、タッチパネル側では、タッチの座標位置の操作種別情報に応じた点字マトリックス信号を指キャップに送信する。そして指キャップ側では、この点字マトリックス信号に応じた立体的な点字模様を内側に発生させる。ユーザーは、内側の点字模様をなぞることで、キーの種類を認識する。 Further, in the technique disclosed in Patent Document 2, an input device using a user wearing a finger cap capable of wireless communication is disclosed, and the following processing is executed. When a user wearing a finger cap touches the touch panel, the touch panel side transmits a Braille matrix signal corresponding to the operation type information of the touch coordinate position to the finger cap. Then, on the finger cap side, a three-dimensional Braille pattern corresponding to this Braille matrix signal is generated inside. The user recognizes the type of key by tracing the inner Braille pattern.

特開２００４－２７１７４８号公報Japanese Unexamined Patent Publication No. 2004-27178 特開２０００－１７２４０８号公報Japanese Unexamined Patent Publication No. 2000-172408

情報機器の分野においては、対応する機能が年々増加しており、それぞれの機能に対する設定を行うためのボタン（アイコン）の数も増加してきている。そのため、全機能に対応するすべてのボタンを、設定するための操作画面に一度に表示することは困難である。この問題に対応する技術として、複数の操作画面を階層構造で構成し、上位層の操作画面のボタンの操作に応じて、これに関連付けられた下位層の操作画面に遷移させるユーザーインターフェース（ＵＩ）が広く用いられている。 In the field of information equipment, the corresponding functions are increasing year by year, and the number of buttons (icons) for setting each function is also increasing. Therefore, it is difficult to display all the buttons corresponding to all the functions on the operation screen for setting at once. As a technology to deal with this problem, a user interface (UI) that configures multiple operation screens in a hierarchical structure and transitions to the operation screen of the lower layer associated with the operation of the buttons on the operation screen of the upper layer. Is widely used.

しかしながら、引用文献１、２に開示された技術で、階層構造の操作画面を用いて、別の階層に遷移した場合には、遷移後の操作画面において、ボタン等の配置がどのような状態であるかを視覚障害者は認識できない。このため、視覚障害者は、操作画面の全面を指でなぞり、次に操作すべき領域を自らで検索しなくてはならず、使い勝手がよくない。 However, in the techniques disclosed in Cited Documents 1 and 2, when a transition is made to another hierarchy by using an operation screen having a hierarchical structure, in what state the buttons and the like are arranged on the operation screen after the transition. The visually impaired cannot recognize the existence. For this reason, the visually impaired person has to trace the entire surface of the operation screen with his / her finger and search for the area to be operated next by himself / herself, which is not convenient.

本発明は、上記事情に鑑みてなされたものであり、健常者と視覚障害者で、階層構造等により画面遷移が行われる操作画面を共用したとしても、視覚障害者が操作で戸惑うことなく利用できる制御システム、および制御プログラムを提供することを目的とする。 The present invention has been made in view of the above circumstances, and even if a healthy person and a visually impaired person share an operation screen in which screen transitions are performed due to a hierarchical structure or the like, the visually impaired person can use the operation without any confusion. It is an object of the present invention to provide a control system and a control program that can be used.

本発明の上記目的は、下記の手段によって達成される。 The above object of the present invention is achieved by the following means.

（１）操作を受け付ける本体装置、およびユーザーの手に装着される点字デバイスを備える制御システムであって、
前記本体装置は、
表示面に操作画面を表示するとともに、ユーザーによる前記表示面へのタッチを検出するタッチパネルと、
前記点字デバイスと通信する本体通信部と、
本体制御部と、を備え、
前記点字デバイスは、
ユーザーの指先を覆う指カバーと、
前記指カバーの内側に配置され、点字情報を表示可能な点字表示部と、
前記本体通信部との間で無線通信する点字デバイス通信部と、を備え、
前記本体制御部は、前記タッチパネルに表示する前記操作画面を、該操作画面上のボタンの選択操作に応じて、関連付けられた他の操作画面に遷移させるとともに、ユーザーがタッチしているタッチ位置から次の選択操作を行うための所定領域まで、ユーザーを誘導するための前記点字情報を前記点字表示部に表示させる誘導制御を実行する、制御システム。 (1) A control system including a main unit that accepts operations and a Braille device that is worn on the user's hand.
The main body device is
A touch panel that displays the operation screen on the display surface and detects the user's touch on the display surface.
The main body communication unit that communicates with the Braille device,
Equipped with a main body control unit
The Braille device is
A finger cover that covers the user's fingertips,
A braille display unit that is placed inside the finger cover and can display braille information,
A Braille device communication unit that wirelessly communicates with the main body communication unit is provided.
The main body control unit shifts the operation screen displayed on the touch panel to another associated operation screen in response to a button selection operation on the operation screen, and from the touch position touched by the user. A control system that executes guidance control for displaying the Braille information for guiding a user to a predetermined area for performing the next selection operation on the Braille display unit.

（２）ユーザーを誘導するための前記点字情報は、前記タッチ位置から前記所定領域までの相対的な方向、および／または距離を示す点字情報である、上記（１）に記載の制御システム。 (2) The control system according to (1) above, wherein the Braille information for guiding the user is Braille information indicating a relative direction and / or a distance from the touch position to the predetermined area.

（３）前記操作画面は、階層構造の複数の操作画面を含み、
前記所定領域には、１つまたは複数のボタンが含まれ、
前記本体制御部は、前記操作画面上の前記ボタンの選択操作に応じて、関連付けられた下位層の操作画面に遷移したときに、遷移した該操作画面上の先頭のボタンにユーザーを誘導するための前記点字情報を前記点字表示部に表示させる、上記（１）または上記（２）に記載の制御システム。 (3) The operation screen includes a plurality of operation screens having a hierarchical structure.
The predetermined area includes one or more buttons.
The main body control unit guides the user to the first button on the transitioned operation screen when transitioning to the associated lower layer operation screen in response to the button selection operation on the operation screen. The control system according to the above (1) or (2), wherein the Braille information of the above is displayed on the Braille display unit.

（４）前記操作画面には、前記誘導制御を行わない第１の種類の操作画面と、前記誘導制御を行う第２の種類の操作画面が含まれる上記（１）から上記（３）のいずれかに記載の制御システム。 (4) Any of the above (1) to (3), wherein the operation screen includes a first type of operation screen in which the guidance control is not performed and a second type of operation screen in which the guidance control is performed. The control system described in Crab.

（５）前記本体制御部は、前記操作画面内の前記所定領域までユーザーを誘導する前記誘導制御を実行している時は、前記所定領域外の前記ボタンの操作を無効にし、前記所定領域までのユーザーの誘導が完了した後に、前記所定領域外の前記ボタンの操作を有効にする、上記（１）から上記（４）のいずれかに記載の制御システム。 (5) When the main body control unit is executing the guidance control for guiding the user to the predetermined area in the operation screen, the operation of the button outside the predetermined area is invalidated to the predetermined area. The control system according to any one of (1) to (4) above, which enables the operation of the button outside the predetermined area after the guidance of the user is completed.

（６）前記本体制御部は、前記所定領域に、ユーザーが誘導されたことを前記タッチパネルにより検知した場合に、前記所定領域内のボタンの配置情報を示す点字情報を前記点字表示部に表示させる、上記（１）から上記（５）のいずれかに記載の制御システム。 (6) When the touch panel detects that the user has been guided to the predetermined area, the main body control unit causes the Braille display unit to display Braille information indicating the arrangement information of the buttons in the predetermined area. , The control system according to any one of the above (1) to (5).

（７）前記点字デバイスは、さらに、決定スイッチを備え、
前記決定スイッチがユーザーによって操作されたことに応じて、ＯＮ信号を前記本体装置に送信し、
前記本体制御部は、ＯＮ信号を受信することにより、前記誘導制御を開始する、上記（１）から上記（６）のいずれかに記載の制御システム。 (7) The Braille device further includes a determination switch.
In response to the operation of the determination switch by the user, an ON signal is transmitted to the main unit.
The control system according to any one of (1) to (6) above, wherein the main body control unit starts the guidance control by receiving an ON signal.

（８）前記本体制御部は、前記タッチパネルへのタッチ位置にある前記ボタンに関する点字情報を前記点字デバイスに送信するとともに、前記ＯＮ信号を受信することに応じて、タッチ位置にある前記ボタンの選択操作を実行し、該選択操作に応じて、関連付けられた他の操作画面に遷移して、前記誘導制御を実行する、上記（７）に記載の制御システム。 (8) The main body control unit transmits braille information about the button at the touch position to the touch panel to the braille device, and selects the button at the touch position in response to receiving the ON signal. The control system according to (7) above, which executes an operation, transitions to another associated operation screen in response to the selection operation, and executes the guidance control.

（９）前記本体制御部は、前記ＯＮ信号を受信することに応じて、タッチ位置にある前記操作画面上の前記ボタンの選択操作を実行し、該選択操作に応じて、同じ前記操作画面内の該選択操作が反映された領域に向けた前記誘導制御を実行する、上記（８）に記載の制御システム。 (9) The main body control unit executes the selection operation of the button on the operation screen at the touch position in response to receiving the ON signal, and in response to the selection operation, in the same operation screen. The control system according to (8) above, which executes the guidance control toward the region in which the selection operation of the above is reflected.

（１０）前記操作画面は、階層構造の複数の操作画面であって、第１階層の操作画面と、前記第１階層の操作画面の設定項目に関する設定を行う下位の第２階層の操作画面を含み、
前記本体制御部は、前記第１階層の操作画面上の前記ボタンの選択操作に応じて、関連付けられた下位の前記第２階層の操作画面に遷移し、その後、前記設定を終了し、前記第１階層の操作画面に戻った場合、
前記所定領域として、前記設定を反映した前記設定項目を表示する領域への前記誘導制御を行う、上記（１）から上記（９）のいずれかに記載の制御システム。 (10) The operation screen is a plurality of operation screens having a hierarchical structure, and includes an operation screen of the first layer and an operation screen of a lower second layer for setting setting items of the operation screen of the first layer. Including
The main body control unit transitions to the associated lower second layer operation screen in response to the button selection operation on the first layer operation screen, then ends the setting, and the first When returning to the operation screen on the first level,
The control system according to any one of (1) to (9) above, which performs the guidance control to the area displaying the setting item reflecting the setting as the predetermined area.

（１１）前記本体制御部は、前記制御システムへのユーザーの対応を促す警告画面を、前記タッチパネルに表示するとともに、
前記警告画面内の警告文の先頭位置に、ユーザーを誘導する前記誘導制御を行う、上記（１）から上記（１０）のいずれかに記載の制御システム。 (11) The main body control unit displays a warning screen on the touch panel for prompting the user to respond to the control system, and also displays the warning screen on the touch panel.
The control system according to any one of (1) to (10) above, which performs the guidance control for guiding the user to the head position of the warning text in the warning screen.

（１２）前記本体制御部は、点字情報を送信することで、前記タッチパネルへのタッチ位置にある前記操作画面の表示内容をユーザーに通知するとともに、前記タッチパネルとは異なる決定スイッチへの操作により前記タッチ位置にあるボタンの前記選択操作を行う視覚障害者モードと、前記タッチパネルへの前記ボタンへのタッチによる該ボタンの前記選択操作を行う通常モードと、を切り替え可能であり、
前記通常モードと前記視覚障害者モードで、共通の操作画面を表示する、上記（１）から上記（１１）のいずれかに記載の制御システム。 (12) The main body control unit notifies the user of the display content of the operation screen at the touch position to the touch panel by transmitting Braille information, and at the same time, the operation to a decision switch different from the touch panel causes the operation. It is possible to switch between a visually impaired mode in which the selection operation of the button at the touch position is performed and a normal mode in which the selection operation of the button is performed by touching the button on the touch panel.
The control system according to any one of (1) to (11) above, which displays a common operation screen in the normal mode and the visually impaired mode.

（１３）タッチパネルを通じた操作を受け付ける本体装置と、ユーザーの手に装着される点字デバイスであって、ユーザーの指先を覆う指カバー、および前記指カバーの内側に配置され、点字情報を表示可能な点字表示部を備える点字デバイスとを備えた、制御システムを制御するコンピューターで実行される制御プログラムであって、
タッチパネルの表示面に表示した操作画面上のボタンの選択操作に応じて、関連付けられた他の操作画面に遷移するステップ（ａ）と、
ステップ（ａ）で遷移した前記操作画面において、ユーザーがタッチしているタッチ位置から、次の選択操作を行うための所定領域までユーザーを誘導するための点字情報を前記点字表示部に表示させる誘導制御を実行するステップ（ｂ）と、
を含む処理をコンピューターに実行させるために制御プログラム。 (13) A main unit that accepts operations through a touch panel, a Braille device that is attached to the user's hand, and is arranged inside a finger cover that covers the user's fingertip and the finger cover, and can display Braille information. A control program executed by a computer that controls a control system, including a braille device equipped with a braille display unit.
The step (a) of transitioning to another associated operation screen according to the button selection operation on the operation screen displayed on the display surface of the touch panel, and
In the operation screen transitioned in step (a), guidance for displaying Braille information for guiding the user from the touch position touched by the user to a predetermined area for performing the next selection operation on the Braille display unit. Step (b) to execute control and
A control program that allows a computer to perform processing that includes.

本発明によれば、本体制御部は、操作画面上のボタンの選択操作に応じて、関連付けられた他の操作画面に遷移するとともに、ユーザーがタッチしているタッチ位置から次の選択操作を行うための所定領域まで、ユーザーを誘導するための点字情報を点字デバイスの点字表示部に表示させる誘導制御を実行する。このようにすることで、健常者と操作画面を共用したとしても、視覚障害者が操作で戸惑うことなく利用できる。 According to the present invention, the main body control unit transitions to another associated operation screen in response to a button selection operation on the operation screen, and performs the next selection operation from the touch position touched by the user. The guidance control for displaying the Braille information for guiding the user to the Braille display unit of the Braille device is executed up to a predetermined area for the purpose. By doing so, even if the operation screen is shared with a healthy person, the visually impaired person can use it without being confused by the operation.

本体装置のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware composition of a main body apparatus. 点字デバイスのハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware composition of a Braille device. 点字デバイスでタッチパネルにタッチした状態を示す斜視図である。It is a perspective view which shows the state which touched a touch panel with a Braille device. 点字デバイスの外観を示す斜視図である。It is a perspective view which shows the appearance of a Braille device. 指カバー周辺の断面模式図である。It is sectional drawing around the finger cover. タッチパネルに表示する操作画面の例である。This is an example of an operation screen displayed on the touch panel. 図５に対応する点字用の操作画面（点字画像）を示す概念図である。It is a conceptual diagram which shows the operation screen (Braille image) for Braille corresponding to FIG. 第１の実施形態における本体装置１００側で実行される制御を示すフローチャートである。It is a flowchart which shows the control which is executed on the main body apparatus 100 side in 1st Embodiment. 点字デバイス側の制御を示すフローチャートである。It is a flowchart which shows the control on the Braille device side. 視覚障害者モードにおける本体装置側の制御を示すフローチャートである。It is a flowchart which shows the control of the main body apparatus side in a visually impaired person mode. タッチパネルに表示する操作画面の例である。This is an example of an operation screen displayed on the touch panel. タッチパネルに表示する操作画面の例である。This is an example of an operation screen displayed on the touch panel. 図１１に続く状態を示す図である。It is a figure which shows the state following FIG. 図１２に続く状態を示す図である。It is a figure which shows the state following FIG. 第２の実施形態における本体装置側の制御を示すフローチャートである。It is a flowchart which shows the control of the main body apparatus side in 2nd Embodiment. タッチパネルに表示する操作画面の例である。This is an example of an operation screen displayed on the touch panel. 第３の実施形態における本体装置側の制御を示すフローチャートである。It is a flowchart which shows the control of the main body apparatus side in 3rd Embodiment. タッチパネルに表示する操作画面の例である。This is an example of an operation screen displayed on the touch panel. タッチパネルに表示する操作画面の例である。This is an example of an operation screen displayed on the touch panel. 第４の実施形態における本体装置側の制御を示すフローチャートである。It is a flowchart which shows the control of the main body apparatus side in 4th Embodiment. タッチパネルに表示する警告画面の例である。This is an example of a warning screen displayed on the touch panel.

以下、添付した図面を参照して、本発明の実施形態を説明する。なお、図面の説明において同一の要素には同一の符号を付し、重複する説明を省略する。また、図面の寸法比率は、説明の都合上誇張されており、実際の比率とは異なる場合がある。 Hereinafter, embodiments of the present invention will be described with reference to the accompanying drawings. In the description of the drawings, the same elements are designated by the same reference numerals, and duplicate description will be omitted. In addition, the dimensional ratios in the drawings are exaggerated for convenience of explanation and may differ from the actual ratios.

図１は、本体装置１００のハードウェア構成を示すブロック図であり、図２は、点字デバイス２００のハードウェア構成を示すブロック図である。図３Ａ、図３Ｂ、図４は、点字デバイス２００等の構成を示す図である。これらの図に示すように制御システム５００は、本体装置１００、および点字デバイス２００を備える。 FIG. 1 is a block diagram showing a hardware configuration of a main unit 100, and FIG. 2 is a block diagram showing a hardware configuration of a Braille device 200. 3A, 3B, and 4 are diagrams showing the configuration of the Braille device 200 and the like. As shown in these figures, the control system 500 includes a main body device 100 and a Braille device 200.

（本体装置１００）
本体装置１００は、例えばＭＦＰ（ＭｕｌｔｉｆｕｎｃｔｉｏｎＰｅｒｉｐｈｅｒａｌ）である。図１に示すように本体装置１００は、制御部１１０、タッチパネル１２０、記憶部１３０、プリンター部１４０、スキャナー部１５０、ファクシミリ部１６０、無線通信部１７０、およびスピーカー１８０を備える。 (Main unit 100)
The main body device 100 is, for example, an MFP (Multifunction Peripheral). As shown in FIG. 1, the main body device 100 includes a control unit 110, a touch panel 120, a storage unit 130, a printer unit 140, a scanner unit 150, a facsimile unit 160, a wireless communication unit 170, and a speaker 180.

制御部１１０は、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）を備える。記憶部１３０は、ＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）、ＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）、およびＨＤＤ（ＨａｒｄＤｉｓｋＤｒｉｖｅ）などの補助記憶装置を備える。ＲＯＭは、予め各種プログラムや各種データを格納しておき、ＲＡＭは、作業領域として一時的にプログラムやデータを記憶する。ＣＰＵは、プログラムにしたがって本体装置１００全体の制御を行う。この記憶部１３０には、階層構造の複数の操作画面、および点字画像データが記憶されている。 The control unit 110 includes a CPU (Central Processing Unit). The storage unit 130 includes an auxiliary storage device such as a RAM (Random Access Memory), a ROM (Read Only Memory), and an HDD (Hard Disk Drive). The ROM stores various programs and various data in advance, and the RAM temporarily stores the programs and data as a work area. The CPU controls the entire main unit 100 according to the program. The storage unit 130 stores a plurality of operation screens having a hierarchical structure and Braille image data.

タッチパネル１２０は、タッチスクリーン、または操作パネルとも称されるものであり、液晶スクリーンで構成されるＬＣＤ１２１と、これに重畳され、ユーザーの指の操作を検出するタッチセンサー１２２とを備える。 The touch panel 120 is also referred to as a touch screen or an operation panel, and includes an LCD 121 composed of a liquid crystal screen and a touch sensor 122 superimposed on the LCD screen to detect the operation of a user's finger.

タッチセンサー１２２は、例えば、静電容量方式の検出部であり、ユーザーの指が、タッチパネル１２０の表面に接触した場合に、静電容量の変化に基づき、指の接触の有無、およびその接触位置（座標）を検出する。また複数本の指による同時タッチ（マルチタッチ）の検出にも対応している。 The touch sensor 122 is, for example, a capacitance type detection unit, and when a user's finger touches the surface of the touch panel 120, the presence or absence of finger contact and the contact position thereof are based on the change in capacitance. (Coordinates) is detected. It also supports simultaneous touch (multi-touch) detection with multiple fingers.

プリンター部１４０は、公知の電子写真方式またはインクジェット方式により、印刷データに基づいて用紙上に画像を形成する。 The printer unit 140 forms an image on paper based on print data by a known electrophotographic method or inkjet method.

スキャナー部１５０は、原稿を載置する原稿ガラス、原稿に光りを照射する光源と、レンズ等の光学系、および反射した光から画像データを生成するＣＣＤ等の光学素子を備える。スキャナー部１５０は、原稿ガラスに載置した原稿、または自動原稿搬送装置により搬送された原稿の画像を読み取って画像データを生成する。 The scanner unit 150 includes a document glass on which the document is placed, a light source that irradiates the document with light, an optical system such as a lens, and an optical element such as a CCD that generates image data from the reflected light. The scanner unit 150 reads an image of a document placed on a document glass or a document conveyed by an automatic document transfer device to generate image data.

ファクシミリ部１６０は、モデム、データアクセス部を備える。モデムは、データアクセス部、および電話回線等の通信回線網に接続されている。データアクセス部は、相手先電話番号に応じたパルス信号を出力する機能を有する。ファクシミリ部１６０は通信回線網を通じて、相手先のファクシミリ装置と画像データの伝送を行う。 The facsimile unit 160 includes a modem and a data access unit. The modem is connected to a data access unit and a communication network such as a telephone line. The data access unit has a function of outputting a pulse signal according to the telephone number of the other party. The facsimile unit 160 transmits image data to the facsimile machine of the other party through the communication network.

無線通信部１７０は、「本体通信部」として機能する。この無線通信部１７０は、ＢＬＥ（Ｂｌｕｅｔｏｏｔｈ（登録商標）ＬｏｗＥｎｅｒｇｙ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＩＥＥＥ８０２．１１、ＩｒＤＡ等の無線通信インターフェースを備える。また、近距離無線通信として、ＦｅｌｉＣａ（登録商標）、ＩＳＯ／ＩＥＣ１４４４３（ＭＩＦＡＲＥ（登録商標）の通信方式）、ＩＳＯ／ＩＥＣ１８０９２（ＮＦＣ：ＮｅａｒＦｉｅｌｄＣｏｍｍｕｎｉｃａｔｉｏｎ）等の通信方式を利用してもよい。なお、本体装置１００が、これとは別に有線方式のインターフェースとして、イーサネット（登録商標）、ＦＤＤＩ等の規格によるＬＡＮ接続用インターフェースや、ＵＳＢ、ＩＥＥＥ１３９４等のシリアルインターフェースや、ＳＣＳＩ、ＩＥＥＥ１２８４等のパラレルインターフェース等のインターフェースを備えてもよい。 The wireless communication unit 170 functions as a "main unit communication unit". The wireless communication unit 170 includes wireless communication interfaces such as BLE (Bluetooth (registered trademark) Low Energy), Bluetooth (registered trademark), IEEE802.11, and IrDA. Further, as short-range wireless communication, a communication method such as FeliCa (registered trademark), ISO / IEC 14443 (communication method of MIFARE (registered trademark)), ISO / IEC 18092 (NFC: Near Field Communication) may be used. .. In addition to this, the main unit 100 has a LAN connection interface according to standards such as Ethernet (registered trademark) and FDDI, a serial interface such as USB and IEEE1394, and a parallel interface such as SCSI and IEEE1284 as a wired interface. It may be provided with an interface such as.

スピーカー１８０は、音声を出力する。具体的には、タッチパネル１２０に表示する操作画面１２ｂの表示内容を、視覚障害者等のユーザーに音声で情報を通知する。 The speaker 180 outputs sound. Specifically, the display content of the operation screen 12b displayed on the touch panel 120 is notified to a user such as a visually impaired person by voice.

（点字デバイス２００）
図２、図３Ａ、図３Ｂ、図４に示すように、点字デバイス２００は、制御部２１０、点字表示部２２０、選択操作用の決定スイッチ２３０、接触センサー２４０、および無線通信部２５０を備える。 (Braille device 200)
As shown in FIGS. 2, 3A, 3B, and 4, the Braille device 200 includes a control unit 210, a Braille display unit 220, a determination switch 230 for selection operation, a contact sensor 240, and a wireless communication unit 250.

図３Ａ、図３Ｂに示すように、点字デバイス２００は、視覚障害者等のユーザーの手に装着されるものであり、手袋本体部２９１、装着した状態で人差し指を覆う指カバー２９２、この手袋本体部２９１の手の甲に相当する部分に設けられたユニットケース２９３で構成される。点字デバイス２００は、手袋本体部２９１の手首バンド（図示せず）によりユーザーの手に装着される。 As shown in FIGS. 3A and 3B, the Braille device 200 is attached to a user's hand such as a visually impaired person, and has a glove body 291 and a finger cover 292 that covers the index finger while worn, and the glove body. It is composed of a unit case 293 provided on a portion corresponding to the back of the hand of the portion 291. The Braille device 200 is worn on the user's hand by a wrist band (not shown) of the glove body 291.

指カバー２９２の先端部には、点字表示部２２０、決定スイッチ２３０、および接触センサー２４０が設けられ、ユニットケース２９３の内部には、制御部２１０および無線通信部２５０が設けられる。これらはユニットケース２９３内に設けられた二次電池（図示せず）により電力が供給される。 A Braille display unit 220, a determination switch 230, and a contact sensor 240 are provided at the tip of the finger cover 292, and a control unit 210 and a wireless communication unit 250 are provided inside the unit case 293. These are powered by a secondary battery (not shown) provided in the unit case 293.

（制御部２１０、無線通信部２５０）
制御部２１０は、ＣＰＵ、ＲＡＭ、およびＲＯＭを備える。無線通信部２５０は、「点字デバイス通信部」として機能し、無線通信により、本体装置１００の無線通信部１７０と通信を行う。これらの機能は、それぞれ制御部１１０、無線通信部１７０と同様であり、説明を省略する。 (Control unit 210, wireless communication unit 250)
The control unit 210 includes a CPU, RAM, and ROM. The wireless communication unit 250 functions as a "Braille device communication unit" and communicates with the wireless communication unit 170 of the main unit 100 by wireless communication. These functions are the same as those of the control unit 110 and the wireless communication unit 170, respectively, and the description thereof will be omitted.

（点字表示部２２０）
点字表示部２２０は、指カバー２９２の内側に配置され、ユーザーに点字の感触を生じさせる立体的な点字模様を表示（具現）する。図４の指カバー２９２周辺の断面模式図に示すように点字表示部２２０は、指先に触覚を感じさせる多数のピンが設けられており、このピンの高さ方向の突き出し量は、圧電素子により個別に変更できる。ピンの密度（解像度）は、一般的な点字のピッチ（２～３ｍｍ）よりも高い密度で構成しており、点字模様以外にもテキスト情報や簡単な画像も表示可能である。 (Braille display unit 220)
The Braille display unit 220 is arranged inside the finger cover 292, and displays (embodies) a three-dimensional Braille pattern that gives the user a feeling of Braille. As shown in the schematic cross-sectional view around the finger cover 292 in FIG. 4, the braille display unit 220 is provided with a large number of pins that make the fingertips feel tactile, and the amount of protrusion of these pins in the height direction is determined by the piezoelectric element. Can be changed individually. The pin density (resolution) is higher than the general Braille pitch (2 to 3 mm), and text information and simple images can be displayed in addition to the Braille pattern.

以下、図５、図６を参照し、点字表示部２２０で表示する点字模様の例を説明する。図５は、タッチパネル１２０に表示される操作画面１２ａの例である。なお、実際の操作画面は後述するように多くのボタン（操作キー、またはアイコンともいう）が配置されているが、同図では説明のために簡易な画面例としている。複数のボタンｂ１１～ｂ１４（以下、このようなボタンを総称して「ボタンｂ」ともいう）が配置され視覚的に表示されている。図６は、図５に対応する点字用の点字画像データｄ１～ｄ４（以下、これらをまとめて「点字画像データｄ」ともいう）を表示する点字用の操作画面２２ａ（点字画像）である。点字画像データｄ１～ｄ４に含まれる点字情報は、それぞれボタンｂ１１～ｂ１４に示される文字データに一対一に対応している。これらの図５、および後述する操作画面用の画像データならびに図６のような点字用の点字データ（画像データ）は、ともに記憶部１３０に記憶されている。 Hereinafter, an example of a braille pattern displayed on the braille display unit 220 will be described with reference to FIGS. 5 and 6. FIG. 5 is an example of the operation screen 12a displayed on the touch panel 120. As will be described later, many buttons (also referred to as operation keys or icons) are arranged on the actual operation screen, but in the figure, a simple screen example is used for explanation. A plurality of buttons b11 to b14 (hereinafter, such buttons are collectively referred to as "button b") are arranged and visually displayed. FIG. 6 is an operation screen 22a (Braille image) for Braille that displays Braille image data d1 to d4 (hereinafter, collectively referred to as “Braille image data d”) corresponding to FIG. 5. The braille information included in the braille image data d1 to d4 has a one-to-one correspondence with the character data indicated by the buttons b11 to b14, respectively. Both the image data for the operation screen described with reference to FIG. 5 and the Braille data (image data) for Braille as shown in FIG. 6 are stored in the storage unit 130.

通常モードのときには、ユーザーは各ボタンｂを指でタッチすることで、各ボタンｂに対応した処理を実行できる。例えばボタンｂ１１をタッチすることで、操作画面はコピーに関する設定画面に遷移する。後述する視覚障害者モードでは、点字デバイス２００を装着したユーザーが指カバー２９２で、操作画面のボタンｂにタッチすることで、対応した点字画像データｄが点字表示部２２０に表示される。具体的には、例えば指カバー２９２でタッチパネル１２０表面のボタンｂ１１の枠内（四角枠）のいずれかの位置をタッチすることで、ボタンｂ１１に対応した点字画像データｄ１が本体装置１００から、点字デバイス２００に無線通信により送信される。そして、点字デバイス２００は、受信した点字画像データｄ１を点字表示部２２０に表示する。この制御については後述する。なお、図６の例では、点字画像データｄ１は、６ピンを１組のデータとして６個のピンに対応するデータで構成されている。各データを、点字表示部２２０により所定時間間隔で順次表示するようにしてもよい。または、ユーザーによるボタンｂ１１内でのスライド操作により、６個のデータをスクロールさせながら表示してもよい。さらに、点字画像データｄ１には、点字情報だけでなく、これら全体を囲む枠線などの図形を含めるようにしてもよい。 In the normal mode, the user can execute the process corresponding to each button b by touching each button b with a finger. For example, by touching the button b11, the operation screen transitions to the setting screen related to copying. In the visually impaired person mode described later, when a user wearing the Braille device 200 touches the button b on the operation screen with the finger cover 292, the corresponding Braille image data d is displayed on the Braille display unit 220. Specifically, for example, by touching any position in the frame (square frame) of the button b11 on the surface of the touch panel 120 with the finger cover 292, the braille image data d1 corresponding to the button b11 is obtained from the main unit device 100 in braille. It is transmitted to the device 200 by wireless communication. Then, the braille device 200 displays the received braille image data d1 on the braille display unit 220. This control will be described later. In the example of FIG. 6, the braille image data d1 is composed of data corresponding to 6 pins with 6 pins as a set of data. Each data may be sequentially displayed by the Braille display unit 220 at predetermined time intervals. Alternatively, the six data may be displayed while being scrolled by a slide operation within the button b11 by the user. Further, the braille image data d1 may include not only the braille information but also a figure such as a frame line surrounding the entire braille information.

（決定スイッチ２３０）
決定スイッチ２３０は、点字表示部２２０に重畳して配置した圧力センサーである。ユーザーが指Ｆを下方に押し込むことで、圧力センサーにより所定以上の圧力が検知された場合に、制御部２１０は、ユーザーによって、決定スイッチ２３０がＯＮされたと判定する。なお決定スイッチ２３０としては、これに限られず、空いている方の手で操作するタクトスイッチであってもよい。また、その場合、このタクトスイッチをユニットケース２９３の上部に配置してもよい。 (Decision switch 230)
The determination switch 230 is a pressure sensor arranged so as to be superimposed on the braille display unit 220. When the user pushes the finger F downward and the pressure sensor detects a pressure equal to or higher than a predetermined value, the control unit 210 determines that the determination switch 230 has been turned on by the user. The determination switch 230 is not limited to this, and may be a tact switch operated by a free hand. In that case, the tact switch may be arranged on the upper part of the unit case 293.

（接触センサー２４０）
接触センサー２４０は、「センサー部」として機能する。接触センサー２４０は、指カバー２９２の指の腹に対応する位置に配置され、指カバー２９２の外側が、タッチパネル１２０の表面等の物体に接触したことを検知する。接触センサー２４０は、例えばマイクロスイッチまたは圧力センサーなどの機械的なセンサーであってもよく、光学的なセンサーであってもよい。また圧力センサーを用いた場合には、所定以上の圧力で物体に接触した場合に、接触したと判定するようにしてもよい。点字デバイス２００を装着したユーザーが、指カバー２９２の先端でタッチパネル１２０等の何らかの物体にタッチした場合には、接触センサー２４０はそのタッチを検知する。 (Contact sensor 240)
The contact sensor 240 functions as a "sensor unit". The contact sensor 240 is arranged at a position corresponding to the pad of the finger of the finger cover 292, and detects that the outside of the finger cover 292 has come into contact with an object such as the surface of the touch panel 120. The contact sensor 240 may be a mechanical sensor such as a microswitch or a pressure sensor, or may be an optical sensor. Further, when a pressure sensor is used, it may be determined that the object has come into contact with the object at a pressure equal to or higher than a predetermined value. When the user wearing the Braille device 200 touches some object such as the touch panel 120 with the tip of the finger cover 292, the contact sensor 240 detects the touch.

また、接触センサー２４０が検知した接触タイミングと、タッチパネル１２０（タッチセンサー１２２）の検出タイミングを比較することにより、タッチパネル１２０へのタッチが、点字デバイス２００によりなされたものかを判定するようにしてもよい。例えば、制御部１１０は以下の手法により判定する。 Further, by comparing the contact timing detected by the contact sensor 240 with the detection timing of the touch panel 120 (touch sensor 122), it may be determined whether the touch to the touch panel 120 is made by the Braille device 200. good. For example, the control unit 110 determines by the following method.

（ａ）点字デバイス２００が接触センサー２４０の出力をモニターし、センサー情報、すなわち何らかの物体への接触タイミングの情報をリアルタイムで、本体装置１００に送信する。センサー情報の送信は、所定周期、例えば数十Ｈｚの周期で行うことが好ましい。（ｂ）本体装置１００の制御部１１０は、自装置のタッチパネル１２０へのタッチを検出する。このとき、点字デバイス２００から送信されてくる（ａ）のセンサー情報の接触タイミングを示す波形と、タッチパネル１２０へのタッチのタイミングを示す波形が同一であるか否かにより行う。より具体的には、接触センサー２４０のセンサー情報で非接触から接触に変化したタイミング、およびその後のタッチの継続を示す信号波形が、本体装置１００でタッチの検出した信号波形と一致していれば、点字デバイス２００によりタッチされたものであると判定する。例えば、点字デバイス２００から、６０Ｈｚ周期でセンサー情報を受信する場合、本体装置１００は、非接触から接触に変化したタイミングが、同一周期あるいは１周期程度（約１６ｍｓｅｃ）の差であれば、点字デバイス２００によるタッチであると判定できる。 (A) The Braille device 200 monitors the output of the contact sensor 240, and transmits sensor information, that is, information on the timing of contact with some object, to the main body device 100 in real time. It is preferable that the sensor information is transmitted in a predetermined cycle, for example, in a cycle of several tens of Hz. (B) The control unit 110 of the main body device 100 detects a touch of the own device on the touch panel 120. At this time, it is performed depending on whether or not the waveform indicating the contact timing of the sensor information (a) transmitted from the Braille device 200 and the waveform indicating the timing of touching the touch panel 120 are the same. More specifically, if the signal waveform indicating the timing of the change from non-contact to contact in the sensor information of the contact sensor 240 and the continuation of the touch thereafter matches the signal waveform detected by the touch on the main unit 100. , It is determined that the touch is made by the Braille device 200. For example, when receiving sensor information from the Braille device 200 at a cycle of 60 Hz, the main body device 100 is a Braille device if the timing of change from non-contact to contact is the same cycle or a difference of about one cycle (about 16 msec). It can be determined that the touch is made by 200.

なお、以下の各実施形態における制御方法の説明においては、タッチパネル１２０へ何らかの物体によりタッチがなされた場合には、視覚障害者の点字デバイス２００によるタッチであるとみなしている。しかしながら、上述の検出タイミングの比較により、点字デバイス２００によるタッチと判定した場合に、後述する誘導制御を行うようにしてもよい。 In the following description of the control method in each embodiment, when the touch panel 120 is touched by some object, it is regarded as the touch by the Braille device 200 for the visually impaired. However, when it is determined that the touch is made by the Braille device 200 by the comparison of the detection timings described above, the guidance control described later may be performed.

（制御方法）
図７～図１３を参照し、第１の実施形態に係る制御システム５００で実行される視覚障害者モードにおける制御方法について説明する。図７、図９は本体装置１００側で実行される制御を示すフローチャートであり、図８は点字デバイス２００側で実行される制御を示すフローチャートである。図１０～図１３は、タッチパネル１２０に表示する操作画面の例である。 (Control method)
7 to 13, a control method in the visually impaired mode executed by the control system 500 according to the first embodiment will be described. 7 and 9 are flowcharts showing the control executed on the main body apparatus 100 side, and FIG. 8 is a flowchart showing the control executed on the Braille device 200 side. 10 to 13 are examples of operation screens displayed on the touch panel 120.

（本体装置１００側の制御）
（ステップＳ１）
図７に示すように本体装置１００の制御部１１０は、点字デバイス２００と通信可能であるか否かを判定する。点字デバイス２００との無線通信が確立できなければ（ＮＯ）、通常モードへの切り替えを行うステップＳ２に処理を進める。 (Control on the main unit 100 side)
(Step S1)
As shown in FIG. 7, the control unit 110 of the main body device 100 determines whether or not communication with the Braille device 200 is possible. If wireless communication with the Braille device 200 cannot be established (NO), the process proceeds to step S2 for switching to the normal mode.

一方で、無線通信が確立できれば（ＹＥＳ）、視覚障害者モードへの切り替えを行うステップＳ３に処理を進める。なお、視聴覚障害者モードへの切り替えを、本体装置１００と点字デバイス２００間の無線通信が確立されてから、さらに、点字デバイス２００により決定スイッチ２３０押し下げ、等によるユーザーの確認指示を受けてから行うようにしてもよい。また、ステップＳ１の判定を所定周期で逐次行い、それまで確立されていた無線通信が切断することに応じて、視覚障害者モードから通常モードに切り替えるようにしてもよい。さらに、視覚障害者モードに移行した際に、後述する「誘導制御」を開始する旨の点字情報を点字デバイス２００に送信し、これに対する決定スイッチ２３０の押し下げにより、ユーザーの確認指示を受けてから「誘導制御」を実行するようにしてもよい。 On the other hand, if wireless communication can be established (YES), the process proceeds to step S3 for switching to the visually impaired mode. It should be noted that the switching to the audiovisually impaired person mode is performed after the wireless communication between the main unit device 100 and the Braille device 200 is established, and further, after receiving the user's confirmation instruction by pressing down the determination switch 230 by the Braille device 200, etc. You may do so. Further, the determination in step S1 may be sequentially performed at a predetermined cycle, and the mode may be switched from the visually impaired mode to the normal mode according to the disconnection of the wireless communication established up to that point. Further, when the mode is changed to the visually impaired mode, Braille information to start the "guidance control" described later is transmitted to the Braille device 200, and the determination switch 230 is pressed down to receive the confirmation instruction from the user. "Induction control" may be executed.

（ステップＳ２）
本体装置１００は、通常モードを実行する。通常モードでは上述したとおり一般的な処理であり、各ボタンｂを指でタッチすることで選択操作がなされ、ボタンｂに対応した処理が実行される。 (Step S2)
The main unit 100 executes a normal mode. In the normal mode, as described above, it is a general process, and the selection operation is performed by touching each button b with a finger, and the process corresponding to the button b is executed.

（ステップＳ３）
本体装置１００は、視覚障害者モードへの移行を判断し、その判断結果を点字デバイス２００側に送信する。これにより、視覚障害者モードを開始する。視覚障害者モードは、タッチパネル１２０上のボタンｂにユーザーが触れても、制御システム５００は、そのボタンｂの選択操作として処理を行わず、タッチ位置情報のみを取得する。そしてタッチパネル１２０とは別の決定スイッチ２３０が操作されることにより、そのボタンｂへの選択操作がなされたとして、ボタンｂに関連付けられた処理を行う。以下、視覚障害者モードについて詳述する。 (Step S3)
The main unit 100 determines the transition to the visually impaired mode, and transmits the determination result to the Braille device 200 side. This initiates the visually impaired mode. In the visually impaired mode, even if the user touches the button b on the touch panel 120, the control system 500 does not perform the process as the selection operation of the button b, and acquires only the touch position information. Then, by operating the determination switch 230 different from the touch panel 120, it is assumed that the selection operation for the button b is performed, and the process associated with the button b is performed. Hereinafter, the visually impaired mode will be described in detail.

なお、第１の実施形態、および後述する各実施形態においては、通常モード、および視覚障害者モードを相互に切り替えたとしても、タッチパネル１２０に表示する操作画面の表示内容は、何ら変化はなく、そのままである。通常モードと視覚障害者モードで操作画面の表示内容を共通にすることで、視覚障害者モード向けに新たに操作画面を準備する必要がないので、表示用のデータ作成に関する工数を削減できる。 In the first embodiment and each of the embodiments described later, even if the normal mode and the visually impaired mode are switched to each other, the display content of the operation screen displayed on the touch panel 120 does not change at all. As it is. By sharing the display contents of the operation screen between the normal mode and the visually impaired mode, it is not necessary to prepare a new operation screen for the visually impaired mode, so that the man-hours related to data creation for display can be reduced.

（視覚障害者モード（Ｓ３）の制御）
（点字デバイス２００側の制御）
図８は、ステップＳ３における点字デバイス２００側の制御を示すフローチャートである。 (Control of visually impaired mode (S3))
(Control on the Braille device 200 side)
FIG. 8 is a flowchart showing the control of the Braille device 200 side in step S3.

（ステップＳ１１）
最初に、点字デバイス２００の制御部２１０は、視覚障害者モードに移行したか否かを判定する。具体的には、本体装置１００は、点字デバイス２００と例えばＢＬＥによる無線通信が確立できれば、視覚障害者モードへの移行を判断し、その判断結果を点字デバイス２００側に送信する。点字デバイス２００は、視覚障害者モードに移行した旨の結果を受けるまで待機し（ＮＯ）、移行結果を受信したならば（ＹＥＳ）、処理をステップＳ１２に進める。 (Step S11)
First, the control unit 210 of the Braille device 200 determines whether or not the mode has changed to the visually impaired person mode. Specifically, if wireless communication between the Braille device 200 and, for example, BLE can be established, the main body device 100 determines the transition to the visually impaired mode, and transmits the determination result to the Braille device 200 side. The Braille device 200 waits until it receives the result of the transition to the visually impaired mode (NO), and if it receives the transition result (YES), proceeds to the process in step S12.

（ステップＳ１２）
制御部２１０は、本体装置１００から点字情報を受信したか否かを判断する。点字情報を受信した場合（ＹＥＳ）には、処理をステップＳ１３に進める。 (Step S12)
The control unit 210 determines whether or not Braille information has been received from the main unit 100. When the braille information is received (YES), the process proceeds to step S13.

（ステップＳ１３）
点字表示部２２０に、受信した点字情報に対応する点字画像を表示する。 (Step S13)
A braille image corresponding to the received braille information is displayed on the braille display unit 220.

（ステップＳ１４）
ユーザーは、点字表示部２２０の表示内容から、ボタンｂの内容を認識する。所望のボタンｂであれば、決定スイッチ２３０をＯＮする（操作する、または押し下げる）。制御部２１０は、決定スイッチ２３０がＯＮされた場合（ＹＥＳ）には、処理をステップＳ１５に進める。ＯＮされない場合（ＮＯ）には、処理を終了する。 (Step S14)
The user recognizes the content of the button b from the display content of the Braille display unit 220. If the button b is desired, the determination switch 230 is turned on (operated or pressed down). When the determination switch 230 is turned on (YES), the control unit 210 advances the process to step S15. If it is not turned on (NO), the process ends.

（ステップＳ１５）
点字デバイス２００は、決定スイッチ２３０のＯＮ信号を本体装置１００に送信して、終了する。以降は、ステップＳ１１以下の処理を繰り返す。 (Step S15)
The Braille device 200 transmits an ON signal of the determination switch 230 to the main body device 100 and terminates. After that, the process of step S11 or less is repeated.

（本体装置１００側の制御）
（ステップＳ２１）
図９に示すように、本体装置１００の制御部１１０は、検出したタッチがいずれかのボタンｂへのタッチであるかを判定する。ボタンｂへのタッチであれば（ＹＥＳ）、処理をステップＳ２２に進め、そうでなければ処理をステップＳ２１の処理を繰り返す。 (Control on the main unit 100 side)
(Step S21)
As shown in FIG. 9, the control unit 110 of the main unit 100 determines whether the detected touch is a touch to any button b. If the button b is touched (YES), the process proceeds to step S22, and if not, the process repeats the process of step S21.

（ステップＳ２２）
タッチされているボタンｂの内容に応じた点字情報を点字デバイス２００に送信する。例えば、図５においてボタンｂ１１（の枠内）へのタッチであれば、ボタンｂ１１に対応する点字情報（点字画像データｄ１）を点字デバイス２００に送信する。 (Step S22)
Braille information corresponding to the content of the touched button b is transmitted to the Braille device 200. For example, in the case of touching the button b11 (inside the frame) in FIG. 5, the braille information (braille image data d1) corresponding to the button b11 is transmitted to the braille device 200.

（ステップＳ２３）
ここでは、点字デバイス２００のステップＳ１５（図８）の処理に応じて、点字デバイス２００からの決定スイッチ２３０のＯＮ信号を受信したか否かを判定する。ＯＮ信号を受信した場合（ＹＥＳ）、処理をステップＳ２４に進め、そうでなければ（ＮＯ）処理をステップＳ２１に戻し、以降の処理を繰り返す。 (Step S23)
Here, it is determined whether or not the ON signal of the determination switch 230 from the Braille device 200 is received according to the process of step S15 (FIG. 8) of the Braille device 200. When the ON signal is received (YES), the process proceeds to step S24, otherwise (NO) the process returns to step S21, and the subsequent processes are repeated.

（ステップＳ２４）
制御部１１０は、ボタンｂへのタッチ（Ｓ２１）があり、かつ、ＯＮ信号の受信（Ｓ２３）された場合に、選択操作が行われたと判定し、現時点で、点字デバイス２００によりタッチされているボタンｂに応じた機能の処理を実行する。 (Step S24)
The control unit 110 determines that the selection operation has been performed when the button b is touched (S21) and the ON signal is received (S23), and is currently touched by the Braille device 200. The processing of the function corresponding to the button b is executed.

図１０、図１１は、タッチパネル１２０に表示する操作画面の例である。図１０（ａ）に示す操作画面１２ｂは、コピー設定を行う基本画面の一例である。図１０（ｂ）に示す操作画面１２ｃは、コピー設定を行う基本画面の別の例である。例えば、ステップＳ２３で操作画面１２ｂのボタンｂ２１の原稿設定（原稿サイズ）に関する選択操作が行われた場合には、図１１の操作画面１２ｄに遷移する。また、図５のボタンｂ１１への選択操作がなされた場合には、コピー処理に関する操作画面に遷移する。 10 and 11 are examples of operation screens displayed on the touch panel 120. The operation screen 12b shown in FIG. 10A is an example of a basic screen for setting a copy. The operation screen 12c shown in FIG. 10B is another example of a basic screen for setting a copy. For example, when the selection operation regarding the original setting (original size) of the button b21 of the operation screen 12b is performed in step S23, the transition to the operation screen 12d of FIG. 11 is performed. Further, when the selection operation to the button b11 in FIG. 5 is performed, the screen transitions to the operation screen related to the copy process.

（ステップＳ２５）
制御部１１０は、ステップＳ２４の処理により、現時点で表示している操作画面が、ユーザーのタッチ位置を所定領域まで誘導する誘導制御を行う操作画面であるか否かを判定する。誘導制御を行う操作画面（以下、「第２の種類の操作画面」ともいう）であれば（ＹＥＳ）、処理をステップＳ２６に進め、誘導制御行わない操作画面（以下、「第１の種類の操作画面」ともいう）であれば（ＮＯ）、処理をステップＳ２１に戻す。 (Step S25)
By the process of step S24, the control unit 110 determines whether or not the operation screen currently displayed is an operation screen for performing guidance control for guiding the user's touch position to a predetermined area. If it is an operation screen for performing guidance control (hereinafter, also referred to as "second type of operation screen") (YES), the process proceeds to step S26, and an operation screen for which guidance control is not performed (hereinafter, "first type of operation screen"). If it is (also referred to as "operation screen") (NO), the process returns to step S21.

例えば操作画面１２ａ～１２ｃは、誘導制御を行わない第１の種類の操作画面である。一方で図１１の操作画面１２ｄは、誘導制御を行う第２の種類の操作画面である。 For example, the operation screens 12a to 12c are first-type operation screens that do not perform guidance control. On the other hand, the operation screen 12d in FIG. 11 is a second type of operation screen for performing guidance control.

この第１の種類の操作画面１２ａ～１２ｃは、下位層の操作画面ではなく、また、いずれかのボタンｂが操作されることによりボップアップ等により表示態様やボタンｂの配置が変化するものではない。そして、表示したボタンｂをなぞって所望のボタンｂを探してもらうものであるため、誘導制御は行わない。一方で、第２の種類の操作画面１２ｄは、画面遷移後の下位層の画面であり、遷移直後は、ユーザー（視覚障害者）は、ボタンｂの配置に関する情報がない。そのため誘導制御を行う。 The first type of operation screens 12a to 12c are not lower layer operation screens, and the display mode and the arrangement of the buttons b may change due to pop-up or the like when any button b is operated. not. Then, since the displayed button b is traced to search for the desired button b, the guidance control is not performed. On the other hand, the second type of operation screen 12d is a lower layer screen after the screen transition, and immediately after the transition, the user (visually impaired person) has no information regarding the arrangement of the button b. Therefore, guidance control is performed.

また、階層構造の複数の操作画面であって、上位の第１階層の操作画面と、これよりも１つ下位の第２階層の操作画面が含まれ、第２階層では、第１階層の操作画面の設定項目に関する詳細設定を行うような場合を想定する。この場合、第１階層の操作画面は、誘導制御を行わない第１の種類の操作画面であり、第２階層の操作画面は、誘導制御を行う第２の種類の操作画面である。 Further, it is a plurality of operation screens having a hierarchical structure, and includes an operation screen of the upper first layer and an operation screen of the second layer one level lower than the operation screen. In the second layer, the operation of the first layer is included. It is assumed that detailed settings related to screen setting items are made. In this case, the operation screen of the first layer is the operation screen of the first type that does not perform guidance control, and the operation screen of the second layer is the operation screen of the second type that performs guidance control.

以下においては、図１０（ａ）の操作画面１２ｂでボタンｂ２１が選択操作され、これによりステップＳ２４の処理により図１１の第２の種類の操作画面１２ｄに画面遷移した場合を例にして、説明する。 In the following, the case where the button b21 is selected and operated on the operation screen 12b of FIG. 10A and the screen transitions to the second type of operation screen 12d of FIG. 11 by the processing of step S24 will be described as an example. do.

（ステップＳ２６）
制御部１１０は、所定領域外（図１１の「操作禁止領域」）のボタンを無効化する。具体的には、ボタンｂの位置へのタッチがなされても、ボタンｂを機能させず、ボタンｂの内容を示す点字情報を点字デバイス２００に送信しない。この場合、健常者であれば視覚的にはボタンｂは認識できる（見える）が、点字情報は表示されないので視覚障害者はボタンｂを認識できない状態になる。 (Step S26)
The control unit 110 invalidates the buttons outside the predetermined area (“operation prohibited area” in FIG. 11). Specifically, even if the position of the button b is touched, the button b does not function and the braille information indicating the content of the button b is not transmitted to the braille device 200. In this case, a healthy person can visually recognize (see) the button b, but since the Braille information is not displayed, the visually impaired person cannot recognize the button b.

（ステップＳ２７）
制御部１１０は、所定領域への誘導制御を行う。ここで「所定領域」とは、画面遷移後に次の選択操作を行うための１つまたは複数のボタンｂが配置されている領域であり、ユーザーのタッチ位置を誘導させる領域である。このときに、所定領域に複数のボタンｂが含まれ、そのボタンに序列があればその先頭のボタンｂまで誘導するようにしてもよい。図１１の例では、ボタンｂ２２が左端、および／または上端にある先頭ボタンであり、この先頭ボタンを誘導先とする。 (Step S27)
The control unit 110 performs guidance control to a predetermined area. Here, the "predetermined area" is an area in which one or a plurality of buttons b for performing the next selection operation after the screen transition is arranged, and is an area for guiding the user's touch position. At this time, if a plurality of buttons b are included in a predetermined area and the buttons have an order, they may be guided to the first button b. In the example of FIG. 11, the button b22 is the first button at the left end and / or the upper end, and this first button is the guidance destination.

誘導制御としては、具体的には、所定領域に至る経路（図１１の矢印）をなぞらせるような点字情報を点字デバイス２００に送信する。例えば図１１の手首のイラストに示す位置を、ユーザーがタッチしていた場合には、制御部１１０は、誘導するための点字情報として、「上」の点字情報を点字デバイス２００に送信し、対応する点字画像データｄ５を点字デバイス２００の点字表示部２２０に表示させる。ここで、誘導するための点字情報は、タッチパネル１２０における現在のタッチ位置に対する所定領域までの相対的な位置関係を示す点字情報である。この相対的な位置関係は、方向、および／または距離である。例えば「左」、「２０ｍｍ」、または「左斜め２０ｍｍ」を表す点字情報としてもよい。 Specifically, as the guidance control, Braille information that traces the route to the predetermined area (arrow in FIG. 11) is transmitted to the Braille device 200. For example, when the user touches the position shown in the illustration of the wrist in FIG. 11, the control unit 110 transmits the "upper" Braille information to the Braille device 200 as the Braille information for guidance, and responds. The braille image data d5 to be used is displayed on the braille display unit 220 of the braille device 200. Here, the braille information for guidance is braille information indicating a relative positional relationship up to a predetermined area with respect to the current touch position on the touch panel 120. This relative positional relationship is direction and / or distance. For example, it may be Braille information representing "left", "20 mm", or "left diagonal 20 mm".

図１２は、図１１に続く状態を示す図である。ユーザーが点字デバイス２００でなぞる位置に応じて、制御部１１０は、所定領域までユーザーを誘導するための点字画像データｄ５（「上」）、または点字画像データｄ６（「左」）を、点字デバイス２００に送信し、これを点字デバイス２００の点字表示部２２０に表示させる。 FIG. 12 is a diagram showing a state following FIG. Depending on the position that the user traces with the Braille device 200, the control unit 110 uses the Braille image data d5 (“top”) or the Braille image data d6 (“left”) to guide the user to a predetermined area. It is transmitted to 200, and this is displayed on the Braille display unit 220 of the Braille device 200.

（ステップＳ２８）
制御部１１０は、点字デバイス２００のタッチ位置が誘導先の所定領域まで到達したか否かを判定する。所定領域として先頭のボタンｂ２２まで達した場合には（ＹＥＳ）、処理をステップＳ２９に進め、達していなければ（ＮＯ）、処理をステップＳ２７に戻す。 (Step S28)
The control unit 110 determines whether or not the touch position of the Braille device 200 has reached a predetermined region of the guidance destination. If the predetermined area reaches the first button b22 (YES), the process proceeds to step S29, and if not reached (NO), the process returns to step S27.

（ステップＳ２９）
制御部１１０は、現在のタッチ位置に対して、所定領域内のボタンｂの配置に関する配置情報を示す点字情報を点字デバイス２００に送信する。配置情報としては、例えばボタンの並び方向である。図１３は、図１２に続く状態を示す図である。同図の例では、所定領域内の複数のボタンｂは、縦方向に並んでいるので、縦方向である旨を示す点字画像データｄ７（「ボタンの並び：縦方向」）を点字デバイス２００に送信する。また、配置情報としては、所定領域内にあるボタンｂの総数、または現時点でタッチしているボタンｂに対しての他のボタンｂの位置、方向、もしくはその方向の数を用いてもよい。例えば、「総数５個」、または「下方向に４個」を表す点字情報である。ステップＳ２９における配置情報の表示（送信）は、所定期間経過後に停止するようにしてもよい。例えば所定領域に到達してから数秒経過後に、点字デバイス２００による配置情報の表示を終了させ、その後は、ステップＳ２２と同様に、タッチ位置のボタンｂの内容を表示させる。 (Step S29)
The control unit 110 transmits the braille information indicating the arrangement information regarding the arrangement of the buttons b in the predetermined area to the braille device 200 with respect to the current touch position. The arrangement information is, for example, the arrangement direction of the buttons. FIG. 13 is a diagram showing a state following FIG. In the example of the figure, since the plurality of buttons b in the predetermined area are arranged in the vertical direction, the braille image data d7 (“arrangement of buttons: vertical direction”) indicating that the buttons are in the vertical direction is used in the braille device 200. Send. Further, as the arrangement information, the total number of buttons b in a predetermined area, or the position, direction, or number of directions of other buttons b with respect to the button b currently being touched may be used. For example, it is Braille information representing "total of 5" or "downward 4". The display (transmission) of the arrangement information in step S29 may be stopped after a predetermined period has elapsed. For example, after a few seconds have elapsed from reaching the predetermined area, the display of the arrangement information by the Braille device 200 is terminated, and then the content of the button b at the touch position is displayed as in step S22.

（ステップＳ３０）
その後、制御部１１０は、ステップＳ２６で無効化した操作画面１２ｄ上の所定領域外のボタンｂの操作を有効化し（無効化解除）、処理を終了する。以降は、ステップＳ２１以降の処理を実行し、制御部１１０は、タッチ位置に応じて、操作画面の内容を示す点字情報を点字デバイスに送信し、決定スイッチ２３０のＯＮ信号を受信するに応じて、タッチ位置のボタンｂに応じた処理を実行する。 (Step S30)
After that, the control unit 110 enables (cancels the invalidation) the operation of the button b outside the predetermined area on the operation screen 12d disabled in step S26, and ends the process. After that, the processes after step S21 are executed, and the control unit 110 transmits Braille information indicating the contents of the operation screen to the Braille device according to the touch position, and receives the ON signal of the determination switch 230. , Performs processing according to the button b at the touch position.

このように第１の実施形態に係る点字デバイス２００を用いた制御システム５００においては、制御部１１０は、視覚障害者モードにおいて、操作画面上のボタンｂの選択操作に応じて、関連付けられた他の操作画面に遷移するとともに、ユーザーがタッチしているタッチ位置から、次の選択操作を行うための所定領域までユーザーを誘導するための点字情報を点字表示部２２０に表示させる誘導制御を実行する。これにより、階層構造の操作画面を用いる場合に、画面遷移後において、ユーザーは次の操作をどの位置からどのように始めればよいのかを、容易に把握できるので、視覚障害者が、健常者が用いる操作画面を共用したとしても、戸惑うことなく利用できる。 As described above, in the control system 500 using the Braille device 200 according to the first embodiment, the control unit 110 is associated with the control unit 110 according to the selection operation of the button b on the operation screen in the visually impaired mode. At the same time as transitioning to the operation screen of, the guidance control for displaying the Braille information for guiding the user from the touch position touched by the user to the predetermined area for performing the next selection operation is executed on the Braille display unit 220. .. As a result, when using the operation screen of the hierarchical structure, the user can easily grasp where and how to start the next operation after the screen transition, so that the visually impaired person can be a visually impaired person or a healthy person. Even if you share the operation screen to be used, you can use it without any confusion.

（第２の実施形態）
次に第２の実施形態について説明する。第２の実施形態においては、操作画面内のボタンｂの選択操作がなされた場合に画面遷移せずに、同じ操作画面内の他のボタンに向けた誘導制御を実行する。なお、以下の各実施形態においては、各実施形態で説明する処理以外の処理は、図７、図９と共通である。また点字デバイス２００の処理については、図８と共通である。 (Second embodiment)
Next, the second embodiment will be described. In the second embodiment, when the selection operation of the button b in the operation screen is performed, the guidance control toward another button in the same operation screen is executed without the screen transition. In each of the following embodiments, the processes other than the processes described in each embodiment are the same as those in FIGS. 7 and 9. The processing of the Braille device 200 is the same as that of FIG.

図１４は、第２の実施形態における視覚障害者モードでの本体装置側の制御を示すフローチャートである。 FIG. 14 is a flowchart showing control on the main body device side in the visually impaired person mode in the second embodiment.

（ステップＳ４１～Ｓ４４）
ここでは、図９のステップＳ２１～Ｓ２４と同様の処理を行う。以下においては、図１５に示す操作画面１２ｄの「原稿設定」において、カテゴリーで「インチ系」を選択するボタンｂ２３を選択操作した場合を例にして説明する。この場合は、ステップＳ４４で領域ａ１内のボタンｂ２３（「インチ系」）が選択操作されたことに応じて、制御部１１０は、領域ａ２のボタンｂの内容を「Ａ系、Ｂ系（図１１～図１３参照）」から「インチ系（図１５）」の選択肢に変更する処理を行う。 (Steps S41 to S44)
Here, the same processing as in steps S21 to S24 of FIG. 9 is performed. In the following, a case where the button b23 for selecting "inch system" in the category is selected and operated in the "manuscript setting" of the operation screen 12d shown in FIG. 15 will be described as an example. In this case, in response to the selection operation of the button b23 (“inch system”) in the area a1 in step S44, the control unit 110 changes the content of the button b in the area a2 to “A system, B system (FIG. 11 to 13) ”is changed to the option of“ inch system (FIG. 15) ”.

（ステップＳ４５）
ここでは制御部１１０は、処理が反映された領域ａ２、すなわち、同じ操作画面１２ｄ内で、ステップＳ４４の処理により表示が変更され、ユーザーが次の選択操作を行う領域ａ２への誘導制御を実行する。ここでは、例えば「右」の内容を示す点字情報を点字デバイス２００に送信し、表示させる。制御部１１０は、誘導するための点字情報として、例えば「右」の点字情報を点字デバイス２００に送信し、これを点字デバイス２００の点字表示部２２０に表示させる。 (Step S45)
Here, the control unit 110 executes guidance control to the area a2 in which the processing is reflected, that is, in the same operation screen 12d, the display is changed by the processing in step S44, and the user performs the next selection operation. do. Here, for example, Braille information indicating the content of "right" is transmitted to the Braille device 200 and displayed. The control unit 110 transmits, for example, "right" Braille information to the Braille device 200 as Braille information for guidance, and causes the Braille display unit 220 of the Braille device 200 to display this.

（ステップＳ４６）
制御部１１０は、点字デバイス２００のタッチ位置が誘導先の所定位置（領域ａ２）まで到達したか否かを判定する。領域ａ２まで達した場合には（ＹＥＳ）、以降は、同じ操作画面において、ステップＳ４１以下の処理を繰り返す。 (Step S46)
The control unit 110 determines whether or not the touch position of the Braille device 200 has reached a predetermined position (region a2) of the guidance destination. When the area a2 is reached (YES), the process of step S41 or less is repeated on the same operation screen thereafter.

具体的には、図１５において、インチ系のサイズとして、「８．５×１１」のボタンｂ２４への選択操作がなされた場合には、ボタンｂ２４の選択操作の処理が反映されることに応じて、この選択操作を確定するための次の操作を行うためのＯＫボタンｂ２５（丸数字の３で示す）までの誘導制御を行う。 Specifically, in FIG. 15, when the selection operation of the button b24 of "8.5 × 11" is performed as the inch size, the processing of the selection operation of the button b24 is reflected. Then, the guidance control up to the OK button b25 (indicated by the circled number 3) for performing the next operation for confirming this selection operation is performed.

このように第２の実施形態においては、ボタンへの選択操作に応じて、同じ操作画面内の選択操作の処理が反映された領域に向けた誘導制御を実行する。これにより、複数段階で選択操作を行うような場合に、ユーザーは次の操作をどの位置からどのように始めればよいのかを、容易に把握できるので、視覚障害者が、健常者が用いる操作画面を共用したとしても、戸惑うことなく利用できる。 As described above, in the second embodiment, in response to the selection operation to the button, the guidance control toward the area in which the processing of the selection operation in the same operation screen is reflected is executed. As a result, when the selection operation is performed in multiple stages, the user can easily grasp from which position and how to start the next operation, so that the visually impaired person can easily understand the operation screen used by the healthy person. Even if you share it, you can use it without any confusion.

（第３の実施形態）
次に第３の実施形態について説明する。第３の実施形態においては、上位層（第１階層）の操作画面の設定項目に関する設定をこれよりも１つ下の下位層（第２階層）の操作画面で行い、設定終了後に元の上位層の操作画面に戻った場合に、この設定を反映した設定項目を表示する位置への誘導制御を行うものである。 (Third embodiment)
Next, a third embodiment will be described. In the third embodiment, the setting items of the operation screen of the upper layer (first layer) are set on the operation screen of the lower layer (second layer) one level lower than this, and after the setting is completed, the original upper layer is set. When the operation screen of the layer is returned, the guidance control to the position where the setting item reflecting this setting is displayed is performed.

図１６は、第３の実施形態における視覚障害者モードでの本体装置側の制御を示すフローチャートである。図１７、図１８は、タッチパネルに表示する操作画面の例である。以下においては、図１７の操作画面１２ｄを下位層（第２階層）の操作画面の例とし、図１８の操作画面１２ｂを上位層（第１階層）の操作画面の例として説明する。 FIG. 16 is a flowchart showing control on the main body device side in the visually impaired person mode in the third embodiment. 17 and 18 are examples of operation screens displayed on the touch panel. In the following, the operation screen 12d of FIG. 17 will be described as an example of the operation screen of the lower layer (second layer), and the operation screen 12b of FIG. 18 will be described as an example of the operation screen of the upper layer (first layer).

（ステップＳ５１）
ステップＳ２３等と同様の処理により、点字デバイス２００からの決定スイッチ２３０のＯＮ信号を受信したか否かを判定する。ＯＮ信号を受信した場合（ＹＥＳ）には処理をステップＳ５２に進める。 (Step S51)
By the same process as in step S23 or the like, it is determined whether or not the ON signal of the determination switch 230 from the Braille device 200 has been received. If the ON signal is received (YES), the process proceeds to step S52.

（ステップＳ５２）
こでは、制御部１１０は、ステップＳ５１でＯＮ信号を受信したときにタッチ位置にあるボタンｂが、下位層から上位層に戻るボタンｂであるかを判定する。戻るボタンｂであれば（ＹＥＳ）、処理をステップＳ５３に進める。例えば図１７の操作画面１２ｄにおいて、ボタンｂ２３、ｂ２４の選択操作に続いて、ＯＫボタンｂ２５が選択操作された場合である。 (Step S52)
Here, the control unit 110 determines whether the button b at the touch position when the ON signal is received in step S51 is the button b that returns from the lower layer to the upper layer. If it is the back button b (YES), the process proceeds to step S53. For example, on the operation screen 12d of FIG. 17, the OK button b25 is selected after the selection operation of the buttons b23 and b24.

一方で、戻るボタンｂでなければ（ＮＯ）、処理を終了する。この場合には、第１、第２の実施形態で示した処理を行う。 On the other hand, if it is not the back button b (NO), the process ends. In this case, the processing shown in the first and second embodiments is performed.

（ステップＳ５３）
制御部１１０は、タッチパネル１２０に上位層の操作画面１２ｂ（図１８）を表示する。なお、この操作画面１２ｂは、図１０（ａ）と同じ操作画面である。 (Step S53)
The control unit 110 displays the operation screen 12b (FIG. 18) of the upper layer on the touch panel 120. The operation screen 12b is the same operation screen as in FIG. 10A.

（ステップＳ５４）
制御部１１０は、上位層の操作画面１２ｂにおいて、下位層での設定内容が反映されている設定項目を表示する領域への誘導制御を行う。図１８の例では、ボタンｂ２１の「原稿設定」への誘導制御を行う（丸数字の４で示す）。 (Step S54)
The control unit 110 performs guidance control to an area for displaying the setting items on which the setting contents in the lower layer are reflected on the operation screen 12b of the upper layer. In the example of FIG. 18, the guidance control to the "manuscript setting" of the button b21 is performed (indicated by the circled number 4).

（ステップＳ５５）
制御部１１０は、ユーザーのタッチ位置が、ボタンｂ２１まで到達した場合、誘導制御を終了する。誘導制御を終了した後は、制御部１１０は、ユーザーのタッチ位置にあるボタンｂ２１に表示している設定内容の点字情報を点字デバイス２００に送信する。図１８の例では、原稿設定（原稿サイズ）の設定項目に対して、設定内容が反映されており、「８．５×１１」が設定されている旨の点字情報が、点字表示部２２０に表示される。 (Step S55)
When the user's touch position reaches the button b21, the control unit 110 ends the guidance control. After finishing the guidance control, the control unit 110 transmits the braille information of the setting contents displayed on the button b21 at the touch position of the user to the braille device 200. In the example of FIG. 18, the setting contents are reflected for the setting items of the original setting (original size), and the braille information indicating that "8.5 × 11" is set is transmitted to the braille display unit 220. Is displayed.

このように第３の実施形態においては下位の第２階層の操作画面に遷移した後、第２階層の操作画面で設定を終了し、上位の第１階層の操作画面に戻った場合、設定を反映した設定項目を表示する領域への誘導制御を行う。これにより、視覚障害者は、第２階層の操作画面で設定した内容が正しく反映されていることを容易に確認できる。 In this way, in the third embodiment, after transitioning to the operation screen of the lower second layer, the setting is completed on the operation screen of the second layer, and when the operation screen of the upper first layer is returned, the setting is set. Performs guidance control to the area where the reflected setting items are displayed. As a result, the visually impaired person can easily confirm that the contents set on the operation screen of the second layer are correctly reflected.

（第４の実施形態）
次に第４の実施形態について説明する。第４の実施形態は、警告画面を表示する場合に行う誘導制御である。 (Fourth Embodiment)
Next, a fourth embodiment will be described. The fourth embodiment is guidance control performed when a warning screen is displayed.

図１９は、第４の実施形態における視覚障害者モードでの本体装置側の制御を示すフローチャートである。 FIG. 19 is a flowchart showing control on the main body device side in the visually impaired person mode in the fourth embodiment.

（ステップＳ６１）
制御部１１０は、制御システム５００において、印刷用の用紙無し、トナー無し、等の消耗品の枯渇、または、用紙ジャム等の不具合の発生を検出する。不具合が発生すれば（ＹＥＳ）、処理をステップＳ６２に進める。 (Step S61)
The control unit 110 detects in the control system 500 that consumables such as no printing paper and no toner are exhausted, or that a problem such as paper jam occurs. If a problem occurs (YES), the process proceeds to step S62.

（ステップＳ６２）
制御部１１０は、ステップＳ６１で発生した不具合の内容を示し、ユーザーへの不具合への対応を促す警告画面をタッチパネル１２０に表示する。図２０は、タッチパネル１２０に表示する警告画面の例であり、プリンター部１４０で使用するトナー無しが発生した場合に表示する。なお、このときに、制御部１１０は、スピーカー１８０により警告音を出力してもよい。警告音は、ビープ音でもよく、警告文の内容を説明する音声であってもよい。 (Step S62)
The control unit 110 indicates the content of the defect that occurred in step S61, and displays a warning screen on the touch panel 120 that prompts the user to deal with the defect. FIG. 20 is an example of a warning screen displayed on the touch panel 120, and is displayed when there is no toner used in the printer unit 140. At this time, the control unit 110 may output a warning sound by the speaker 180. The warning sound may be a beep sound or a voice explaining the content of the warning text.

（ステップＳ６３）
制御部１１０は、図２０のような警告画面１２ｅにおいて、警告文の先頭位置にユーザーを誘導する。図２０において、「トナー補給」の１文字目の「ト」の文字が警告文の先頭位置であり、制御部１１０は、この先頭位置までユーザーを誘導する誘導制御を行う。 (Step S63)
The control unit 110 guides the user to the head position of the warning text on the warning screen 12e as shown in FIG. 20. In FIG. 20, the first character “to” of “toner replenishment” is the head position of the warning text, and the control unit 110 performs guidance control to guide the user to this head position.

（ステップＳ６４）
制御部１１０は、ユーザーのタッチ位置が先頭位置まで到達した場合、誘導制御を終了する。誘導制御を終了した後は、制御部１１０は、ユーザーのタッチ位置にある警告文の点字情報を点字デバイス２００に送信する。すなわち、ユーザーがタッチ位置を右に滑らすことに応じて、「トナー補給」の点字情報が点字デバイス２００に送信され、点字表示部２２０に表示される。 (Step S64)
When the user's touch position reaches the start position, the control unit 110 ends the guidance control. After finishing the guidance control, the control unit 110 transmits the braille information of the warning text at the user's touch position to the braille device 200. That is, as the user slides the touch position to the right, the Braille information of "toner replenishment" is transmitted to the Braille device 200 and displayed on the Braille display unit 220.

このように第３の実施形態においては、警告画面を表示する場合に警告文の先頭文字に向けた誘導制御を実行する。これにより、不具合が発生し警告画面に切り替わった場合に、ユーザーは制御システム５００の状況を容易に把握できるので、健常者が用いる操作画面を視覚障害者と共用したとしても、視覚障害者は戸惑うことなく利用できる。 As described above, in the third embodiment, when the warning screen is displayed, the guidance control toward the first character of the warning text is executed. As a result, when a problem occurs and the screen is switched to the warning screen, the user can easily grasp the status of the control system 500, and even if the operation screen used by a healthy person is shared with the visually impaired person, the visually impaired person is confused. Can be used without.

以上に説明した本体装置１００、および点字デバイス２００を備える制御システム５００の構成は、上記の実施形態の特徴を説明するにあたって主要構成を説明したのであって、上記の構成に限られず、特許請求の範囲内において、以下に説明するように種々改変することができる。また、一般的な本体装置１００や点字デバイス２００が備える構成を排除するものではない。 The configuration of the control system 500 including the main unit device 100 and the Braille device 200 described above is the main configuration described in explaining the features of the above-described embodiment, and is not limited to the above configuration, and claims for patent. Within the scope, various modifications can be made as described below. Further, it does not exclude the configuration provided in the general main body device 100 and the Braille device 200.

上述の実施形態においては、点字デバイス２００の点字表示部２２０を通知部として用いる例を示したが、これに換えて、またはこれとともにスピーカー１８０を通知部として用いてもよい。具体的には、各実施形態で表示した、操作画面の表示内容をスピーカーによって、音声で視覚障害者に通知する。 In the above-described embodiment, the braille display unit 220 of the braille device 200 is used as the notification unit, but the speaker 180 may be used as the notification unit in place of or in combination with the braille display unit 220. Specifically, the display content of the operation screen displayed in each embodiment is notified to the visually impaired by voice by a speaker.

上述した各実施形態および各変形例に係る制御システムにおける各種処理を行う手段および方法は、専用のハードウェア回路、またはプログラムされたコンピューターのいずれによっても実現することが可能である。上記プログラムは、例えば、ＣＤ－ＲＯＭ（ＣｏｍｐａｃｔＤｉｓｃＲｅａｄＯｎｌｙＭｅｍｏｒｙ）等のコンピューター読み取り可能な記録媒体によって提供されてもよいし、インターネット等のネットワークを介してオンラインで提供されてもよい。この場合、コンピューター読み取り可能な記録媒体に記録されたプログラムは、通常、ハードディスク等の記憶部に転送され記憶される。また、上記プログラムは、単独のアプリケーションソフトとして提供されてもよいし、制御システムの一機能としてその装置のソフトウエアに組み込まれてもよい。 The means and methods for performing various processes in the control system according to each of the above-described embodiments and modifications can be realized by either a dedicated hardware circuit or a programmed computer. The program may be provided by a computer-readable recording medium such as a CD-ROM (Compact Disk Read Only Memory), or may be provided online via a network such as the Internet. In this case, the program recorded on the computer-readable recording medium is usually transferred to and stored in a storage unit such as a hard disk. Further, the above program may be provided as a single application software, or may be incorporated in the software of the device as a function of the control system.

５００制御システム
１００本体装置
１１０制御部
１２０タッチパネル
１７０無線通信部
１８０スピーカー
２００点字デバイス
２１０制御部
２２０点字表示部
２３０決定スイッチ
２４０接触センサー
２５０無線通信部
２９１手袋本体部
２９２指カバー
２９３ユニットケース 500 Control system 100 Main unit 110 Control unit 120 Touch panel 170 Wireless communication unit 180 Speaker 200 Braille device 210 Control unit 220 Braille display unit 230 Decision switch 240 Contact sensor 250 Wireless communication unit 291 Gloves Main unit 292 Finger cover 293 Unit case

Claims

A control system equipped with a main unit that accepts operations and a Braille device that is worn on the user's hand.
The main body device is
A touch panel that displays the operation screen on the display surface and detects the user's touch on the display surface.
The main body communication unit that communicates with the Braille device,
Equipped with a main body control unit
The Braille device is
A finger cover that covers the user's fingertips,
A braille display unit that is placed inside the finger cover and can display braille information,
A Braille device communication unit that wirelessly communicates with the main body communication unit is provided.
The main body control unit shifts the operation screen displayed on the touch panel to another associated operation screen in response to a button selection operation on the operation screen, and from the touch position touched by the user. A control system that executes guidance control for displaying the Braille information for guiding a user to a predetermined area for performing the next selection operation on the Braille display unit.

The control system according to claim 1, wherein the Braille information for guiding the user is Braille information indicating a relative direction and / or a distance from the touch position to the predetermined area.

The operation screen includes a plurality of operation screens having a hierarchical structure.
The predetermined area includes one or more buttons.
The main body control unit guides the user to the first button on the transitioned operation screen when transitioning to the associated lower layer operation screen in response to the button selection operation on the operation screen. The control system according to claim 1 or 2, wherein the braille information of the above is displayed on the braille display unit.

The control according to any one of claims 1 to 3, wherein the operation screen includes a first type of operation screen that does not perform the guidance control and a second type of operation screen that performs the guidance control. system.

When the main body control unit is executing the guidance control for guiding the user to the predetermined area in the operation screen, the operation of the button outside the predetermined area is invalidated, and the user up to the predetermined area is disabled. The control system according to any one of claims 1 to 4, wherein the operation of the button outside the predetermined area is enabled after the guidance is completed.

The claim that the main body control unit causes the Braille display unit to display Braille information indicating arrangement information of buttons in the predetermined area when the touch panel detects that the user has been guided to the predetermined area. The control system according to any one of 1 to 5.

The Braille device further comprises a decision switch.
In response to the operation of the determination switch by the user, an ON signal is transmitted to the main unit.
The control system according to any one of claims 1 to 6, wherein the main body control unit starts the guidance control by receiving an ON signal.

The main body control unit transmits Braille information about the button at the touch position to the touch panel to the Braille device, and executes a selection operation of the button at the touch position in response to receiving the ON signal. The control system according to claim 7, wherein the guidance control is executed by transitioning to another associated operation screen in response to the selection operation.

In response to receiving the ON signal, the main body control unit executes a selection operation of the button on the operation screen at the touch position, and in response to the selection operation, the selection in the same operation screen. The control system according to claim 8, wherein the guidance control is executed toward the area where the operation is reflected.

The operation screen is a plurality of operation screens having a hierarchical structure, and includes an operation screen of the first layer and an operation screen of a lower second layer for setting setting items of the operation screen of the first layer.
The main body control unit transitions to the associated lower second layer operation screen in response to the button selection operation on the first layer operation screen, then ends the setting, and the first When returning to the operation screen on the first level,
The control system according to any one of claims 1 to 9, wherein as the predetermined area, the guidance control is performed to the area for displaying the setting item reflecting the setting.

The main body control unit displays a warning screen on the touch panel prompting the user to respond to the control system, and also displays the warning screen on the touch panel.
The control system according to any one of claims 1 to 10, wherein the guidance control for guiding the user to the head position of the warning text in the warning screen is performed.

By transmitting Braille information, the main body control unit notifies the user of the display content of the operation screen at the touch position on the touch panel, and at the same time, operates the decision switch different from the touch panel to the touch position. It is possible to switch between a visually impaired mode in which the selection operation of a certain button is performed and a normal mode in which the selection operation of the button is performed by touching the button on the touch panel.
The control system according to any one of claims 1 to 11, wherein a common operation screen is displayed in the normal mode and the visually impaired mode.

A main unit that accepts operations through the touch panel, a Braille device that is worn on the user's hand, a finger cover that covers the user's fingertips, and a Braille display unit that is placed inside the finger cover and can display Braille information. A control program executed by a computer that controls a control system, including a Braille device.
The step (a) of transitioning to another associated operation screen according to the button selection operation on the operation screen displayed on the display surface of the touch panel, and
In the operation screen transitioned in step (a), guidance for displaying Braille information for guiding the user from the touch position touched by the user to a predetermined area for performing the next selection operation on the Braille display unit. Step (b) to execute control and
A control program that allows a computer to perform processing that includes.