JP7795329B2 - Determination device, work system, determination method, and determination program - Google Patents
Determination device, work system, determination method, and determination programInfo
- Publication number
- JP7795329B2 JP7795329B2 JP2021184344A JP2021184344A JP7795329B2 JP 7795329 B2 JP7795329 B2 JP 7795329B2 JP 2021184344 A JP2021184344 A JP 2021184344A JP 2021184344 A JP2021184344 A JP 2021184344A JP 7795329 B2 JP7795329 B2 JP 7795329B2
- Authority
- JP
- Japan
- Prior art keywords
- person
- mental
- judged
- worker
- determination
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Description
本発明は、判定装置、作業システム、判定方法および判定プログラムに関する。 The present invention relates to a determination device, an operation system , a determination method , and a determination program .
従来、対象者の覚醒度を検出する技術がある。かかる技術分野においては、たとえば、対象者の脳波を検出し、検出した脳波から覚醒度を検出する技術が提案されている(例えば、特許文献1参照)。 Technology for detecting a subject's level of alertness has been proposed in the past. For example, one proposed technology in this technical field involves detecting a subject's brain waves and determining the level of alertness from the detected brain waves (see, for example, Patent Document 1).
しかしながら、従来技術では、たとえば、脳波などの生体信号には個人差があるので、覚醒度などといった心身状態の判定の精度を担保するのは依然として難しいのが現状である。 However, with conventional technology, it remains difficult to ensure accuracy in determining mental and physical states such as alertness, for example, because biological signals such as electroencephalograms vary from person to person.
本発明は、上記に鑑みてなされたものであって、心身状態の判定精度を向上させることができる判定装置、作業システムおよび判定方法を提供することを目的とする。 The present invention has been made in light of the above, and aims to provide a determination device, work system, and determination method that can improve the accuracy of determining mental and physical states.
上述した課題を解決し、目的を達成するために、本発明に係る判定装置は、判定対象者の生体信号から当該判定対象者の心身状態を判定する判定装置であって、制御部は、判定対象者の状況である判定対象者状況に応じて心身状態の判定基準を調整し、調整した前記判定基準を用い、判定対象者の生体信号から心身状態を判定する。 In order to solve the above-mentioned problems and achieve the objectives, the assessment device of the present invention is a device that assesses the mental and physical state of a person being assessed from the person's biosignals, and the control unit adjusts the assessment criteria for the mental and physical state in accordance with the person's status, which is the situation of the person being assessed, and assesses the mental and physical state of the person being assessed from the person's biosignals using the adjusted criteria.
本発明によれば、心身状態の判定精度を向上させることができる。 This invention can improve the accuracy of determining mental and physical states.
以下、添付図面を参照して、本願の開示する判定装置、作業システムおよび判定方法の実施形態を詳細に説明する。なお、以下に示す実施形態により本発明が限定されるものではない。 Embodiments of the determination device, operation system, and determination method disclosed herein are described in detail below with reference to the accompanying drawings. Note that the present invention is not limited to the embodiments described below.
まず、図1~図4を用いて、実施形態に係る判定装置、作業システムおよび判定方法の概要について説明する。図1は、作業システムの概要を示す図である。図2~図4は、判定方法の概要を示す図である。 First, an overview of the determination device, operation system, and determination method according to the embodiment will be described using Figures 1 to 4. Figure 1 is a diagram showing an overview of the operation system. Figures 2 to 4 are diagrams showing an overview of the determination method.
図1に示すように、作業システム1は、たとえば、工場に設置され、IoT(Internet of Things)を活用することで、工場内で働く作業者Tの心身状態を見える化し、心身状態の観点から生産性の向上を図るシステムである。 As shown in Figure 1, work system 1 is installed in a factory, for example, and utilizes IoT (Internet of Things) to visualize the mental and physical state of workers T working in the factory, thereby improving productivity from the perspective of their mental and physical state.
図1に示すように、作業システム1は、判定装置10と、生体センサ50と、製造システム100とを有する。判定装置10は、各作業者Tの生体センサ50から送信される生体信号を解析することで、各作業者Tの心身状態を解析する。 As shown in FIG. 1, the work system 1 includes a determination device 10, a biosensor 50, and a manufacturing system 100. The determination device 10 analyzes the physical and mental state of each worker T by analyzing the biosignals transmitted from the biosensor 50 of each worker T.
ここでの心身状態とは、作業者Tの集中度や、覚醒度であるが、たとえば、メンタル状態などであってもよい。生体センサ50は、たとえば、作業者Tの脳波を計測する脳波計や、脈拍や体温などを計測する各種ウェアラブルデバイスである。なお、以下の説明では、説明を分かりやすくするために、心身状態として集中度を例として説明するが、覚醒度、眠気等、他の心身状態での同様に適用できる。 The physical and mental state here refers to the concentration level and alertness level of worker T, but may also refer to, for example, mental state. The biosensor 50 is, for example, an electroencephalograph that measures worker T's brain waves, or various wearable devices that measure pulse rate, body temperature, etc. In the following explanation, for ease of understanding, concentration level will be used as an example of the physical and mental state, but the same can be applied to other physical and mental states such as alertness and drowsiness.
製造システム100は、たとえば、工場の生産ラインを制御するシステムである。たとえば、製造システム100は、判定装置10の判定結果に応じて、生産ラインの速度の調整、あるいは、停止を行う。なお、製造システム100は、工場内の設備を制御する制御装置の一例に対応する。また、かかる制御装置として、たとえば、集中度に応じて、工場内の照明、空調をコントロールする装置が含まれていてもよい。また、制御装置は、たとえば、集中度に応じて、休憩を提案する機能を有していてもよい。 The manufacturing system 100 is, for example, a system that controls a factory production line. For example, the manufacturing system 100 adjusts the speed of the production line or stops it depending on the determination result of the determination device 10. The manufacturing system 100 corresponds to an example of a control device that controls equipment within a factory. Such a control device may also include, for example, a device that controls lighting and air conditioning within the factory depending on the level of concentration. The control device may also have a function that suggests breaks depending on the level of concentration, for example.
ところで、生体センサ50の生体信号から、各作業者Tの集中度を判定する場合、各作業者Tによって生体信号と集中度との関係性に個人差が生じる。このため、作業者T毎に生体信号と集中度との関係を予め決定しておく必要がある。 However, when determining the concentration level of each worker T from the biosignal of the biosensor 50, there will be individual differences in the relationship between the biosignal and the concentration level for each worker T. For this reason, it is necessary to determine in advance the relationship between the biosignal and the concentration level for each worker T.
また、図2に示すように、作業者Tが同一人物であっても、作業者Tが座って作業を行う場合と(図2の座位時に対応)、作業者Tが立って作業を行う場合(図2の立位時に対応)とでは、集中度の判定閾値を調整する必要が生じる。 Furthermore, as shown in Figure 2, even if worker T is the same person, it may be necessary to adjust the concentration level determination threshold when worker T works while sitting (corresponding to the sitting position in Figure 2) and when worker T works while standing (corresponding to the standing position in Figure 2).
たとえば、座位時における集中度の推定値(以下、単に推定値)と、立位時における推定値との値が同じであっても、実際には、座位時においては高い集中状態であり、立位時においては低い集中状態である場合があり、判定処理に調整が必要となる。 For example, even if the estimated concentration level when sitting (hereinafter simply referred to as the estimated value) is the same as the estimated value when standing, the concentration level may actually be high when sitting and low when standing, requiring adjustments to the assessment process.
これらの違いは、たとえば作業者Tの体位(姿勢)の違いや、照度によって変化し得る。そこで、実施形態に係る判定方法では、作業者Tの状態に応じて、集中度の判定基準、ここでは判定閾値を調整することとした。 These differences can vary depending on, for example, the position (posture) of worker T or the illuminance. Therefore, in the determination method according to the embodiment, the criteria for determining the concentration level, in this case the determination threshold, are adjusted depending on the state of worker T.
図3に示すように、まず、実施形態に係る判定方法では、生体信号をデータ解析し(ステップS1)、集中度の推定値を算出する。また、実施形態に係る判定方法では、作業者Tの体位情報および作業者T周辺の照度情報からレンジ(ある状態と判定する場合における、判定対象値(ここでは推定値)が存在する範囲)を決定する(ステップS2)。 As shown in FIG. 3, the determination method according to the embodiment first performs data analysis of the biological signal (step S1) and calculates an estimated concentration level. Furthermore, the determination method according to the embodiment determines a range (a range within which the determination target value (here, the estimated value) exists when determining that a certain state exists) based on information about the worker T's body position and information about the illuminance around the worker T (step S2).
実施形態に係る判定方法では、図4にて後述するように、体位情報、照度情報およびレンジの関係性を予め決定したモデルを生成しておき、かかるモデルを用いてレンジを決定する。なお、ここでのレンジとは、作業者Tの心身状態を適正状態と見做す適正レンジであり、心身状態が適正状態であれば、心身状態を適正状態と見做し、心身状態が適正状態から逸脱すると、心身状態を不適状態と見做す。なお、ここでの不適状態とは、たとえば、休息が必要である状態、作業効率が低下している状態などある。 In the determination method according to the embodiment, as will be described later in FIG. 4, a model is generated in which the relationship between body position information, illuminance information, and range is determined in advance, and the range is determined using this model. Note that the range here refers to an appropriate range within which the mental and physical state of worker T is considered to be an appropriate state; if the mental and physical state is appropriate, the mental and physical state is considered to be an appropriate state, and if the mental and physical state deviates from the appropriate state, the mental and physical state is considered to be an inappropriate state. Note that an inappropriate state here may be, for example, a state in which rest is required, or a state in which work efficiency is reduced, etc.
その後、実施形態に係る判定方法では、ステップS1による解析結果(すなわち、推定値)と、ステップS2において決定したレンジとに基づいて、作業者Tの集中度を判定する(ステップS3)。 Then, in the determination method according to the embodiment, the concentration level of worker T is determined based on the analysis results (i.e., estimated values) from step S1 and the range determined in step S2 (step S3).
これにより、実施形態に係る判定方法では、判定結果に影響を及ぼす作業者Tの状態(たとえば、座位時と、立位時)に応じて適切にレンジを設定することができるので、集中度を精度よく判定することができる。 As a result, the assessment method according to the embodiment can set an appropriate range depending on the state of the worker T (for example, when sitting or standing) that affects the assessment result, allowing the level of concentration to be assessed with high accuracy.
次に、図4を用いて、モデルの生成例の概要について説明する。図4に示すように、まず、実施形態に係る判定方法では、表示や音声により作業者Tに対しタスクを指示する(ステップS11)。ここでタスクとは、レンジの設定に適した行動であり、たとえば、集中度を低下させるタスクと、集中度を上昇させるタスクがある。集中度を低下させるタスクは、たとえば、心眼深呼吸であり、集中度を上昇させるタスクは、たとえば、暗算である。 Next, an example of model generation will be outlined using Figure 4. As shown in Figure 4, in the determination method according to the embodiment, first, a task is instructed to worker T by display or voice (step S11). Here, a task is an action suitable for setting a range, and includes, for example, a task that reduces concentration and a task that increases concentration. An example of a task that reduces concentration is deep breathing, and an example of a task that increases concentration is mental arithmetic.
たとえば、実施形態に係る判定方法では、所定の体位および照度において、作業者Tが心眼深呼吸を行った際の生体信号をデータ解析し(ステップS12)、解析結果を記憶する。たとえば、実施形態に係る判定方法では、作業者Tに対しタスクを複数回実行してもらい、生体信号の解析結果を用いてレンジの下限閾値を決定する。 For example, in the determination method according to the embodiment, data analysis is performed on the biosignals obtained when worker T performs deep eye breathing in a predetermined body position and illuminance (step S12), and the analysis results are stored. For example, in the determination method according to the embodiment, worker T is asked to perform a task multiple times, and the analysis results of the biosignals are used to determine the lower limit threshold of the range.
同図に示す例では、計4回の心眼深呼吸を行った際の推定値の推移を示し、3回目に推定値が最も減少する最小値Bpを取った場合を示す。そのため、実施形態に係る判定方法では、最小値Bpをレンジの下限閾値としてモデルを生成する(ステップS13)。そして、図示は省略するが、作業者Tが集中度を上昇させるタスクである暗算を行った際の生体信号をデータ解析も、心眼深呼吸タスクの場合と同様に行い、最大値をレンジの上限閾値としてモデルを生成する。 The example shown in the figure shows the progression of the estimated value when four mind's eye deep breathing sessions are performed, with the third session showing the minimum value Bp at which the estimated value decreases the most. Therefore, in the determination method according to the embodiment, a model is generated using the minimum value Bp as the lower threshold of the range (step S13). Then, although not shown in the figure, data analysis of the biological signals when worker T performs mental arithmetic, a task that increases concentration, is also performed in the same way as for the mind's eye deep breathing task, and a model is generated using the maximum value as the upper threshold of the range.
また、実施形態に係る判定方法では、ステップS11のタスク指示からステップS13のモデル生成までの一連の処理を各体位および各照度環境下で行うことで、作業者Tのモデルを生成する。 In addition, in the determination method according to the embodiment, a model of worker T is generated by performing a series of processes from the task instruction in step S11 to the model generation in step S13 in various body positions and lighting environments.
このように、下限閾値を心眼深呼吸実行時の生体信号、上限閾値を暗算実行時の生体信号にそれぞれ基づいて決定してモデルを生成し、そしてこのようなモデル生成を各体位および各照度環境下で行うことで、各作業者T、各環境における適正レンジを適切に決定し、適切なモデルを生成することが可能となる。 In this way, a model is generated by determining the lower threshold based on the biosignal when performing mind's eye deep breathing and the upper threshold based on the biosignal when performing mental arithmetic. By generating this model in various body positions and under various lighting conditions, it is possible to appropriately determine the appropriate range for each worker T and each environment, and generate an appropriate model.
つまり、作業者Tがタスクを実行できる意識がある状態において、集中度を上昇させるタスク、また集中度を低下させるタスクを数回行わせることにより、タスクを実行できる意識範囲での集中度を上下限まで変化させる。そして、その集中度の上下限状態での生体信号を計測・解析してレンジを決定することにより、タスクを実行できる意識範囲、つまり適切な集中度と判定できる推定集中度(生体信号から推定)の範囲を、作業者Tの特性に応じて、適切に決定することができる。そして、いろいろな作業環境において、同様にモデルを生成することにより、多彩な環境に適した、そして作業者Tの特性に応じた、レンジを決定することができる。また、実際には、上側及び下側の閾値に適当なオフセット(作業の内容(重要性、必要精度、危険度)等に応じて設定される)を設けてレンジを決定することになる。 In other words, while worker T is conscious enough to perform a task, he or she is asked to perform tasks that increase and decrease his or her concentration level several times, thereby varying the level of concentration within the range of consciousness in which the task can be performed to the upper and lower limits. Then, by measuring and analyzing the biosignals at the upper and lower limits of concentration to determine the range, the range of consciousness in which the task can be performed, i.e., the range of estimated concentration levels (estimated from the biosignals) that can be determined to be appropriate, can be appropriately determined according to worker T's characteristics. Then, by similarly generating models for various work environments, it is possible to determine ranges that are suitable for a variety of environments and according to worker T's characteristics. Furthermore, in practice, the range is determined by setting appropriate offsets (set according to the content of the work (importance, required accuracy, level of danger), etc.) to the upper and lower thresholds.
なお、以上のようなモデル生成は、作業者Tに作業職場への配属時に行って生成したモデルデータを新規登録したり、また定期健康診断時等を利用して定期的にモデルデータを生成して更新登録したりするのが好ましい。 It is preferable to generate the above model when worker T is assigned to the workplace and register the generated model data as new, or to generate and update model data periodically, such as during regular health checkups.
次に、図5を用いて、実施形態に係る判定装置10の構成例について説明する。図5は、判定装置10のブロック図である。図5に示すように、判定装置10は、たとえば、通信部110と、制御部120と、記憶部130とを有する。 Next, an example configuration of the determination device 10 according to the embodiment will be described using Figure 5. Figure 5 is a block diagram of the determination device 10. As shown in Figure 5, the determination device 10 includes, for example, a communication unit 110, a control unit 120, and a memory unit 130.
通信部110は、生体センサ50や製造システム100(図1参照)と所定のネットワークを介してデータ通信を行うための通信モジュールである。 The communication unit 110 is a communication module for communicating data with the biosensor 50 and the manufacturing system 100 (see Figure 1) via a specified network.
記憶部130は、たとえば、RAM(Random Access Memory)、フラッシュメモリ(Flash Memory)等の半導体メモリ素子、または、ハードディスク、光ディスク等の記憶装置によって実現される。図5の例では、記憶部130は、モデル記憶部131と、集中度情報記憶部132とを有する。 The storage unit 130 is realized, for example, by a semiconductor memory element such as RAM (Random Access Memory) or flash memory, or a storage device such as a hard disk or optical disk. In the example of Figure 5, the storage unit 130 has a model storage unit 131 and a concentration level information storage unit 132.
モデル記憶部131は、適正レンジを示す上限閾値および下限閾値を調整するためのモデルを記憶する記憶部である。図6~図8は、モデル記憶部131の一例を示す図である。なお、以下では、一人の作業者Tのモデルについて説明するが、モデルは、各作業者Tに対しそれぞれ生成されるものとする。 The model storage unit 131 is a storage unit that stores a model for adjusting the upper and lower thresholds that indicate the appropriate range. Figures 6 to 8 are diagrams showing an example of the model storage unit 131. Note that, although a model for one worker T is described below, a model is generated for each worker T.
なお、記憶部には一群の関連付けられたデータが1レコードとして連続で並んだ形で記憶されるが、図面上では説明が分かりやすい形態で表示している。 Note that the memory unit stores a group of associated data in a continuous sequence as a single record, but the diagram shows it in a format that is easy to understand.
たとえば、図6に示す例において、モデル記憶部131は、「パターン」、「上限」、「下限」といった項目の情報を互いに対応付けて記憶する。「パターン」は、識別コードの働きを持っており、この「パターン」に紐づいて対応する各データが記憶されることになる。たとえば、図6に示すように、「パターン1-1」に紐づいて「照度:L1」、「体位:M1」、「上限(レンジ):A1」、「下限(レンジ):B1」が記憶されている。 For example, in the example shown in Figure 6, the model storage unit 131 stores information on items such as "pattern," "upper limit," and "lower limit" in association with each other. "Pattern" acts as an identification code, and each piece of corresponding data is stored in association with this "pattern." For example, as shown in Figure 6, "Illuminance: L1," "Position: M1," "Upper limit (range): A1," and "Lower limit (range): B1" are stored in association with "Pattern 1-1."
そして、本実施形態の場合はいろいろな照度と体位についての測定値により生成されたモデルであるので、一つの照度と、一つの体位とを1パターンとして、それぞれのパターンに対し「上限」および「下限」が設けられることになる。また、「上限」とは、上述の適正レンジの上限閾値を示し、「下限」は、適正レンジの下限閾値を示す。つまり、このモデル(データ)は、「照度」、「体位」を用いて対応するパターンが検索され、検索されたパターンの「上限」、「下限」がその後の処理に用いられるといった利用形態となる。 In this embodiment, the model is generated from measurements of various illuminances and body positions, so one illuminance and one body position is treated as one pattern, and an "upper limit" and a "lower limit" are set for each pattern. The "upper limit" indicates the upper threshold of the appropriate range described above, and the "lower limit" indicates the lower threshold of the appropriate range. In other words, this model (data) is used by searching for corresponding patterns using "illuminance" and "body position," and the "upper limit" and "lower limit" of the searched pattern are then used for subsequent processing.
また、図7の例では、各パターンの照度および体位に対し、さらに、作業がパラメータとして追加される場合を示す。ここで作業とは、作業者Tが実施する作業内容を示す。すなわち、図7の例では、作業内容によって求められる集中度が異なる点に着目し、いろいろな「照度」、「体位」、「作業内容」に対して、「上限」および「下限」を決定したモデルをモデル記憶部131に記憶する例を示す。 The example in Figure 7 also shows a case where work is added as a parameter to each pattern of illuminance and body position. Here, work refers to the work content performed by worker T. That is, the example in Figure 7 focuses on the fact that the required concentration level differs depending on the work content, and shows an example in which a model in which "upper limits" and "lower limits" are determined for various "illuminance," "body position," and "work content" is stored in the model storage unit 131.
なお、たとえば、作業内容に高い集中度が求められる場合、上限および下限はそれぞれ高くなるように設定される。この場合、例えば、モデル作成時に作業者Tに行わせる集中度を上昇させるタスクとして、集中度がより高くなるようなタスク(例えば、複雑な暗算)を適用する、タスク達成に対して報奨を与える等して、「上限」を上げるようにし、また「上限」の上昇に応じて「下限」を上げる等の方法により、上限および下限を高く(適切に)なるようにする。つまり、モデル作成時に、対象作業に必要な集中度(集中度)に応じたタスクを作業者に実行させて生体信号の計測、解析を行い、「上限」「下限」を設定する方法がモデル作成の有効な方法の一つとして考えられる。 For example, if the task requires a high level of concentration, the upper and lower limits are set high. In this case, for example, when creating a model, the upper limit can be raised by having worker T perform a task that increases concentration (for example, complex mental arithmetic), or by offering rewards for completing the task, and the upper and lower limits can be set high (appropriately) by such methods as raising the lower limit in accordance with the increase in the upper limit. In other words, one effective method of creating a model is to have the worker perform a task that corresponds to the level of concentration (level of concentration) required for the target task, measure and analyze biosignals, and then set the upper and lower limits.
また、図8の例では、上限および下限を数式化したモデルをモデル記憶部131に記憶する例を示す。たとえば、A1およびC1はそれぞれ照度に関する係数、B1およびD1はそれぞれ体位に関する係数を示す。また、Lは、現在の照度を示し、Mは、現在の体位を示す。なお、共通の算出式を別途記憶しておき、算出式で用いられる個人毎に異なったパラメータ値を記憶する形式も適用することができる。 The example in Figure 8 also shows an example in which a model in which the upper and lower limits are mathematically expressed is stored in the model storage unit 131. For example, A1 and C1 respectively represent coefficients related to illuminance, and B1 and D1 respectively represent coefficients related to body position. Furthermore, L represents the current illuminance, and M represents the current body position. Note that it is also possible to separately store a common calculation formula, and store different parameter values for each individual used in the calculation formula.
図5の例に戻り、集中度情報記憶部132について説明する。集中度情報記憶部132は、各作業者Tの集中度に関する判定結果を記憶する記憶部である。たとえば、集中度情報記憶部132には、各作業者Tの集中度を集中度算出時間に紐づけて記憶する。たとえば、所定時間間隔(例え5分間隔)で集中度を算出し、算出時間と紐づけて算出した集中度を記憶する。この記憶情報により、各作業者Tの集中度の推移を捉えたりすることが可能となる。 Returning to the example of Figure 5, the concentration level information storage unit 132 will be described. The concentration level information storage unit 132 is a storage unit that stores the determination results regarding the concentration level of each worker T. For example, the concentration level information storage unit 132 stores the concentration level of each worker T linked to the concentration level calculation time. For example, the concentration level is calculated at a predetermined time interval (for example, every 5 minutes), and the calculated concentration level is stored linked to the calculation time. This stored information makes it possible to track the progress of the concentration level of each worker T.
つづいて、制御部120について説明する。制御部120は、コントローラ(controller)であり、たとえば、CPU(Central Processing Unit)やMPU(Micro Processing Unit)等によって、記憶部130に記憶されている図示略の各種プログラムがRAMを作業領域として実行されることにより実現される。また、制御部120は、たとえば、ASIC(Application Specific Integrated Circuit)やFPGA(Field Programmable Gate Array)等の集積回路により実現することができる。 Next, the control unit 120 will be described. The control unit 120 is a controller, and is realized, for example, by a CPU (Central Processing Unit) or MPU (Micro Processing Unit) executing various programs (not shown) stored in the storage unit 130 using RAM as a working area. The control unit 120 can also be realized, for example, by an integrated circuit such as an ASIC (Application Specific Integrated Circuit) or FPGA (Field Programmable Gate Array).
図5に示す例において、制御部120は、生体信号取得部121と、画像データ取得部122と、生体信号解析部123と、レンジ調整部124と、集中度判定部125と、ガイド部126と、モデル生成部127とを有する。 In the example shown in FIG. 5, the control unit 120 includes a biosignal acquisition unit 121, an image data acquisition unit 122, a biosignal analysis unit 123, a range adjustment unit 124, a concentration level determination unit 125, a guide unit 126, and a model generation unit 127.
生体信号取得部121は、各作業者Tに装着された生体センサ50から各作業者Tの生体信号を取得する。また、生体信号取得部121は、取得した生成信号を生体信号解析部123へ渡す。 The biosignal acquisition unit 121 acquires the biosignals of each worker T from the biosensor 50 worn by each worker T. The biosignal acquisition unit 121 also passes the acquired generated signals to the biosignal analysis unit 123.
画像データ取得部122は、たとえば、各作業者Tを撮影した画像データを取得する。たとえば、画像データ取得部122は、工場の天井に設けられたカメラから各作業者Tを撮影した画像データを取得する。また、画像データ取得部122は、取得した画像データをレンジ調整部124へ渡す。 The image data acquisition unit 122 acquires, for example, image data of each worker T. For example, the image data acquisition unit 122 acquires image data of each worker T from a camera installed on the ceiling of the factory. The image data acquisition unit 122 also passes the acquired image data to the range adjustment unit 124.
生体信号解析部123は、生体信号取得部121によって取得された生体信号を解析し、集中度に関する推定値を算出し、解析結果を集中度判定部125へ渡す。たとえば、生体信号解析部123は、脳波や心拍を用いて、集中度を推定する。なお、脳波や心拍を用いた集中度の推定方法については、特に限定されるものではなく、公知の任意のアルゴリズムを用いることにしてもよい。 The biological signal analysis unit 123 analyzes the biological signals acquired by the biological signal acquisition unit 121, calculates an estimate of the concentration level, and passes the analysis result to the concentration level determination unit 125. For example, the biological signal analysis unit 123 estimates the concentration level using brain waves and heart rate. Note that the method for estimating the concentration level using brain waves and heart rate is not particularly limited, and any known algorithm may be used.
レンジ調整部124は、作業者Tの状態に応じて、適正レンジを構成する判定閾値(上限閾値および下限閾値)を調整する。たとえば、レンジ調整部124は、画像データ取得部122が取得した画像データに対して各種画像解析処理を行うことで、作業者Tの状態を解析する。たとえば、レンジ調整部124は、画像データの顔認識処理等により各作業者Tを認識し、また画像データの体部認識と体部位置認識処理等により体位を認識し、そして画像データにおける各画素輝度の統計処理等により照度を算出する。なお、作業内容・種別については、画像データの画像認識(画像における作業に関する画像要素の認識)や、別途設置されている作業管理装置から作業内容・種別データを取得することにより認識する。 The range adjustment unit 124 adjusts the judgment thresholds (upper and lower thresholds) that make up the appropriate range depending on the condition of the worker T. For example, the range adjustment unit 124 analyzes the condition of the worker T by performing various image analysis processes on the image data acquired by the image data acquisition unit 122. For example, the range adjustment unit 124 recognizes each worker T through facial recognition processing of the image data, recognizes their body position through body part recognition and body part position recognition processing of the image data, and calculates the illuminance through statistical processing of the brightness of each pixel in the image data. The work content and type are recognized by image recognition of the image data (recognition of image elements related to the work in the image) or by acquiring work content and type data from a separately installed work management device.
そして、レンジ調整部124は、モデル記憶部131に記憶されたモデルに、認識・算出した作業者、体位、作業者周囲照度、そして作業内容(図7に示したモデルに作業パラメータがある場合)を適用して、レンジを適切なレンジに調整する。 The range adjustment unit 124 then applies the recognized and calculated worker, body position, worker ambient illuminance, and work content (if the model shown in Figure 7 has work parameters) to the model stored in the model storage unit 131, and adjusts the range to an appropriate range.
これにより、各作業者T、体位、周囲環境(照度)、作業内容に応じて、レンジを適正なレンジへ調整することができる。 This allows the range to be adjusted to an appropriate range depending on each worker T, their position, the surrounding environment (illumination), and the work they are doing.
なお、レンジ調整部124は、作業者Tの体位について、たとえば、作業者Tが装着するウェアラブルのGセンサの値等を利用して推定するようにしてもよく、照度に関する情報については工場の照明機器から取得するようにしてもよい。 The range adjustment unit 124 may estimate the body position of the worker T, for example, using the value of a wearable G sensor worn by the worker T, and may obtain information regarding illuminance from lighting equipment in the factory.
そして、レンジ調整部124は、調整した適正レンジに関する情報を集中度判定部125へ渡す。 The range adjustment unit 124 then passes information about the adjusted appropriate range to the concentration determination unit 125.
集中度判定部125は、各作業者Tの集中度状態(作業に適した集中度範囲にあるか)を判定する。具体的には、集中度判定部125は、生体信号解析部123から受け取った各作業者Tについて、集中度の推定値と、レンジ調整部124から受け取った作業者Tの適正レンジを比較することで、各作業者Tの集中度状態を判定する。 The concentration level determination unit 125 determines the concentration level of each worker T (whether the concentration level is within a concentration level range appropriate for the task). Specifically, the concentration level determination unit 125 determines the concentration level of each worker T by comparing the estimated concentration level for each worker T received from the biosignal analysis unit 123 with the appropriate range for the worker T received from the range adjustment unit 124.
たとえば、集中度判定部125は、適正レンジと集中度推定値との相対関係(集中度推定値が適正レンジ内にあるか)から作業者Tの集中度状態を判定し、判定結果を集中度情報記憶部132に格納していく。たとえば、集中度状態は、集中度(推定値)3~8を適正レンジ(全レンジ:0~10)として、3を下回る場合に不適として判定する。 For example, the concentration level determination unit 125 determines the concentration level of worker T based on the relative relationship between the appropriate range and the estimated concentration level (whether the estimated concentration level is within the appropriate range), and stores the determination result in the concentration level information storage unit 132. For example, the appropriate range (full range: 0 to 10) is a concentration level (estimated value) of 3 to 8, and a concentration level below 3 is determined to be inappropriate.
そして、この判定結果が、集中力の状態に応じた対策のために通信部110から出力される。具体的には、例えば、集中力状態(例えば、「集中力が低下しています」)や適切な対応の案内(例えば、「10分間の休息を推奨します」)を表示・音声により通知したり、製造機械に停止指示信号や速度低下指示信号を出力したりする。 Then, this determination result is output from the communication unit 110 so that measures can be taken according to the state of concentration. Specifically, for example, the concentration state (e.g., "Your concentration is declining") and appropriate measures (e.g., "We recommend taking a 10-minute rest") may be notified by display or sound, or a signal to stop or slow down the manufacturing machine may be output.
ガイド部126は、対象者(作業者T)に対し判定閾値(適正レンジ)の設定に適した行動に関するガイドを行う。つまり、モデル記憶部131に適正レンジを示す上限閾値および下限閾値を調整するためのモデルを記憶させるが、ガイド部126は、このモデルを生成する際にモデル対象者に実行させる行動の案内を行う。たとえば、ガイド部126は、モデル生成用の端末装置や各作業者Tの端末装置(たとえば、スマートフォン等)に案内を表示・音声出力するなどして、ガイドを行う。 The guide unit 126 provides guidance to the subject (worker T) regarding actions appropriate for setting the judgment threshold (appropriate range). In other words, the model storage unit 131 stores a model for adjusting the upper and lower thresholds that indicate the appropriate range, and the guide unit 126 provides guidance on actions to be performed by the model subject when generating this model. For example, the guide unit 126 provides guidance by displaying or outputting audio guidance on the terminal device used for model generation or on the terminal device of each worker T (e.g., a smartphone, etc.).
図9は、ガイド部126のブロック図である。図9に示すように、ガイド部126は、タスク指示部126aと、タスク確認部126bと、環境決定部126cとを有する。タスク指示部126aは、作業者Tに対し適正レンジの設定に適したタスクの実行を指示する。 Figure 9 is a block diagram of the guide unit 126. As shown in Figure 9, the guide unit 126 has a task instructing unit 126a, a task checking unit 126b, and an environment determining unit 126c. The task instructing unit 126a instructs the worker T to perform a task that is appropriate for setting the appropriate range.
ここで、適正レンジの上限閾値を決める場合のタスクは、たとえば、暗算など、覚醒度を上昇させるタスクであり、適正レンジの下限閾値を決める場合のタスクは、たとえば、心眼深呼吸など覚醒度を低下させるタスクである。 Here, the task used to determine the upper threshold of the appropriate range is a task that increases alertness, such as mental arithmetic, and the task used to determine the lower threshold of the appropriate range is a task that decreases alertness, such as deep mind's eye breathing.
たとえば、タスク指示部126aは、映像や音声によって、実際のタスクの実行方法を提示したうえで、タスクの実行を作業者Tに対し指示する。作業者Tは、かかる映像や音声にしたがってタスクを実施することができ、適正レンジの設定に適したタスクを容易に行うことができる。また、タスク指示部126aは、作業者Tに対し、同一環境下において、複数回のタスクの実施を指示する。 For example, the task instructing unit 126a may use video and audio to present the actual task execution method and then instruct the worker T to execute the task. The worker T can execute the task according to the video and audio, and can easily perform the task that is appropriate for the appropriate range setting. The task instructing unit 126a may also instruct the worker T to execute the task multiple times in the same environment.
タスク確認部126bは、作業者Tが実行するタスクが適正に行われているかを確認する。たとえば、タスク確認部126bは、作業者Tを撮影した画像データを解析することで、作業者Tがタスクを適正に行っているかを確認する。 The task confirmation unit 126b confirms whether the tasks performed by worker T are being performed appropriately. For example, the task confirmation unit 126b analyzes image data of worker T to confirm whether worker T is performing the tasks appropriately.
なお、たとえば、タスクが暗算である場合、たとえば、作業者Tの端末装置に回答を書き込むようなUIを提供し、タスク確認部126bは、かかるUIを介して暗算の進捗状況からタスクが適正に行われているかを確認するようにしてもよい。 For example, if the task is mental arithmetic, a UI may be provided on worker T's terminal device to allow the answer to be written, and the task confirmation unit 126b may check whether the task is being performed properly based on the progress of the mental arithmetic via such a UI.
タスク確認部126bは、作業者Tが適正にタスクを実施していることを確認した場合、作業者が当該タスクを実施中の生体信号を取得し、モデル生成部127へ渡す。換言すれば、タスクが適正に実施されていない場合の生体信号をモデルの生成対象から除外する。これにより、適切な生体信号を用い、モデルを生成することができる。 When the task confirmation unit 126b confirms that the worker T is performing the task properly, it acquires the biosignals obtained while the worker is performing the task and passes them to the model generation unit 127. In other words, biosignals obtained when the task is not being performed properly are excluded from the model generation target. This makes it possible to generate a model using appropriate biosignals.
環境決定部126cは、作業者Tがタスクを実施する場合における、実行するタスク内容、タスク実行時の作業者周囲の環境体位等の環境を決定する。つまり、図6、図7で示した各パターンにおける照度、体位、作業の条件に従った環境での生体信号に基づきモデルを生成する必要があるので、環境決定部126cはタスク実行に際して、これら環境を実現するためのデータを生成し、タスク指示部126aを介して、関係する装置に出力する。具体的には、環境決定部126cの決定した内容に基づき、例えば、表示装置に指定体位の表示を行い、照明装置の輝度を制御し(輝度指示信号を送信)、表示装置に対象の作業内容に適応するタスク内容の表示を行う、等の動作が行われることになる。 When worker T performs a task, the environment determination unit 126c determines the environment, such as the task content to be performed and the environmental position of the worker when performing the task. In other words, it is necessary to generate a model based on biological signals in an environment according to the illuminance, position, and work conditions in each pattern shown in Figures 6 and 7. Therefore, when performing a task, the environment determination unit 126c generates data to realize these environments and outputs this to the related devices via the task instruction unit 126a. Specifically, based on the content determined by the environment determination unit 126c, operations such as displaying the specified position on a display device, controlling the brightness of a lighting device (sending a brightness instruction signal), and displaying task content appropriate for the target work content on a display device are performed.
また、他に環境決定部126cは、作業者Tがタスクを実施したものの、生体信号が適正な値を取らない場合(想定される範囲内に計測値が収まらない、計測値の変動が収まらず計測値が適当な値に収束しない等)の対応(環境変更)を決定する。 In addition, the environment determination unit 126c determines a response (environment change) when worker T performs a task but the biosignal does not take an appropriate value (the measured value does not fall within the expected range, the measured value fluctuations do not subside and the measured value does not converge to an appropriate value, etc.).
たとえば、環境決定部126cは、特定の環境下において、作業者Tがタスクを実施した場合に、生体信号が適正な値を取っていた場合には、当該環境下において、タスクを実施するように決定する。 For example, if the biosignal has an appropriate value when worker T performs a task in a specific environment, the environment determination unit 126c determines that the task should be performed in that environment.
より具体的な例を挙げると、たとえば、職場等、緊張する環境においては、心眼深呼吸をしても、リラックスが十分できずに、下限閾値を決定することができない場合がある。一方、心眼深呼吸を自宅などで行う場合には、十分にリラックスできるので、下限閾値を適切に決定することができる。 To give a more specific example, in a stressful environment such as the workplace, even if you practice mind's eye deep breathing, you may not be able to relax sufficiently and the lower threshold may not be able to be determined. On the other hand, if you practice mind's eye deep breathing at home, you will be able to relax sufficiently and the lower threshold may be determined appropriately.
すなわち、この場合においては、環境決定部126cは、作業者Tに対しては、各体位および各照度において、自宅でタスクを実施するように、タスク実行の環境を決定する。 In other words, in this case, the environment determination unit 126c determines the task execution environment for worker T so that the task is performed at home in each body position and at each illuminance level.
図5の説明に戻り、モデル生成部127について説明する。モデル生成部127は、モデルを生成する。たとえば、モデル生成部127は、ガイド部126と連係動作を行う。たとえば、ガイド部126が作業者Tに対しタスクのガイドを行い、モデル生成部127は、作業者Tがタスクを実施中の生体信号に基づいて、各体位および各照度のモデルを生成する。 Returning to the explanation of Figure 5, the model generation unit 127 will now be described. The model generation unit 127 generates a model. For example, the model generation unit 127 operates in conjunction with the guide unit 126. For example, the guide unit 126 guides the worker T through a task, and the model generation unit 127 generates a model for each body position and each illuminance level based on the biological signals of the worker T while he or she is performing the task.
この際、モデル生成部127は、タスクを実施中の生体信号が適正であるか否かを判定し(想定される範囲内に計測値が収まらない、計測値の変動が収まらず計測値が適当な値に収束しない等)、適正であると判定した場合の生体信号を用いて、モデルを生成する。たとえば、心眼深呼吸時の生体信号が下限閾値として適正な値を示していない場合には、モデル生成部127は、「再度、タスク指示を継続して行う」、「少し時間を置いてから、タスク指示を継続して行う」と言ったような案内が行われるようにガイド部126に指示する。また、この際、モデル生成部127は、タスクを実施する環境を変更するようにガイド部126へ指示することにしてもよい。 At this time, the model generation unit 127 determines whether the biosignals being displayed during the task are appropriate (for example, the measured values do not fall within an expected range, or the measured values do not converge to an appropriate value due to fluctuations in the measured values), and generates a model using the biosignals if they are determined to be appropriate. For example, if the biosignals displayed during deep mind's eye breathing do not indicate an appropriate value as the lower threshold, the model generation unit 127 instructs the guide unit 126 to provide guidance such as "repeatedly issue task instructions" or "repeatedly issue task instructions after a short time has elapsed." At this time, the model generation unit 127 may also instruct the guide unit 126 to change the environment in which the task is performed.
次に、図10および図11を用いて、実施形態に係る判定装置10が実行する処理手順について説明する。図10および図11は、判定装置10(制御部120)が実行する処理手順を示すフローチャートである。 Next, the processing steps executed by the determination device 10 according to the embodiment will be described using Figures 10 and 11. Figures 10 and 11 are flowcharts showing the processing steps executed by the determination device 10 (control unit 120).
まず、図10を用いて、集中度の判定処理に関する処理手順について説明する。かかる処理手順は、たとえば、作業管理者によるマニュアル開始操作や、作業管理装置により所定間隔毎に出力される集中度確認信号をトリガとして実施される。 First, the processing procedure for determining the concentration level will be described using Figure 10. This processing procedure is triggered, for example, by a manual start operation by the work manager or by a concentration level confirmation signal output at predetermined intervals by the work management device.
図10に示すように、判定装置10は、集中度の判定処理を開始すると、作業者に装着されたセンサ等から生体信号を取得し(ステップS101)、生体信号を解析し推定集中度を算出する(ステップS102)。 As shown in FIG. 10, when the determination device 10 starts the concentration level determination process, it acquires a biosignal from a sensor or the like worn by the worker (step S101), analyzes the biosignal, and calculates an estimated concentration level (step S102).
つづいて、判定装置10は、照度および体位を特定し(ステップS103)、図6、図7に示したモデル記憶部131に記憶されたデータに基づき、判定閾値(適正レンジ)を調整する(ステップS104)。つづいて、判定装置10は、ステップS102で算出した推定集中度およびステップS104で調整した判定閾値を用い、作業者Tの集中度の状態(例えば、当該作業に適しているか否か)を判定し(ステップS105)、処理を終了する。 Next, the determination device 10 identifies the illuminance and body position (step S103) and adjusts the determination threshold (appropriate range) based on the data stored in the model storage unit 131 shown in Figures 6 and 7 (step S104). Next, the determination device 10 uses the estimated concentration level calculated in step S102 and the determination threshold adjusted in step S104 to determine the concentration level of worker T (e.g., whether or not the worker T is suitable for the task) (step S105), and ends the process.
次に、図11を用いて、モデル生成処理の処理手順について説明する。かかる処理手順は、たとえば、作業管理者によるマニュアル開始操作(モデル生成処理開始操作)をトリガとして実施される。 Next, the processing procedure for the model generation process will be explained using Figure 11. This processing procedure is triggered, for example, by a manual start operation (model generation process start operation) by the work manager.
図11に示すように、判定装置10は、作業者Tに対しタスク指示を行い、また必要な環境制御、たとえば周辺の関連装置の動作(照明装置の輝度制御)を制御する(ステップS111)。次に判定装置10は、作業者Tのタスク実施時の生体信号を作業者Tに装着されたセンサ等から取得する。 As shown in FIG. 11, the determination device 10 issues task instructions to the worker T and also controls the necessary environment, such as the operation of related devices in the vicinity (brightness control of lighting devices) (step S111). Next, the determination device 10 acquires biosignals from sensors or the like worn by the worker T while the worker T is performing the task.
つづいて、判定装置10は、作業者Tがタスクを所定回(予め設定されたモデル生成に充分なデータが得られる回数)実施済みか判定し(ステップS112)、所定回実施済みである場合(ステップS112;Yes)、ステップS113の処理へ進む。また、判定装置10は、複数回実施済みでない場合(ステップS112;No)、ステップS111の処理へ戻る。 Next, the determination device 10 determines whether worker T has performed the task a predetermined number of times (a number of times sufficient to generate a preset model) (step S112), and if the task has been performed a predetermined number of times (step S112; Yes), the determination device 10 proceeds to processing in step S113. If the task has not been performed multiple times (step S112; No), the determination device 10 returns to processing in step S111.
つづいて、判定装置10は、ステップS112で収集した生体信号を解析して推定集中度を算出する(ステップS113)。そして、判定装置10は、解析結果(推定集中度)が適正値であるかを判定し(ステップS114)、適正値であると判定した場合(ステップS114;Yes)、解析結果の最大値、および最小値を判定閾値に決定し(ステップS115)、処理を終了する。 Next, the determination device 10 analyzes the biosignal collected in step S112 and calculates an estimated concentration level (step S113). Then, the determination device 10 determines whether the analysis result (estimated concentration level) is an appropriate value (step S114), and if it determines that it is an appropriate value (step S114; Yes), it determines the maximum and minimum values of the analysis result as the determination thresholds (step S115) and terminates the process.
また、判定装置10は、ステップS114において、適正値でないと判定した場合(ステップS114;No)、環境変更指示(環境を変更した後に再度モデル生成処理を行う旨の指示)を行い(ステップS116)、処理を終了する。 Furthermore, if the determination device 10 determines in step S114 that the value is not appropriate (step S114; No), it issues an environment change instruction (an instruction to perform the model generation process again after changing the environment) (step S116) and terminates the process.
上述したように、実施形態に係る判定装置10は、作業者T(判定対象者の一例)の生体信号から当該対象者の心身状態(集中度)を判定する判定装置であって、制御部120は、作業者Tの状況に応じて心身状態(集中度)の判定閾値を調整し、調整した判定閾値を用い、対象者の生体信号から心身状態(集中度)を判定する。したがって、実施形態に係る判定装置10によれば、対象者Tの心身状態(集中度)を精度よく判定することができる。 As described above, the determination device 10 according to the embodiment is a determination device that determines the mental and physical state (level of concentration) of worker T (an example of a person to be determined) from the subject's biosignals. The control unit 120 adjusts the determination threshold for the mental and physical state (level of concentration) according to the condition of worker T, and determines the mental and physical state (level of concentration) from the subject's biosignals using the adjusted determination threshold. Therefore, the determination device 10 according to the embodiment can accurately determine the mental and physical state (level of concentration) of subject T.
上述した実施形態は、心身状態として集中度を例にしたものであるが、他の心身状態、例えば覚醒度、眠気、興奮度、落ち着き度、疲労度と言ったものに適用でき、特にセンサにより直接計測できず、センサ信号から推定することになるメンタル系の要素の強い心身状態に特に有用なものとなる。 The above-described embodiment uses concentration as an example of a mental and physical state, but it can also be applied to other mental and physical states, such as alertness, drowsiness, excitement, calmness, and fatigue, and is particularly useful for mental and physical states that have strong mental elements and cannot be measured directly by a sensor, but must be estimated from a sensor signal.
ところで、上述した実施形態では、作業システム1が工場内に設置される場合について説明したが、これに限定されるものではない。たとえば、作業システム1を自動車に適用することにしてもよい。この場合、たとえば、運転者が対象者となり、運転者の心身状態に応じて、手動運転と自動運転を切り替える等の対応を実施することができる。 In the above-described embodiment, the working system 1 is installed in a factory, but this is not limited to this. For example, the working system 1 may be applied to an automobile. In this case, the target subject is the driver, and measures such as switching between manual and automatic driving can be implemented depending on the driver's physical and mental state.
また、個人の集中度ではなく、グループとしての集中度、例えばグループの平均集中度や集中度の統計処理知を用いて、個人の集中度低下に対しては個人に対する対応、たとえば対象作業者入れ替え等を行い、グループの集中度低下に対してはグループ担当の製造ラインを停止してグループ全体の休息をとる等、個人及びグループの心身状態に応じた適切な対策を取ることが可能となる。 In addition, by using the concentration level of a group, rather than an individual, such as the average concentration level of a group or statistical processing of concentration levels, appropriate measures can be taken according to the physical and mental state of individuals and groups, such as replacing workers in response to a decline in an individual's concentration level, or stopping the production line in charge of the group and allowing the entire group to rest in response to a decline in a group's concentration level.
さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細及び代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲及びその均等物によって定義される総括的な発明の概念の精神又は範囲から逸脱することなく、様々な変更が可能である。 Further advantages and modifications may readily occur to those skilled in the art. Therefore, the invention in its broader aspects is not limited to the specific details and representative embodiments shown and described above. Accordingly, various modifications may be made without departing from the spirit or scope of the general inventive concept as defined by the appended claims and their equivalents.
1 作業システム
10 判定装置
50 生体センサ
100 製造システム
121 生体信号取得部
122 画像データ取得部
123 生体信号解析部
124 レンジ調整部
125 集中度判定部
126 ガイド部
126a タスク指示部
126b タスク確認部
126c 環境決定部
127 モデル生成部
131 モデル記憶部
132 集中度情報記憶部
T 作業者(判定対象者の一例)
1 Work system 10 Determination device 50 Biosensor 100 Manufacturing system 121 Biosignal acquisition unit 122 Image data acquisition unit 123 Biosignal analysis unit 124 Range adjustment unit 125 Concentration level determination unit 126 Guide unit 126a Task instruction unit 126b Task confirmation unit 126c Environment determination unit 127 Model generation unit 131 Model storage unit 132 Concentration level information storage unit T Worker (an example of a person to be determined)
Claims (10)
制御部は、
判定対象者の状況である判定対象者状況に応じて心身状態の判定基準を調整し、
判定対象の心身状態に応じたタスクの判定対象者による実行後における前記判定対象者の生体信号に基づき前記判定基準を調整し、
調整した前記判定基準を用い、判定対象者の生体信号から心身状態を判定する、
判定装置。 A determination device for determining a mental and physical state of a subject based on a biological signal of the subject, comprising:
The control unit
The criteria for assessing the physical and mental condition are adjusted according to the situation of the person being assessed,
adjusting the judgment criteria based on a biological signal of the person to be judged after the person to be judged performs a task corresponding to the mental and physical state of the person to be judged;
Using the adjusted judgment criteria, the mental and physical state of the person to be judged is judged from the biological signals of the person to be judged.
Judgment device.
請求項1に記載の判定装置。 The state of the person to be determined is the posture of the person to be determined.
The determination device according to claim 1 .
請求項1または2に記載の判定装置。 The situation of the person to be determined is the surrounding environment of the person to be determined.
The determination device according to claim 1 or 2.
請求項1、2または3に記載の判定装置。 The status of the person to be evaluated is the work content performed by the person to be evaluated.
The determination device according to claim 1, 2 or 3.
前記制御部は、
心身状態を所定方向に変える働きのあるタスクの判定対象者による実行後における前記判定対象者の生体信号に基づき前記閾値を決定する、
請求項1~4のいずれか一つに記載の判定装置。 The judgment criterion is a threshold value for judging a physical and mental state,
The control unit
determining the threshold value based on a biological signal of the subject after the subject performs a task that changes the subject's mental and physical state in a predetermined direction;
The determination device according to any one of claims 1 to 4 .
前記タスクの実行に関するガイドを行う、
請求項1~5のいずれか一つに記載の判定装置。 The control unit
providing guidance regarding the execution of said tasks;
The determination device according to any one of claims 1 to 5 .
前記判定対象者を撮像した画像から前記ガイドに対して前記判定対象者が取った行動が適正か否かを判定し、
前記判定対象者の行動が適正であると判定した場合の生体信号に基づいて、前記判定基準を調整する、
請求項6に記載の判定装置。 The control unit
determining whether the behavior of the person to be judged relative to the guide is appropriate based on an image of the person to be judged;
adjusting the determination criteria based on the biological signal when the behavior of the person to be determined is appropriate;
The determination device according to claim 6 .
前記作業装置の作業者の生体信号から当該作業者の心身状態を判定する判定装置と、
を備える作業システムであって、
前記判定装置は、
作業者の状況である判定対象者状況に応じて心身状態の判定基準を調整し、
判定対象の心身状態に応じたタスクの判定対象者による実行後における前記判定対象者の生体信号に基づき前記判定基準を調整し、
調整した前記判定基準を用い、作業者の生体信号から心身状態を判定し、
前記作業装置は、
前記判定装置の心身状態判定結果に応じて作業者の心身状態に応じて動作を変更する、
作業システム。 a work device on which a worker performs work;
a determination device for determining the physical and mental state of the worker from a biological signal of the worker at the working device;
A working system comprising:
The determination device
The criteria for assessing the physical and mental condition are adjusted according to the worker's situation,
adjusting the judgment criteria based on a biological signal of the person to be judged after the person to be judged performs a task corresponding to the mental and physical state of the person to be judged;
Using the adjusted judgment criteria, the mental and physical state of the worker is judged from the biological signals;
The working device is
changing the action according to the mental and physical state of the worker in accordance with the mental and physical state determination result of the determination device;
Working system.
判定対象者の状況である判定対象者状況に応じて心身状態の判定基準を調整し、
判定対象の心身状態に応じたタスクの判定対象者による実行後における前記判定対象者の生体信号に基づき前記判定基準を調整し、
調整した前記判定基準を用い、判定対象者の生体信号から心身状態を判定する、
コントローラが実行する判定方法。 A method for determining a mental and physical state of a subject based on a biological signal of the subject, comprising:
The criteria for assessing the physical and mental condition are adjusted according to the situation of the person being assessed,
adjusting the judgment criteria based on a biological signal of the person to be judged after the person to be judged performs a task corresponding to the mental and physical state of the person to be judged;
Using the adjusted judgment criteria, the mental and physical state of the person to be judged is judged from the biological signals of the person to be judged.
The decision method that the controller will perform.
判定対象者の状況である判定対象者状況に応じて心身状態の判定基準を調整するステップと、a step of adjusting the criteria for judging the mental and physical state according to the situation of the person to be judged;
判定対象の心身状態に応じたタスクの判定対象者による実行後における前記判定対象者の生体信号に基づき前記判定基準を調整するステップと、adjusting the judgment criteria based on a biological signal of the person to be judged after the person to be judged performs a task corresponding to the mental and physical state of the person to be judged;
調整した前記判定基準を用い、判定対象者の生体信号から心身状態を判定するステップと、a step of determining a mental and physical state of a subject from a biological signal using the adjusted determination criteria;
をコンピュータに実行させる判定プログラム。A judgment program that causes a computer to execute the above.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021184344A JP7795329B2 (en) | 2021-11-11 | 2021-11-11 | Determination device, work system, determination method, and determination program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021184344A JP7795329B2 (en) | 2021-11-11 | 2021-11-11 | Determination device, work system, determination method, and determination program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023071507A JP2023071507A (en) | 2023-05-23 |
| JP7795329B2 true JP7795329B2 (en) | 2026-01-07 |
Family
ID=86409702
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021184344A Active JP7795329B2 (en) | 2021-11-11 | 2021-11-11 | Determination device, work system, determination method, and determination program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7795329B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018183532A (en) | 2017-04-27 | 2018-11-22 | 株式会社デンソー | State estimation device |
| JP2019098068A (en) | 2017-12-07 | 2019-06-24 | パラマウントベッド株式会社 | Sleep state determination device and program |
| JP2019205894A (en) | 2019-08-08 | 2019-12-05 | パイオニア株式会社 | Drowsiness calculation device |
| JP2021126250A (en) | 2020-02-12 | 2021-09-02 | 本田技研工業株式会社 | Psychological state estimation device and psychological state estimation method |
-
2021
- 2021-11-11 JP JP2021184344A patent/JP7795329B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2018183532A (en) | 2017-04-27 | 2018-11-22 | 株式会社デンソー | State estimation device |
| JP2019098068A (en) | 2017-12-07 | 2019-06-24 | パラマウントベッド株式会社 | Sleep state determination device and program |
| JP2019205894A (en) | 2019-08-08 | 2019-12-05 | パイオニア株式会社 | Drowsiness calculation device |
| JP2021126250A (en) | 2020-02-12 | 2021-09-02 | 本田技研工業株式会社 | Psychological state estimation device and psychological state estimation method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023071507A (en) | 2023-05-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11407422B2 (en) | Operation appropriateness determination system, method for determining operation appropriateness, and non-transitory computer readable medium storing program for determining operation appropriateness | |
| JP6935774B2 (en) | Estimating system, learning device, learning method, estimation device and estimation method | |
| JP2018538038A5 (en) | ||
| US20200073476A1 (en) | Systems and methods for determining defects in visual field of a user | |
| WO2018122633A1 (en) | Emotion estimation apparatus, method, and program | |
| US20220160223A1 (en) | Methods and Systems for Evaluating Vision Acuity and/or Conducting Visual Field Tests in a Head-Mounted Vision Device | |
| RU2711976C1 (en) | Method for remote recognition and correction using a virtual reality of a psychoemotional state of a human | |
| JP7627869B2 (en) | A system for determining the appropriateness of driving | |
| CN116234668A (en) | User Interaction with Personal Care Devices | |
| Márquez et al. | Visuomotor predictors of interception | |
| WO2019022079A1 (en) | Environment equipment control device | |
| JP7795329B2 (en) | Determination device, work system, determination method, and determination program | |
| US12201443B2 (en) | Determining a sleep state of a user | |
| CN110574054B (en) | Intellectual productivity evaluation device and intellectual productivity evaluation method | |
| CN107007292B (en) | Methods for learning about fatigue | |
| WO2022115860A1 (en) | Methods and systems for evaluating vision acuity and/or conducting visual field tests in a head-mounted vision device | |
| JP2020060993A (en) | Estimation device, estimation method, and estimation program | |
| US20200210917A1 (en) | Apparatus, method, program, signal for determining intervention effectiveness index | |
| WO2025146677A1 (en) | Systems, methods, and computer program products for cognitive state assessment | |
| EP4395641B1 (en) | Determining a person's sensory capability based on stimulus response amplitude weights | |
| JP2019017946A (en) | Mood estimation system | |
| Mohammad | Artificial intelligence for the predication of demographics from unsupervised eye tracking data | |
| WO2022259464A1 (en) | Information processing device, control method, and storage medium | |
| JP6787069B2 (en) | Biological information analysis device and biological information analysis method | |
| JP7517433B2 (en) | Stress estimation device, estimation method, program, and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240930 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250625 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250805 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20251002 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20251202 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20251219 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7795329 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |