JP7819896B2 - Biological information processing system, biological information processing device, biological information processing program, and biological information processing method - Google Patents
Biological information processing system, biological information processing device, biological information processing program, and biological information processing methodInfo
- Publication number
- JP7819896B2 JP7819896B2 JP2021078223A JP2021078223A JP7819896B2 JP 7819896 B2 JP7819896 B2 JP 7819896B2 JP 2021078223 A JP2021078223 A JP 2021078223A JP 2021078223 A JP2021078223 A JP 2021078223A JP 7819896 B2 JP7819896 B2 JP 7819896B2
- Authority
- JP
- Japan
- Prior art keywords
- biometric information
- user
- acquisition device
- acquired
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Medical Treatment And Welfare Office Work (AREA)
- Measuring And Recording Apparatus For Diagnosis (AREA)
Description
本発明は、ユーザの生体情報を取得する生体情報処理システム、生体情報処理装置、生体情報処理プログラム及び生体情報処理方法に関する。 The present invention relates to a biometric information processing system, a biometric information processing device, a biometric information processing program, and a biometric information processing method for acquiring a user's biometric information.
近年、ユーザの身体の任意の部位に装着されるウェアラブルデバイスによって、脈拍、血圧、体温あるいは心拍数等といったユーザの生体情報を取得し、取得した生体情報を処理したり分析したりする技術が広く普及している。 In recent years, technology has become widespread that uses wearable devices attached to any part of the user's body to acquire a user's biometric information, such as pulse, blood pressure, body temperature, or heart rate, and then processes and analyzes the acquired biometric information.
特許文献1には、ユーザの身体の任意の部位に装着されるウェアラブルデバイスで取得した生体情報を、ウェアラブルデバイスに接続された電子端末に送信して、生体情報に基づいた解析を行う技術が開示されている。 Patent Document 1 discloses a technology in which biometric information acquired by a wearable device attached to any part of the user's body is transmitted to an electronic terminal connected to the wearable device, and analysis is performed based on the biometric information.
ところで、この種の技術では、ウェアラブルデバイスを装着する際の装着の方法がユーザによって異なったり、ユーザの動作によってウェアラブルデバイスが装着した部位から偏位したり、あるいは装着する部位に色素沈着やシワ等があったりする等に起因して、取得した生体情報の精度が低くなる場合がある。 However, with this type of technology, the accuracy of the acquired biometric information can sometimes be reduced due to factors such as different users wearing the wearable device in different ways, the wearable device being displaced from the area where it is worn due to the user's movements, or the presence of pigmentation or wrinkles on the area where it is worn.
取得した生体情報の精度が低くなると、その生体情報を用いた解析や処理を高精度に行うことができなくなることが懸念される。 If the accuracy of the acquired biometric information decreases, there is a concern that it will become impossible to perform analysis or processing using that biometric information with high accuracy.
本発明は、上記事情に鑑みてなされたものであり、精度が高い生体情報を取得することができる生体情報処理システム、生体情報処理装置、生体情報処理プログラム及び生体情報処理方法を提供することを課題とするものである。 The present invention was made in consideration of the above circumstances, and aims to provide a biometric information processing system, a biometric information processing device, a biometric information processing program, and a biometric information processing method that can acquire highly accurate biometric information.
上記目的を達成するための本発明に係る生体情報処理システムは、ユーザの身体の任意の部位に装着されてユーザの第1生体情報を取得する第1生体情報取得装置と、第1生体情報取得装置とは異なるユーザの任意の部位に装着されて第1生体情報に対して精度の高いユーザの第2生体情報を取得する第2生体情報取得装置と、第2生体情報取得装置が取得した第2生体情報と第1生体情報取得装置が取得した第1生体情報とを突合して第1生体情報取得装置が取得した第1生体情報を補正する補正手段を有する生体情報処理装置とを備えるものである。 To achieve the above-mentioned objective, the biometric information processing system of the present invention comprises a first biometric information acquisition device that is worn on any part of the user's body to acquire first biometric information of the user; a second biometric information acquisition device that is worn on any part of the user different from the first biometric information acquisition device to acquire second biometric information of the user that is more accurate than the first biometric information; and a biometric information processing device having correction means that compares the second biometric information acquired by the second biometric information acquisition device with the first biometric information acquired by the first biometric information acquisition device and corrects the first biometric information acquired by the first biometric information acquisition device.
これによれば、第1生体情報と第1生体情報に対して精度の高い第2生体情報とを突合して第1生体情報を補正することから、第1生体情報取得装置において、精度の高い第1生体情報を取得することができる。 This allows the first biometric information acquisition device to acquire highly accurate first biometric information by correcting the first biometric information by matching it with second biometric information that is more accurate than the first biometric information.
この生体情報処理システムは、ユーザに保有されて第1生体情報取得装置及び第2生体情報取得装置と生体情報処理装置とを接続するユーザ端末を備えるものである。 This biometric information processing system includes a user terminal that is held by a user and connects the first and second biometric information acquisition devices to the biometric information processing device.
この生体情報処理システムの生体情報処理装置は、第1生体情報取得装置が取得した第1生体情報と第2生体情報取得装置が取得した第2生体情報とを突合して第1生体情報を補正した結果に基づいて学習済みパラメータを生成する生成手段を有し、生成手段で生成した学習済みパラメータに基づいて補正手段が第1生体情報を自律的に補正するものである。 The biometric information processing device of this biometric information processing system has a generation means that generates learned parameters based on the results of correcting the first biometric information by matching the first biometric information acquired by the first biometric information acquisition device with the second biometric information acquired by the second biometric information acquisition device, and a correction means autonomously corrects the first biometric information based on the learned parameters generated by the generation means.
さらに、この生体情報処理システムの第1生体情報取得装置は、時刻及び第1生体情報が表示される表示部を有し、第2生体情報取得装置は、取得した第2生体情報が表示される表示部を有し、ユーザに装着された第1生体情報取得装置の表示部に表示された時刻及び第1生体情報とユーザに装着された第2生体情報取得装置の表示部に表示された第2生体情報とが同時に撮像された画像データが第1生体情報及び第2生体情報にそれぞれ付加されるものである。 Furthermore, the first biometric information acquisition device of this biometric information processing system has a display unit that displays the time and the first biometric information, and the second biometric information acquisition device has a display unit that displays the acquired second biometric information, and image data captured simultaneously of the time and first biometric information displayed on the display unit of the first biometric information acquisition device worn by the user and the second biometric information displayed on the display unit of the second biometric information acquisition device worn by the user are added to the first biometric information and the second biometric information, respectively.
この生体情報処理システムの第1生体情報取得装置は、ユーザの任意の部位にLED光を照射するとともに反射されたLED光を受光してLED光の光量を測定して測定した光量を第1生体情報として取得し、第2生体情報取得装置は、ユーザの任意の部位にLED光を照射するとともに部位を透過したLED光を受光してLED光の光量を測定して測定した光量を第2生体情報として取得するものである。 The first biometric information acquisition device of this biometric information processing system irradiates LED light onto any part of the user's body, receives the reflected LED light, measures the amount of LED light, and acquires the measured amount of light as first biometric information. The second biometric information acquisition device irradiates LED light onto any part of the user's body, receives the LED light that has passed through the part, measures the amount of LED light, and acquires the measured amount of light as second biometric information.
上記目的を達成するための本発明に係る生体情報処理装置は、ユーザの身体の任意の部位に装着された第1生体情報取得装置が取得したユーザの第1生体情報を受信する第1生体情報受信手段と、第1生体情報取得装置とは異なるユーザの任意の部位に装着された第2生体情報取得装置が取得した、第1生体情報に対して精度の高いユーザの第2生体情報を受信する第2生体情報受信手段と、第2生体情報受信手段が受信した第2生体情報と第1生体情報受信手段が受信した第1生体情報とを突合して第1生体情報受信手段が受信した第1生体情報を補正する補正手段とを備えるものである。 To achieve the above-mentioned objective, the biometric information processing device of the present invention comprises a first biometric information receiving means for receiving first biometric information of a user acquired by a first biometric information acquisition device worn on any part of the user's body, a second biometric information receiving means for receiving second biometric information of the user that is more accurate than the first biometric information acquired by a second biometric information acquisition device worn on any part of the user different from the first biometric information acquisition device, and a correction means for correcting the first biometric information received by the first biometric information receiving means by comparing the second biometric information received by the second biometric information receiving means with the first biometric information received by the first biometric information receiving means.
上記目的を達成するための本発明に係る生体情報処理プログラムは、ユーザの身体の任意の部位に装着された第1生体情報取得装置が取得したユーザの第1生体情報を受信する第1生体情報受信手段と、第1生体情報取得装置とは異なるユーザの任意の部位に装着された第2生体情報取得装置が取得した、第1生体情報に対して精度の高いユーザの第2生体情報を受信する第2生体情報受信手段と、第2生体情報受信手段が受信した第2生体情報と第1生体情報受信手段が受信した第1生体情報とを突合して第1生体情報受信手段が受信した第1生体情報を補正する補正手段とを備えるものである。 To achieve the above-mentioned objective, the biometric information processing program of the present invention comprises a first biometric information receiving means for receiving first biometric information of a user acquired by a first biometric information acquisition device worn on any part of the user's body, a second biometric information receiving means for receiving second biometric information of the user that is more accurate than the first biometric information acquired by a second biometric information acquisition device worn on any part of the user different from the first biometric information acquisition device, and a correction means for correcting the first biometric information received by the first biometric information receiving means by comparing the second biometric information received by the second biometric information receiving means with the first biometric information received by the first biometric information receiving means.
上記目的を達成するための本発明に係る生体情報処理方法は、ユーザの身体の任意の部位に装着された第1生体情報取得装置が取得したユーザの第1生体情報を受信する第1処理と、第1生体情報取得装置とは異なるユーザの任意の部位に装着された第2生体情報取得装置が取得した、第1生体情報に対して精度の高いユーザの第2生体情報を受信する第2処理と、第2処理で受信した第2生体情報と第1処理で受信した第1生体情報とを突合して第1生体情報を補正する第3処理とを備えるものである。 To achieve the above-mentioned objective, the biometric information processing method of the present invention comprises a first process of receiving first biometric information of a user acquired by a first biometric information acquisition device worn on any part of the user's body; a second process of receiving second biometric information of the user that is more accurate than the first biometric information acquired by a second biometric information acquisition device worn on any part of the user different from the first biometric information acquisition device; and a third process of correcting the first biometric information by matching the second biometric information received in the second process with the first biometric information received in the first process.
この発明によれば、生体情報取得装置において精度の高い生体情報を取得することができる。 This invention enables the biometric information acquisition device to acquire highly accurate biometric information.
次に、図1~図10に基づいて、本発明の実施の形態に係る生体情報処理システムについて説明する。 Next, a biometric information processing system according to an embodiment of the present invention will be described with reference to Figures 1 to 10.
なお、本実施の形態では、生体情報処理システムで取得する生体情報に基づいて、経皮的動脈血酸素飽和度(SpO2)を算出する場合を例として説明する。 In this embodiment, we will explain an example in which percutaneous arterial oxygen saturation (SpO2) is calculated based on biological information acquired by the biological information processing system.
図1は、本実施の形態に係る生体情報処理システムの構成の概略を説明するブロック図である。図示のように、生体情報処理システム10は、第1生体情報取得装置であるウェアラブルデバイス20、第2生体情報取得装置であるパルスオキシメータ30、ユーザ端末40、及び生体情報処理装置であるサーバ50を備える。 Figure 1 is a block diagram illustrating the general configuration of a biometric information processing system according to this embodiment. As shown, the biometric information processing system 10 includes a wearable device 20, which is a first biometric information acquisition device, a pulse oximeter 30, which is a second biometric information acquisition device, a user terminal 40, and a server 50, which is a biometric information processing device.
本実施の形態では、ウェアラブルデバイス20及びパルスオキシメータ30とユーザ端末40とがネットワークを介して互いにアクセス可能に接続され、ユーザ端末40とサーバ50とがネットワークを介して互いにアクセス可能に接続される。 In this embodiment, the wearable device 20, pulse oximeter 30, and user terminal 40 are connected to each other via a network so that they can access each other, and the user terminal 40 and server 50 are connected to each other via a network so that they can access each other.
ウェアラブルデバイス20及びパルスオキシメータ30は、ユーザ1の身体に装着され、ユーザ端末40はユーザ1に保有され、サーバ50は、生体情報処理システム10を用いたサービスを提供する事業者2に配備される。 The wearable device 20 and pulse oximeter 30 are worn on the body of user 1, the user terminal 40 is owned by user 1, and the server 50 is deployed at business operator 2 that provides services using the biometric information processing system 10.
図2は、ウェアラブルデバイス20の構成の概略を説明するブロック図である。ウェアラブルデバイス20は、ユーザ1の身体の任意の部位、本実施の形態ではユーザ1の手首に装着される腕時計型のいわゆるスマートウォッチであって、図示のように、制御部21、ディスプレイ22、生体センサ23及び加速度・方位センサ24を主要構成として備える。 Figure 2 is a block diagram illustrating the general configuration of wearable device 20. Wearable device 20 is a wristwatch-type device worn on any part of the body of user 1, in this embodiment on the wrist of user 1, and as shown in the figure, is primarily composed of a control unit 21, a display 22, a biometric sensor 23, and an acceleration/direction sensor 24.
制御部21は、本実施の形態では、表示部であるディスプレイ22、生体センサ23、加速度・方位センサ24等といったウェアラブルデバイス20の各部を制御するものであって、例えばプロセッサ、メモリ、ストレージ、送受信部等によって構成される。 In this embodiment, the control unit 21 controls each part of the wearable device 20, such as the display 22, which serves as a display unit, the biosensor 23, the acceleration/orientation sensor 24, etc., and is composed of, for example, a processor, memory, storage, a transceiver, etc.
この制御部21には、ウェアラブルデバイス20上で起動する各種のアプロケーションが格納され、本実施の形態では、後述する第1生体情報D1を管理するアプリケーションや、時刻を管理する時刻管理アプリケーションが格納される。 This control unit 21 stores various applications that run on the wearable device 20, and in this embodiment, stores an application that manages the first biometric information D1 (described below) and a time management application that manages the time.
ディスプレイ22には、本実施の形態では、第1生体情報D1を管理するアプリケーションや時刻管理アプリケーション等といったウェアラブルデバイス20で実行される各種のアプリケーションの画面インターフェースが表示される。 In this embodiment, the display 22 displays the screen interfaces of various applications executed on the wearable device 20, such as an application that manages the first biometric information D1 and a time management application.
このディスプレイ22は、表示面への接触によって情報の入力を受け付けるいわゆるタッチパネルであって、抵抗膜方式や静電容量方式といった各種の技術によって実装される。 This display 22 is a so-called touch panel that accepts information input by touching the display surface, and is implemented using various technologies such as resistive film and capacitive touch.
生体センサ22は、LED光をユーザ1の手首に向けて照射するLED及びLED光を受光するフォトトランジスタで実装される受光部を備え、LEDがLED光を手首に向けて照射して反射されたLED光を受光部が受光するセンサである。 The biosensor 22 is a sensor that includes an LED that emits LED light toward the wrist of the user 1 and a light receiving unit implemented with a phototransistor that receives the LED light. The LED emits LED light toward the wrist and the light receiving unit receives the reflected LED light.
この生体センサ22は、LED光のうちの赤外光が血中成分のうちの酸化ヘモグロビン(HbO2)に吸収されやすく、LED光のうちの赤色光が血中成分のうちの還元ヘモグロビン(Hb)に吸収されやすいという特質に基づいて、血中成分に吸収されないで反射されて受光部で受光されたLED光の光量を第1生体情報D1として取得する。 This biosensor 22 uses the characteristics that infrared light from the LED light is easily absorbed by oxygenated hemoglobin (HbO2), a component of blood, and red light from the LED light is easily absorbed by reduced hemoglobin (Hb), a component of blood, to acquire the amount of LED light that is not absorbed by the blood components but is reflected and received by the light receiving unit as first biometric information D1.
なお、本実施の形態のような腕時計型のウェアラブルデバイス20に搭載される生体センサ23が取得する第1生体情報D1は、ウェアラブルデバイス20の装着の方法がユーザ1ごとに異なったり、ユーザ1の動作によってウェアラブルデバイス20がその装着位置から偏位したり、あるいはユーザ1の手首にシワや色素沈着等があったりすることに起因して、その精度が低い場合や精度にバラツキがある場合が想定される。 It is anticipated that the first biometric information D1 acquired by the biometric sensor 23 mounted on a wristwatch-type wearable device 20 such as that of this embodiment may have low accuracy or variations in accuracy due to differences in the way the wearable device 20 is worn by each user 1, the wearable device 20 being displaced from its worn position due to the movements of user 1, or wrinkles or pigmentation on the user 1's wrist.
加速度・方位センサ24は、本実施の形態では、ユーザ1の移動に追従してウェアラブルデバイス20が移動する際の加速度や、ウェアラブルデバイス20が向けられている方位等を検出するセンサである。 In this embodiment, the acceleration/orientation sensor 24 is a sensor that detects the acceleration of the wearable device 20 when it moves in accordance with the movement of the user 1, the orientation in which the wearable device 20 is facing, etc.
図3は、パルスオキシメータ30の構成の概略を説明するブロック図である。パルスオキシメータ30は、ユーザ1の身体の任意の部位、本実施の形態ではユーザ1の指先を挟持してユーザ1の指先に装着されて使用されることを条件として医療機器としての承認を受けた装置であって、図示のように、制御部31、ディスプレイ32及び生体センサ33を主要構成として備える。 Figure 3 is a block diagram illustrating the general configuration of pulse oximeter 30. Pulse oximeter 30 is a device approved as a medical device on the condition that it is worn on any part of the body of user 1, in this embodiment, by clamping the fingertip of user 1. As shown in the figure, its main components are a control unit 31, a display 32, and a biosensor 33.
制御部31は、本実施の形態では、表示部であるディスプレイ32及び生体センサ33等といったパルスオキシメータ30の各部を制御するものであって、例えばプロセッサ、メモリ、送受信インターフェース等によって構成される。 In this embodiment, the control unit 31 controls each part of the pulse oximeter 30, such as the display 32 and the biosensor 33, and is composed of, for example, a processor, memory, a transmission/reception interface, etc.
ディスプレイ32は、例えば液晶パネルで実装される液晶ディスプレイであって、本実施の形態では、第2生体情報D2が数値データとして表示される。 The display 32 is, for example, a liquid crystal display implemented using a liquid crystal panel, and in this embodiment, the second biometric information D2 is displayed as numerical data.
生体センサ33は、LED光をユーザ1の指先に向けて照射するLED及びLED光を受光するフォトトランジスタで実装される受光部を備え、LEDがLED光を指先に向けて照射して透過されたLED光を受光部が受光するセンサである。 The biosensor 33 is a sensor that includes an LED that emits LED light toward the fingertip of the user 1 and a light-receiving unit implemented with a phototransistor that receives the LED light. The LED emits LED light toward the fingertip and the light-receiving unit receives the transmitted LED light.
この生体センサ33は、LED光のうちの赤外光が血中成分のうちの酸化ヘモグロビン(HbO2)に吸収されやすく、LED光のうちの赤色光が血中成分のうちの還元ヘモグロビン(Hb)に吸収されやすいという特質に基づいて、血中成分に吸収されないで透過して受光部で受光されたLED光の光量を第2生体情報D2として取得する。 This biosensor 33 uses the characteristics that infrared light from the LED light is easily absorbed by oxygenated hemoglobin (HbO2), a component of blood, and red light from the LED light is easily absorbed by reduced hemoglobin (Hb), a component of blood, to obtain the amount of LED light that is not absorbed by the blood components but is transmitted and received by the light receiving unit as second biometric information D2.
なお、本実施の形態のような指先を挟持するパルスオキシメータ30に搭載される生体センサ33が取得する第2生体情報D2は、パルスオキシメータ30の装着の方法はユーザ1が異なっても大きく異なることがなく、指先の動作によっても装着位置が偏位することがなく、あるいは指先にはシワや色素沈着等があることもほとんどないことから、ウェアラブルデバイス20が取得する第1生体情報D1に対して精度が高いと想定される。 The second biometric information D2 acquired by the biometric sensor 33 mounted on the pulse oximeter 30 that holds the fingertip as in this embodiment is expected to be more accurate than the first biometric information D1 acquired by the wearable device 20, since the method of wearing the pulse oximeter 30 does not vary significantly between users 1, the wearing position does not shift due to fingertip movements, and there are almost no wrinkles or pigmentation on the fingertips.
図4は、ユーザ端末40の構成の概略を説明するブロック図である。ユーザ棚末40は、本実施の形態では、携帯型情報端末であるスマートフォンやタブレット状のコンピュータであって、図示のように、制御部41、ディスプレイ42及びカメラ43を主要構成として備える。 Figure 4 is a block diagram illustrating the general configuration of the user terminal 40. In this embodiment, the user terminal 40 is a portable information terminal such as a smartphone or tablet computer, and as shown in the figure, is primarily composed of a control unit 41, a display 42, and a camera 43.
制御部41は、本実施の形態では、ディスプレイ42及びカメラ43等のユーザ端末40の各部を制御するものであって、例えばプロセッサ、メモリ、ストレージ、送受信部等によって構成される。 In this embodiment, the control unit 41 controls each part of the user terminal 40, such as the display 42 and camera 43, and is composed of, for example, a processor, memory, storage, a transceiver, etc.
この制御部21には、ユーザ端末40上で起動する各種のアプロケーションが格納され、本実施の形態では、第1生体情報D1及び第2生体情報D2を管理するアプリケーション等が格納される。 This control unit 21 stores various applications that run on the user terminal 40, and in this embodiment, stores applications that manage the first biometric information D1 and the second biometric information D2, etc.
ディスプレイ42には、本実施の形態では、第1生体情報D1及び第2生体情報D2を管理するアプリケーション等といったユーザ端末40で実行されるアプリケーションの画面インターフェースが表示される。 In this embodiment, the display 42 displays the screen interface of an application executed on the user terminal 40, such as an application that manages the first biometric information D1 and the second biometric information D2.
このディスプレイ42は、表示面への接触によって情報の入力を受け付けるいわゆるタッチパネルであって、抵抗膜方式や静電容量方式といった各種の技術によって実装される。 This display 42 is a so-called touch panel that accepts information input by touching the display surface, and is implemented using various technologies such as resistive film and capacitive touch.
カメラ43は、あらゆる事物を画像または映像として取得する撮像手段であって、本実施の形態では、ウェアラブルデバイス20及びパルスオキシメータ30が装着された状態のユーザ1の手を撮像する。 The camera 43 is an imaging means that captures images or videos of any object, and in this embodiment, it captures an image of the hand of the user 1 wearing the wearable device 20 and pulse oximeter 30.
図5は、サーバ50の構成の概略を説明するブロック図である。 Figure 5 is a block diagram illustrating the general configuration of server 50.
図示のように、サーバ50は、プロセッサ51、メモリ52、ストレージ53、送受信部54及び入出力部55を主要構成として備え、これらが互いにバス56を介して電気的に接続される。 As shown in the figure, the server 50 mainly comprises a processor 51, memory 52, storage 53, a transceiver 54, and an input/output unit 55, which are electrically connected to each other via a bus 56.
プロセッサ51は、サーバ50の動作を制御し、各要素間におけるデータの送受信の制御や、アプリケーションプログラムの実行に必要な処理等を行う演算装置である。 The processor 51 is a computing device that controls the operation of the server 50, controls the sending and receiving of data between each element, and performs processing necessary to execute application programs.
このプロセッサ51は、本実施の形態では例えばCPU(Central Processing Unit)であり、後述するストレージ53に格納されてメモリ52に展開されたアプリケーションプログラムを実行して各処理を行う。 In this embodiment, this processor 51 is, for example, a CPU (Central Processing Unit), and executes application programs stored in storage 53 (described below) and deployed in memory 52 to perform various processes.
メモリ52は、DRAM(Dynamic Random Access Memory)等の揮発性記憶装置で構成される主記憶装置によって実装される。 Memory 52 is implemented as a main memory device consisting of a volatile memory device such as DRAM (Dynamic Random Access Memory).
このメモリ52は、プロセッサ51の作業領域として使用される一方、サーバ50の起動時に実行されるBIOS(Basic Input/Output System)、及び各種の設定情報等が格納される。 This memory 52 is used as a working area for the processor 51, and also stores the BIOS (Basic Input/Output System) that runs when the server 50 starts up, as well as various setting information.
ストレージ53は、アプリケーションプログラムや各種の処理に用いられるデータ等が格納されている。 Storage 53 stores application programs and data used for various processes.
送受信部54は、サーバ50をネットワークに接続するものであって、本実施の形態では、送受信部54を介したネットワークを経由して、ユーザ端末40と相互に通信可能に接続される。 The transmission/reception unit 54 connects the server 50 to a network, and in this embodiment, it is connected to the user terminal 40 via the network via the transmission/reception unit 54 so that they can communicate with each other.
この送受信部54は、Bluetooth(登録商標)やBLE(Bluetooth Low Energy)といった近距離通信インターフェースを具備するものであってもよい。 This transceiver unit 54 may be equipped with a short-range communication interface such as Bluetooth (registered trademark) or BLE (Bluetooth Low Energy).
入出力部55には、必要に応じて、キーボードやマウスといった情報入力機器やディスプレイ等の出力機器が接続される。本実施の形態では、キーボード、マウス及びディスプレイがそれぞれ接続される。 If necessary, information input devices such as a keyboard and mouse, and output devices such as a display, are connected to the input/output unit 55. In this embodiment, a keyboard, mouse, and display are connected.
バス56は、接続したプロセッサ51、メモリ52、ストレージ53、送受信部54及び入出力部55の間において、例えばアドレス信号、データ信号及び各種の制御信号を伝達する。 The bus 56 transmits, for example, address signals, data signals, and various control signals between the connected processor 51, memory 52, storage 53, transceiver unit 54, and input/output unit 55.
図6は、サーバ50のストレージ53の構成の概略を説明するブロック図である。図示のように、ストレージ53は、生体情報処理プログラム60、第1記憶領域61及び第2記憶領域62を備える。 Figure 6 is a block diagram illustrating the general configuration of the storage 53 of the server 50. As shown, the storage 53 includes a biometric information processing program 60, a first storage area 61, and a second storage area 62.
生体情報処理プログラム60は、ウェアラブルデバイス20が取得した第1生体情報D1及びパルスオキシメータ30が取得した第2生体情報D2を処理するプログラムであって、サーバ50で情報の入出力が可能な画面インターフェースによって実装される。 The biological information processing program 60 is a program that processes the first biological information D1 acquired by the wearable device 20 and the second biological information D2 acquired by the pulse oximeter 30, and is implemented by a screen interface that allows the server 50 to input and output information.
この生体情報処理プログラム60は、本実施の形態では、第1生体情報受信手段である第1生体情報受信部60a、第2生体情報受信手段である第2生体情報受信部60b、補正手段である補正部60c、生成手段である生成部60d、及び情報処理部60eを備える。 In this embodiment, this biometric information processing program 60 includes a first biometric information receiving unit 60a, which is a first biometric information receiving means, a second biometric information receiving unit 60b, which is a second biometric information receiving means, a correction unit 60c, which is a correction means, a generation unit 60d, which is a generation means, and an information processing unit 60e.
第1生体情報受信部60aは、本実施の形態では、ウェアラブルデバイス20で取得した第1生体情報D1を受信するモジュールであり、第2生体情報受信部60bは、パルスオキシメータ30で取得した第2生体情報D2を受信するモジュールである。 In this embodiment, the first biological information receiving unit 60a is a module that receives first biological information D1 acquired by the wearable device 20, and the second biological information receiving unit 60b is a module that receives second biological information D2 acquired by the pulse oximeter 30.
補正部60cは、本実施の形態では、第1生体情報D1と第2生体情報D2とを突合し、突合した結果に基づいて第1生体情報D1を補正するモジュールである。 In this embodiment, the correction unit 60c is a module that compares the first biometric information D1 with the second biometric information D2 and corrects the first biometric information D1 based on the comparison results.
図7は、補正部60cの処理の概略を説明する図である。図示のように、補正部60cは、第1生体情報D1として把握された光量と第2生体情報D2として把握された光量とを突合して差分を把握するとともに、その差分に基づいて、第2生体情報D2を基準として第1生体情報D1を補正する。 Figure 7 is a diagram outlining the processing performed by the correction unit 60c. As shown in the figure, the correction unit 60c compares the amount of light captured as the first biometric information D1 with the amount of light captured as the second biometric information D2 to determine the difference, and then corrects the first biometric information D1 based on that difference, using the second biometric information D2 as a reference.
さらに、補正部60cは、次述する生成部60dで生成する学習済みパラメータに基づいて、第1生体情報D1を自律的に補正する。 Furthermore, the correction unit 60c autonomously corrects the first biometric information D1 based on the learned parameters generated by the generation unit 60d, which will be described next.
具体的には、生成した学習済みパラメータと取得した第1生体情報D1とを対比して、取得した第1生体情報D1から把握される実際の光量(真値)を推定して、推定した真値となるように第1生体情報D1を自律的に補正する。 Specifically, the generated learned parameters are compared with the acquired first biometric information D1, the actual light intensity (true value) ascertained from the acquired first biometric information D1 is estimated, and the first biometric information D1 is autonomously corrected to match the estimated true value.
図6で示す生成部60dは、本実施の形態では、補正部60cが第1生体情報D1と第2生体情報D2とを突合して第1生体情報D1を補正した結果に基づいて、学習済みパラメータを生成するモジュールである。 In this embodiment, the generation unit 60d shown in FIG. 6 is a module that generates learned parameters based on the results of the correction unit 60c comparing the first biometric information D1 with the second biometric information D2 and correcting the first biometric information D1.
図8は、生成部60dの処理の概略を説明するブロック図である。図示のように、生成部60dは、第1生体情報D1を学習データとし、第2生体情報D2を教師データとして、第1生体情報D1と第2生体情報D2とを突合して第1生体情報D1を補正した結果に関して機械学習を行うことによって、学習済みパラメータPを生成する。 Figure 8 is a block diagram outlining the processing of the generation unit 60d. As shown in the figure, the generation unit 60d uses the first biometric information D1 as learning data and the second biometric information D2 as training data, compares the first biometric information D1 with the second biometric information D2, corrects the first biometric information D1, and performs machine learning on the results to generate a learned parameter P.
さらに、生成部60dは、本実施の形態では、後述する画像データD3が第1生体情報D1に付加された場合には、第1生体情報D1に付加された画像データD3をも学習データとし、かつ画像データD3が第2生体情報D2に付加された場合には、第2生体情報D2に付加された画像データD3をも教師データとして、学習済みパラメータPを生成する。 Furthermore, in this embodiment, when image data D3 described below is added to the first biometric information D1, the generation unit 60d also uses the image data D3 added to the first biometric information D1 as learning data, and when image data D3 is added to the second biometric information D2, the generation unit 60d also uses the image data D3 added to the second biometric information D2 as training data to generate the learned parameter P.
機械学習を行う手法としては、ニューラルネットワーク、ランダムフォレスト、SVM(Support Vector Machine)等、各種のアルゴリズムが適宜用いられる。 Various algorithms, such as neural networks, random forests, and SVMs (Support Vector Machines), are used as appropriate for machine learning techniques.
図6で示す情報処理部60eは、本実施の形態では、生体情報処理プログラム60で実行する各種の処理を実行するモジュールである。 In this embodiment, the information processing unit 60e shown in Figure 6 is a module that executes various processes executed by the biometric information processing program 60.
ところで、本実施の形態では、ユーザ1のユーザ端末40を介して画像データD3が第1生体情報D1及び第2生体情報D2に付加されることによって、第1生体情報D1に付加された画像データD3が第1生体情報D1とともに学習データを構成し、かつ第2生体情報D2に付加された画像データD3が第2生体情報D2とともに教師データを構成する。 In this embodiment, image data D3 is added to the first biometric information D1 and the second biometric information D2 via user 1's user terminal 40, so that the image data D3 added to the first biometric information D1 constitutes learning data together with the first biometric information D1, and the image data D3 added to the second biometric information D2 constitutes training data together with the second biometric information D2.
図9は、画像データD3の概略を説明する図である。図示のように、画像データD3は、ユーザ1に装着されたウェアラブルデバイス20のディスプレイ22に表示された時刻及び第1生体情報Dと、ユーザ1に装着されたパルスオキシメータ30のディスプレイ32に表示された第2生体情報D2とが同時に撮像されたデータである。 Figure 9 is a diagram illustrating an overview of image data D3. As shown in the figure, image data D3 is data obtained by simultaneously capturing the time and first biological information D displayed on the display 22 of the wearable device 20 worn by user 1, and second biological information D2 displayed on the display 32 of the pulse oximeter 30 worn by user 1.
この画像データD3は、本実施の形態では、ユーザ端末40のカメラ43によって撮像されて取得され、サーバ50に送信される。サーバ50に送信された画像データD3は、情報処理部60eによって第1生体情報D1及び第2生体情報D2にそれぞれ付加される。 In this embodiment, this image data D3 is captured and acquired by the camera 43 of the user terminal 40 and transmitted to the server 50. The image data D3 transmitted to the server 50 is added to the first biometric information D1 and the second biometric information D2 by the information processing unit 60e.
図6で示す第1記憶領域61及び第2記憶領域62は、本実施の形態では、ストレージ53の記憶領域によって実現される。 In this embodiment, the first storage area 61 and second storage area 62 shown in Figure 6 are realized by the storage area of storage 53.
第1記憶領域61には、第1生体情報D1及び第2生体情報D2が格納され、第2記憶領域62には、学習済みパラメータPが格納される。 The first storage area 61 stores the first biometric information D1 and the second biometric information D2, and the second storage area 62 stores the learned parameters P.
次に、生体情報処理システム10の運用方法について説明する。 Next, we will explain how to operate the biometric information processing system 10.
図10は、生体情報処理システム10の運用方法の概略を説明するフローチャートである。ユーザ1はまず、ウェアラブルデバイス20及びパルスオキシメータ 30をそれぞれ所定の部位に装着する。 Figure 10 is a flowchart outlining the operation method of the biometric information processing system 10. First, the user 1 wears the wearable device 20 and the pulse oximeter 30 on predetermined body parts.
続いて、図示のように、ステップS1において、ウェアラブルデバイス20が第1生体情報D1を取得する。取得した第1生体情報D1は、ユーザ端末40を介してサーバ50に送信され、サーバ20の生体情報処理プログラム60の第1生体情報受信部60aで受信される(第1処理)。 Next, as shown in the figure, in step S1, the wearable device 20 acquires first biometric information D1. The acquired first biometric information D1 is transmitted to the server 50 via the user terminal 40 and received by the first biometric information receiving unit 60a of the biometric information processing program 60 of the server 20 (first process).
一方、ステップS2において、ステップS1と前後して、パルスオキシメータ30が第2生体情報D2を取得する。取得した第2生体情報D2は、ユーザ端末40を介してサーバ50に送信され、サーバ20の生体情報処理プログラム60の第2生体情報受信部60bで受信される(第2処理)。 Meanwhile, in step S2, around the same time as step S1, the pulse oximeter 30 acquires second biological information D2. The acquired second biological information D2 is transmitted to the server 50 via the user terminal 40 and received by the second biological information receiving unit 60b of the biological information processing program 60 of the server 20 (second processing).
このとき、本実施の形態では、ユーザ1は、ウェアラブルデバイス20のディスプレイ22に表示された時刻及び第1生体情報Dとパルスオキシメータ30のディスプレイ32に表示された第2生体情報D2とを同時に撮像して、画像データD3を取得する。 At this time, in this embodiment, the user 1 simultaneously captures the time and first biological information D displayed on the display 22 of the wearable device 20 and the second biological information D2 displayed on the display 32 of the pulse oximeter 30, and obtains image data D3.
取得した画像データD3は、ユーザ端末40を介してサーバ50に送信され、第1生体情報D1及び第2生体情報D2にそれぞれ付加される。 The acquired image data D3 is sent to the server 50 via the user terminal 40 and added to the first biometric information D1 and the second biometric information D2, respectively.
さらに、ステップS3において、第1生体情報D1と第2生体情報D2とを突合して、第1生体情報D1を補正する(第3処理)。 Furthermore, in step S3, the first biometric information D1 and the second biometric information D2 are compared, and the first biometric information D1 is corrected (third process).
その後、ステップS4において、第1生体情報D1を学習データとし、第2生体情報D2を教師データとして、第1生体情報D1と第2生体情報D2とを突合して第1生体情報D1を補正した結果に関して機械学習を行う。 Then, in step S4, the first biometric information D1 is used as learning data, the second biometric information D2 is used as training data, and machine learning is performed on the results of comparing the first biometric information D1 and the second biometric information D2 and correcting the first biometric information D1.
機械学習では、比較的大量の第1生体情報D1が必要とされることから、機械学習を終えるために十分な量の第1生体情報D1が取得されるまでには、長時間を要することがある。 Since machine learning requires a relatively large amount of first biometric information D1, it may take a long time to acquire a sufficient amount of first biometric information D1 to complete the machine learning.
その一方で、長時間に亘っての第1生体情報D1の取得が進むことによって、第1生体情報D1が集積されて機械学習が進行するに従って、過去に取得して集積した第1生体情報D1を改めて学習データとして機械学習を行うこととなるから、学習の精度が向上する。 On the other hand, as the acquisition of first biometric information D1 progresses over a long period of time, the first biometric information D1 is accumulated and machine learning progresses, and the previously acquired and accumulated first biometric information D1 is used as new learning data for machine learning, thereby improving the accuracy of learning.
続くステップS5において、十分な量の第1生体情報D1が取得されることによって機械学習が完了して、学習済みパラメータPが生成されると、ステップS6において、学習済みパラメータPで第1生体情報D1を補正する。 In the following step S5, a sufficient amount of first biometric information D1 is acquired to complete the machine learning and generate learned parameters P. In step S6, the first biometric information D1 is corrected using the learned parameters P.
なお、ウェアラブルデバイス20は、補正された第1生体情報D1に基づいて経皮的動脈血酸素飽和度(SpO2)を算出する。 The wearable device 20 calculates the percutaneous arterial oxygen saturation (SpO2) based on the corrected first biological information D1.
一方、ステップS5において、機械学習が未了であって学習済みパラメータPが未生成の場合は、第1生体情報D1と第2生体情報D2とを突合して第1生体情報D1を補正して、補正した結果に関する機械学習を継続して実行する。 On the other hand, in step S5, if machine learning is not yet complete and the learned parameter P has not yet been generated, the first biometric information D1 is corrected by comparing the first biometric information D1 with the second biometric information D2, and machine learning is continued on the corrected result.
このように、第1生体情報D1と、第1生体情報D1に対して精度の高い第2生体情報D2とを突合して、第1生体情報D1を補正することから、ウェアラブルデバイス20において、精度の高い第1生体情報D1を取得することができる。 In this way, by comparing the first biometric information D1 with the second biometric information D2, which is more accurate than the first biometric information D1, and correcting the first biometric information D1, it is possible to obtain highly accurate first biometric information D1 in the wearable device 20.
特に、本実施の形態では、日中の生活時間において常時装着されることが想定される腕時計型のウェアラブルデバイス20において、精度の高い第1生体情報D1を取得することができることから、ユーザ1の利便性が向上する。 In particular, in this embodiment, highly accurate first biometric information D1 can be obtained using a wristwatch-type wearable device 20 that is expected to be worn at all times during the day, thereby improving convenience for user 1.
さらに、本実施の形態では、機械学習によって学習済みパラメータPが生成されて、学習済みパラメータPに基づいて第1生体情報D1が自律的に補正されることから、第1生体情報D1の精度が更に向上する。 Furthermore, in this embodiment, learned parameters P are generated by machine learning, and the first biometric information D1 is autonomously corrected based on the learned parameters P, further improving the accuracy of the first biometric information D1.
学習済みパラメータPに基づく補正で、第1生体情報D1の精度が向上するのであれば、パルスオキシメータ30を装着して第1生体情報D1と第2生体情報D2とを突合させる作業が不要となることから、ユーザ1の利便性が更に向上する。 If the accuracy of the first biological information D1 can be improved by correction based on the learned parameter P, the convenience for user 1 will be further improved, as there will be no need to wear a pulse oximeter 30 and compare the first biological information D1 with the second biological information D2.
なお、本発明は上記実施の形態に限定されることはなく、発明の趣旨を逸脱しない範囲で種々の変更が可能である。 The present invention is not limited to the above-described embodiment, and various modifications are possible without departing from the spirit of the invention.
上記実施の形態では、ウェアラブルデバイス20及びパルスオキシメータ30が、サーバ50と接続されるユーザ端末40に接続される場合を説明したが、ウェアラブルデバイス20及びパルスオキシメータ30がユーザ端末40を介在することなくサーバ50と接続されるように構成してもよい。 In the above embodiment, the wearable device 20 and pulse oximeter 30 are connected to a user terminal 40 that is connected to a server 50. However, the wearable device 20 and pulse oximeter 30 may also be configured to be connected to the server 50 without the intervention of the user terminal 40.
上記実施の形態では、第1生体情報取得装置が腕時計型のウェアラブルデバイス20である場合を説明したが、例えば眼鏡型のウェアラブルデバイス等、ユーザ1の身体の任意の部位に装着されるものであれば種々のものが採用される。 In the above embodiment, the first biometric information acquisition device was described as a wristwatch-type wearable device 20, but various other devices, such as eyeglass-type wearable devices, may be used as long as they can be worn on any part of the user 1's body.
上記実施の形態では、第1生体情報D1あるいは第2生体情報D2に基づいて経皮的動脈血酸素飽和度を算出する場合を説明したが、例えば呼吸数や心拍数等といった各種の生体情報を第1生体情報D1及び第2生体情報D2として取得するものであってもよい。 In the above embodiment, we have described a case where percutaneous arterial blood oxygen saturation is calculated based on first biological information D1 or second biological information D2, but various types of biological information, such as respiratory rate and heart rate, may also be acquired as first biological information D1 and second biological information D2.
この場合、取得する第2生体情報D2に応じて、第2生体情報取得装置は任意の装置を採用することができる。例えば、心拍数を第2生体情報D2として取得するのであれば、第2生体情報取得装置は心拍計であることが好ましい。 In this case, any device can be used as the second biometric information acquisition device depending on the second biometric information D2 to be acquired. For example, if heart rate is to be acquired as the second biometric information D2, it is preferable that the second biometric information acquisition device be a heart rate monitor.
上記実施の形態では、第2生体情報取得装置は、LED光を照射する生体センサ33を有するパルスオキシメータ30である場合を説明したが、パルスオキシメータ30に加えて、例えば電極で第2生体情報D2を取得する生体センサを搭載した任意の第2生体情報取得装置を用いることもできる。 In the above embodiment, the second biological information acquisition device was described as a pulse oximeter 30 having a biological sensor 33 that emits LED light. However, in addition to the pulse oximeter 30, any second biological information acquisition device equipped with a biological sensor that acquires second biological information D2 using electrodes, for example, can also be used.
このように、第2生体情報D2を複数の互いに異なる生体センサを用いて取得することによって、第1生体情報D1の補正の精度を向上させることができる。 In this way, by acquiring the second biometric information D2 using multiple different biometric sensors, the accuracy of correction of the first biometric information D1 can be improved.
上記実施の形態では、サーバ50が事業者2に配備される場合を説明したが、サーバ50はクラウド環境で実装されるサーバであってもよい。 In the above embodiment, the server 50 is deployed at the business operator 2, but the server 50 may also be implemented in a cloud environment.
1 ユーザ
2 事業者
10 生体情報処理システム
20 ウェアラブルデバイス(第1生体情報取得装置)
22 ディスプレイ(表示部)
23 生体センサ
30 パルスオキシメータ(第2生体情報取得装置)
32 ディスプレイ(表示部)
33 生体センサ
40 ユーザ端末
50 サーバ(生体情報処理装置)
60 生体情報処理プログラム
60a 第1生体情報受信部(第1生体情報受信手段)
60b 第2生体情報受信部(第2生体情報受信手段)
60c 補正部(補正手段)
60d 生成部(生成手段)
D1 第1生体情報
D2 第2生体情報
D3 画像データ
P 学習済みパラメータ
1 User 2 Business 10 Biometric information processing system 20 Wearable device (first biological information acquisition device)
22 Display (display unit)
23 Biometric sensor 30 Pulse oximeter (second biological information acquisition device)
32 Display (display unit)
33 Biometric sensor 40 User terminal 50 Server (biometric information processing device)
60 Biometric information processing program 60a First biological information receiving unit (first biological information receiving means)
60b Second biological information receiving unit (second biological information receiving means)
60c Correction section (correction means)
60d Generation unit (generation means)
D1 First biometric information D2 Second biometric information D3 Image data P Learned parameters
Claims (6)
該第1生体情報取得装置とは異なる前記ユーザの任意の部位に装着されて前記第1生体情報に対して精度の高い前記ユーザの第2生体情報を取得し、取得した前記第2生体情報が表示される表示部を有する第2生体情報取得装置と、
該第2生体情報取得装置が取得した前記第2生体情報と前記第1生体情報取得装置が取得した前記第1生体情報とを突合して前記第1生体情報取得装置が取得した前記第1生体情報を補正する補正手段及び該補正手段で補正した結果に基づいて学習済みパラメータを生成する生成手段を有する生体情報処理装置と、を備え、
前記ユーザに保有されて前記第1生体情報取得装置及び前記第2生体情報取得装置と前記生体情報処理装置とを接続するユーザ端末によって、前記ユーザに装着された前記第1生体情報取得装置の前記表示部に表示された前記時刻及び前記第1生体情報と前記ユーザに装着された前記第2生体情報取得装置の前記表示部に表示された前記第2生体情報とが同時に撮像された画像データが、前記生体情報処理装置によって前記第1生体情報及び前記第2生体情報にそれぞれ付加され、
前記第1生体情報に付加された前記画像データが前記第1生体情報とともに学習データを構成し、前記第2生体情報に付加された前記画像データが前記第2生体情報とともに教師データを構成し、
前記学習データに含まれる前記画像データの前記第1生体情報及び前記第1生体情報を取得した前記時刻と該時刻における前記教師データに含まれる前記画像データの前記第2生体情報とを突合して前記時刻における前記第1生体情報を前記第2生体情報であるとして機械学習を行って前記学習済みパラメータを生成する、
生体情報処理システム。 a first biometric information acquisition device that is worn on an arbitrary part of a user's body to acquire first biometric information of the user and has a display unit that displays the acquired first biometric information and a time;
a second biometric information acquisition device that is worn on an arbitrary part of the user different from the first biometric information acquisition device, acquires second biometric information of the user that is more accurate than the first biometric information, and has a display unit that displays the acquired second biometric information;
a biometric information processing device including a correction means for correcting the first biometric information acquired by the first biometric information acquisition device by comparing the second biometric information acquired by the second biometric information acquisition device with the first biometric information acquired by the first biometric information acquisition device, and a generation means for generating learned parameters based on a result of correction by the correction means;
a user terminal that is held by the user and connects the first biometric information acquisition device and the second biometric information acquisition device to the biometric information processing device, and image data that is simultaneously captured of the time and the first biometric information displayed on the display unit of the first biometric information acquisition device worn by the user and the second biometric information displayed on the display unit of the second biometric information acquisition device worn by the user is added to the first biometric information and the second biometric information, respectively, by the biometric information processing device;
The image data added to the first biometric information constitutes learning data together with the first biometric information, and the image data added to the second biometric information constitutes teacher data together with the second biometric information,
the first biometric information of the image data included in the learning data and the time at which the first biometric information was acquired are compared with the second biometric information of the image data included in the teacher data at that time, and machine learning is performed assuming that the first biometric information at that time is the second biometric information, thereby generating the learned parameters;
Biometric information processing system.
前記生成手段で生成した前記学習済みパラメータに基づいて前記補正手段が前記第1生体情報を自律的に補正する、
請求項1に記載の生体情報処理システム。 The biometric information processing device includes:
the correction means autonomously corrects the first biological information based on the learned parameters generated by the generation means.
The biological information processing system according to claim 1 .
前記ユーザの任意の前記部位にLED光を照射するとともに反射された前記LED光を受光して前記LED光の光量を測定して測定した前記光量を前記第1生体情報として取得し、
前記第2生体情報取得装置は、
前記ユーザの任意の前記部位にLED光を照射するとともに前記部位を透過した前記LED光を受光して前記LED光の光量を測定して測定した前記光量を前記第2生体情報として取得する、
請求項1または2に記載の生体情報処理システム。 the first biological information acquisition device,
irradiating an LED light onto the arbitrary part of the user and receiving the reflected LED light to measure the amount of the LED light, and acquiring the measured amount of light as the first biological information;
the second biological information acquisition device,
irradiating an arbitrary part of the user with LED light and receiving the LED light that has passed through the part to measure the amount of light of the LED light, and acquiring the measured amount of light as the second biological information;
The biological information processing system according to claim 1 or 2.
前記第1生体情報取得装置とは異なる前記ユーザの任意の部位に装着されて前記第1生体情報に対して精度の高い前記ユーザの第2生体情報を取得し、取得した前記第2生体情報が表示される表示部を有する第2生体情報取得装置が取得した、前記第1生体情報に対して精度の高い前記ユーザの前記第2生体情報を受信する第2生体情報受信手段と、
該第2生体情報受信手段が受信した前記第2生体情報と前記第1生体情報受信手段が受信した前記第1生体情報とを突合して前記第1生体情報受信手段が受信した前記第1生体情報を補正する補正手段及び該補正手段で補正した結果に基づいて学習済みパラメータを生成する生成手段と、を備え、
前記ユーザに保有されて前記第1生体情報取得装置と前記第2生体情報取得装置とを接続するユーザ端末によって、前記ユーザに装着された前記第1生体情報取得装置の前記表示部に表示された前記時刻及び前記第1生体情報と前記ユーザに装着された前記第2生体情報取得装置の前記表示部に表示された前記第2生体情報とが同時に撮像された画像データを、前記第1生体情報及び前記第2生体情報にそれぞれ付加し、
前記第1生体情報に付加された前記画像データが前記第1生体情報とともに学習データを構成し、前記第2生体情報に付加された前記画像データが前記第2生体情報とともに教師データを構成する、
前記学習データに含まれる前記画像データの前記第1生体情報及び前記第1生体情報を取得した前記時刻と該時刻における前記教師データに含まれる前記画像データの前記第2生体情報とを突合して前記時刻における前記第1生体情報を前記第2生体情報であるとして機械学習を行って前記学習済みパラメータを生成する、
生体情報処理装置。 a first biometric information receiving means for receiving the first biometric information of the user acquired by a first biometric information acquisition device that is worn on an arbitrary part of the user's body and has a display unit that displays the acquired first biometric information and a time;
a second biometric information receiving means for receiving the second biometric information of the user, the second biometric information being attached to an arbitrary part of the user different from the first biometric information acquiring device, the second biometric information acquiring means having a display unit for displaying the acquired second biometric information, and the second biometric information being acquired by the second biometric information acquiring means having a display unit for displaying the acquired second biometric information;
a correction means for correcting the first biometric information received by the first biometric information receiving means by comparing the second biometric information received by the second biometric information receiving means with the first biometric information received by the first biometric information receiving means, and a generation means for generating learned parameters based on a result of the correction by the correction means,
a user terminal that is held by the user and connects the first biometric information acquisition device and the second biometric information acquisition device adds, to the first biometric information and the second biometric information, respectively, the time displayed on the display unit of the first biometric information acquisition device worn by the user and image data obtained by simultaneously capturing the first biometric information and the second biometric information displayed on the display unit of the second biometric information acquisition device worn by the user;
The image data added to the first biometric information constitutes learning data together with the first biometric information, and the image data added to the second biometric information constitutes teacher data together with the second biometric information.
the first biometric information of the image data included in the learning data and the time at which the first biometric information was acquired are compared with the second biometric information of the image data included in the teacher data at that time, and machine learning is performed assuming that the first biometric information at that time is the second biometric information, thereby generating the learned parameters;
Biometric information processing device.
ユーザの身体の任意の部位に装着されて前記ユーザの第1生体情報を取得し、取得した前記第1生体情報及び時刻が表示される表示部を有する第1生体情報取得装置が取得した前記ユーザの前記第1生体情報を受信する第1生体情報受信手段と、
前記第1生体情報取得装置とは異なる前記ユーザの任意の部位に装着されて前記第1生体情報に対して精度の高い前記ユーザの第2生体情報を取得し、取得した前記第2生体情報が表示される表示部を有する第2生体情報取得装置が取得した、前記第1生体情報に対して精度の高い前記ユーザの前記第2生体情報を受信する第2生体情報受信手段と、
該第2生体情報受信手段が受信した前記第2生体情報と前記第1生体情報受信手段が受信した前記第1生体情報とを突合して前記第1生体情報受信手段が受信した前記第1生体情報を補正する補正手段及び該補正手段で補正した結果に基づいて学習済みパラメータを生成する生成手段と、して機能させ、
前記ユーザに保有されて前記第1生体情報取得装置及び前記第2生体情報取得装置と前記生体情報処理装置とを接続するユーザ端末によって、前記ユーザに装着された前記第1生体情報取得装置の前記表示部に表示された前記時刻及び前記第1生体情報と前記ユーザに装着された前記第2生体情報取得装置の前記表示部に表示された前記第2生体情報とが同時に撮像された画像データが、前記生体情報処理装置によって前記第1生体情報及び前記第2生体情報にそれぞれ付加され、
前記第1生体情報に付加された前記画像データが前記第1生体情報とともに学習データを構成し、前記第2生体情報に付加された前記画像データが前記第2生体情報とともに教師データを構成し、
前記学習データに含まれる前記画像データの前記第1生体情報及び前記第1生体情報を取得した前記時刻と該時刻における前記教師データに含まれる前記画像データの前記第2生体情報とを突合して前記時刻における前記第1生体情報を前記第2生体情報であるとして機械学習を行って前記学習済みパラメータを生成する、
生体情報処理プログラム。 A biometric information processing device
a first biometric information receiving means for receiving the first biometric information of the user acquired by a first biometric information acquisition device that is worn on an arbitrary part of the user's body and has a display unit that displays the acquired first biometric information and a time;
a second biometric information receiving means for receiving the second biometric information of the user, the second biometric information being attached to an arbitrary part of the user different from the first biometric information acquiring device, the second biometric information acquiring means having a display unit for displaying the acquired second biometric information, and the second biometric information being acquired by the second biometric information acquiring means having a display unit for displaying the acquired second biometric information;
a correction means for correcting the first biometric information received by the first biometric information receiving means by comparing the second biometric information received by the second biometric information receiving means with the first biometric information received by the first biometric information receiving means, and a generation means for generating learned parameters based on the correction result by the correction means;
a user terminal that is held by the user and connects the first biometric information acquisition device and the second biometric information acquisition device to the biometric information processing device, and image data that is simultaneously captured of the time and the first biometric information displayed on the display unit of the first biometric information acquisition device worn by the user and the second biometric information displayed on the display unit of the second biometric information acquisition device worn by the user is added to the first biometric information and the second biometric information, respectively, by the biometric information processing device;
The image data added to the first biometric information constitutes learning data together with the first biometric information, and the image data added to the second biometric information constitutes teacher data together with the second biometric information,
the first biometric information of the image data included in the learning data and the time at which the first biometric information was acquired are compared with the second biometric information of the image data included in the teacher data at that time, and machine learning is performed assuming that the first biometric information at that time is the second biometric information, thereby generating the learned parameters;
Biometric information processing program.
ユーザの身体の任意の部位に装着されて前記ユーザの第1生体情報を取得し、取得した前記第1生体情報及び時刻が表示される表示部を有する第1生体情報取得装置が取得した前記ユーザの前記第1生体情報を受信する第1処理と、
前記第1生体情報取得装置とは異なる前記ユーザの任意の部位に装着されて前記第1生体情報に対して精度の高い前記ユーザの第2生体情報を取得し、取得した前記第2生体情報が表示される表示部を有する第2生体情報取得装置が取得した、前記第1生体情報に対して精度の高い前記ユーザの前記第2生体情報を受信する第2処理と、
該第2処理で受信した前記第2生体情報と前記第1処理で受信した前記第1生体情報とを突合して前記第1生体情報を補正する第3処理と、
該第3処理で補正した結果に基づいて学習済みパラメータを生成する生成手段と、を実行し、
前記ユーザに保有されて前記第1生体情報取得装置及び前記第2生体情報取得装置と前記生体情報処理装置とを接続するユーザ端末によって、前記ユーザに装着された前記第1生体情報取得装置の前記表示部に表示された前記時刻及び前記第1生体情報と前記ユーザに装着された前記第2生体情報取得装置の前記表示部に表示された前記第2生体情報とが同時に撮像された画像データが、前記生体情報処理装置によって前記第1生体情報及び前記第2生体情報にそれぞれ付加され、
前記第1生体情報に付加された前記画像データが前記第1生体情報とともに学習データを構成し、前記第2生体情報に付加された前記画像データが前記第2生体情報とともに教師データを構成し、
前記学習データに含まれる前記画像データの前記第1生体情報及び前記第1生体情報を取得した前記時刻と該時刻における前記教師データに含まれる前記画像データの前記第2生体情報とを突合して前記時刻における前記第1生体情報を前記第2生体情報であるとして機械学習を行って前記学習済みパラメータを生成する、
生体情報処理方法。 A biometric information processing device
a first process of receiving the first biometric information of the user acquired by a first biometric information acquisition device that is worn on an arbitrary part of the user's body and has a display unit that displays the acquired first biometric information and a time;
a second process of receiving the second biometric information of the user, the second biometric information being attached to an arbitrary part of the user different from the first biometric information acquisition device, the second biometric information being acquired by a second biometric information acquisition device having a display unit on which the acquired second biometric information is displayed, the second biometric information being acquired by a second biometric information acquisition device having a display unit on which the acquired second biometric information is displayed;
a third process of correcting the first biometric information by comparing the second biometric information received in the second process with the first biometric information received in the first process;
generating means for generating a learned parameter based on the result of the correction in the third process;
a user terminal that is held by the user and connects the first biometric information acquisition device and the second biometric information acquisition device to the biometric information processing device, and image data that is simultaneously captured of the time and the first biometric information displayed on the display unit of the first biometric information acquisition device worn by the user and the second biometric information displayed on the display unit of the second biometric information acquisition device worn by the user is added to the first biometric information and the second biometric information, respectively, by the biometric information processing device;
The image data added to the first biometric information constitutes learning data together with the first biometric information, and the image data added to the second biometric information constitutes teacher data together with the second biometric information,
the first biometric information of the image data included in the learning data and the time at which the first biometric information was acquired are compared with the second biometric information of the image data included in the teacher data at that time, and machine learning is performed assuming that the first biometric information at that time is the second biometric information, thereby generating the learned parameters;
Biometric information processing method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021078223A JP7819896B2 (en) | 2021-05-03 | 2021-05-03 | Biological information processing system, biological information processing device, biological information processing program, and biological information processing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021078223A JP7819896B2 (en) | 2021-05-03 | 2021-05-03 | Biological information processing system, biological information processing device, biological information processing program, and biological information processing method |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2022172427A JP2022172427A (en) | 2022-11-16 |
| JP2022172427A5 JP2022172427A5 (en) | 2024-04-19 |
| JP7819896B2 true JP7819896B2 (en) | 2026-02-25 |
Family
ID=84041152
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021078223A Active JP7819896B2 (en) | 2021-05-03 | 2021-05-03 | Biological information processing system, biological information processing device, biological information processing program, and biological information processing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7819896B2 (en) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003513734A (en) | 1999-11-16 | 2003-04-15 | マイクロライフ・インテレクチュアル・プロパティ・ゲーエムベーハー | Blood pressure monitor calibration device |
| JP2015519112A (en) | 2012-05-04 | 2015-07-09 | ザ ガイ ピー.カーティス アンドフランセス エル.カーティス トラスト | Method for monitoring blood pressure using pulse oximetry signals |
| JP2016123424A (en) | 2014-12-26 | 2016-07-11 | 日本電気株式会社 | Blood pressure measurement system and blood circulation parameter determination method |
| JP2017131267A (en) | 2016-01-25 | 2017-08-03 | 株式会社メガチップス | Blood pressure measuring device |
| JP2017536159A (en) | 2014-11-06 | 2017-12-07 | コーニンクレッカ フィリップス エヌ ヴェKonink | Method and apparatus for measuring intracranial pressure ICP in a subject |
| JP2018109802A (en) | 2016-12-28 | 2018-07-12 | オムロンヘルスケア株式会社 | Terminal device |
| WO2019193196A1 (en) | 2018-04-05 | 2019-10-10 | Life Meter Srl | Pulse oximetry device, system and method |
| US20190365255A1 (en) | 2017-03-15 | 2019-12-05 | Omron Corporation | Biological information measuring apparatus and method and program using the same |
-
2021
- 2021-05-03 JP JP2021078223A patent/JP7819896B2/en active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2003513734A (en) | 1999-11-16 | 2003-04-15 | マイクロライフ・インテレクチュアル・プロパティ・ゲーエムベーハー | Blood pressure monitor calibration device |
| JP2015519112A (en) | 2012-05-04 | 2015-07-09 | ザ ガイ ピー.カーティス アンドフランセス エル.カーティス トラスト | Method for monitoring blood pressure using pulse oximetry signals |
| JP2017536159A (en) | 2014-11-06 | 2017-12-07 | コーニンクレッカ フィリップス エヌ ヴェKonink | Method and apparatus for measuring intracranial pressure ICP in a subject |
| JP2016123424A (en) | 2014-12-26 | 2016-07-11 | 日本電気株式会社 | Blood pressure measurement system and blood circulation parameter determination method |
| JP2017131267A (en) | 2016-01-25 | 2017-08-03 | 株式会社メガチップス | Blood pressure measuring device |
| JP2018109802A (en) | 2016-12-28 | 2018-07-12 | オムロンヘルスケア株式会社 | Terminal device |
| US20190365255A1 (en) | 2017-03-15 | 2019-12-05 | Omron Corporation | Biological information measuring apparatus and method and program using the same |
| WO2019193196A1 (en) | 2018-04-05 | 2019-10-10 | Life Meter Srl | Pulse oximetry device, system and method |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2022172427A (en) | 2022-11-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102219911B1 (en) | Optical detection and analysis method and apparatus of internal body tissue | |
| US11771346B2 (en) | Apparatus and method for estimating blood sugar based on heterogeneous spectrums | |
| KR102696905B1 (en) | Electronic device and method for obtaining information regarding blood glucose of user | |
| CN112748798B (en) | Eyeball tracking calibration method and related equipment | |
| CN105988588A (en) | Electronic device including touch panel and method for controlling the same | |
| KR20160100770A (en) | Electronic apparatus and method for measuring biometric information | |
| KR102600897B1 (en) | Electronic apparatus and controlling method thereof | |
| US20180267604A1 (en) | Computer pointer device | |
| US12594039B2 (en) | Electronic device and method for correcting biometric data on basis of distance between electronic device and user, measured using at least one sensor | |
| US20230026513A1 (en) | Human interface device | |
| EP4470457A1 (en) | Electronic device, server and system for providing highly accurate biosignals on basis of information acquired in non-contact manner, and operating method therefor | |
| Kreiensieck et al. | A comprehensive evaluation of openface 2.0 gaze tracking | |
| JP6821364B2 (en) | Health management system and its programs | |
| JP7819896B2 (en) | Biological information processing system, biological information processing device, biological information processing program, and biological information processing method | |
| EP3779646B1 (en) | Estimation method, estimation program, and estimation device | |
| US20240319797A1 (en) | Utilizing coincidental motion induced signals in photoplethysmography for gesture detection | |
| US9300908B2 (en) | Information processing apparatus and information processing method | |
| JP2015046111A (en) | Viewpoint detection device and viewpoint detection method | |
| CN109960412B (en) | Method for adjusting gazing area based on touch control and terminal equipment | |
| KR20180020594A (en) | Biometric information linked smart board system and method thereof | |
| KR20240019850A (en) | Biometric detection using photodetector array | |
| Chen et al. | Smart Edge-AI Framework for Finger Motion-Based Cognitive-Motor Assessment in Web Browsers | |
| KR20210139045A (en) | Method of transmitting data and electronic device supporting the same | |
| US20250375166A1 (en) | Filtering a physiological signal using a pressure sensor signal to generate a physiological measurement | |
| CN109917923A (en) | Method and terminal device based on free movement adjustment watching area |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240411 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240411 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250120 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250311 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250507 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250812 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20251008 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20251208 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20260127 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20260204 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7819896 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |