Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7614718B2 - Judgment system and aggregation server - Google Patents
[go: Go Back, main page]

JP7614718B2 - Judgment system and aggregation server - Google Patents

Judgment system and aggregation server Download PDF

Info

Publication number
JP7614718B2
JP7614718B2 JP2019172956A JP2019172956A JP7614718B2 JP 7614718 B2 JP7614718 B2 JP 7614718B2 JP 2019172956 A JP2019172956 A JP 2019172956A JP 2019172956 A JP2019172956 A JP 2019172956A JP 7614718 B2 JP7614718 B2 JP 7614718B2
Authority
JP
Japan
Prior art keywords
excretion
information
user
unit
determination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019172956A
Other languages
Japanese (ja)
Other versions
JP2021051449A (en
Inventor
江美 上田
剛 木本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lixil Corp
Original Assignee
Lixil Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Lixil Corp filed Critical Lixil Corp
Priority to JP2019172956A priority Critical patent/JP7614718B2/en
Publication of JP2021051449A publication Critical patent/JP2021051449A/en
Application granted granted Critical
Publication of JP7614718B2 publication Critical patent/JP7614718B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Medical Treatment And Welfare Office Work (AREA)

Description

本開示は、判定システム、及び集約サーバに関する。 This disclosure relates to a determination system and an aggregation server.

高齢者施設に入居する高齢者の排便記録を行うことで健康管理を行う試みがある。しかし、介護者等の手作業により排便記録が行われる場合、記録の手間がかかり、主観が入るために排泄物の性状を判定する際に主観が入り、判定結果にゆらぎが生じる可能性があった。 There have been attempts to manage the health of elderly people living in elderly care facilities by recording their bowel movements. However, when bowel movements are recorded manually by caregivers, the recording is time-consuming and involves subjectivity, which can lead to subjective judgments about the properties of the excrement, resulting in inconsistent judgment results.

一方、排泄物の画像からその性状を客観的に判定する技術がある。例えば、落下中の排泄物を撮影した複数の静止画像から排泄物の性状を推定する技術が開示されている(例えば、特許文献1参照)。この技術を用いて排泄物の性状を判定させた結果を排便記録とすれば、記録の手間や、判定結果にゆらぎが生じる可能性を低減することが可能である。 On the other hand, there is a technology that can objectively determine the properties of excrement from images of the excrement. For example, a technology has been disclosed that estimates the properties of excrement from multiple still images taken of the excrement as it falls (see, for example, Patent Document 1). If the results of determining the properties of excrement using this technology are used as a defecation record, it is possible to reduce the effort required for recording and the possibility of fluctuations in the determination results.

特開2017-137707号公報JP 2017-137707 A

特許文献1の技術を用いて健康管理を行おうとした場合には、さらに改善の余地があった。例えば、高齢者施設には便秘傾向の方が多い。このため、排便記録の内容から下剤を投与するか否かを判定し、お腹に便を溜めすぎないようにコントロールしている。しかし、下剤の量が多すぎると下痢が繰り返され、脱水症状を引き起こす要因となり得る。このため、投薬の量をユーザごとに調節しなければならい。このような種々の事情を考慮して健康管理を行うことができるシステムが望まれていた。 When attempting to use the technology of Patent Document 1 for health management, there is still room for improvement. For example, many people in elderly care facilities tend to suffer from constipation. For this reason, the contents of the bowel movement records are used to determine whether or not to administer a laxative, and control is performed to prevent too much stool from building up in the stomach. However, if too much laxative is administered, diarrhea will recur, which can lead to dehydration. For this reason, the amount of medication must be adjusted for each user. There was a need for a system that could manage health by taking such various circumstances into consideration.

本開示は、このような事情に鑑みてなされたものであり、その目的は、種々の事情を考慮して排便記録に基づく健康管理を行うことができる判定システム、及び集約サーバを提供することである。 This disclosure has been made in light of these circumstances, and its purpose is to provide a determination system and aggregation server that can perform health management based on bowel movement records while taking into account various circumstances.

上述した課題を解決するために本開示の一実施形態は、排泄物が撮像された対象画像の画像情報を取得する取得部と、前記対象画像における排泄物に関する性状、又は/及び量を判定する判定部と、排泄に関連する投薬情報が入力される投薬情報入力部と排泄物における性状、又は及び量が判定された判定結果と、当該排泄物が排泄された排泄時刻を示す情報と、当該排泄物に対応するユーザに関するユーザ情報とを対応付けた排泄情報を生成する生成部と、前記ユーザごとに排泄物における性状、又は及び量を表示させ、ユーザの排泄物における性状、又は及び量がユーザに応じて設定されたアラート条件を充足する場合、その旨を示すアラート情報及び投薬量が適量か過剰か否かの情報を報知させ、排泄の有無及び前記投薬情報を時系列に表示させる報知制御部と、を備える判定システムである。 In order to solve the above-mentioned problems, one embodiment of the present disclosure is a determination system including: an acquisition unit that acquires image information of a target image in which excrement is captured; a determination unit that determines the properties and/or amount of the excrement in the target image; a medication information input unit to which medication information related to excretion is input; a generation unit that generates excretion information that corresponds a determination result in which the properties and/or amount of the excrement are determined, information indicating the excretion time when the excretion was excreted, and user information regarding the user corresponding to the excretion; and a notification control unit that displays the properties and/or amount of the excretion for each user, and if the properties and/or amount of the user's excretion satisfy an alert condition set for the user , notifies alert information indicating this and information on whether the dosage is appropriate or excessive , and displays the presence or absence of excretion and the medication information in chronological order.

実施形態に係る判定装置が適用される判定システムの構成を示すブロック図である。1 is a block diagram showing a configuration of a determination system to which a determination device according to an embodiment is applied; 実施形態に係る便器装置と判定装置の構成を示すブロック図である。FIG. 2 is a block diagram showing the configuration of a toilet device and a determination device according to the embodiment. 実施形態に係る操作端末の構成を示すブロック図である。FIG. 2 is a block diagram showing a configuration of an operation terminal according to the embodiment. 実施形態に係る操作端末に表示される内容の例を示す図である。FIG. 11 is a diagram showing an example of content displayed on an operation terminal according to the embodiment. 実施形態に係る集約サーバに表示される内容の例を示す図である。FIG. 11 is a diagram illustrating an example of content displayed on an aggregation server according to the embodiment. 実施形態に係る集約サーバに表示される内容の例を示す図である。FIG. 11 is a diagram illustrating an example of content displayed on an aggregation server according to the embodiment. 実施形態に係る集約サーバに表示される内容の例を示す図である。FIG. 11 is a diagram illustrating an example of content displayed on an aggregation server according to the embodiment. 実施形態に係る集約サーバに表示される内容の例を示す図である。FIG. 11 is a diagram illustrating an example of content displayed on an aggregation server according to the embodiment. 実施形態に係る判定システムが行う処理の流れを示すシーケンス図である。4 is a sequence diagram showing a flow of processing performed by a determination system according to an embodiment. FIG.

以下、実施形態の判定システムを、図面を参照して説明する。 The following describes the embodiment of the determination system with reference to the drawings.

図1に示すように、判定システム1は、例えば、複数の判定装置10(判定装置10-1、10-2、…、10-N)と、複数の操作端末20(操作端末20-1、20-2、…、20-N)と、集約サーバ50とを備える。判定装置10は、操作端末20と接続される。操作端末20と集約サーバ50とは通信ネットワークNWを介して接続する。なお、判定システム1の構成がこの例に限定されることはない。判定システム1は、一組の判定装置10及び操作端末20を備える構成であってもよいし、複数の集約サーバ50を備える構成であってもよい。 As shown in FIG. 1, the determination system 1 includes, for example, a plurality of determination devices 10 (determination devices 10-1, 10-2, ..., 10-N), a plurality of operation terminals 20 (operation terminals 20-1, 20-2, ..., 20-N), and an aggregation server 50. The determination device 10 is connected to the operation terminal 20. The operation terminal 20 and the aggregation server 50 are connected via a communication network NW. Note that the configuration of the determination system 1 is not limited to this example. The determination system 1 may be configured to include a pair of the determination device 10 and the operation terminal 20, or may be configured to include a plurality of aggregation servers 50.

判定装置10は、排泄物(以下、便ともいう)が撮像された画像に基づいて、その画像に撮像された排泄物の性状、又は/及び量を判定する。排泄物の性状は、便における性質及び状態を示す指標である。排泄物の性状は、例えば、便における形状、色等である。排泄物の性状は、例えば、ブリストルスケールに基づいて7分類に分けられる。ブリストルスケールは便の性質及び状態を示し、医療現場でよく使われる、国際的な便の分類指標である。以下の説明では、便の性状が、硬便、普通便、軟便、泥状便、及び水様便の5つに区分される場合を例に説明する。以下の説明では、便の性状を、「便の形状」、或いは「便の形」と表現することもある。排泄物の量は、排泄物の大きさを含む。 The determination device 10 determines the properties and/or amount of excrement (hereinafter also referred to as stool) captured in an image based on the captured image. The properties of excrement are indicators of the properties and state of the stool. The properties of excrement are, for example, the shape and color of the stool. The properties of excrement are, for example, classified into seven categories based on the Bristol scale. The Bristol scale indicates the properties and state of the stool and is an international classification index of stool that is often used in medical settings. In the following explanation, an example will be described in which the properties of stool are classified into five categories: hard stool, normal stool, soft stool, muddy stool, and watery stool. In the following explanation, the properties of stool may be expressed as the "shape of stool" or the "form of stool". The amount of excrement includes the size of the excrement.

操作端末20は、操作端末20の操作者による操作入力に基づいて、判定装置10による判定結果を含む排泄情報を集約サーバ50に通知する。操作入力は、例えば、排泄情報が表示されたタッチパネル(図4参照)に、タッチ操作がなされることにより行われる。 The operation terminal 20 notifies the aggregation server 50 of the excretion information including the determination result by the determination device 10 based on the operation input by the operator of the operation terminal 20. The operation input is performed, for example, by performing a touch operation on a touch panel (see FIG. 4) on which the excretion information is displayed.

排泄情報は、ユーザ(排泄者)における排泄物に関する情報であって、従来の排便記録として記録されていた内容を示す情報である。例えば、排泄情報は、排泄物の有無、排泄物の量、排泄物の性状、排泄者、排泄時刻などユーザと対応付けた情報である。判定システム1が、高齢者施設に適用される場合、操作端末20の操作者は、例えば、高齢者を介護する介護者である。この場合、介護者は、ユーザ(ここでは、入居する高齢者)の排泄記録を行うために操作端末20を操作する。例えば、介護者は、ユーザの排泄を介抱し、排泄が有った場合に、判定装置10による判定が妥当であるか判断し、必要であれば訂正して内容を確定させる。介護者は、ユーザの氏名等を入力して集約サーバ50に通知する操作を行う。これにより、操作端末20は、排泄情報を集約サーバ50に通知する。 The excretion information is information about the excretion of the user (excretor), and is information indicating the contents recorded as a conventional defecation record. For example, the excretion information is information associated with the user, such as the presence or absence of excretion, the amount of excretion, the properties of the excretion, the excretor, and the time of excretion. When the determination system 1 is applied to an elderly care facility, the operator of the operation terminal 20 is, for example, a caregiver who cares for the elderly. In this case, the caregiver operates the operation terminal 20 to record the excretion of the user (here, the elderly resident). For example, the caregiver takes care of the user's excretion, and when excretion occurs, judges whether the judgment made by the judgment device 10 is appropriate, and corrects it if necessary to confirm the contents. The caregiver inputs the user's name, etc., and performs an operation to notify the aggregation server 50. As a result, the operation terminal 20 notifies the aggregation server 50 of the excretion information.

集約サーバ50は、操作端末20によって通知された排泄情報を集約する。判定システム1が、高齢者施設に適用される場合、集約サーバ50は、例えば、詰所に設置される。詰所は、いわゆる介護ステーションであり、介護者が待機したり、情報が交換されたり、介護方針が立てられたりする場所である。集約サーバ50は、高齢者施設における入所者全体の排泄記録を一括して管理し、操作入力に応じて排泄記録の全体や一部を表示する。 The aggregation server 50 aggregates the excretion information notified by the operation terminal 20. When the determination system 1 is applied to an elderly care facility, the aggregation server 50 is installed, for example, in the staff room. The staff room is a so-called care station, and is a place where caregivers wait, information is exchanged, and care policies are established. The aggregation server 50 collectively manages the excretion records of all residents in the elderly care facility, and displays the whole or part of the excretion records in response to operation input.

集約サーバ50は、排泄情報と共に、排泄情報に対応するユーザにおける投薬情報を取得する。投薬情報は、排泄に関連する薬が投与された履歴を示す情報である。 The aggregation server 50 acquires, together with the excretion information, medication information for the user corresponding to the excretion information. The medication information is information indicating the administration history of medication related to excretion.

排泄に関連する薬とは、例えば、下剤、或いは下痢止め薬である。特に、高齢者施設には便秘傾向の方が多く、下剤が投与されるケースが多い。高齢者には内服液タイプの下剤が処方される場合が多く、このようなタイプでは、一日一回、一回当たり10~15滴が経口投与される。最初は10滴から始め、効果がない場合には一日おきに1滴ずつ量を増やして様子をみながら投与していく場合がある。何滴で効果があるかは、個人により異なり、過去に効果があった量と同じ量を投与した場合に、同様の効果があるとも限らない。下剤の量が多すぎると下痢が繰り返され、脱水症状を引き起こす要因となり得る。このため、下剤を投与する場合はその投与量を慎重に判断する必要がある。 Drugs related to excretion include, for example, laxatives or antidiarrheal drugs. In particular, many elderly people in elderly care facilities tend to be constipated, and laxatives are often administered. Elderly people are often prescribed oral liquid laxatives, and with these types, 10 to 15 drops are orally administered once a day. Initially, 10 drops are started, and if there is no effect, the amount may be increased by one drop every other day while observing the condition. The number of drops that are effective varies from person to person, and administering the same amount that was effective in the past may not have the same effect. If too much laxative is administered, diarrhea will recur, which can lead to dehydration. For this reason, when administering a laxative, the dosage must be carefully determined.

この対策として、集約サーバ50は、排泄記録と共に、投薬の履歴を時系列に表示する。具体的に、集約サーバ50は、投薬の量と、投薬後における排泄物の性状との関係を表示する。これにより、閲覧者に、投薬による効果の有無、投与量の過不足等を判断し易くすることが可能である。 As a countermeasure, the aggregation server 50 displays the medication history in chronological order along with the excretion records. Specifically, the aggregation server 50 displays the relationship between the amount of medication administered and the properties of the excreta after administration. This makes it easier for the viewer to determine whether the medication is effective, whether the dosage is too much or too little, etc.

集約サーバ50は、例えば、通信部51と、入力部52と、判定部53と、表示部54と、表示制御部55と、記憶部56とを備える。表示制御部55は、「操作制御部」の一例である。通信部51は、通信ネットワークNWを介して操作端末20と通信し、例えば、操作端末20から排泄情報を受信する。通信部51は、取得した排泄情報を判定部53、及び表示制御部55に出力する。 The aggregation server 50 includes, for example, a communication unit 51, an input unit 52, a determination unit 53, a display unit 54, a display control unit 55, and a memory unit 56. The display control unit 55 is an example of an "operation control unit". The communication unit 51 communicates with the operation terminal 20 via the communication network NW, and receives, for example, excretion information from the operation terminal 20. The communication unit 51 outputs the acquired excretion information to the determination unit 53 and the display control unit 55.

入力部52は、集約サーバ50の操作者により操作入力された情報を取得する。集約サーバ50の操作者により行われる操作は、例えば、各種情報の入力、及び表示内容の操作である。各種情報の入力とは、例えば、上述した投薬情報である。この場合、入力部52は、「投薬情報入力部」の一例である。 The input unit 52 acquires information input by an operator of the aggregating server 50. The operations performed by the operator of the aggregating server 50 include, for example, input of various information and manipulation of display content. The input of various information is, for example, the medication information described above. In this case, the input unit 52 is an example of a "medication information input unit."

集約サーバ50の操作者により行われる操作は、操作端末20から通知された排泄情報の訂正、及び判定装置10ではない人により判定された排泄情報等を入力する操作である。判定装置10ではない人により判定された排泄情報とは、高齢者施設などにおいて判定装置10が設けられていない場所(浴室や寝室など)で排泄が行われた場合に、介護者により便の性状等が判定された結果等である。表示内容の操作は、集約サーバ50に通知された全ての排泄情報を一覧で表示させたり、指定したユーザや、指定した日時に対応する排泄情報を表示させたりする操作である。入力部52は、取得した情報を表示制御部55に出力する。 Operations performed by the operator of the aggregation server 50 include correcting the excretion information notified from the operation terminal 20, and inputting excretion information determined by a person other than the determination device 10. The excretion information determined by a person other than the determination device 10 is the result of a caregiver determining the characteristics of stool when excretion occurs in a place where the determination device 10 is not installed (such as a bathroom or bedroom) in an elderly care facility. The operation of the display content includes displaying a list of all the excretion information notified to the aggregation server 50, or displaying excretion information corresponding to a specified user or a specified date and time. The input unit 52 outputs the acquired information to the display control unit 55.

判定部53は、排泄情報等に基づいて、排泄に関する健康状態を判定する。ここでの排泄に関する健康状態とは、排泄情報及び投薬情報から判定可能なユーザの健康状態であって、定期的な排泄があるか否か、或いは排泄物の性状に偏り(硬便、或いは水様便)がないか等である。このような、定期的な排泄があるか否か、或いは排泄物の性状に偏り(硬便、或いは水様便)がないか等の条件は、「アラート条件」の一例である。判定部53は、例えば、排泄情報に基づいて、排便の間隔(排便間隔)を導出する排便間隔は、排便がない時間の間隔であって、最新の排泄がなされた時刻(排泄時刻)から現時点までの経過時間である。判定部53は、排便間隔が、所定の閾値より長い場合、健康状態が低下していると判定する。判定部53は、例えば、水様便が排泄されることが連続して所定の回数続いた場合、健康状態が低下していると判定する。判定部53は、下剤を服用した後の排泄物が普通便でない偏りがある性状(硬便、或いは水様便)である場合、投薬量が適切でなく、健康状態が低下していると判定する。判定部53は、健康状態が低下していると判定した場合、その旨を示す情報を、表示制御部55に出力する。 The determination unit 53 determines the health condition related to excretion based on the excretion information, etc. The health condition related to excretion here is the health condition of the user that can be determined from the excretion information and the medication information, and is, for example, whether there is regular excretion or whether there is a bias in the properties of the excretion (hard stool or watery stool). Such conditions, such as whether there is regular excretion or whether there is a bias in the properties of the excretion (hard stool or watery stool), are examples of "alert conditions". For example, the determination unit 53 derives the interval between defecation (defecation interval) based on the excretion information. The defecation interval is the interval of time during which there is no defecation, and is the elapsed time from the time of the latest excretion (excretion time) to the current time. If the defecation interval is longer than a predetermined threshold, the determination unit 53 determines that the health condition is deteriorating. For example, if watery stool is excreted a predetermined number of times in succession, the determination unit 53 determines that the health condition is deteriorating. If the excrement after taking the laxative is irregular (hard stool or watery stool), the determination unit 53 determines that the dosage is inappropriate and that the health condition is deteriorating. If the determination unit 53 determines that the health condition is deteriorating, it outputs information indicating that to the display control unit 55.

表示部54は、表示制御部55の制御に従って、画像を表示する。表示制御部55は、表示部54に表示させる内容を制御する。表示制御部55は、入力部52に操作入力された表示に関する情報に基づいて、表示部54に表示させる表示内容、及び表示態様を決定する。例えば、表示制御部55は、まず、ユーザごとに、時系列に沿って排泄の有無、排泄が有った場合における排泄物の性状、及び服薬の有無等を表示させる(図5参照)。表示制御部55は、選択された排泄に関する詳細情報を表示させるようにしてもよい(図6参照)。操作者の操作入力によって、特定のユーザが選択された場合、その選択されたユーザにおける排泄の記録を、カレンダー形式の表示態様にて表示させる(図7参照)。表示制御部55は、選択されたユーザにおける所定期間(例えば、1か月)に渡る排泄物における性状の内訳を棒グラフ形式の表示態様にて表示させるようにしてもよい(図8参照)。記憶部56は、排泄情報、及び投薬情報を、ユーザに対応付けて記憶する。 The display unit 54 displays an image under the control of the display control unit 55. The display control unit 55 controls the contents to be displayed on the display unit 54. The display control unit 55 determines the display contents and display mode to be displayed on the display unit 54 based on the information on the display input by the input unit 52. For example, the display control unit 55 first displays, for each user, the presence or absence of excretion in chronological order, the properties of the excretion if there was excretion, and the presence or absence of medication (see FIG. 5). The display control unit 55 may display detailed information on the selected excretion (see FIG. 6). When a specific user is selected by the operator's operation input, the excretion record of the selected user is displayed in a calendar-type display mode (see FIG. 7). The display control unit 55 may display the details of the properties of the excretion of the selected user over a predetermined period (for example, one month) in a bar graph-type display mode (see FIG. 8). The storage unit 56 stores the excretion information and the medication information in association with the user.

図2に示すように、判定装置10は、便器装置3を撮像する撮像装置4と接続される。 As shown in FIG. 2, the determination device 10 is connected to an imaging device 4 that captures an image of the toilet device 3.

便器装置3は、例えば、便鉢32を有する便器30を備える。便器装置3は、便鉢32の内部空間34に設けられた開口部36に、洗浄水Sを供給可能に構成されている。 The toilet device 3 includes, for example, a toilet 30 having a toilet bowl 32. The toilet device 3 is configured to be able to supply flushing water S to an opening 36 provided in the internal space 34 of the toilet bowl 32.

撮像装置4は、排泄物を撮像することが可能な位置に設けられる。撮像装置4は、便器30の上側、例えば、便鉢32の後側における縁の内側などに、便鉢32の内部空間34の方向にレンズが向くように設置される。すなわち、撮像装置4は、便鉢32の内部空間を撮像可能に設置される。撮像装置4は、例えば、判定装置10の指示に基づいて、便鉢の内部空間を撮像し、撮像した画像の画像情報を判定装置10に送信する。 The imaging device 4 is provided in a position where it can capture an image of excrement. The imaging device 4 is installed on the upper side of the toilet bowl 30, for example, on the inside edge of the rear side of the toilet bowl 32, with the lens facing toward the internal space 34 of the toilet bowl 32. In other words, the imaging device 4 is installed so that it can capture an image of the internal space of the toilet bowl 32. The imaging device 4 captures an image of the internal space of the toilet bowl 32, for example, based on instructions from the determination device 10, and transmits image information of the captured image to the determination device 10.

撮像装置4は、排泄の時系列に沿って、繰り返し経時的に便鉢32の内部空間を撮像する。例えば、撮像装置4は、排泄の開始時、途中、終了時など、複数の画像を撮像する。これによって、画像を撮像された時系列に沿って解析でき、最初に排泄された便、途中に排泄された便、最後に排泄された便をそれぞれ判定ことができる。 The imaging device 4 repeatedly captures images of the internal space of the toilet bowl 32 over time in accordance with the time series of excretion. For example, the imaging device 4 captures multiple images at the start, middle, and end of excretion. This makes it possible to analyze the images in the time series in which they were captured, and to determine which feces were excreted first, which feces were excreted in the middle, and which feces were excreted last.

以下の説明では、撮像装置4は、便鉢32に落下した排泄物を、撮像する場合を例に説明するが、これに限定されることはない。撮像装置4は、例えば便座の裏側などに設置され、落下中の排泄物を、便鉢32の側面方向から撮像してもよい。撮像装置4が撮像する画像は、動画像であってもよいし、静止画像であってもよい。 In the following description, the imaging device 4 captures an image of excrement that has fallen into the toilet bowl 32, but this is not limited to the example. The imaging device 4 may be installed, for example, on the underside of the toilet seat, and capture images of the excrement as it falls from the side of the toilet bowl 32. The images captured by the imaging device 4 may be moving images or still images.

判定装置10は、例えば、画像情報取得部11と、解析部12と、判定部13と、出力部14と、画像情報記憶部15と、学習済みモデル記憶部16と、判定結果記憶部17と、を備える。画像情報取得部11は、「取得部」の一例である。 The determination device 10 includes, for example, an image information acquisition unit 11, an analysis unit 12, a determination unit 13, an output unit 14, an image information storage unit 15, a trained model storage unit 16, and a determination result storage unit 17. The image information acquisition unit 11 is an example of an "acquisition unit."

画像情報取得部11は、便鉢32の内部空間34が撮像された画像(対象画像)の画像情報を取得する。画像情報取得部11は、取得した画像情報を、解析部12に出力すると。画像情報取得部11は、取得した画像情報を画像情報記憶部15に記憶させる。 The image information acquisition unit 11 acquires image information of an image (target image) of the internal space 34 of the toilet bowl 32. The image information acquisition unit 11 outputs the acquired image information to the analysis unit 12. The image information acquisition unit 11 stores the acquired image information in the image information storage unit 15.

解析部12は、画像情報取得部11から得られた画像情報に基づいて、画像(対象画像)を解析する。解析部12による解析とは、排泄に関する画像を基に、排泄物に関する判定の項目(判定項目)について推定することである。判定項目は、少なくとも排泄物に関する物であればよく、例えば、便の性状、又は/及び量である。 The analysis unit 12 analyzes the image (target image) based on the image information obtained from the image information acquisition unit 11. The analysis by the analysis unit 12 involves estimating the items for judgment (judgment items) related to excrement based on the image related to excretion. The judgment items may be at least items related to excrement, such as the properties and/or amount of stool.

解析部12は、例えば、判定部13の判定項目に応じた内容を学習した学習済みモデルを用いて、判定項目を推定する。学習済みモデルは、例えば、学習済みモデル記憶部16に記憶されたモデルであって、排泄物が撮像された画像(学習用画像)と、その画像に撮像された排泄物の判定項目に対する判定結果とを対応付けたデータセットを教師データとして学習したモデルである。このような学習によって、学習済みモデルは、入力された画像において判定項目を判定した結果を、推測値として出力することができる。 The analysis unit 12 estimates the judgment items, for example, using a trained model that has learned the content corresponding to the judgment items of the judgment unit 13. The trained model is, for example, a model stored in the trained model storage unit 16, and is a model that has been trained using as training data a data set that associates images of excrement (training images) with judgment results for the judgment items of the excrement captured in the images. Through such learning, the trained model can output the results of judging the judgment items in the input image as estimated values.

学習済みモデルは、例えば、ディープラーニング(DL)の手法を用いて作成される。DLは、多層のニューラルネットワークで構成されるディープニューラルネットワーク(DNN)による機械学習の手法である。DNNは、神経科学における予測符号化の原理から発想を得たネットワークによって実現され、神経伝達網を摸した関数によって構築される。しかしながらこれに限定されない。学習済みモデルは、少なくとも画像と判定結果とを対応関係を学習したモデルであればよい。 The trained model is created, for example, using a deep learning (DL) technique. DL is a machine learning technique that uses a deep neural network (DNN) that is composed of a multi-layered neural network. A DNN is realized by a network inspired by the principles of predictive coding in neuroscience, and is constructed by a function that mimics a neural transmission network. However, it is not limited to this. The trained model may be a model that has at least learned the correspondence between images and judgment results.

判定部13は、解析部12から得られた解析結果(推定結果)を用いて、対象画像に撮像された排泄物における判定項目を判定する。 The determination unit 13 uses the analysis results (estimated results) obtained from the analysis unit 12 to determine the determination items for the excrement captured in the target image.

出力部14は、判定部13による判定結果を出力する。出力部14は、例えば、排泄行動を行ったユーザの端末に判定結果を送信するようにしてもよい。これによって、ユーザが、排泄物の性状や量の判定結果を認識することが可能である。画像情報記憶部15は、画像情報取得部11によって取得された画像情報を記憶する。学習済みモデル記憶部16は、判定項目の各々に対応した学習済みモデルを記憶する。判定結果記憶部17は、判定部13による判定結果を記憶する。通信部18は、便器装置3、及び撮像装置4、或いは図示しない外部装置と通信する。通信部18は、例えば、便器装置3から便器30に設けられた機能部(不図示)によって、便器装置3の使用者による着座や脱座、局部洗浄の使用開始、及び排泄後における便鉢32の洗浄する操作などが検知された場合に、その検知結果を受信する。通信部18は、撮像装置4に撮像の指示を示す制御情報を送信する。 The output unit 14 outputs the judgment result by the judgment unit 13. The output unit 14 may transmit the judgment result to, for example, the terminal of the user who performed the excretory behavior. This allows the user to recognize the judgment result of the properties and amount of excrement. The image information storage unit 15 stores the image information acquired by the image information acquisition unit 11. The trained model storage unit 16 stores trained models corresponding to each of the judgment items. The judgment result storage unit 17 stores the judgment result by the judgment unit 13. The communication unit 18 communicates with the toilet device 3 and the imaging device 4, or an external device (not shown). For example, when a functional unit (not shown) provided on the toilet device 3 to the toilet 30 detects the user's sitting or getting up from the toilet device 3, the start of use of local washing, and the operation of washing the toilet bowl 32 after excretion, the communication unit 18 receives the detection result. The communication unit 18 transmits control information indicating an instruction to capture an image to the imaging device 4.

図3に示すように、操作端末20は、例えば、通信部21と、入力部22と、表示部23と、制御部24と、記憶部25とを備える。通信部21は、判定装置10と通信し、判定装置10から判定結果を取得する。通信部21は、通信ネットワークNWを介して集約サーバ50と通信し、集約サーバ50に排泄情報を送信する。入力部22は、操作端末20の操作者により操作入力された情報を取得する。 As shown in FIG. 3, the operation terminal 20 includes, for example, a communication unit 21, an input unit 22, a display unit 23, a control unit 24, and a memory unit 25. The communication unit 21 communicates with the determination device 10 and acquires a determination result from the determination device 10. The communication unit 21 communicates with the aggregation server 50 via the communication network NW and transmits excretion information to the aggregation server 50. The input unit 22 acquires information input by the operator of the operation terminal 20.

入力部22は、操作端末20の操作者により操作入力された各種の情報を取得する。入力部22には、例えば、判定装置10による判定が妥当であるか否かを確定した結果を示す情報(確定情報)が入力される。この場合、入力部22は、「確定情報入力部」の一例である。入力部22には、判定装置10による判定を訂正する訂正内容を示す情報が入力される。入力部22には、ユーザの氏名等を示す情報が入力される。 The input unit 22 acquires various information input by the operator of the operation terminal 20. For example, information (confirmation information) indicating the result of determining whether the determination made by the determination device 10 is valid is input to the input unit 22. In this case, the input unit 22 is an example of a "confirmation information input unit." Information indicating the correction content for correcting the determination made by the determination device 10 is input to the input unit 22. Information indicating the user's name, etc. is input to the input unit 22.

表示部23は、判定装置10により判定された判定結果を表示する。判定結果は、排泄物が撮像された画像から判定された、排便の有無、排泄物の形状、及び量である。表示部23は、操作入力に用いられる各種の画像を表示するようにしてもよい。この場合、表示部23は、画面に行われたタッチ操作等を取得することができるタッチパネルを備える。この場合のタッチパネルは、入力部22として機能する。 The display unit 23 displays the result of the determination made by the determination device 10. The result of the determination is the presence or absence of defecation, the shape of the excrement, and the amount of the excrement, determined from an image of the excrement. The display unit 23 may display various images used for inputting operations. In this case, the display unit 23 includes a touch panel that can acquire touch operations performed on the screen. In this case, the touch panel functions as the input unit 22.

操作入力に用いられる各種の画像は、例えば、判定装置10による判定が妥当であるか否かを確定させるための「確定」との文字が示された画像である。操作入力に用いられる各種の画像は、例えば、判定装置10による判定を訂正するための「訂正」との文字が示された画像である。操作入力に用いられる各種の画像は、例えば、ユーザの氏名等を入力するための「入力」との文字が示された画像である。 The various images used for operation input are, for example, an image showing the word "Confirm" to confirm whether or not the judgment made by the judgment device 10 is valid. The various images used for operation input are, for example, an image showing the word "Correct" to correct the judgment made by the judgment device 10. The various images used for operation input are, for example, an image showing the word "Input" to input the user's name, etc.

制御部24は、判定装置10による判定結果と、ユーザに関するユーザ情報とを対応付けた排泄情報を生成する。制御部24は、「生成部」の一例である。制御部24は、例えば、判定装置10から取得した判定結果に、入力部22から操作入力されたユーザ情報を対応付けることにより、排泄情報を生成する。 The control unit 24 generates excretion information that associates the judgment result obtained from the judgment device 10 with user information related to the user. The control unit 24 is an example of a "generation unit." The control unit 24 generates the excretion information, for example, by associating the judgment result obtained from the judgment device 10 with user information input through the input unit 22.

制御部24は、判定装置10による判定結果が介護者等によって確定された旨の情報が入力部22から入力された場合、その旨を含む排泄情報を生成するようにしてもよい。この場合、制御部24は、判定装置10による判定結果が確定されたか否かを示す情報を、判定結果に対応づけて排泄情報を生成する。 When information indicating that the result of the determination by the determination device 10 has been confirmed by a caregiver or the like is input from the input unit 22, the control unit 24 may generate excretion information including that information. In this case, the control unit 24 generates excretion information by associating the information indicating whether the result of the determination by the determination device 10 has been confirmed with the determination result.

制御部24は、判定結果が判定装置10により判定されたものか否かを示す情報を含む排泄情報を生成するようにしてもよい。この場合、排泄情報に基づいて、判定結果が、便器装置3に設置された判定装置10により判定されたものか、判定装置10が設置されていない浴室等で行われた排泄に対して介護者等により判定されたものかを区別することができる。制御部24は、生成した排泄情報を、通信部21を介して、集約サーバ50に通知する。 The control unit 24 may generate excretion information including information indicating whether the judgment result was judged by the judgment device 10. In this case, based on the excretion information, it is possible to distinguish whether the judgment result was judged by the judgment device 10 installed in the toilet device 3 or was judged by a caregiver or the like for excretion that took place in a bathroom or the like where the judgment device 10 is not installed. The control unit 24 notifies the aggregation server 50 of the generated excretion information via the communication unit 21.

記憶部25は、判定システム1が管理対象であるユーザのユーザ情報を記憶する。記憶部25は、判定装置10により判定された判定結果を記憶する。 The storage unit 25 stores user information of users who are managed by the determination system 1. The storage unit 25 stores the determination results determined by the determination device 10.

図4に示すように、操作端末20の表示部23は、判定装置10による判定結果を表示する。この例では、判定装置10による判定結果は、便の有無、便の量、便の形、のそれぞれについて判定された結果である。この例では、入力部22には、便の有無(あり/なし)、便の量(小/中/大)、便の形(硬便/普通便/軟便/泥状便/水様便)が文字や図(イラスト)で表示され、該当する文字や図(イラスト)を枠で囲むことにより、判定装置10による判定結果が示されている。この例では、表示部23における表画面の少なくとも一部がタッチパネルで構成され入力部22として機能する。例えば、操作者により、訂正の画像210がタッチ操作されると、判定装置10による判定結果を訂正することができる。操作者により、確定の画像211がタッチ操作されると、判定装置10による判定結果を確定することができる。操作者により、登録の画像212がタッチ操作されると、判定装置10による判定結果を集約サーバ50に通知することができる。この例に示すように、表示部23には、判定装置10による処理の経過を示すメッセージ、例えば「排泄チェックが終わりました」等が表示されてもよい。表示部23には、判定装置10による判定がなされた日時(判定時刻)が表示されてもよい。 As shown in FIG. 4, the display unit 23 of the operation terminal 20 displays the judgment result by the judgment device 10. In this example, the judgment result by the judgment device 10 is the result of judging whether or not there is stool, the amount of stool, and the shape of stool. In this example, the input unit 22 displays the presence or absence of stool (yes/no), the amount of stool (small/medium/large), and the shape of stool (hard stool/normal stool/soft stool/mudgy stool/watery stool) in characters and figures (illustrations), and the judgment result by the judgment device 10 is shown by surrounding the corresponding characters and figures (illustrations) with a frame. In this example, at least a part of the front screen on the display unit 23 is composed of a touch panel and functions as the input unit 22. For example, when the operator touches the correction image 210, the judgment result by the judgment device 10 can be corrected. When the operator touches the confirmation image 211, the judgment result by the judgment device 10 can be confirmed. When the operator touches the registration image 212, the judgment result by the judgment device 10 can be notified to the aggregation server 50. As shown in this example, the display unit 23 may display a message indicating the progress of processing by the determination device 10, such as "Excretion check completed." The display unit 23 may also display the date and time when the determination was made by the determination device 10 (determination time).

図5に示すように、集約サーバ50の表示部54は、ユーザごとに、排泄及び服薬の履歴を時系列に表示する。表示部54は、例えば、アラート、部屋、氏名、排便間隔、時間軸等の各項目を表示する。アラートは、判定部53により健康状態が低下していると判定されたユーザの欄に、その旨を示す文字や図が表示される。この例では、アラートがある場合に、エクスクラメーションマーク(感嘆符)が表示される。 As shown in FIG. 5, the display unit 54 of the aggregation server 50 displays the excretion and medication history for each user in chronological order. The display unit 54 displays items such as alert, room, name, defecation interval, and time axis. An alert is displayed in the column of a user whose health condition has been determined to be declining by the determination unit 53, with text or a figure indicating this. In this example, when there is an alert, an exclamation mark is displayed.

部屋には、ユーザが入居する部屋番号が示される。氏名にはユーザの氏名が示される。排便間隔には、最新の排泄時刻から現時点までの時間が表示される。排便間隔が所定の閾値時間(例えば、12時間)よりも長い場合、排便間隔の表示態様が変更され、より目立つように表示される。この例では、排便間隔が、閾値時間(12時間)より長い15時間である場合、閾値時間より短い場合の表示と比較して、太字かつ大きい文字で表示される。 The room number in which the user occupies is displayed in the room field. The name field shows the user's name. The defecation interval field shows the time from the most recent defecation time to the current time. If the defecation interval is longer than a predetermined threshold time (e.g., 12 hours), the display mode of the defecation interval is changed and displayed more prominently. In this example, if the defecation interval is 15 hours, which is longer than the threshold time (12 hours), it is displayed in bold and larger letters compared to when the defecation interval is shorter than the threshold time.

時間軸の項目には、時系列に沿って、排泄及び服薬の履歴が、文字や図形などで表示される。この例では、雫の画像540により排尿があったことが示されている。このように、判定システム1では、排便のみならず、排尿の記録が集約されてよい。排泄物を模した画像541により排便があったことが示される。カプセルの画像542により投薬がなされたことが示される。画像541では画像の色や濃度により性状が示される。例えば、画像541は水様便、画像544は硬便、画像546は泥状便であることを示している。 In the time axis items, the history of excretion and medication is displayed in chronological order using text and figures. In this example, image 540 of a drop indicates that urination has occurred. In this way, the determination system 1 may collect records of urination as well as defecation. Image 541 resembling excrement indicates that defecation has occurred. Image 542 of a capsule indicates that medication has been administered. In image 541, the nature is indicated by the color and density of the image. For example, image 541 indicates watery stool, image 544 indicates hard stool, and image 546 indicates muddy stool.

感嘆符マークの画像543は何らかのコメントが記録されていることを示している。このようなコメントは、例えば、操作端末20の操作者により判定装置10の判定結果が確定される際に、操作者により入力される。コメントは、例えば、便宜上硬便と判定されているが、実は単なる泥状便ではなく消化器官からの出血時に見られるようなタール便であること等、特に注意を要する内容が記録される。 The image 543 of an exclamation mark indicates that some kind of comment has been recorded. Such a comment is input by the operator of the operation terminal 20, for example, when the operator confirms the judgment result of the judgment device 10. The comment records content that requires special attention, such as, for example, that although it has been judged to be hard stool for convenience, it is actually not simply muddy stool but tarry stool like that seen when bleeding comes from the digestive organs.

疑問符(クエスチョンマーク)の画像545は、判定装置10による判定結果が確定されていない旨を示している。この場合、操作端末20は、判定装置10による判定結果を表示したが表示後に操作入力がなされないまま所定時間が経過した場合、判定結果が確定されていない旨を示す情報を含む排泄情報を、集約サーバ50に通知する。 The question mark image 545 indicates that the result of the determination by the determination device 10 has not been finalized. In this case, if the operation terminal 20 displays the result of the determination by the determination device 10 but a predetermined time has passed without any operation input being made after the display, the operation terminal 20 notifies the aggregation server 50 of excretion information including information indicating that the result of the determination has not been finalized.

画像540~546のそれぞれが、操作者によるタッチ操作等により選択されると、具体的な内容が表示される。例えば、画像541が選択されると、画像541に対応付けられた具体的な判定内容、すなわち、排泄時刻、便の量、便の形、コメントの有無、排尿の有無等、が表示される。この際、操作者は、判定内容を訂正したり、コメントを追加したりすることが可能である。画像545又は546が選択され、操作者により内容の訂正がなされ、判定装置10による判定結果が確定された場合、次回以降の表示部54には、疑問符(クエスチョン)マークの画像545が消去された状態での表示がなされる。詳細の画像547がタッチ操作等により選択されると、ユーザ個人の詳細な内容が表示される(図6参照)。 When the operator selects each of the images 540 to 546 by touching or otherwise operating the image, the specific details are displayed. For example, when image 541 is selected, the specific judgment details associated with image 541, i.e., the time of excretion, the amount of stool, the shape of stool, the presence or absence of comments, the presence or absence of urination, etc., are displayed. At this time, the operator can correct the judgment details or add comments. When image 545 or 546 is selected, the operator corrects the details, and the judgment result by the judgment device 10 is confirmed, the question mark image 545 is displayed on the display unit 54 from the next time onwards. When the details image 547 is selected by touching or otherwise operating the image, the detailed details of the user are displayed (see FIG. 6).

図6に示すように、図5に示す詳細の画像547が選択されると、集約サーバ50の表示部54は、ユーザごとに、排泄及び服薬の履歴を時系列に表示する。表示部54は、例えば、時間軸、吹き出し等を表示する。時間軸には、選択されたユーザの排泄及び服薬の履歴が表示される。排泄及び服薬の履歴に対応する画像が選択されると、吹き出し形式の表示態様にて、排泄日時、排便、及び排尿に関する情報が表示される。図6における排便記録間隔は、排便間隔と同様に、最新の排便から現時点までの時間を示す情報である。 As shown in FIG. 6, when the detailed image 547 shown in FIG. 5 is selected, the display unit 54 of the aggregation server 50 displays the excretion and medication history for each user in chronological order. The display unit 54 displays, for example, a time axis, speech bubbles, etc. The excretion and medication history of the selected user is displayed on the time axis. When an image corresponding to the excretion and medication history is selected, information regarding the excretion date and time, defecation, and urination is displayed in a speech bubble format. The defecation record interval in FIG. 6 is information that indicates the time from the most recent defecation to the current time, similar to the defecation interval.

画像確認の画像548が選択されると、例えば、排便後における便鉢32の内部空間34が撮像された画像が表示される。この画像は、例えば、判定装置10による判定に用いられた、排泄物が撮像された画像である。閲覧者は、画像を表示させることにより、改めて、ユーザにおける排便の状況を確認(追認)することが可能である。 When the image confirmation image 548 is selected, for example, an image of the internal space 34 of the toilet bowl 32 after defecation is displayed. This image is, for example, an image of excrement used in the determination by the determination device 10. By displaying the image, the viewer can once again confirm (confirm) the user's defecation situation.

画像549には、投薬の内容、例えば、薬剤名称、投薬量、投薬時間等が示される。画像549には、効果の程度を示すメッセージが示されてもよい。例えば、投薬後に排泄された便が普通便、或いは軟便であった場合、「投薬量は適切です」とのメッセージが示される。投薬後に排泄された便が硬便であった場合、「投薬量が不足気味です」とのメッセージが示される。投薬後に排泄された便が泥状便、或いは水様便であった場合、「投薬量が過剰です」とのメッセージが示される。 Image 549 shows details of the medication, such as the name of the drug, the dosage, and the time of administration. Image 549 may also show a message indicating the degree of effect. For example, if the stool excreted after administration is normal or soft, a message stating "The dosage is appropriate" is displayed. If the stool excreted after administration is hard, a message stating "The dosage is slightly insufficient" is displayed. If the stool excreted after administration is muddy or watery, a message stating "The dosage is excessive" is displayed.

図7に示すように、例えば、図5、或いは図6等に「月単位で集計」などと表示された画像が示されており、当該画像が選択されると、集約サーバ50の表示部54は、ユーザにおける排泄の履歴をカレンダー形式の表示態様にて表示する。表示部54は、例えば、カレンダーの日ごとに、排泄物を模した画像の数で排泄回数を示し、排泄物を模した画像の色や濃度で性状を示す。 As shown in FIG. 7, for example, an image is shown in FIG. 5 or FIG. 6 that displays "aggregated by month" or the like, and when the image is selected, the display unit 54 of the aggregation server 50 displays the user's excretion history in a calendar format. For example, the display unit 54 indicates the number of excretion events for each day on the calendar by the number of images that resemble excreta, and indicates the characteristics by the color and density of the images that resemble excreta.

図8に示すように、例えば、図5、或いは図6等に「月単位で集計」などと表示された画像が示されており、当該画像が選択されると、集約サーバ50の表示部54は、ユーザにおける所定の期間(ここでは、1か月)排泄物の性状ごとの集計結果を棒グラフ形式の表示態様にて表示する。表示部54は、例えば、横軸に性状、縦軸に回数を配して性状ごとの分布を示す。 As shown in FIG. 8, for example, an image is shown in FIG. 5 or FIG. 6 that displays "aggregated by month" or the like, and when the image is selected, the display unit 54 of the aggregation server 50 displays the aggregation results for each characteristic of the excrement for a specified period (here, one month) of the user in a bar graph display mode. The display unit 54 shows the distribution for each characteristic, for example, by placing the characteristic on the horizontal axis and the number of times on the vertical axis.

判定システム1における処理の流れを、図9を用いて説明する。判定装置10は、撮像装置4を介して便鉢32の内部空間を撮像した画像の画像情報を取得する(ステップS10)。判定装置10は、取得した対象画像を元に、排泄物の性状、又は/及び量を判定する(ステップS11)。判定装置10は、判定結果を操作端末20に出力する。 The process flow in the determination system 1 will be explained with reference to FIG. 9. The determination device 10 acquires image information of an image captured of the internal space of the toilet bowl 32 via the imaging device 4 (step S10). The determination device 10 judges the properties and/or amount of excrement based on the acquired target image (step S11). The determination device 10 outputs the judgment result to the operation terminal 20.

操作端末20は、判定装置10から取得した判定結果を表示する(ステップS12)。表示結果を確認した操作者により、確定(或いは訂正等)の操作入力がなされると、操作端末20は、操作入力された内容に従って、必要に応じて内容を変更した上で、判定結果を確定させる(ステップS13)。操作者により、ユーザ情報の操作入力がなされると、操作端末20は、操作入力されたユーザ情報を取得し(ステップS14)、排泄情報を生成する(ステップS15)。操作端末20は、生成した排泄情報を集約サーバ50に通知する(ステップS16)。 The operation terminal 20 displays the judgment result acquired from the judgment device 10 (step S12). When the operator who has checked the displayed result performs an operation input for confirmation (or correction, etc.), the operation terminal 20 changes the content as necessary according to the operation input content, and confirms the judgment result (step S13). When the operator performs an operation input for user information, the operation terminal 20 acquires the input user information (step S14) and generates excretion information (step S15). The operation terminal 20 notifies the aggregation server 50 of the generated excretion information (step S16).

集約サーバ50は、任意のタイミングで、判定装置10により判定されていない(図9ではトイレ以外、と記載)、つまり介護者などの人により判定された結果を用いて生成された排泄情報を取得する。集約サーバ50は、操作入力による排泄情報を取得する(ステップS17)と、取得した情報を記憶部56に記憶する。集約サーバ50は、任意のタイミングで、操作入力による投薬情報を取得する(ステップS18)と、取得した情報を記憶部56に記憶する。集約サーバ50は、ユーザの状況を表示させる旨の操作入力を取得する。表示制御部55は、取得した操作入力に応じて、ユーザごとの、排泄、及び投薬の履歴を時系列に表示する(ステップS19)。例えば、表示制御部55は、複数のユーザの状況を一覧にして表示させる旨の操作入力を取得した場合、図5に示す一覧を表示し、例えば、アラートの項目がタッチ操作された場合、アラートの項目にエクスクラメーションマークが付されたユーザが上位となるようにソートして表示する。表示制御部55は、詳細の画像547がタッチ操作された場合、図6に示すユーザ個人の詳細な内容を表示する。 The aggregation server 50 acquires excretion information that has not been determined by the determination device 10 (in FIG. 9, it is written as "other than the toilet"), that is, generated using the results of a determination made by a person such as a caregiver, at any timing. When the aggregation server 50 acquires excretion information by operation input (step S17), it stores the acquired information in the storage unit 56. When the aggregation server 50 acquires medication information by operation input at any timing (step S18), it stores the acquired information in the storage unit 56. The aggregation server 50 acquires an operation input to display the user's status. In response to the acquired operation input, the display control unit 55 displays the excretion and medication history for each user in chronological order (step S19). For example, when the display control unit 55 acquires an operation input to display a list of the statuses of multiple users, it displays the list shown in FIG. 5, and when, for example, the alert item is touched, the users with an exclamation mark attached to the alert item are sorted and displayed at the top. When the detail image 547 is touched, the display control unit 55 displays the detailed information of the user as shown in FIG. 6.

以上説明したように、第1の実施形態における判定システム1は、画像情報取得部11(取得部)と、判定部13と、制御部24(生成部)と、表示制御部55(報知制御部)とを備える。画像情報取得部11は、排泄物が撮像された対象画像の画像情報を取得する。判定部13は、対象画像における排泄物に関する性状、又は/及び量を判定する。制御部24は、排泄物における性状、又は/及び量が判定された判定結果と、当該排泄物に対応するユーザに関するユーザ情報とを対応付けた排泄情報を生成する。表示制御部55は、ユーザごとに排泄物における性状、又は及び量を表示させ、ユーザの排泄物における性状、又は及び量が所定のアラート条件を充足する場合、その旨を示すアラート情報を報知させる。これによって、実施形態の判定システム1は、排泄の状況からアラート情報を報知することができ、アラート条件をユーザに応じて設定すれば、その条件に応じたアラートを報知することができる。したがって、種々の事情を考慮して排便記録に基づく健康管理を行うことができる。 As described above, the determination system 1 in the first embodiment includes an image information acquisition unit 11 (acquisition unit), a determination unit 13, a control unit 24 (generation unit), and a display control unit 55 (alert control unit). The image information acquisition unit 11 acquires image information of a target image in which excrement is captured. The determination unit 13 determines the properties and/or amount of excrement in the target image. The control unit 24 generates excretion information that associates the determination result in which the properties and/or amount of excrement are determined with user information on the user corresponding to the excrement. The display control unit 55 displays the properties and/or amount of excrement for each user, and when the properties and/or amount of the user's excrement satisfy a predetermined alert condition, alert information indicating that is displayed is notified. In this way, the determination system 1 in the embodiment can notify alert information based on the excretion situation, and if the alert condition is set according to the user, an alert according to the condition can be notified. Therefore, health management based on defecation records can be performed taking into account various circumstances.

第1の実施形態における判定システム1は、入力部22(確定情報入力部)を更に備える。入力部22には、判定部13により判定された判定結果を確定する確定情報が入力される。制御部24は、判定部13により判定された判定結果に対応する確定情報が入力されたか否かを示す情報を含む排泄情報を生成する。これによって、実施形態の判定システム1は、機械(判定装置10)による判定結果が、人(操作者)により確定されたか否かを表示させることができ、集約サーバ50の画面を閲覧する閲覧者に、詳細な情報を提供することができる。 The determination system 1 in the first embodiment further includes an input unit 22 (confirmation information input unit). Confirmation information that confirms the determination result determined by the determination unit 13 is input to the input unit 22. The control unit 24 generates excretion information including information indicating whether or not confirmation information corresponding to the determination result determined by the determination unit 13 has been input. In this way, the determination system 1 in the embodiment can display whether or not the determination result by the machine (determination device 10) has been confirmed by a person (operator), and can provide detailed information to viewers viewing the screen of the aggregation server 50.

第1の実施形態における判定システム1では、制御部24は、排泄物に関する性状、又は/及び量が判定された判定結果が、判定部13により判定されたものであるか否かを示す情報を含む前記排泄情報を生成する。これによって、実施形態の判定システム1は、判定結果が、機械(判定装置10)によるものか、人(介護者)によるものかを表示させることができ、閲覧者に、詳細な情報を提供することができる。 In the determination system 1 of the first embodiment, the control unit 24 generates the excretion information including information indicating whether or not the determination result in which the properties and/or amount of excrement has been determined has been determined by the determination unit 13. This allows the determination system 1 of the embodiment to display whether the determination result has been made by a machine (determination device 10) or a person (caregiver), and to provide detailed information to the viewer.

第1の実施形態における判定システム1では、制御部24は、排泄物が排泄された排泄時刻を示す情報を含む排泄情報を生成し、表示制御部55は、ユーザごとに排泄の有無を時系列に表示させ、最新の排泄時刻から現時点までの経過時間が所定の閾値より長い場合、その旨を示すアラート情報を表示させる。これによって、実施形態の判定システム1は、排泄がない期間が長く、便秘傾向にあるユーザの存在を、閲覧者に認知させることができる。 In the determination system 1 of the first embodiment, the control unit 24 generates excretion information including information indicating the excretion time when excretion was excreted, and the display control unit 55 displays the presence or absence of excretion for each user in chronological order, and if the elapsed time from the most recent excretion time to the present time is longer than a predetermined threshold, displays alert information indicating this. In this way, the determination system 1 of the embodiment can make the viewer aware of the presence of a user who has not excreted for a long period of time and is prone to constipation.

第1の実施形態における判定システム1では、表示制御部55は、ユーザごとに排泄の有無を時系列に表示させ、所定の性状と判定された排泄物が連続して排泄された回数が、所定の回数閾値より大きい場合、その旨を示すアラート情報を表示させる。これによって、実施形態の判定システム1は、水様便などを繰り返し排泄しているユーザの存在を、閲覧者に認知させることができる。 In the determination system 1 of the first embodiment, the display control unit 55 displays the presence or absence of excretion for each user in chronological order, and when the number of consecutive excretions determined to have a predetermined characteristic is greater than a predetermined number threshold, it displays alert information indicating this. In this way, the determination system 1 of the embodiment can make the viewer aware of the presence of a user who is repeatedly excreting watery stools, etc.

第1の実施形態における判定システム1では、表示制御部55は、排泄情報をカレンダー形式の表示態様にて表示させる。これによって、実施形態の判定システム1は、ユーザにおける月単位の傾向を可視化することができ、閲覧者にユーザの中長期的な状況を認知させることができる。 In the determination system 1 of the first embodiment, the display control unit 55 displays the excretion information in a calendar-format display mode. This allows the determination system 1 of the embodiment to visualize the monthly trends of the user, allowing the viewer to recognize the medium- to long-term situation of the user.

第1の実施形態における判定システム1は、入力部52(投薬情報入力部)を更に備える。入力部52には、排泄に関連する投薬情報が入力される。これによって、実施形態の判定システム1は、排泄情報及び投薬情報に基づいて、ユーザごとに、投薬の量と、投薬後における排泄物の性状との関係を表示させることが可能である。 The determination system 1 in the first embodiment further includes an input unit 52 (medication information input unit). Medication information related to excretion is input to the input unit 52. This allows the determination system 1 in the embodiment to display the relationship between the amount of medication and the properties of excreta after medication for each user based on the excretion information and medication information.

第1の実施形態における集約サーバ50は、通信部51(排泄情報取得部)と、表示制御部55(報知制御部)とを備える。通信部51は、排泄物が撮像された対象画像における排泄物に関する性状、又は/及び量が判定された判定結果と、当該排泄物に対応するユーザに関するユーザ情報とが対応付けられた排泄情報を取得する。表示制御部55は、排泄情報に基づいて、前記ユーザごとに排泄物における性状、又は及び量を表示させ、ユーザの排泄物における性状、又は及び量が所定のアラート条件を充足する場合、その旨を示すアラート情報を報知させる。これによって、実施形態の集約サーバ50は、上述した効果と同様の効果を奏する。 The aggregation server 50 in the first embodiment includes a communication unit 51 (excretion information acquisition unit) and a display control unit 55 (alert control unit). The communication unit 51 acquires excretion information that associates a determination result of the properties and/or amount of excretion in a target image in which the excretion is captured with user information on the user corresponding to the excretion. The display control unit 55 displays the properties and/or amount of excretion for each user based on the excretion information, and when the properties and/or amount of the user's excretion satisfy a predetermined alert condition, issues alert information indicating that fact. In this way, the aggregation server 50 in the embodiment achieves the same effect as described above.

上述した実施形態における判定システム1が行う処理の全部または一部をコンピュータで実現するようにしてもよい。その場合、この機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現してもよい。ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含む。「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD-ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合における通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントであるコンピュータシステム内部にある揮発性メモリのように、一定時間プログラムを保持しているものも含んでもよい。上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよく、FPGA等のプログラマブルロジックデバイスを用いて実現されるものであってもよい。 All or part of the processing performed by the determination system 1 in the above-mentioned embodiment may be realized by a computer. In that case, a program for realizing this function may be recorded in a computer-readable recording medium, and the program recorded in the recording medium may be read into a computer system and executed to realize the function. The term "computer system" here includes hardware such as an OS and peripheral devices. The term "computer-readable recording medium" refers to portable media such as flexible disks, optical magnetic disks, ROMs, and CD-ROMs, and storage devices such as hard disks built into a computer system. Furthermore, the term "computer-readable recording medium" may also include a medium that dynamically holds a program for a short period of time, such as a communication line when a program is transmitted via a network such as the Internet or a communication line such as a telephone line, and a medium that holds a program for a certain period of time, such as a volatile memory inside a computer system that is a server or client in such a case. The above-mentioned program may be a program for realizing part of the above-mentioned function, or may be a program that can realize the above-mentioned function in combination with a program already recorded in the computer system, or may be a program that is realized using a programmable logic device such as an FPGA.

以上、実施形態について図面を参照して詳述してきた。具体的な構成はこの実施形態に限られない。例えば、表示制御部55による表示に代えて、音声によって各種ユーザに報知しても良い。或いは、表示制御部55による表示に加えて、音声によって各種ユーザに報知しても良い。この場合、集約サーバ50は、図示しない音声出力部を備える。 The above describes the embodiment in detail with reference to the drawings. The specific configuration is not limited to this embodiment. For example, instead of display by the display control unit 55, various users may be notified by audio. Alternatively, in addition to display by the display control unit 55, various users may be notified by audio. In this case, the aggregation server 50 has an audio output unit (not shown).

1…判定システム、10…判定装置、11…画像情報取得部(取得部)、12…解析部、13…判定部(判定部)、14…出力部、15…画像情報記憶部、16…学習済みモデル記憶部、17…判定結果記憶部、18…通信部、20…操作端末、21…通信部、22…入力部(確定情報入力部)、23…表示部、24…制御部(生成部)、25…記憶部、3…便器装置、30…便器、32…便鉢、34…内部空間、36…開口部、4…撮像装置、50…集約サーバ、51…通信部、52…入力部(投薬情報入力部)、53…判定部、54…表示部、55…表示制御部、56…記憶部 1...judgment system, 10...judgment device, 11...image information acquisition unit (acquisition unit), 12...analysis unit, 13...judgment unit (judgment unit), 14...output unit, 15...image information storage unit, 16...trained model storage unit, 17...judgment result storage unit, 18...communication unit, 20...operation terminal, 21...communication unit, 22...input unit (determined information input unit), 23...display unit, 24...control unit (generation unit), 25...storage unit, 3...toilet device, 30...toilet, 32...toilet bowl, 34...internal space, 36...opening, 4...imaging device, 50...aggregation server, 51...communication unit, 52...input unit (medication information input unit), 53...judgment unit, 54...display unit, 55...display control unit, 56...storage unit

Claims (10)

排泄物が撮像された対象画像の画像情報を取得する取得部と、
前記対象画像における排泄物に関する性状、又は/及び量を判定する判定部と、
排泄に関連する投薬情報が入力される投薬情報入力部と、
排泄物における性状、又は及び量が判定された判定結果と、当該排泄物が排泄された排泄時刻を示す情報と、当該排泄物に対応するユーザに関するユーザ情報とを対応付けた排泄情報を生成する生成部と、
前記ユーザごとに排泄物における性状、又は及び量を表示させ、ユーザの排泄物における性状、又は及び量がユーザに応じて設定されたアラート条件を充足する場合、その旨を示すアラート情報及び投薬量が適量か過剰か否かの情報を報知させ、排泄の有無及び前記投薬情報を時系列に表示させる報知制御部と、
を備える判定システム。
an acquisition unit that acquires image information of a target image in which excrement is captured;
a determination unit for determining a property and/or an amount of excrement in the target image;
a medication information input unit to which medication information related to excretion is input;
a generating unit that generates excretion information that associates a determination result of the property and/or amount of the excretion, information indicating an excretion time when the excretion was excreted, and user information regarding a user corresponding to the excretion;
a notification control unit that displays the properties and/or amount of excrement for each user, and when the properties and/or amount of the excrement of a user satisfy an alert condition set for the user, notifies the user of alert information indicating that the properties and/or amount of the excrement of the user satisfy an alert condition set for the user, and notifies the user of information on whether the dosage is appropriate or excessive, and displays the presence or absence of excretion and the dosage information in chronological order;
A determination system comprising:
排泄物における性状、又は及び量が判定された判定結果には、排泄物に関する性状、又は/及び量が人により判定された判定結果が含まれ、
前記報知制御部は、排泄物に関する性状、又は/及び量が判定された判定結果が、前記判定部により判定されたものであるか、人により判定されたものであるかを示す情報を報知する、
請求項1に記載の判定システム。
The judgment result in which the property and/or amount of excrement is judged includes a judgment result in which the property and/or amount of excrement is judged by a human,
The notification control unit notifies information indicating whether a determination result in which the property and/or amount of excrement is determined is determined by the determination unit or by a person.
The determination system according to claim 1 .
前記判定部により判定された判定結果が人により確定されたことを示す確定情報が入力される確定情報入力部を更に備え、
前記生成部は、前記判定部により判定された判定結果に対応する前記確定情報が入力されたか否かを示す情報を含む前記排泄情報を生成する、
請求項1又は請求項2に記載の判定システム。
The apparatus further includes a confirmation information input unit to which confirmation information indicating that the determination result determined by the determination unit has been confirmed by a human is input,
the generating unit generates the excretion information including information indicating whether or not the final information corresponding to the determination result determined by the determining unit has been input.
The determination system according to claim 1 or 2.
前記生成部は、排泄物に関する性状、又は/及び量が判定された判定結果が、前記判定部により判定されたものであるか否かを示す情報を含む前記排泄情報を生成する、
請求項1から請求項3のいずれか一項に記載の判定システム。
The generating unit generates the excretion information including information indicating whether or not a determination result in which a property and/or an amount of excretion is determined by the determining unit.
The determination system according to any one of claims 1 to 3.
前記生成部は、排泄物が排泄された排泄時刻を示す情報を含む前記排泄情報を生成し、 前記報知制御部は、前記ユーザごとに排泄の有無を時系列に表示させ、最新の排泄時刻から現時点までの経過時間が所定の閾値より長い場合、その旨を示すアラート情報を表示させる、
請求項1から請求項4のいずれか一項に記載の判定システム。
the generating unit generates the excretion information including information indicating an excretion time when excretion was performed, and the notification control unit displays the presence or absence of excretion for each user in chronological order, and when the elapsed time from the latest excretion time to the current time is longer than a predetermined threshold, displays alert information indicating that fact.
The determination system according to any one of claims 1 to 4.
前記報知制御部は、前記ユーザごとに排泄の有無を時系列に表示させ、所定の性状と判定された排泄物が連続して排泄された回数が、所定の回数閾値より大きい場合、その旨を示すアラート情報を表示させる、
請求項5に記載の判定システム。
the notification control unit displays the presence or absence of excretion for each user in chronological order, and when the number of consecutive times that excreta determined to have a predetermined property has been excreted is greater than a predetermined number threshold, displays alert information indicating that fact.
The determination system according to claim 5 .
前記報知制御部は、前記排泄情報をカレンダー形式の表示態様にて表示させる、
請求項1から請求項6のいずれか一項に記載の判定システム。
The notification control unit displays the excretion information in a calendar format.
The determination system according to any one of claims 1 to 6.
前記報知制御部は、前記排泄情報及び前記投薬情報に基づいて、前記ユーザごとに、投薬の種類及び量と、投薬後における排泄物の性状との関係を報知する、
請求項1から請求項7のいずれか一項に記載の判定システム。
The notification control unit notifies, for each user, a relationship between a type and amount of medication and properties of excrement after medication, based on the excretion information and the medication information.
The determination system according to any one of claims 1 to 7.
前記報知制御部は、排便間隔が、所定の閾値より長い場合、前記排便間隔の表示態様を変更する、
請求項1から請求項8のいずれか一項に記載の判定システム。
The notification control unit changes a display mode of the defecation interval when the defecation interval is longer than a predetermined threshold value.
The determination system according to any one of claims 1 to 8.
排泄に関連する投薬情報が入力される投薬情報入力部と、
排泄物が撮像された対象画像における排泄物に関する性状、又は/及び量が判定された判定結果と、当該排泄物が排泄された排泄時刻を示す情報と、当該排泄物に対応するユーザに関するユーザ情報とが対応付けられた排泄情報を取得する排泄情報取得部と、
前記排泄情報に基づいて、前記ユーザごとに排泄物における性状、又は及び量を表示させ、ユーザの排泄物における性状、又は及び量がユーザに応じて設定されたアラート条件を充足する場合、その旨を示すアラート情報及び投薬量が適量か過剰か否かの情報を報知させ、排泄の有無及び前記投薬情報を時系列に表示させる報知制御部と、
を備える集約サーバ。
a medication information input unit to which medication information related to excretion is input;
an excretion information acquisition unit that acquires excretion information in which a determination result of a property and/or amount of excretion in a target image in which the excretion is captured, information indicating an excretion time when the excretion was excreted, and user information regarding a user corresponding to the excretion are associated with each other;
a notification control unit that displays the properties and/or amount of excrement for each user based on the excretion information, and when the properties and/or amount of the user's excrement satisfy an alert condition set for the user, notifies alert information indicating that and information on whether the dosage is appropriate or excessive, and displays the presence or absence of excretion and the dosage information in chronological order;
An aggregation server comprising:
JP2019172956A 2019-09-24 2019-09-24 Judgment system and aggregation server Active JP7614718B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019172956A JP7614718B2 (en) 2019-09-24 2019-09-24 Judgment system and aggregation server

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019172956A JP7614718B2 (en) 2019-09-24 2019-09-24 Judgment system and aggregation server

Publications (2)

Publication Number Publication Date
JP2021051449A JP2021051449A (en) 2021-04-01
JP7614718B2 true JP7614718B2 (en) 2025-01-16

Family

ID=75157903

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019172956A Active JP7614718B2 (en) 2019-09-24 2019-09-24 Judgment system and aggregation server

Country Status (1)

Country Link
JP (1) JP7614718B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115210819A (en) * 2020-03-16 2022-10-18 松下电器(美国)知识产权公司 Information processing method, information processing apparatus, and information processing program
JP2022147796A (en) * 2021-03-23 2022-10-06 Toto株式会社 Excretion information management system
JP2023044352A (en) * 2021-09-17 2023-03-30 パナソニックIpマネジメント株式会社 Excrement data management system, and excrement data management method
JP7745131B2 (en) * 2021-11-02 2025-09-29 パナソニックIpマネジメント株式会社 Excretion image display system and toilet
US11967415B2 (en) 2022-02-28 2024-04-23 Toto Ltd. Excrement judgement system, excrement judgement method, and excrement judgement device
JP7464181B2 (en) * 2022-07-29 2024-04-09 Toto株式会社 Health management system and health management method
JP2024035436A (en) * 2022-09-02 2024-03-14 株式会社Lixil Excretion information provision system, excretion information provision method, and excretion information provision program
JP7710504B2 (en) * 2022-12-28 2025-07-18 Eaファーマ株式会社 Support program, support device, storage medium, and support method
JP7761069B2 (en) * 2024-01-15 2025-10-28 Toto株式会社 Health Status Display System

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007252805A (en) 2006-03-24 2007-10-04 Konica Minolta Holdings Inc Data detecting apparatus and data detecting method
JP2015011433A (en) 2013-06-27 2015-01-19 岩崎通信機株式会社 Health information sharing system

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH105181A (en) * 1996-06-25 1998-01-13 Matsushita Electric Ind Co Ltd Health management support device

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007252805A (en) 2006-03-24 2007-10-04 Konica Minolta Holdings Inc Data detecting apparatus and data detecting method
JP2015011433A (en) 2013-06-27 2015-01-19 岩崎通信機株式会社 Health information sharing system

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
大平 栄二 外2名,老人介護施設におけるデータ管理ツールに関する検討,情報処理学会研究報告,日本,情報処理学会,2019年08月20日,p.1-5

Also Published As

Publication number Publication date
JP2021051449A (en) 2021-04-01

Similar Documents

Publication Publication Date Title
JP7614718B2 (en) Judgment system and aggregation server
US12232872B1 (en) Retrofittable and portable commode and systems for detecting, tracking, and alerting health changes
Hemsley et al. Dying for a meal: an integrative review of characteristics of choking incidents and recommendations to prevent fatal and nonfatal choking across populations
US20250299815A1 (en) Information processing device and information processing method
US20180132780A1 (en) Systems and methods of monitoring and encouraging exercise in infants
JP7671942B2 (en) Flight status display system
Ray et al. Tablet-based well-being check for the elderly: development and evaluation of usability and acceptability
JP2025065331A (en) Excretion determination system, excretion determination method, and excretion determination device
CN117133458A (en) A nursing supervision system and method for the swallowing behavior of disabled and demented elderly people
JP2020149131A (en) Medical information linkage device, computer program and medical information linkage method
JPWO2022254740A5 (en)
D'Alberton et al. Methodological issues for psychological evaluation across the lifespan of individuals with a difference/disorder of sex development
KR20230016761A (en) Customized Health Care System
JP2024035436A (en) Excretion information provision system, excretion information provision method, and excretion information provision program
CN113450911A (en) Constipation analysis method and device and computer equipment
Kelly Constipation in community-dwelling adults with intellectual disability
Papadopoulos-Nydam et al. Usability testing of a mHealth system for swallowing therapy in patients following stroke
WO2025220491A1 (en) Health level calculation system
JP7803052B2 (en) Data conversion method, care information conversion device, and program for causing a computer to execute the data conversion method
Feyereisen The behavioural cues of familiarity during social interactions among human adults: A review of the literature and some observations in normal and demented elderly subjects
TW202429479A (en) System for calculating degree of difficulty in excretion capable of calculating a degree of difficulty in excretion of a user based on a toilet use history and stool properties at the time of excretion
JP2024097355A (en) Excretion difficulty calculation system
Tang et al. Hoarding Disorder in Older Adults during the COVID-19 Pandemic: A Case Report
TW202531116A (en) Toilet user health status estimation system, toilet user status estimation system, and toilet system
JP2024119640A (en) Health score calculation system

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20210120

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220722

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230731

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230801

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20230915

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231130

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240220

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20240408

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240617

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20240903

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20240930

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20241203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241227

R150 Certificate of patent or registration of utility model

Ref document number: 7614718

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150