JP6868049B2 - 情報処理装置、見守りシステム、見守り方法、及び見守りプログラム - Google Patents

Description

本発明は、情報処理装置、見守りシステム、見守り方法、及び見守りプログラムに関するものである。

従来、照明装置、電気ポット、炊飯器等の電気機器の使用頻度に基づいて一人暮らしの高齢者（見守対象者）の安否を確認し、離れた場所にいる家族等の見守者に対して報告する安否確認システムが知られている（例えば、特許文献１等）。
また、安否確認の他の手法として、監視カメラを室内に取り付け、監視カメラで撮影された動画を離れた場所にいる見守者に対して送信するシステムも提案されている。

特開２０１６−２１８９６９号公報

監視カメラを用いた安否確認では、高齢者等の見守対象者を撮影した動画をそのまま見守者に送信するため、見守対象者に監視されているという抵抗感が生まれる可能性がある。
また、電気ポット、炊飯器等における機器操作の検知に基づく安否確認では、使用者を特定することができないため、見守対象者本人の健康状態を把握することが難しかった。

本発明は、このような事情に鑑みてなされたものであって、見守対象者のプライバシーを守りながら、見守対象者の状態を見守者に通知することのできる情報処理装置、見守りシステム、見守り方法、及び見守りプログラムを提供することを目的とする。

本発明の第１態様は、音声情報を取得する音声取得部、音声出力部、及び画像情報を取得する撮像部を備える対話型ロボットとの間で情報の送受信を行うための第１通信部と、前記第１通信部を介して受信した前記対話型ロボットによって取得された音声情報及び画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する行動要約情報生成部と、前記人物の過去の行動要約情報に基づいて、前記行動要約情報生成部によって生成された前記行動要約情報から話題情報を抽出する抽出部と、抽出された前記話題情報に基づいて通知情報を生成する情報生成部と、前記通知情報を予め登録されている送信先に送信する第２通信部とを具備し、前記第１通信部は、前記第２通信部から前記通知情報を送信する場合に、前記通知情報の送信可否を前記対話型ロボットを介して問い合わせるための問い合わせ情報を前記対話型ロボットに送信し、前記第２通信部は、前記第１通信部が前記対話型ロボットから前記通知情報の送信許可情報を受信した場合に、前記通知情報を送信する情報処理装置である。

本発明の第２態様は、上記情報処理装置と、前記情報処理装置との間で情報の授受が可能な見守側情報処理装置とを備え、前記見守側情報処理装置は、前記情報処理装置の前記第２通信部から送信された通知情報を受信するための第３通信部と、前記第３通信部によって受信された通知情報を見守側対話型ロボットに送信するための第４通信部とを備える見守りシステムである。

本発明の第３態様は、音声情報を取得する音声取得部と、音声を出力する音声出力部と、画像情報を取得する撮像部と、前記音声情報及び前記画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する行動要約情報生成部と、前記人物の過去の行動要約情報に基づいて、前記行動要約情報生成部によって生成された前記行動要約情報から話題情報を抽出する抽出部と、抽出された前記話題情報に基づいて通知情報を生成する情報生成部と、前記通知情報を予め登録されている送信先に送信する第２通信部とを具備し、前記情報生成部は、前記第２通信部から前記通知情報を送信する場合に、前記通知情報の送信可否を問い合わせるための情報を生成し、前記第２通信部は、前記人物から前記通知情報の送信許可があった場合に、前記通知情報を送信する対話型ロボットである。

本発明の第４態様は、音声情報を取得する音声取得部、音声出力部、及び画像情報を取得する撮像部を備える対話型ロボットによって取得された音声情報及び画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する工程と、前記人物の過去の行動要約情報に基づいて、最新の前記行動要約情報から話題情報を抽出する工程と、抽出された前記話題情報に基づいて通知情報を生成する工程と、前記通知情報を送信する場合に、前記通知情報の送信可否を前記対話型ロボットを介して問い合わせるための問い合わせ情報を前記対話型ロボットに送信する工程と、前記対話型ロボットから前記通知情報の送信許可情報を受信した場合に、前記通知情報を予め登録されている送信先に送信する工程とをコンピュータが実行する見守り方法である。

本発明の第５態様は、音声情報を取得する音声取得部、音声出力部、及び画像情報を取得する撮像部を備える対話型ロボットによって取得された音声情報及び画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する処理と、前記人物の過去の行動要約情報に基づいて、最新の前記行動要約情報から話題情報を抽出する処理と、抽出された前記話題情報に基づいて通知情報を生成する処理と、前記通知情報を送信する場合に、前記通知情報の送信可否を前記対話型ロボットを介して問い合わせるための問い合わせ情報を前記対話型ロボットに送信する処理と、前記対話型ロボットから前記通知情報の送信許可情報を受信した場合に、前記通知情報を予め登録されている送信先に送信する処理とをコンピュータに実行させるための見守りプログラムである。

本開示によれば、見守対象者のプライバシーを守りながら、見守対象者の状態を見守者に通知することができるという効果を奏する。

本発明の一実施形態に係る見守りシステムの全体構成を示した図である。 本発明の一実施形態に係る対話型ロボットの外観図である。 本発明の一実施形態に係る情報処理装置のハードウェア構成の概略図である。 本発明の一実施形態に係る見守対象者側の情報処理装置の概略機能構成を示した機能ブロック図である。 本発明の一実施形態に係る見守者側の情報処理装置の概略機能構成を示した機能ブロック図である。 本発明の一実施形態に係る対話型ロボットと見守対象者との対話例を示した図である。 本発明の一実施形態に係る対話型ロボット間の対話例を主に示した図である。

以下に、本発明の一実施形態に係る情報処理装置、見守りシステム、見守り方法、及び見守りプログラムについて、図面を参照して説明する。

図１は、本発明の一実施形態に係る見守りシステムの全体構成を示した図である。図１に示すように、見守りシステムは、見守対象者側の情報処理装置２０と、見守者側の情報処理装置４０とを主な構成として備えている。また、見守りシステムは、見守対象者側の対話型ロボット１０と、見守者側の対話型ロボット３０とを更に備えていてもよい。

対話型ロボット１０は、例えば、高齢者等の見守対象者Ａと対話を行うロボットであり、対話において取得した情報等を情報処理装置２０に送信するとともに、自身が備える発話システムが生成した発話情報や情報処理装置２０から取得した発話情報を発話することで、見守対象者Ａとの対話を成立させる。

情報処理装置２０は、対話型ロボット１０から取得した情報を解析して、対話型ロボット１０から発話させる発話情報を生成したり、見守者Ｂに通知する通知情報を生成し、見守者側の情報処理装置４０に送信する。
更に、情報処理装置２０は、後述する見守者側の情報処理装置４０から受信した情報または該情報に基づいて生成された発話情報を対話型ロボット１０に出力することにより、対話型ロボット１０を通じて見守者Ｂからの情報を見守対象者Ａへ通知する。

対話型ロボット３０は、見守対象者Ａの家族等の見守者Ｂと対話を行うロボットであり、対話において取得した情報等を情報処理装置４０に送信するとともに、自身が備える発話システムが生成した発話情報や情報処理装置４０から取得した発話情報を発話することで、見守者Ｂとの対話を成立させる。

情報処理装置４０は、対話型ロボット３０から取得した情報を解析して、対話型ロボット３０から発話させる発話情報を生成したり、見守対象者Ａに通知する情報を生成して、情報処理装置２０に送信する。
更に、情報処理装置４０は、後述する見守対象者側の情報処理装置２０から受信した情報または該情報に基づいて生成された発話情報を対話型ロボット３０に出力することにより、対話型ロボット３０を通じて見守対象者Ａからの情報を見守者Ｂへ通知する。

このように、見守りシステムは、見守対象者Ａと見守者Ｂとが直接的に会話を行うのではなく、その間に対話型ロボット１０や対話型ロボット３０を介在させることにより、見守対象者Ａ及び見守者Ｂとの間の対話をより気軽なものにし、両者間の意思疎通をよりスムーズに行わせることを期待するものである。

図２は、本発明の一実施形態に係る対話型ロボット１０の外観図である。なお、対話型ロボット３０も対話型ロボット１０と同様の構成を備えている。
本実施形態に係る対話型ロボット１０は、携帯可能なロボットとされ、例えば、頭部２、胴体３、右上腕部４ａ、左上腕部４ｂ、右手部５ａ、左手部５ｂ、右脚部６ａ、左脚部６ｂ、右足部７ａ、及び左足部７ｂを備えている。これらの各構成要素の接続部には図示しないモータが設けられており、モータを駆動させることで頭部２、胴体３、右上腕部４ａ、左上腕部４ｂ、右手部５ａ、左手部５ｂ、右脚部６ａ、左脚部６ｂ、右足部７ａ、及び左足部７ｂを動かすことができる。頭部２には、例えば、カメラ（撮像部）１１、マイクロフォン（音声取得部）１２、及びスピーカ（音声出力部）１３が設けられている。また、胴体３にはタッチパネル１４が設けられている。また、胴体３には、対話型ロボットの各部の制御を司る制御装置（図示略）及び情報処理装置２０等との通信を実現させるための通信部（図示略）等が内蔵されている。

制御装置は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、及びコンピュータ読み取り可能な記憶媒体等から構成されている。そして、各種機能を実現するための一連の処理は、一例として、プログラムの形式で記憶媒体等に記憶されており、このプログラムをＣＰＵがＲＡＭ等に読み出して、情報の加工・演算処理を実行することにより、後述する各種機能が実現される。なお、プログラムは、ＲＯＭやその他の記憶媒体に予めインストールしておく形態や、コンピュータ読み取り可能な記憶媒体に記憶された状態で提供される形態、有線又は無線による通信手段を介して配信される形態等が適用されてもよい。コンピュータ読み取り可能な記憶媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等である。

制御装置は、例えば、対話システムを搭載している。対話システムは、例えば、ニューラルネットワークやディープラーニング等の機械学習技術を用いた人工知能（ＡＩ）を有している。対話システムは、例えば、見守対象者Ａの発話内容を解析し、解析結果に応じた発話データ（リスポンスデータ）を生成する。そして、この発話データをスピーカ１３から音声として出力させることで、見守対象者Ａとの対話を実現させる。

なお、図２に示した対話型ロボット１０の形状や構成は一例であり、この例に限定されない。例えば、タッチパネル１４は対話型ロボット１０の背面に設けられていてもよい。また、対話型ロボット１０として、公知の対話型ロボットを採用することも可能であり、一例として、シャープ株式会社から提供されている「ロボホン」（登録商標）が挙げられる。

図３は、本発明の一実施形態に係る情報処理装置２０のハードウェア構成の概略図である。なお、情報処理装置４０も同様の構成を備えている。
情報処理装置２０は、例えば、スマートフォン等の携帯電話機、ノートＰＣ、タブレット端末、デスクトップ型ＰＣ端末等である。図３に示すように、情報処理装置２０は、例えば、ＣＰＵ２１、ＣＰＵ２１が実行するプログラム及びこのプログラムにより参照されるデータ等を記憶するための補助記憶装置２２、各プログラム実行時のワーク領域として機能する主記憶装置２３を備えている。補助記憶装置２２として、例えば、ＨＤＤ（Hard Disk Drive）などの磁気ディスク、光磁気ディスク、ＳＳＤ（Solid State Drive）等の半導体メモリ等が一例として挙げられる。
更に、情報処理装置２０は、対話型ロボット１０と通信を行うための第１通信部２４、及びインターネット等のネットワーク５０（図１参照）に接続するための第２通信部２５主な構成として備えている。これら各部は、例えば、バスを介して接続されている。
また、情報処理装置２０は、キーボードやマウス等の入力部や液晶表示装置等の表示部を備えていてもよい。

後述する各種機能を実現するための一連の処理は、一例として、プログラム（例えば、見守りプログラム）の形式で補助記憶装置２２に記憶されており、このプログラムをＣＰＵ２１が主記憶装置２３に読み出して、情報の加工・演算処理を実行することにより、後述する各種機能が実現される。なお、プログラムは、補助記憶装置２２に予めインストールされている形態や、他のコンピュータ読み取り可能な記憶媒体に記憶された状態で提供される形態、有線又は無線による通信手段を介して配信される形態等が適用されてもよい。コンピュータ読み取り可能な記憶媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等である。

図４は、本実施形態に係る情報処理装置２０の機能構成の一例を示した機能ブロック図である。図４に示すように、情報処理装置２０は、例えば、第１通信部２４、第２通信部２５、行動要約情報生成部２６、データベース２７、抽出部２８、及び情報生成部２９等を備えている。

第１通信部２４は、無線または有線を介して対話型ロボット１０と接続し、対話型ロボット１０との間での情報の授受を実現させる。例えば、第１通信部２４は、対話型ロボット１０のマイクロフォン１２を介して取得された音声情報及びカメラ１１によって取得された画像情報の少なくともいずれか一つを含む行動情報を対話型ロボット１０から受信する。本実施形態において、行動情報は、音声情報及び画像情報の両方を含むものとするが、この例に限定されず、これらのいずれか一方を含んでいれば足りる。

第２通信部２５は、インターネット等のネットワーク５０を介して予め登録されている見守者側の情報処理装置４０と接続し、情報処理装置４０との間での情報の授受を実現させる。また、第２通信部２５を介してネットワーク上における種々の情報を取得することも可能である。

行動要約情報生成部２６は、第１通信部２４によって受信された行動情報を用いて、見守対象者Ａの行動要約情報を生成する。
行動要約情報生成部２６は、例えば、対話型ロボット１０が見守対象者Ａとの対話によって得た音声情報から会話内容を解析し、会話内容から見守対象者Ａの行動要約情報を生成する。より具体的には、行動要約情報生成部２６は、会話内容から見守対象者Ａが所定の行動に要した時間を取得し、所定の行動に要した時間を含む行動要約情報を生成する。また、行動要約情報生成部２６は、会話内容から見守対象者Ａが所定の行動を行った時刻を取得し、所定の行動を行った時刻を含む行動要約情報を生成する。

所定の行動に要した時間の一例として、例えば、外出時間、食事に要した時間等が挙げられる。
所定の行動を行った時刻の一例として、起床時刻、就寝時刻等が挙げられる。

また、行動要約情報生成部２６は、対話型ロボット１０が見守対象者Ａとの対話によって得た音声情報から得られる声の大きさ、トーン、及び速度の少なくともいずれか一つ、及び／又は、対話型ロボット１０が取得した見守対象者Ａの画像情報から得られる眉の動き、口角、及び顔色の少なくともいずれか一つを用いて人物の元気度レベルを判定し、元気度レベルを含む行動要約情報を生成する。
この元気度レベルの判定は、例えば、ニューラルネットワークやディープラーニング等の公知の機械学習技術を用いて実現することが可能であり、公知の技術を適宜採用すればよい。

行動要約情報生成部２６によって生成された行動要約情報はデータベース２７に蓄積されるとともに、抽出部２８に出力される。データベース２７への格納時において、行動要約情報には作成日情報が付加されてもよい。

抽出部２８は、例えば、データベース２７に格納されている見守対象者Ａの過去の行動要約情報に基づいて、行動要約情報生成部２６によって生成された行動要約情報から話題情報を抽出する。
抽出部２８は、例えば、見守対象者Ａの過去の行動要約情報に基づく所定の行動に要した時間と、行動要約情報生成部２６によって生成された最新の行動要約情報に含まれる所定の行動に要した時間とを比較し、所定の閾値以上（例えば、１時間以上）の時間差が生じていた場合に、所定の行動を話題情報として抽出する。
例えば、過去の行動要約情報における外出時間を統計的に処理した結果、通常時における外出時間が１時間程度であるのにかかわらず、最新の行動要約情報では外出時間が３時間とされていた場合には、通常に比べて２時間以上の時間差があるため、所定の閾値以上（例えば、１時間以上）の時間差があると判定して、外出時間を話題情報として抽出する。

また、例えば、抽出部２８は、見守対象者Ａの過去の行動要約情報に基づく所定の行動を行った時刻と、行動要約情報生成部２６によって生成された最新の行動要約情報に含まれる所定の行動を行った時刻とを比較し、所定の閾値以上（例えば、１時間以上）の時間差が生じていた場合に、所定の行動を話題情報として抽出する。

例えば、過去の行動要約情報における起床時間を統計的に処理した結果、通常時における起床時間が午前６時であるのに対し、最新の行動要約情報では起床時間が午前８時３０分とされていた場合には、通常に比べて２時間３０分以上の時間差があるため、所定の閾値以上（例えば、１時間以上）の時間差があると判定して、起床時間を話題情報として抽出する。

また、抽出部２８は、行動要約情報生成部２６によって生成された最新の行動要約情報に含まれる元気度レベルが予め設定されている所定の元気度レベルよりも低かった場合に、元気度レベルを話題情報として抽出する。

情報生成部２９は、抽出部２８によって抽出された話題情報に基づいて見守者Ｂに通知する通知情報を生成する。具体的には、抽出された話題情報に基づいて自然な会話となるようなシナリオを生成し、通知情報として第２通信部２５に出力する。このような通知情報の作成については、例えば、予め登録されている複数のフォーマットのいずれかに対して話題情報を当てはめることにより作成されてもよいし、あるいは、ニューラルネットワークやディープラーニングなどの公知の機械学習技術を採用することにより、より自然な対話を成立させるためのシナリオを作成してもよい。例えば、見守対象者Ａの散歩時間が通常よりも２時間長かった場合には、「おばあちゃん、今日はいつもよりも散歩時間が２時間長かったよ」といった通知情報が作成される。

また、上記通知情報を生成する際に、話題情報に関する追加情報を見守対象者Ａとの対話によって更に得ることとしてもよい。
例えば、話題情報として、「散歩時間が２時間長かった」といった話題情報が抽出されていた場合、「おばあちゃん、いつもよりお散歩の時間が２時間も長かったね。どうしたの？」等の見守対象者Ａへの発話情報を生成し、散歩時間がいつもよりも長かったことに関する理由等を対話型ロボット１０を介して問い合わせることとしてもよい。見守対象者Ａと対話型ロボット１０との間で話題情報に関する対話が進められることにより、抽出部２８によって抽出された話題情報に関する追加の情報を得ることができ、より詳細な情報を見守者Ｂに通知することが可能となる。

例えば、追加情報として、見守対象者Ａが転んでしまったという情報を得た場合には、情報生成部２９は、「いつもよりも散歩時間が長かったこと」、「転んでしまったこと」を通知する通知情報を生成する。
なお、話題情報に関する追加情報の問い合わせシナリオや、通知情報の生成については、例えば、ニューラルネットワークやディープラーニングなどの公知の機械学習技術を採用すればよい。

情報生成部２９は、通知情報を生成すると、この通知情報を見守者側の情報処理装置４０に送信するために、第２通信部２５に出力する。
なお、第２通信部２５から通知情報を送信する場合には、見守対象者Ａに対して通知情報を見守者Ｂに通知してもよいか否かを問合わせることとし、見守対象者Ａから送信の許可を得た場合に、第２通信部２５から通知情報を送信することとしてもよい。この場合、情報生成部２９は、送信可否を問い合わせるための発話情報を生成し、生成した発話情報を第１通信部２４を介して対話型ロボット１０に送信する。これにより、例えば、「いつもよりも２時間長いお散歩だったことと、転んで足が痛いことをＢさんに伝えてもいいかな？」といった問い合わせが対話型ロボット１０から発話される。
この問いかけに対して、見守対象者Ａから通知情報の通知を許可する応答（例えば、「いいわよ」、「お願い」、「それでいいわ」等）が入力された場合に、第２通信部２５が通知情報を情報処理装置４０に送信することとしてもよい。

次に、見守者側の情報処理装置４０について説明する。
図５は、情報処理装置４０の機能構成の概略を示した概略機能ブロック図である。図５に示すように、情報処理装置４０は、例えば、第３通信部４１、第４通信部４２、及び情報生成部４３を備えている。
第３通信部４１は、インターネット等のネットワーク５０を介して見守対象者Ａの情報処理装置２０と接続し、情報処理装置２０との間での情報の授受を実現させる。また、第３通信部４１を介してネットワーク上における種々の情報を取得してもよい。

第４通信部４２は、無線または有線を介して対話型ロボット３０と接続し、対話型ロボット３０との間での情報の授受を実現させる。

情報生成部４３は、第３通信部４１から受信した情報処理装置２０からの通知情報に基づいて発話情報を生成し、第４通信部４２に出力する。また、情報生成部４３は、第４通信部４２から受信した会話情報に基づいて情報処理装置２０に通知する通知情報を生成し、通知情報を第３通信部４１に出力する。

次に、上述した見守りシステムの動作について図を参照して説明する。ここでは、一例として、見守対象者Ａが散歩に出かける場合を例示して説明する。また、図６は見守対象者Ａと対話型ロボット１０との間で行われる対話の一例を示した図である。

例えば、見守対象者Ａが散歩に出かける際に、「お散歩してくるね。」と対話型ロボット１０に向けて話しかけると、これに対して対話型ロボット１０は「わかった。気を付けてね。」などの応答を行う。また、「お散歩してくるね。」との会話内容は、対話型ロボット１０から情報処理装置２０に送信され、見守対象者Ａの散歩の行動が記録される。

見守対象者Ａが散歩から帰り、例えば、「ただいま」といった声掛けを対話型ロボット１０に行うと、その会話情報が行動情報として対話型ロボット１０から情報処理装置２０へ送信される。更に、このときの見守対象者Ａの顔画像が対話型ロボット１０のカメラ１１によって取得されとともに、マイクロフォン１２によって取得された「ただいま」等の音声情報が行動情報として情報処理装置２０に送信される。これら行動情報は、情報処理装置２０の第１通信部２４によって受信され、行動要約情報生成部２６に出力される。

行動要約情報生成部２６は、受信した行動情報に基づいて散歩時間を算出するとともに、見守対象者Ａの顔画像及び音声情報に基づいて元気度レベルを判定する。そして、これらの情報に基づいて行動要約情報を作成する。この結果、例えば、「散歩時間：３時間、元気度レベル：元気」といった行動要約情報が生成される。生成された行動要約情報は作成時間が付加されてデータベース２７に格納されるとともに、抽出部２８に出力される。

抽出部２８は、行動要約情報生成部２６によって作成された最新の行動要約情報と、データベース２７に格納されている過去の行動要約情報とを比較することにより、見守者Ｂに通知すべき情報を最新の行動要約情報から抽出する。この結果、過去の行動要約情報から統計的に得られる散歩時間が１時間であり、最新の行動要約情報から得られる散歩時間が３時間であった場合には、その時間差である２時間が予め設定されている閾値（１時間）を超えているかを判定する。この結果、閾値を超えているため、「散歩時間」といった話題情報が抽出される。

情報生成部２９は、抽出部２８から入力された話題情報、行動要約情報、及び第１通信部２４によって受信された会話情報に基づいて、話題情報に関する追加の情報を得るための発話情報を生成する。この結果、例えば、「おばあちゃん、いつもよりお散歩の時間が２時間も長かったね。」といった発話情報が生成される。この発話情報は、第１通信部２４を介して対話型ロボット１０に送信され、対話型ロボット１０のスピーカ１３から発話される。
この問いかけに対し、見守対象者Ａと対話型ロボット１０との間で対話が進められる。この結果、図６に示すように、「そうなの。ちょっと遠回りしちゃって。」、「そうなんだ、遅いから心配したよ。」、「それに、公園の階段で転んじゃって、足が痛いわ。」といった対話が行われる。

これら対話内容は、対話型ロボット１０から情報処理装置２０に送信され、情報処理装置２０の第１通信部２４から情報生成部２９に出力される。
情報生成部２９は、抽出部２８から入力された話題情報と、第１通信部２４から取得した話題情報に関する追加の会話内容に基づいて、見守者Ｂに通知する通知情報を生成する。例えば、追加の会話内容から、「転んでしまって足が痛いこと」を抽出し、「散歩時間が２時間長かったこと」、「転んでしまって足が痛いこと」を含む通知情報を生成する。

続いて、情報生成部２９は、この通知情報を見守者Ｂに通知してもよいか否かを対話型ロボット１０を介して問い合わせる。この結果、対話型ロボット１０から、例えば、「転んで足が痛いの？いつもより２時間長いお散歩だったことと、転んで足が痛いことをＢさんに連絡する？」といった問いかけが行われる。これに対し、見守対象者Ａから、例えば、「そうね。伝えてもらえるかしら。」といった、通知を肯定する応答が入力されると、情報生成部２９は通知情報を第２通信部２５を介して情報処理装置４０に送信する。

情報処理装置４０の第３通信部４１は、通知情報を受信すると、通知情報を情報生成部４３に出力する。情報生成部４３は、例えば、通知情報に基づいて見守者Ｂに対して発話する発話情報を生成する。この結果、例えば、「今日はおばあちゃんのお散歩は２時間長かったって。それに、転んで足が痛いみたいよ。」といった発話情報が生成される。この発話情報は、情報生成部４３から第４通信部４２に出力され、第４通信部４２を介して対話型ロボット３０に送信される。対話型ロボット３０では、発話情報に基づく音声がスピーカから出力されることにより、見守対象者Ａの様子が見守者Ｂに通知される。

以上、説明してきたように、本実施形態に係る情報処理装置、見守りシステム、見守り方法、及び見守りプログラムによれば、見守対象者Ａが発した音声や見守対象者Ａの動画がそのままの状態で見守者側に通知されるのではなく、見守対象者Ａの行動情報から作成された通知情報が見守者側に通知されるので、見守対象者のプライバシーを守りながら健康状態等の状態を見守者側に通知することが可能となる。

また、見守対象者Ａと見守者Ｂとのやり取りが直接なされるのではなく、互いに対話型ロボット１０、３０を介しての対話となるため、直接的に会話を行うよりも互いに打ち解けやすく、意思疎通をよりスムーズに行わせることが期待できる。

なお、上述した実施形態では、見守対象者Ａの行動情報から通知すべき情報が抽出された場合をトリガとして、見守対象者Ａの通知情報を見守者Ｂの情報処理装置４０へ送信する場合を例示して説明したが、情報処理装置２０、４０間の情報のやり取りは、この例に限られない。
例えば、見守者Ｂが見守対象者Ａの状況を知りたいと思い、「おばあちゃんどうしているかしら？」といった問いかけを対話型ロボット３０にした場合や、見守者Ｂが対話型ロボット３０に接近した場合、あるいは、見守者Ｂが情報処理装置４０を操作した場合等に、情報処理装置４０から情報処理装置２０に対して見守対象者Ａの状態確認を行う情報を送信し、これをトリガとして、上記のような通知情報の生成等が行われることとしてもよい。また、情報処理装置２０、４０間の情報のやり取りが所定の期間以上行われていなかった場合をトリガとして、情報処理装置２０から通知情報が情報処理装置４０に送信されるような構成としてもよい。

なお、対話型ロボット１０と対話型ロボット３０とがあたかも互いに会話をしているような発話情報を情報処理装置２０、４０のそれぞれの情報生成部２９、４３が生成し、各対話型ロボット１０、３０から発話させることにより、見守対象者Ａの状況を見守者Ｂに通知するような構成としてもよい。

この場合の対話例を図７に示す。図７に示した対話例では、見守者Ｂによる「今日のおばあちゃんの様子はどう？」との問いかけをトリガとして、対話型ロボット３０から情報処理装置４０を介して見守対象者側の情報処理装置２０に接続を行う。その後、各情報処理装置２０、４０の情報生成部２９、４３が互いに発話情報を生成することで、「（対話型ロボット３０）もしもし、おばあちゃん元気？」、「（対話型ロボット１０）おばあちゃん、今日のお散歩はいつもより２時間長かったよ。」、「（対話型ロボット３０）今日のおばあちゃんのお散歩は２時間長かったって」、「（対話型ロボット１０）公園の階段で転んで足が痛いと言ってたよ。」、「（対話型ロボット３０）えっ、おばあちゃん、転んで足が痛いの？」といった対話が行われる。

このような構成によれば、上述のような対話型ロボット同士の会話において、見守対象者Ａの健康等に関する気になるフレーズがあった場合には、見守者Ｂに見守対象者の安否を確認しようという気持ちを生じさせることができる。

以上、本発明について実施形態を用いて説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。発明の要旨を逸脱しない範囲で上記実施形態に多様な変更又は改良を加えることができ、該変更又は改良を加えた形態も本発明の技術的範囲に含まれる。

１０、３０ ：対話型ロボット
１１ ：カメラ
１２ ：マイクロフォン
１３ ：スピーカ
１４ ：タッチパネル
２０、４０ ：情報処理装置
２１ ：ＣＰＵ
２２ ：補助記憶装置
２３ ：主記憶装置
２４ ：第１通信部
２５ ：第２通信部
２６ ：行動要約情報生成部
２７ ：データベース
２８ ：抽出部
２９、４３ ：情報生成部
４１ ：第３通信部
４２ ：第４通信部
５０ ：ネットワーク
Ａ ：見守対象者
Ｂ ：見守者

Claims (12)

1. 音声情報を取得する音声取得部、音声出力部、及び画像情報を取得する撮像部を備える対話型ロボットとの間で情報の送受信を行うための第１通信部と、
   前記第１通信部を介して受信した前記対話型ロボットによって取得された音声情報及び画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する行動要約情報生成部と、
   前記人物の過去の行動要約情報に基づいて、前記行動要約情報生成部によって生成された前記行動要約情報から話題情報を抽出する抽出部と、
   抽出された前記話題情報に基づいて通知情報を生成する情報生成部と、
   前記通知情報を予め登録されている送信先に送信する第２通信部と
   を具備し、
   前記第１通信部は、前記第２通信部から前記通知情報を送信する場合に、前記通知情報の送信可否を前記対話型ロボットを介して問い合わせるための問い合わせ情報を前記対話型ロボットに送信し、
   前記第２通信部は、前記第１通信部が前記対話型ロボットから前記通知情報の送信許可情報を受信した場合に、前記通知情報を送信する情報処理装置。
2. 前記行動要約情報生成部は、前記対話型ロボットが前記人物との対話によって得た音声情報から会話内容を解析し、前記会話内容から前記人物の行動要約情報を生成する請求項１に記載の情報処理装置。
3. 前記行動要約情報生成部は、前記会話内容から前記人物が所定の行動に要した時間を取得し、前記所定の行動に要した時間を含む前記行動要約情報を生成する請求項２に記載の情報処理装置。
4. 前記抽出部は、前記人物の過去の行動要約情報に基づく所定の行動に要した時間と、前記行動要約情報生成部によって生成された前記行動要約情報に含まれる前記所定の行動に要した時間とを比較し、所定の閾値以上の時間差が生じている場合に、前記所定の行動を話題情報として抽出する請求項３に記載の情報処理装置。
5. 前記行動要約情報生成部は、前記会話内容から前記人物が所定の行動を行った時刻を取得し、前記所定の行動を行った時刻を含む前記行動要約情報を生成する請求項２に記載の情報処理装置。
6. 前記抽出部は、前記人物の過去の行動要約情報に基づく前記所定の行動を行った時刻と、前記行動要約情報生成部によって生成された前記行動要約情報に含まれる前記所定の行動を行った時刻とを比較し、所定の閾値以上の時間差が生じていた場合に、前記所定の行動を話題情報として抽出する請求項５に記載の情報処理装置。
7. 前記行動要約情報生成部は、前記対話型ロボットが前記人物との対話によって得た音声情報から得られる声の大きさ、トーン、及び速度の少なくともいずれか一つ、及び／又は、前記対話型ロボットが取得した前記人物の画像情報から得られる眉の動き、口角、及び顔色の少なくともいずれか一つを用いて前記人物の元気度レベルを判定し、前記元気度レベルを含む行動要約情報を生成する請求項１から６のいずれかに記載の情報処理装置。
8. 前記抽出部は、前記行動要約情報に含まれる前記人物の元気度レベルが所定のレベルよりも低かった場合に、前記人物の元気度レベルを話題情報として抽出する請求項７に記載の情報処理装置。
9. 請求項１から８のいずれかに記載の情報処理装置と、
   前記情報処理装置との間で情報の授受が可能な見守側情報処理装置と
   を備え、
   前記見守側情報処理装置は、
   前記情報処理装置の前記第２通信部から送信された通知情報を受信するための第３通信部と、
   前記第３通信部によって受信された通知情報を見守側対話型ロボットに送信するための第４通信部と
   を備える見守りシステム。
10. 音声情報を取得する音声取得部と、
    音声を出力する音声出力部と、
    画像情報を取得する撮像部と、
    前記音声情報及び前記画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する行動要約情報生成部と、
    前記人物の過去の行動要約情報に基づいて、前記行動要約情報生成部によって生成された前記行動要約情報から話題情報を抽出する抽出部と、
    抽出された前記話題情報に基づいて通知情報を生成する情報生成部と、
    前記通知情報を予め登録されている送信先に送信する第２通信部と
    を具備し、
    前記情報生成部は、前記第２通信部から前記通知情報を送信する場合に、前記通知情報の送信可否を問い合わせるための情報を生成し、
    前記第２通信部は、前記人物から前記通知情報の送信許可があった場合に、前記通知情報を送信する対話型ロボット。
11. 音声情報を取得する音声取得部、音声出力部、及び画像情報を取得する撮像部を備える対話型ロボットによって取得された音声情報及び画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する工程と、
    前記人物の過去の行動要約情報に基づいて、最新の前記行動要約情報から話題情報を抽出する工程と、
    抽出された前記話題情報に基づいて通知情報を生成する工程と、
    前記通知情報を送信する場合に、前記通知情報の送信可否を前記対話型ロボットを介して問い合わせるための問い合わせ情報を前記対話型ロボットに送信する工程と、
    前記対話型ロボットから前記通知情報の送信許可情報を受信した場合に、前記通知情報を予め登録されている送信先に送信する工程と
    をコンピュータが実行する見守り方法。
12. 音声情報を取得する音声取得部、音声出力部、及び画像情報を取得する撮像部を備える対話型ロボットによって取得された音声情報及び画像情報の少なくともいずれか一つを含む行動情報を用いて、人物の行動要約情報を生成する処理と、
    前記人物の過去の行動要約情報に基づいて、最新の前記行動要約情報から話題情報を抽出する処理と、
    抽出された前記話題情報に基づいて通知情報を生成する処理と、
    前記通知情報を送信する場合に、前記通知情報の送信可否を前記対話型ロボットを介して問い合わせるための問い合わせ情報を前記対話型ロボットに送信する処理と、
    前記対話型ロボットから前記通知情報の送信許可情報を受信した場合に、前記通知情報を予め登録されている送信先に送信する処理と
    をコンピュータに実行させるための見守りプログラム。

Images