JP7484802B2 - 情報処理装置、プログラム及び情報処理方法 - Google Patents

Description

本開示は、情報処理装置、プログラム及び情報処理方法に関する。

従来、ユーザに指定された位置を車両が通過する際、車載カメラにより画像を撮像し、撮像画像を思い出として記憶する技術が知られている（例えば特許文献１）。

特開2019-086372号公報

上記技術では、ユーザが位置を指定することが必要である。撮像画像が膨大である場合、位置が指定されていなければ、特定の思い出に関連する画像を抽出することは難しい。

かかる事情に鑑みてなされた本開示の目的は、画像を自動的に保存することが可能である情報処理装置、プログラム及び情報処理方法を提供することにある。

本開示の一実施形態に係る情報処理装置は、
車両と通信可能な情報処理装置であって、制御部を含み、前記制御部は、
前記車両内のユーザの行動情報を、日時と関連付けて記憶し、
特定の時期での行動情報と、前記特定の時期より後の時期での行動情報との相異を検出すると、前記車両の撮像部を介して画像を取得し、
前記日時及び前記行動情報と関連付けて、前記画像を記憶する。

本開示の一実施形態に係るプログラムは、
車両と通信可能な情報処理装置としてのコンピュータに、
前記車両内のユーザの行動情報を、日時と関連付けて記憶することと、
特定の時期での行動情報と、前記特定の時期より後の時期での行動情報との相異を検出すると、前記車両の撮像部を介して画像を取得することと、
前記日時及び前記行動情報と関連付けて、前記画像を記憶することと、
を含む動作を実行させる。

本開示の一実施形態に係る情報処理方法は、
車両と通信可能な情報処理装置による情報処理方法であって、
前記車両内のユーザの行動情報を、日時と関連付けて記憶することと、
特定の時期での行動情報と、前記特定の時期より後の時期での行動情報との相異を検出すると、前記車両の撮像部を介して画像を取得することと、
前記日時及び前記行動情報と関連付けて、前記画像を記憶することと、
を含む。

本開示の一実施形態による情報処理装置、プログラム及び情報処理方法によれば、画像を自動的に保存することが可能である。

情報処理システムの概略図である。 情報処理装置の構成を示すブロック図である。 車両の構成を示すブロック図である。 訪問地ＤＢ(database)のデータ構造を示す図である。 動作ＤＢのデータ構造を示す図である。 動画の一例を示す図である。 動画の他の一例を示す図である。 情報処理装置の動作を示すフローチャートである。

図１は、本実施形態の情報処理システムＳの概略図である。情報処理システムＳは、ネットワークＮＷを介して互いに通信可能な情報処理装置１と車両２とを含む。ネットワークＮＷは、例えば移動体通信網とインターネットとを含む。

図１では説明の簡便のため、情報処理装置１と車両２とは１つずつ図示される。しかし、情報処理装置１と車両２とのそれぞれの数はこれに限られない。例えば、本実施形態の情報処理装置１が実行する処理は、分散配置された複数の情報処理装置１によって実行されてよい。複数の車両２がユーザＵ０１によって操作されてよい。

本実施形態の情報処理装置１が実行する処理の概要が説明される。情報処理装置１の制御部１１は、車両２内のユーザＵ０１の行動情報を、日時と関連付けて記憶し、特定の時期での行動情報と、特定の時期より後の時期での行動情報との相異を検出すると、車両２の撮像部を介して画像を取得する。制御部１１は、日時及び行動情報と関連付けて、画像を記憶する。この構成により情報処理装置１は、ユーザの行動変化があるときの画像を自動的に保存することができる。もって情報処理装置１は、特定の思い出に関連する画像をユーザＵ０１が後に抽出することを可能にする。

情報処理装置１は、データセンタなどの施設に設置される。情報処理装置１は、クラウドコンピューティングシステム又はその他のコンピューティングシステムに属するサーバなどのコンピュータである。代替例として、情報処理装置１は車両２に搭載されてよい。

図２を参照して情報処理装置１の内部構成が詳細に説明される。

情報処理装置１は、制御部１１と通信部１２と記憶部１３とを含む。情報処理装置１の各構成要素は、例えば専用線を介して互いに通信可能に接続される。

制御部１１は例えば、ＣＰＵ（Central Processing Unit）又はＭＰＵ（Micro Processing Unit）を含む１つ以上の汎用プロセッサを含む。制御部１１は、特定の処理に特化した１つ以上の専用プロセッサを含んでよい。制御部１１は、プロセッサを含む代わりに、１つ以上の専用回路を含んでもよい。専用回路は例えば、ＦＰＧＡ（Field-Programmable Gate Array）、又はＡＳＩＣ（Application Specific Integrated Circuit）であってよい。制御部１１は、ＥＣＵ（Electronic Control Unit）を含んでもよい。制御部１１は通信部１２を介して、任意の情報を送信及び受信する。

通信部１２は、ネットワークＮＷに接続するための、１つ以上の有線又は無線ＬＡＮ（Local Area Network）規格に対応する通信モジュールを含む。通信部１２は、ＬＴＥ（Long Term Evolution）、４Ｇ（4th Generation）、又は５Ｇ（5th Generation）を含む１つ以上の移動体通信規格に対応するモジュールを含んでよい。通信部１２は、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＡｉｒＤｒｏｐ（登録商標）、ＩｒＤＡ、ＺｉｇＢｅｅ（登録商標）、Ｆｅｌｉｃａ（登録商標）、又はＲＦＩＤを含む１つ以上の近距離通信の規格又は仕様に対応する通信モジュール等を含んでよい。通信部１２は、ネットワークＮＷを介して任意の情報を送信及び受信する。

記憶部１３は、例えば半導体メモリ、磁気メモリ、光メモリ、又はこれらのうち少なくとも２種類の組み合わせが含まれるが、これらに限られない。半導体メモリは、例えば、ＲＡＭ又はＲＯＭである。ＲＡＭは、例えば、ＳＲＡＭ又はＤＲＡＭである。ＲＯＭは、例えば、ＥＥＰＲＯＭである。記憶部１３は、例えば主記憶装置、補助記憶装置、又はキャッシュメモリとして機能してもよい。記憶部１３は、制御部１１によって分析又は処理された結果の情報を記憶してよい。記憶部１３は、情報処理装置１の動作又は制御に関する各種情報等を記憶してよい。記憶部１３は、システムプログラム、アプリケーションプログラム、及び組み込みソフトウェア等を記憶してよい。記憶部１３は後述される訪問地ＤＢ及び動作ＤＢを含む。

車両２は、例えば、マイクロモビリティ、ガソリン車、ディーゼル車、ＨＶ、ＰＨＶ、ＥＶ、又はＦＣＶなどの任意の種類の自動車を含む。車両２の各構成要素は、例えばＣＡＮ（Controller Area Network）等の車載ネットワーク又は専用線を介して、互いに通信可能に接続される。「ＨＶ」は、Hybrid Vehicleの略語である。「ＰＨＶ」は、Plug-in Hybrid Vehicleの略語である。「ＥＶ」は、Electric Vehicleの略語である。「ＦＣＶ」は、Fuel Cell Vehicleの略語である。本実施形態の車両２は、運転者によって運転される。代替例として車両２は、任意のレベルでその運転が自動化されてよい。自動化のレベルは、例えば、ＳＡＥのレベル分けにおけるレベル１からレベル５のいずれかである。「ＳＡＥ」は、Society of Automotive Engineersの略語である。車両２は、ＭａａＳ専用車両でもよい。「ＭａａＳ」は、Mobility as a Serviceの略語である。車両２は例えば、自転車、原動機付自転車、又は自動二輪車（オートバイ）であってもよい。

図３を参照して車両２の内部構成が詳細に説明される。

車両２は、制御部２１と通信部２２と記憶部２３と撮像部２４と音声入力部２５と出力部２６と測位部２７とを含む。車両２の各構成要素は、例えば専用線を介して互いに通信可能に接続される。

車両２の制御部２１と通信部２２と記憶部２３とのハードウェア構成は、情報処理装置１の制御部１１と通信部１２と記憶部１３とのハードウェア構成と同一であってよい。ここでの説明は省略される。

撮像部２４はカメラを含む。撮像部２４は周囲を撮像することができる。撮像部２４は画像解析のために、撮像した画像を記憶部２３に記録し又は制御部２１に送信してよい。画像は静止画又は動画を含む。

音声入力部２５は、音声入力を受け付けるマイクロフォンを含む。音声入力部２５は、車両２の内部又は外部の音を集音する。車両２の運転者が使用するスマートフォン等のマイク機能を有する電子機器が、音声入力部２５として機能してもよい。音声入力部２５は、車両２に備えられる代わりに、外部の出力機器として車両２に接続されてもよい。接続方式としては、例えば、ＵＳＢ、ＨＤＭＩ（登録商標）、又はBluetooth（登録商標）等の任意の方式を用いることができる。「ＵＳＢ」は、Universal Serial Busの略語である。「ＨＤＭＩ（登録商標）」は、High-Definition Multimedia Interfaceの略語である。

出力部２６は、少なくとも１つの出力用インタフェースを含む。出力用インタフェースは、例えば、ディスプレイ又はスピーカである。ディスプレイは、例えば、ＬＣＤ又は有機ＥＬディスプレイである。「ＬＣＤ」は、liquid crystal displayの略語である。「ＥＬ」は、electro luminescenceの略語である。出力部２６は、車両２の動作によって得られる画像又は音声を出力する。画像又は音声は、所定の期間にわたるものであってよい。出力部２６は、車両２に備えられる代わりに、外部の出力機器として車両２に接続されてもよい。接続方式としては、例えば、ＵＳＢ、ＨＤＭＩ（登録商標）、又はBluetooth（登録商標）等の任意の方式を用いることができる。

測位部２７は、少なくとも１つのＧＮＳＳ受信機を含む。「ＧＮＳＳ」は、Global Navigation Satellite Systemの略語である。ＧＮＳＳには、例えば、ＧＰＳ、ＱＺＳＳ、ＢｅｉＤｏｕ、ＧＬＯＮＡＳＳ、及びＧａｌｉｌｅｏの少なくともいずれかが含まれる。「ＧＰＳ」は、Global Positioning Systemの略語である。「ＱＺＳＳ」は、Quasi-Zenith Satellite Systemの略語である。ＱＺＳＳの衛星は、準天頂衛星と呼ばれる。「ＧＬＯＮＡＳＳ」は、Global Navigation Satellite Systemの略語である。測位部２７は車両２の位置を測定する。測定の結果は、制御部２１によって車両２の位置情報として取得される。「位置情報」とは、車両２の位置を特定可能な情報である。位置情報は例えば、住所、緯度、経度、又は高度を含む。

以下、本実施形態の情報処理システムＳで実行される処理が詳細に説明される。

［訪問地に関する記憶処理］
車両２はユーザＵ０１によって運転され、１以上の訪問地を訪問する。車両２は、測位部２７による測位の結果を用いて、訪問地を判定する。図４に示されるように情報処理装置１は、訪問地を訪問したときの日時の情報に関連付けて、訪問地の情報を記憶部１３の訪問地ＤＢに記憶する。訪問地の情報は、ユーザＵ０１の行動情報に含まれる運転情報の一例である。図４に示されるように、２０２０年３月１日のユーザＵ０１による訪問内容は次のとおりである。
９：００ 自宅から移動ルートＢ０１にて職場Ｂを訪問
１７：００ 職場Ｂから移動ルートＡ０１にて学校Ａを訪問
ここでの学校Ａを訪問する理由は、学校から自宅に帰る子どもを迎えるためである。

ここでは、ユーザＵ０１が、２０２０年３月１日の上記訪問内容と同一内容の訪問を、翌日の３月２日から３月３１日まで繰り返す場合が説明される。

車両２の制御部２１は、測位の結果を用いて、各訪問地への移動ルートを判定する。制御部２１は、移動ルートの情報を情報処理装置１に送信する。移動ルートの情報は、行動情報に含まれる運転情報の一例である。図４に示されるように、情報処理装置１は、移動ルートの情報を日時に関連付けて訪問地ＤＢに記憶する。

制御部２１は、各訪問地への移動中に、撮像部２４を用いて車両２の周囲又はユーザＵ０１を撮像することができる。

撮像は、各訪問地への移動中に毎回実行されてもよい。図４に示される画像Ｄ０１乃至Ｄ０４は、各訪問地への毎回の移動中に撮像及び記憶されたものである。しかし各訪問地への毎回の移動中に撮像が実行される必要は必ずしもない。すなわち画像Ｄ０１乃至Ｄ０４は必ずしも撮像されなくてよい。画像Ｄ０１乃至Ｄ０４が撮像される場合、画像Ｄ０１乃至Ｄ０４は後述の相異が検出される前の画像として利用可能である。

画像が静止画である場合、画像は移動中に少なくとも１回撮像される。画像が動画である場合、画像は移動中に常に撮像されてよいし、移動中の少なくとも一部の期間にわたって撮像されてよい。車両２の周囲は例えば車両２の前方を含むが、車両２の側方又は後方を含んでよい。制御部２１は撮像された画像を情報処理装置１に送信する。図４に示されるように、情報処理装置１は、日時に関連付けて、画像を記憶部１３の訪問地ＤＢに記憶する。

制御部２１は、各訪問地への移動中に、音声入力部２５を用いて、車両２の内部又は外部の音声を取得することができる。音声の取得は、画像の撮像と同様に、各訪問地への移動中に毎回実行されてもよい。図４に示される音声Ｄ０１乃至Ｄ０４は、各訪問地への毎回の移動中に取得されたものである。音声Ｄ０１乃至Ｄ０４の取得は任意である。制御部２１は、取得された音声のデータを情報処理装置１に送信する。図４に示されるように、情報処理装置１は音声を記憶部１３に記憶する。

［訪問地に関する検出処理］
図４に示されるように、２０２０年４月１日以降、ユーザＵ０１は学校Ａを訪問しない。すなわち、特定の時期（ここでは２０２０年３月）での訪問地と、その後の時期（ここでは２０２０年４月）での訪問地とが異なる。この場合、制御部１１は、行動情報の相異を検出する。相異が検出されるタイミングは例えば次の通りである。
・ユーザＵ０１が上記その後の時期で新たに訪問するようになった訪問地を訪問するために、訪問地をカーナビ等の行き先として設定したとき（例：ユーザＵ０１が２０２０年４月１日に職場ＢからスーパーマーケットＣに移動するために、スーパーマーケットＣをカーナビの行き先として設定したとき）
・ユーザＵ０１が上記その後の時期で新たに訪問するようになった訪問地を訪問する途中、訪問地の滞在中、又は訪問地から帰る途中の車両２の位置情報から、新たな移動ルートが上記特定の時期での移動ルートと異なっていると判定されたとき（例：ユーザＵ０１が２０２０年４月１日に職場ＢからスーパーマーケットＣへ移動する途中に車両２が停止等したときの位置情報から、現在の移動ルートが２０２０年３月中の移動ルートと異なると判定されたとき）
特定の時期は、特定の時刻であってよいし、特定の期間であってもよい。

制御部１１は、相異を検出すると、撮像部２４を介して画像を取得する。具体的には制御部１１は、例えば上記のタイミングで行動情報の相異を検出すると、車両２の撮像部２４に画像を撮像するよう要求する。制御部１１は、車両２の撮像部２４を介して、例えばスーパーマーケットＣへの移動中に画像又は音声Ｄ０６を取得する。制御部１１は画像又は音声Ｄ０６を訪問地ＤＢに記憶する。同様に制御部１１は、２０２０年４月２日にも相異を検出すると、画像又は音声Ｄ０８を取得する。

ここでの制御部１１は、各訪問地への毎回の移動中に画像又は音声を取得する。具体的には制御部１１は、画像又は音声Ｄ０５及びＤ０７を取得する。画像又は音声Ｄ０５及びＤ０７の取得は任意である。

上記の例では、画像又は音声は、特定の時期より後の時期で新たに訪問するようになった訪問地（ここではスーパーマーケットＣ）への移動中に取得される。代替例として、取得される画像又は音声は、上記後の時期での行動情報に関する画像又は音声であってよいし、上記後の時期で新たに訪問するようになった訪問地に関する画像又は音声であってよい。例えば画像又は音声は、新たに訪問するようになった訪問地での滞在中に取得されてよいし、訪問地からの帰りの途中に取得されてよい。

車両２の制御部２１は、ユーザＵ０１から出力要求を受け付けると、ユーザＵ０１に要求された画像又は音声を訪問地ＤＢから取得して、出力部２６に出力する。ここでは、ユーザＵ０１が学校Ａを訪問していたときの画像又は音声Ｄ０２が要求される場合が説明される。図６に示されるように、制御部２１は、画像又は音声Ｄ０２を出力部２６に出力する。

代替例として、特定の時期での特定の訪問地への訪問頻度が、その後の時期で増加又は減少したとき、制御部１１は、行動情報の相異を検出してよい。訪問頻度は、運転情報の一例である。例えば制御部１１は、特定の訪問地への訪問頻度が１日１回から１週間に１回に減少したとき、行動情報の相異を検出する。制御部１１は、行動情報の相異を検出すると、車両２の撮像部２４を介して画像を取得する。制御部１１は更に、車両２の音声入力部２５を介してユーザＵ０１の音声を取得してよい。制御部１１は、頻度が増加又は減少する前の画像又は音声と、頻度が増加又は減少した後の画像又は音声との少なくとも一方を訪問地ＤＢから取得して、出力部２６に出力してよい。頻度が増加又は減少する前の画像又は音声と、頻度が増加又は減少した後の画像又は音声とは、出力部２６において同一画面に出力されてよい。

図４に示されるように、２０２０年４月１日以降、職場Ｂへの移動ルートは移動ルートＢ０１から移動ルートＢ０２に変更された。すなわち特定の時期（ここでは２０２０年３月）での移動ルートと、その後の時期（ここでは２０２０年４月）での移動ルートとが異なる。この場合、制御部１１は、行動情報の相異を検出する。制御部１１は、行動情報の相異を検出すると、車両２の撮像部２４に画像を撮像するよう要求する。制御部１１は、車両２の撮像部２４を介して、画像Ｄ０５を取得する。制御部１１は画像Ｄ０５を訪問地ＤＢに記憶する。制御部１１は更に、車両２の音声入力部２５を介してユーザＵ０１の音声Ｄ０５を取得してよい。制御部１１は音声Ｄ０５を訪問地ＤＢに記憶する。

車両２の制御部２１は、ユーザＵ０１から出力要求を受け付けると、ユーザＵ０１に要求された画像又は音声を訪問地ＤＢから取得して、出力部２６に出力する。例えば制御部２１は、図７に示されるように、移動ルートが変更される前の画像又は音声Ｄ０１（画面７１に対応）と、移動ルートが変更された後の画像又は音声Ｄ０５（画面７２に対応）とを同一画面に出力することができる。

［動作に関する記憶処理］
制御部２１は、撮像部２４を用いて、定期的に又は不定期的にユーザＵ０１を撮像する。制御部２１は、撮像画像を情報処理装置１に送信する。制御部２１は、音声入力部２５を用いて、定期的に又は不定期的に車両２の内部のユーザＵ０１の音声を取得する。制御部２１は、取得された音声のデータを情報処理装置１に送信する。

情報処理装置１の制御部１１は、ユーザＵ０１の画像と音声とを記憶部１３に記憶する。制御部１１は、ユーザＵ０１の画像と音声とを分析して、ユーザＵ０１の感情を示す動作を検出する。感情を示す動作の情報は、行動情報に含まれる、ユーザＵ０１の動作情報の一例である。動作は例えば、舌打ち、しかめっつら、あくび、笑い、ため息、目の見開きである。ここでの舌打ち及びしかめっつらは、不快又は不満を示す。あくびは眠気を示す。笑いは喜びを示す。ため息は不安又は不満を示す。目の見開きは驚き又は好奇心を示す。

制御部２１は、撮像部２４を用いて車両２の周囲又はユーザＵ０１を撮像することができる。撮像は後述の相異検出が行われるときに限って実行されてよいし、定期的に実行されてもよい。制御部２１は撮像された画像を情報処理装置１に送信する。図５に示されるように、情報処理装置１は、画像を記憶部１３に記憶する。

制御部２１は、音声入力部２５を用いて、車両２の内部又は外部の音声を取得することができる。音声の取得は、後述の相異検出が行われるときに限って実行されてよいし、定期的に実行されてもよい。制御部２１は、取得された音声のデータを情報処理装置１に送信する。図５に示されるように、情報処理装置１は音声を記憶部１３に記憶する。

［動作に関する検出処理］
図５に示されるように、２０２０年３月２日９：００に、不快を示す舌打ちが検出される。同日の１８：００に、眠気を示すあくびが検出される。すなわち特定の時期（ここでは２０２０年３月２日９：００）での感情と、その後の時期（ここでは３月２日１８：００）での感情とが異なる。この場合、制御部１１は、行動情報の相異を検出する。

制御部１１は、行動情報の相異を検出すると、車両２の撮像部２４に、車両２の周囲又はユーザＵ０１の画像を撮像するよう要求する。制御部１１は、車両２の撮像部２４を介して、画像を取得する。ここでは、あくびが検出されたときの画像Ｄ１０が取得される。制御部１１は画像を動作ＤＢに記憶する。制御部１１は更に、車両２の音声入力部２５を介してユーザＵ０１の音声Ｄ１０を取得してよい。制御部１１は音声を動作ＤＢに記憶する。

車両２の制御部２１は、ユーザＵ０１から出力要求を受け付けると、ユーザＵ０１に要求された画像又は音声を動作ＤＢから取得して、出力部２６に出力する。ここでは、ユーザＵ０１があくびをしたときの画像又は音声Ｄ１０が要求及び出力される。

［フローチャート］
図８を参照して、本実施形態の情報処理装置１による情報処理方法が説明される。情報処理方法は定期的に実行されてよい。

ステップＳ１にて情報処理装置１の制御部１１は、通信部１２を介して車両２から行動情報を取得して、行動情報を記憶部１３に記憶する。

ステップＳ２にて制御部１１は、特定の時期での行動情報と、その後の時期での行動情報との相異が検出されたか否かを判定する。

ステップＳ２にてＹｅｓのとき制御部１１は、ステップＳ３にて、車両２の撮像部２４に、車両２の周囲の画像又はユーザＵ０１の画像を撮像させる。制御部１１はステップＳ４にて、車両２から取得した撮像画像を記憶部１３に記憶する。

ステップＳ２にてＮｏのとき制御部１１は、ステップＳ３及びステップＳ４を実行せずにフローを終了する。

以上述べたように本実施形態によれば、情報処理装置１の制御部１１は、車両２内のユーザＵ０１の行動情報を、日時と関連付けて記憶し、特定の時期での行動情報と、特定の時期より後の時期での行動情報との相異を検出すると、車両２の撮像部を介して画像を取得する。制御部１１は、日時及び行動情報と関連付けて、画像を記憶する。この構成により情報処理装置１は、ユーザの行動変化があるときの画像を自動的に保存することができる。もって情報処理装置１は、特定の思い出に関連する画像をユーザＵ０１が後に抽出することを可能にする。

また本実施形態によれば、行動情報は、車両２の運転情報を含む。運転情報は、訪問地と、特定の訪問地への訪問頻度と、特定の訪問地への移動ルートとの少なくとも１つを含む。この構成により情報処理装置１は、運転中の思い出に関連する画像をユーザＵ０１が後に抽出することを可能にする。

また本実施形態によれば、行動情報は、ユーザＵ０１の動作情報を含む。動作情報は、ユーザＵ０１の感情を示す動作の情報を含む。この構成により情報処理装置１は、ユーザＵ０１の感情が現れたときの思い出に関連する画像をユーザＵ０１が後に抽出することを可能にする。

また本実施形態によれば、制御部１１は更に、相異を検出すると、車両２の音声入力部２５を介してユーザＵ０１の音声を取得する。この構成により情報処理装置１は、特定の思い出に関連する音声をユーザＵ０１が後に抽出することを可能にする。

また本実施形態によれば、制御部１１は、相異を検出すると、相異の前後の画像を車両２の出力部２６に出力する。この構成により情報処理装置１は、相異の前後の画像をユーザＵ０１が比較することを可能にする。

本開示が諸図面及び実施例に基づき説明されるが、当業者であれば本開示に基づき種々の変形及び改変を行ってもよいことに注意されたい。その他、本開示の趣旨を逸脱しない範囲での変更が可能である。例えば、各手段又は各ステップに含まれる機能等は論理的に矛盾しないように再配置可能であり、複数の手段又はステップを１つに組み合わせたり、或いは分割したりすることが可能である。

例えば、上記の実施形態において、情報処理装置１の機能又は処理の全部又は一部を実行するプログラムは、コンピュータで読取り可能な記録媒体に記録しておくことができる。コンピュータで読取り可能な記録媒体は、非一時的なコンピュータ読取可能な媒体を含み、例えば、磁気記録装置、光ディスク、光磁気記録媒体、又は半導体メモリである。プログラムの流通は、例えば、プログラムを記録したＤＶＤ（Digital Versatile Disc）又はＣＤ－ＲＯＭ（Compact Disc Read Only Memory）などの可搬型記録媒体を販売、譲渡、又は貸与することによって行う。またプログラムの流通は、プログラムを任意のサーバのストレージに格納しておき、任意のサーバから他のコンピュータにプログラムを送信することにより行ってもよい。またプログラムはプログラムプロダクトとして提供されてもよい。本開示は、プロセッサが実行可能なプログラムとしても実現可能である。

コンピュータは、例えば、可搬型記録媒体に記録されたプログラム又はサーバから転送されたプログラムを、一旦、主記憶装置に格納する。そして、コンピュータは、主記憶装置に格納されたプログラムをプロセッサで読み取り、読み取ったプログラムに従った処理をプロセッサで実行する。コンピュータは、可搬型記録媒体から直接プログラムを読み取り、プログラムに従った処理を実行してもよい。コンピュータは、コンピュータにサーバからプログラムが転送される度に、逐次、受け取ったプログラムに従った処理を実行してもよい。サーバからコンピュータへのプログラムの転送は行わず、実行指示及び結果取得のみによって機能を実現する、いわゆるＡＳＰ型のサービスによって処理を実行してもよい。「ＡＳＰ」は、application service providerの略語である。プログラムには、電子計算機による処理の用に供する情報であってプログラムに準ずるものが含まれる。例えば、コンピュータに対する直接の指令ではないがコンピュータの処理を規定する性質を有するデータは、「プログラムに準ずるもの」に該当する。

Ｓ 情報処理システム
ＮＷ ネットワーク
１ 情報処理装置
１１ 制御部
１２ 通信部
１３ 記憶部
２ 車両
２１ 制御部
２２ 通信部
２３ 記憶部
２４ 撮像部
２５ 音声入力部
２６ 出力部

Claims (17)

1. 車両と通信可能な情報処理装置であって、制御部を含み、前記制御部は、
   ユーザが運転する前記車両の運転情報を、日時と関連付けて記憶し、
   特定の時期での運転情報と、前記特定の時期より後の時期での運転情報との相異を検出すると、前記車両の撮像部を介して画像を取得し、
   前記日時及び前記運転情報と関連付けて、前記画像を記憶する、
   情報処理装置。
2. 請求項１に記載の情報処理装置において、
   前記運転情報は、訪問地と、特定の訪問地への訪問頻度と、特定の訪問地への移動ルートとの少なくとも１つを含む、情報処理装置。
3. 請求項１又は２に記載の情報処理装置において、
   前記制御部は、
   さらに、前記車両内の前記ユーザの動作情報を、日時と関連付けて記憶し、
   特定の時期での動作情報と、前記特定の時期より後の時期での動作情報との相異を検出すると、前記車両の撮像部を介して画像を取得し、
   前記日時及び前記動作情報と関連付けて、前記画像を記憶する、情報処理装置。
4. 請求項３に記載の情報処理装置において、
   前記動作情報は、前記ユーザの感情を示す動作の情報を含む、情報処理装置。
5. 請求項１乃至４のいずれか一項に記載の情報処理装置において、
   前記制御部は更に、前記相異を検出すると、前記車両の音声入力部を介して前記ユーザの音声を取得する、情報処理装置。
6. 請求項１乃至５のいずれか一項に記載の情報処理装置において、
   前記制御部は更に、前記相異を検出すると、前記相異の前後の画像を前記車両の出力部に出力する、情報処理装置。
7. 請求項１乃至６のいずれか一項に記載の情報処理装置が搭載された車両。
8. 車両と通信可能な情報処理装置としてのコンピュータに、
   ユーザが運転する前記車両の運転情報を、日時と関連付けて記憶することと、
   特定の時期での運転情報と、前記特定の時期より後の時期での運転情報との相異を検出すると、前記車両の撮像部を介して画像を取得することと、
   前記日時及び前記運転情報と関連付けて、前記画像を記憶することと、
   を含む動作を実行させる、プログラム。
9. 請求項８に記載のプログラムにおいて、
   前記運転情報は、訪問地と、特定の訪問地への訪問頻度と、特定の訪問地への移動ルートとの少なくとも１つを含む、プログラム。
10. 請求項８又は９に記載のプログラムにおいて、
    さらに、前記車両内の前記ユーザの動作情報を、日時と関連付けて記憶することと、
    特定の時期での動作情報と、前記特定の時期より後の時期での動作情報との相異を検出すると、前記車両の撮像部を介して画像を取得することと、
    前記日時及び前記動作情報と関連付けて、前記画像を記憶することと、を含む、プログラム。
11. 請求項１０に記載のプログラムにおいて、
    前記動作情報は、前記ユーザの感情を示す動作の情報を含む、プログラム。
12. 請求項８乃至１１のいずれか一項に記載のプログラムにおいて、
    前記相異を検出すると、前記車両の音声入力部を介して前記ユーザの音声を取得することを前記コンピュータに更に実行させる、プログラム。
13. 車両と通信可能な情報処理装置による情報処理方法であって、
    ユーザが運転する前記車両の運転情報を、日時と関連付けて記憶することと、
    特定の時期での運転情報と、前記特定の時期より後の時期での運転情報との相異を検出すると、前記車両の撮像部を介して画像を取得することと、
    前記日時及び前記運転情報と関連付けて、前記画像を記憶することと、
    を含む情報処理方法。
14. 請求項１３に記載の情報処理方法において、
    前記運転情報は、訪問地と、特定の訪問地への訪問頻度と、特定の訪問地への移動ルートとの少なくとも１つを含む、情報処理方法。
15. 請求項１３又は１４に記載の情報処理方法において、
    さらに、前記車両内の前記ユーザの動作情報を、日時と関連付けて記憶することと、
    特定の時期での動作情報と、前記特定の時期より後の時期での動作情報との相異を検出すると、前記車両の撮像部を介して画像を取得することと、
    前記日時及び前記動作情報と関連付けて、前記画像を記憶することと、を含む、情報処理方法。
16. 請求項１５に記載の情報処理方法において、
    前記動作情報は、前記ユーザの感情を示す動作の情報を含む、情報処理方法。
17. 請求項１３乃至１６のいずれか一項に記載の情報処理方法において、
    前記相異を検出すると、前記車両の音声入力部を介して前記ユーザの音声を取得することを更に含む情報処理方法。

Images