Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7424974B2 - Operation evaluation system - Google Patents
[go: Go Back, main page]

JP7424974B2 - Operation evaluation system - Google Patents

Operation evaluation system Download PDF

Info

Publication number
JP7424974B2
JP7424974B2 JP2020525546A JP2020525546A JP7424974B2 JP 7424974 B2 JP7424974 B2 JP 7424974B2 JP 2020525546 A JP2020525546 A JP 2020525546A JP 2020525546 A JP2020525546 A JP 2020525546A JP 7424974 B2 JP7424974 B2 JP 7424974B2
Authority
JP
Japan
Prior art keywords
mobile terminal
information
unit
control unit
notification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2020525546A
Other languages
Japanese (ja)
Other versions
JPWO2019240065A1 (en
Inventor
大輔 桐生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of JPWO2019240065A1 publication Critical patent/JPWO2019240065A1/en
Application granted granted Critical
Publication of JP7424974B2 publication Critical patent/JP7424974B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Measuring devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor or mobility of a limb
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING SYSTEMS, e.g. PERSONAL CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/04Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using a single signalling line, e.g. in a closed loop
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/005Traffic control systems for road vehicles including pedestrian guidance indicator
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M11/00Telephonic communication systems specially adapted for combination with other electrical systems

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biomedical Technology (AREA)
  • Surgery (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Signal Processing (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Automation & Control Theory (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Physiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Alarm Systems (AREA)
  • Purses, Travelling Bags, Baskets, Or Suitcases (AREA)
  • Emergency Alarm Devices (AREA)
  • Traffic Control Systems (AREA)
  • Telephonic Communication Services (AREA)
  • Navigation (AREA)

Description

本発明は、動作評価システムに関する。
本願は、2018年6月11日に日本に出願された日本国特願2018-111419号及び2018年8月2日に日本に出願された日本国特願2018-146316号に基づき優先権を主張し、それらの内容をここに援用する。
The present invention relates to a performance evaluation system.
This application claims priority based on Japanese Patent Application No. 2018-111419 filed in Japan on June 11, 2018 and Japanese Patent Application No. 2018-146316 filed in Japan on August 2, 2018. and their contents are hereby incorporated by reference.

従来、児童が携行する背負い鞄に取り付けられたカメラ、スピーカ及び送受信機と、送受信部、モニタ及びマイクロフォンを備える端末装置とによって、登下校時等における児童の安全を監視するシステムが知られている(例えば、特許文献1参照)。 Conventionally, systems have been known that monitor the safety of children when they are commuting to and from school, etc., using a camera, speaker, and transceiver attached to a backpack carried by the child, and a terminal device equipped with a transmitter/receiver, a monitor, and a microphone. (For example, see Patent Document 1).

日本国特開2006-285749号公報Japanese Patent Application Publication No. 2006-285749

ところで、上記従来技術に係るシステムは、背負い鞄に取り付けられたカメラによって児童の前方を撮像し、撮像により得られた画像を、通信ネットワークを介して児童の保護者等が操作する端末装置に送信する。また、端末装置のマイクロフォンによって収音された保護者等の音声は、通信ネットワークを介して送信され、背負い鞄のスピーカから出力される。
しかしながら、背負い鞄に取り付けられるカメラによれば、例えば交差点及び道路を横断する位置等の危険性がある場所における児童の動作を確認することは困難である。また、例えば交差点での左右確認動作及び道路を横断する際の挙手動作等の所定動作の実行が望まれる所定位置において実際に実行された動作の適正度合いを判定することができない場合、児童の見守りを適正に支援することができないという問題が生じる。
By the way, the system according to the above-mentioned conventional technology captures an image in front of the child using a camera attached to a backpack, and transmits the image obtained by the capture to a terminal device operated by the child's guardian or the like via a communication network. do. Furthermore, the voice of the parent or the like collected by the microphone of the terminal device is transmitted via the communication network and output from the speaker of the backpack.
However, with the camera attached to a backpack, it is difficult to check the movements of children in dangerous places, such as at intersections and crossing roads. In addition, if it is not possible to determine the appropriateness of the movement actually performed at a predetermined position where a certain movement is desired, such as checking left and right at an intersection or raising hands when crossing the road, it is necessary to monitor children. The problem arises that it is not possible to provide appropriate support.

本発明は、上記の問題点に鑑みてなされたものであって、移動者の動作を評価することができる動作評価システムを提供することを目的とする。 The present invention has been made in view of the above problems, and an object of the present invention is to provide a motion evaluation system that can evaluate the motion of a moving person.

(1):この発明の一態様に係る動作評価システムは、移動者によって携帯される端末と、前記移動者の動作を取得する動作取得部と、前記端末又は前記端末と通信可能なサーバに設けられるとともに、前記動作取得部が取得した動作に基づき所定動作が行われたことを判断する動作判断部と、前記端末又は前記サーバに設けられるとともに、前記移動者によって前記所定動作がなされるよう事前に設定された地理的位置である設定位置を記憶する記憶部とを備え、前記設定位置は、第1設定位置と、前記第1設定位置とは別の第2設定位置とを含み、前記端末又は前記サーバは、前記第1設定位置において前記動作判断部が判断した第1判断結果及び前記第2設定位置において前記動作判断部が判断した第2判断結果に基づいて、前記移動者の動作を複合的に評価する評価部を備える。 (1): A motion evaluation system according to one aspect of the present invention includes a terminal carried by a moving person, a motion acquisition unit that acquires the moving person's motion, and a motion evaluation system that is provided in the terminal or a server that can communicate with the terminal. and a motion determination section that determines whether a predetermined motion has been performed based on the motion acquired by the motion acquisition section; a storage unit that stores a setting position that is a geographical position set in the terminal; the setting position includes a first setting position and a second setting position different from the first setting position; Alternatively, the server determines the movement of the mover based on a first determination result determined by the motion determination unit at the first setting position and a second determination result determined by the movement determination unit at the second setting position. Equipped with an evaluation section that performs multiple evaluations.

(2):上記(1)の態様において、前記端末又は前記サーバは、前記端末の外部又は前記端末若しくは前記サーバと通信可能に設けられる他の端末に対して、前記評価を出力する出力部を備えてもよい。 (2): In the aspect of (1) above, the terminal or the server has an output unit that outputs the evaluation to the outside of the terminal or to another terminal provided to be able to communicate with the terminal or the server. You may prepare.

(3):上記(2)の態様において、前記出力部は、前記端末の外部に前記評価を出力するとともに、前記設定位置の近傍では出力しなくてもよい。 (3): In the aspect of (2) above, the output unit may output the evaluation to the outside of the terminal, and may not output it near the setting position.

(4):上記(3)の態様において、前記出力部は、前記他の端末に対して前記評価を出力するとともに、前記設定位置における前記評価の後に順次出力してもよい。 (4): In the aspect of (3) above, the output unit may output the evaluation to the other terminal, and may sequentially output the evaluation after the evaluation at the setting position.

(5):上記(1)から(4)のいずれか1つの態様において、前記動作判断部は、前記端末に設けられ、前記評価部は、前記サーバに設けられてもよい。 (5): In any one of the aspects (1) to (4) above, the operation determination section may be provided in the terminal, and the evaluation section may be provided in the server.

(6):上記(1)から(5)のいずれか1つの態様において、前記移動者は、歩行者であってもよい。 (6): In any one of the above aspects (1) to (5), the moving person may be a pedestrian.

(7):上記(6)の態様において、前記歩行者は、児童であってもよい。 (7): In the aspect of (6) above, the pedestrian may be a child.

(8):上記(1)から(7)のいずれか1つの態様において前記端末は、前記移動者の携行物に配置されてもよい。 (8): In the aspect of any one of (1) to (7) above, the terminal may be placed in the traveler's belongings.

(9):上記(8)の態様において、前記携行物は、肩掛け鞄であってもよい。 (9): In the aspect of (8) above, the thing to carry may be a shoulder bag.

(10):上記(9)の態様において、前記肩掛け鞄は、背負い鞄であってもよい。 (10): In the aspect of (9) above, the shoulder bag may be a backpack bag.

上記(1)によれば、第1設定位置及び第2設定位置の第1判断結果及び第2判断結果に基づき、移動者の動作を精度良く複合的に評価することができる。
上記(2)の場合、ユーザ等による動作評価の確認を容易に支援することができる。
上記(3)の場合、評価の出力が過剰になることを抑制することができる。
上記(4)の場合、ユーザ等による他の端末でのリアルタイム的な動作評価の確認を容易に支援することができる。
上記(5)の場合、サーバにて動作評価が行われることによって、評価精度を向上させることができる。
According to (1) above, the motion of the moving person can be accurately and compositely evaluated based on the first determination result and the second determination result of the first set position and the second set position.
In the case of (2) above, it is possible to easily support the confirmation of the operation evaluation by the user or the like.
In the case of (3) above, it is possible to prevent the evaluation output from becoming excessive.
In the case of (4) above, it is possible to easily support a user or the like to confirm real-time performance evaluation on another terminal.
In the case of (5) above, the evaluation accuracy can be improved by performing the operation evaluation on the server.

上記(6)の場合、歩行者の動作を取得、判断及び評価することができる。
上記(7)の場合、児童の動作を取得、判断及び評価することができる。
上記(8)の場合、移動者が端末を携帯し忘れることを抑制することができる。
上記(9)の場合、端末が移動者の肩部周辺に配置されることによって、動作の取得、判断及び評価の精度を向上させることができる。
上記(10)の場合、端末が移動者の肩部から背部周辺に配置されることによって、端末が移動者の各種動作に干渉することを抑制し、動作の取得、判断及び評価の精度を向上させることができる。
In the case of (6) above, the pedestrian's motion can be acquired, determined, and evaluated.
In the case of (7) above, the child's movements can be acquired, judged, and evaluated.
In the case of (8) above, it is possible to prevent the moving person from forgetting to carry the terminal.
In the case of (9) above, the accuracy of acquisition, judgment, and evaluation of motion can be improved by placing the terminal around the shoulder of the moving person.
In the case of (10) above, by placing the terminal around the shoulder and back of the moving person, interference of the terminal with various movements of the moving person is suppressed, and the accuracy of movement acquisition, judgment, and evaluation is improved. can be done.

本発明の実施形態に係る情報通信システムの構成例を示す図である。1 is a diagram showing a configuration example of an information communication system according to an embodiment of the present invention. 本発明の実施形態に係る情報通信システムの利用シーン例を示す図である。1 is a diagram illustrating an example of a usage scene of an information communication system according to an embodiment of the present invention. 本発明の実施形態に係る第1携帯端末の構成例を示すブロック図である。FIG. 2 is a block diagram showing a configuration example of a first mobile terminal according to an embodiment of the present invention. 本発明の実施形態に係る第2携帯端末の構成例を示すブロック図である。FIG. 2 is a block diagram illustrating a configuration example of a second mobile terminal according to an embodiment of the present invention. 本発明の実施形態に係る第1携帯端末位置情報をデータセンターが第2携帯端末へ送信する処理手順例のフローチャートである。It is a flowchart of an example of a processing procedure in which a data center transmits first mobile terminal location information to a second mobile terminal according to an embodiment of the present invention. 本発明の実施形態に係る第2携帯端末の表示部上に表示される第1携帯端末位置情報の例を示す図である。It is a figure which shows the example of the 1st mobile terminal location information displayed on the display part of the 2nd mobile terminal based on embodiment of this invention. 本発明の実施形態に係るデータセンターが危険通知を第2携帯端末と第3携帯端末へ送信する処理手順例のフローチャートである。12 is a flowchart of an example of a processing procedure in which the data center transmits a danger notification to a second mobile terminal and a third mobile terminal according to an embodiment of the present invention. 本発明の実施形態に係る第1携帯端末が危険情報を受信した際の処理手順例のフローチャートである。It is a flowchart of an example of a processing procedure when the first mobile terminal according to the embodiment of the present invention receives danger information. 本発明の実施形態に係る第2携帯端末が危険情報を受信した際の処理手順例のフローチャートである。It is a flowchart of the example of a process procedure when the 2nd portable terminal based on embodiment of this invention receives danger information. 本発明の実施形態に係る第2携帯端末の表示部に表示される警告画像を含む第1携帯端末位置情報の例を示す図である。FIG. 7 is a diagram showing an example of first mobile terminal position information including a warning image displayed on the display unit of the second mobile terminal according to the embodiment of the present invention. 本発明の実施形態の第1変形例に係る情報通信システムの主な動作例を示す図である。It is a figure which shows the main operation example of the information communication system based on the 1st modification of embodiment of this invention. 本発明の実施形態の第1変形例に係る情報通信システムの構成例を示す図である。It is a figure showing the example of composition of the information communication system concerning the 1st modification of the embodiment of the present invention. 本発明の実施形態の第1変形例に係る所定位置、所定動作及びスコアの例を示す図である。FIG. 7 is a diagram showing an example of a predetermined position, a predetermined action, and a score according to a first modification of the embodiment of the present invention. 本発明の実施形態の第1変形例に係るデータセンターが行う処理手順例のフローチャートである。It is a flowchart of an example of a processing procedure performed by a data center according to a first modification of the embodiment of the present invention. 本発明の実施形態の第1変形例に係る第2携帯端末が行う処理手順例のフローチャートである。It is a flowchart of the example of a process procedure performed by the 2nd mobile terminal based on the 1st modification of embodiment of this invention. 本発明の実施形態の第1変形例に係る第2携帯端末の表示部に表示されるスコアを含む情報の画像例である。It is an image example of the information containing the score displayed on the display part of the 2nd mobile terminal based on the 1st modification of embodiment of this invention. 本発明の実施形態の第1変形例に係る所定位置における一時停止の動作分析方法の処理手順例のフローチャートである。It is a flowchart of the processing procedure example of the motion analysis method of temporary stop in a predetermined position concerning the 1st modification of an embodiment of the present invention. 本発明の実施形態の第1変形例に係る所定位置における左右確認の動作分析方法の処理手順例のフローチャートである。12 is a flowchart of a processing procedure example of a motion analysis method for checking left and right at a predetermined position according to a first modification of the embodiment of the present invention. 本発明の実施形態の第1変形例に係る所定位置における手挙げ動作の動作分析方法の処理手順例のフローチャートである。It is a flowchart of the processing procedure example of the motion analysis method of hand-raising motion at a predetermined position according to the first modification of the embodiment of the present invention. 本発明の実施形態の第2変形例に係る情報通信システムの構成の一例を示す図である。It is a figure which shows an example of the structure of the information communication system based on the 2nd modification of embodiment of this invention. 本発明の実施形態の第2変形例に係る報知の開始タイミングを模式的に示す図である。It is a figure which shows typically the start timing of the notification based on the 2nd modification of embodiment of this invention. 本発明の実施形態の第2変形例に係る報知部の処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process of the notification part based on the 2nd modification of embodiment of this invention. 図22に示されるステップS104の地理的位置接近報知処理の詳細を示すフローチャートである。23 is a flowchart showing details of the geographical position approach notification process in step S104 shown in FIG. 22. FIG. 本発明の実施形態の第3変形例に係る第1携帯端末装置の構成の一例を示す図である。It is a figure showing an example of composition of a 1st portable terminal device concerning a 3rd modification of an embodiment of the present invention. 本発明の実施形態の第3変形例に係る報知の開始タイミングを模式的に示す図である。It is a figure which shows typically the start timing of the notification based on the 3rd modification of embodiment of this invention. 本発明の実施形態の第3変形例に係る接近判定部及び報知部の処理の一例を示すフローチャートである。It is a flowchart which shows an example of the process of the approach determination part and the notification part based on the 3rd modification of embodiment of this invention. 図26に示されるステップS304の物体接近報知処理の詳細を示すフローチャートである。27 is a flowchart showing details of the object approach notification process in step S304 shown in FIG. 26. FIG. 本発明の実施形態の第4変形例に係る第1携帯端末の構成の一例を示す図である。It is a figure which shows an example of the structure of the 1st mobile terminal based on the 4th modification of embodiment of this invention. 本発明の実施形態の第4変形例に係る所定動作の認識処理を行うタイミングを模式的に示す図である。It is a figure which shows typically the timing which performs the recognition process of the predetermined motion based on the 4th modification of embodiment of this invention. 本発明の実施形態の第4変形例に係る報知部の報知の停止処理の一例を示すフローチャートである。It is a flowchart which shows an example of the stop processing of the notification of the notification part concerning the 4th modification of an embodiment of the present invention.

以下、本発明の動作評価システムの実施形態について図面を参照しながら説明する。
本発明の動作評価システムは、例えば実施形態に係る情報通信システム1である。
<情報通信システム1の構成例>
図1は、本実施形態に係る情報通信システム1の構成例を示す図である。図1に示すように、情報通信システム1は、第1携帯端末2(第1端末)、第2携帯端末3(第2端末)、データセンター4(センター)及びサーバ5を備えている。第1携帯端末2、第2携帯端末3、データセンター4及びサーバ5は、ネットワーク6を介して相互に接続されている。
ネットワーク6は、例えば移動体通信網である。移動体通信網は、例えば第4世代移動体通信網又は第5世代移動体通信網等である。なお、ネットワーク6は、基地局等を備える。
DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the performance evaluation system of the present invention will be described with reference to the drawings.
The operation evaluation system of the present invention is, for example, the information communication system 1 according to the embodiment.
<Configuration example of information communication system 1>
FIG. 1 is a diagram showing a configuration example of an information communication system 1 according to the present embodiment. As shown in FIG. 1, the information communication system 1 includes a first mobile terminal 2 (first terminal), a second mobile terminal 3 (second terminal), a data center 4 (center), and a server 5. The first mobile terminal 2, the second mobile terminal 3, the data center 4, and the server 5 are interconnected via a network 6.
The network 6 is, for example, a mobile communication network. The mobile communication network is, for example, a fourth generation mobile communication network or a fifth generation mobile communication network. Note that the network 6 includes a base station and the like.

第1携帯端末2は、見守り対象である携帯者(例えば、子供などの児童)が携帯する端末である。第1携帯端末2は、通信機能を備えるロボットである。第1携帯端末2は、位置情報、同一グループ歩行者情報、周辺歩行者情報及び車両情報のうちの少なくとも1つを、ネットワーク6を介してデータセンター4へ送信する。第1携帯端末2は、データセンター4が送信した交通情報、メッセージ及び緊急情報のうちの少なくとも1つを、ネットワーク6を介して受信する。
なお、第1携帯端末2の構成については後述する。同一グループ歩行者情報とは、例えば通学者が一緒に登校又は下校している同一グループ歩行者を示す同一グループ歩行者情報である。周辺歩行者情報とは、携帯者の周辺を歩いている歩行者を示す情報である。車両情報とは、歩行している道路の車両情報である。
The first mobile terminal 2 is a terminal carried by a wearer (for example, a child) who is to be watched over. The first mobile terminal 2 is a robot equipped with a communication function. The first mobile terminal 2 transmits at least one of position information, same group pedestrian information, surrounding pedestrian information, and vehicle information to the data center 4 via the network 6. The first mobile terminal 2 receives at least one of the traffic information, the message, and the emergency information transmitted by the data center 4 via the network 6.
Note that the configuration of the first mobile terminal 2 will be described later. The same group pedestrian information is, for example, same group pedestrian information indicating the same group of pedestrians who are commuting to or from school together. Surrounding pedestrian information is information indicating pedestrians walking around the carrying person. Vehicle information is vehicle information about the road on which the user is walking.

第2携帯端末3は、見守り対象である携帯者(例えば、子供などの児童)の保護者が所持する端末である。第2携帯端末3は、例えばスマートフォン、タブレット端末又はスマートウォッチ等である。第2携帯端末3は、データセンター4が送信した第1携帯端末2の位置に関する第1携帯端末位置情報を、ネットワーク6を介して受信する。なお、第1携帯端末位置情報は画像情報である。なお、第2携帯端末3の構成については後述する。 The second mobile terminal 3 is a terminal owned by a guardian of a wearer (for example, a child) who is being watched over. The second mobile terminal 3 is, for example, a smartphone, a tablet terminal, a smart watch, or the like. The second mobile terminal 3 receives, via the network 6, the first mobile terminal position information regarding the position of the first mobile terminal 2 transmitted by the data center 4. Note that the first mobile terminal position information is image information. Note that the configuration of the second mobile terminal 3 will be described later.

データセンター4は、通信部41、制御部42、モデル記憶部43及び記憶部44を備えている。
通信部41は、第1携帯端末2からネットワーク6を介して受信した位置情報、同一グループ歩行者情報、周辺歩行者情報及び車両情報などを制御部42に出力する。通信部41は、サーバ5からネットワーク6を介して受信した災害情報、不審者情報及び緊急情報などを制御部42に出力する。通信部41は、制御部42が出力する危険通知を、ネットワーク6を介して第1携帯端末2へ送信する。通信部41は、制御部42が出力する交通情報、メッセージ及び緊急情報などを、ネットワーク6を介して第1携帯端末2へ送信する。
通信部41は、制御部42が出力する第1携帯端末位置情報、緊急通知及び音声メッセージなどを、ネットワーク6を介して第2携帯端末3へ送信する。また、通信部41は、第1携帯端末2から加速度センサ28の検出値の信号を受信し、受信した信号を制御部42に出力する。
The data center 4 includes a communication section 41, a control section 42, a model storage section 43, and a storage section 44.
The communication unit 41 outputs position information, same group pedestrian information, surrounding pedestrian information, vehicle information, etc. received from the first mobile terminal 2 via the network 6 to the control unit 42 . The communication unit 41 outputs disaster information, suspicious person information, emergency information, etc. received from the server 5 via the network 6 to the control unit 42 . The communication unit 41 transmits the danger notification output by the control unit 42 to the first mobile terminal 2 via the network 6. The communication unit 41 transmits traffic information, messages, emergency information, etc. output by the control unit 42 to the first mobile terminal 2 via the network 6.
The communication unit 41 transmits the first mobile terminal location information, emergency notification, voice message, etc. output by the control unit 42 to the second mobile terminal 3 via the network 6. The communication unit 41 also receives a signal of the detected value of the acceleration sensor 28 from the first mobile terminal 2 and outputs the received signal to the control unit 42 .

制御部42は、第1携帯端末2から受信した位置情報を記憶部44に格納する。制御部42は、サーバ5から受信した不審者情報を記憶部44に記憶させる。なお、不審者情報には、不審者が現れた位置情報及び現れた時刻等が含まれている。
制御部42は、記憶部44が格納する位置情報と地図情報に基づいて、第1携帯端末2を所持する携帯者の移動軌跡を生成する。制御部42は、地図情報に生成した移動軌跡を合わせた情報を第1携帯端末位置情報として生成する。制御部42は、生成した第1携帯端末位置情報を通信部41に出力する。
制御部42は、第1携帯端末2から受信した位置情報及び車両情報と、サーバ5から受信した緊急情報、災害情報及び不審者情報と、モデル記憶部43が記憶するモデル情報と、記憶部44が記憶する地図情報及び位置情報とに基づいて危険箇所を設定し、設定した危険箇所を示す情報を記憶部44に記憶させる。なお、危険箇所とは、災害が発生した箇所、交通事故が多い箇所及び不審者が現れた箇所等の危険が発生する可能性がある特定地点である。制御部42は、記憶部44が記憶する地図情報及び危険箇所を示す情報と、受信した位置情報とに基づいて危険通知を生成し、生成した危険通知を通信部41に出力する。
The control unit 42 stores the position information received from the first mobile terminal 2 in the storage unit 44 . The control unit 42 causes the storage unit 44 to store the suspicious person information received from the server 5. Note that the suspicious person information includes information on the location where the suspicious person appeared, the time at which the suspicious person appeared, and the like.
The control unit 42 generates a movement trajectory of the person carrying the first mobile terminal 2 based on the position information and map information stored in the storage unit 44 . The control unit 42 generates information combining the map information and the generated movement trajectory as the first mobile terminal position information. The control unit 42 outputs the generated first mobile terminal position information to the communication unit 41.
The control unit 42 stores the location information and vehicle information received from the first mobile terminal 2, the emergency information, disaster information, and suspicious person information received from the server 5, the model information stored in the model storage unit 43, and the storage unit 44. A dangerous place is set based on the map information and position information stored in the storage unit 44, and information indicating the set dangerous place is stored in the storage unit 44. Note that a dangerous location is a specific location where danger may occur, such as a location where a disaster has occurred, a location where many traffic accidents occur, and a location where a suspicious person has appeared. The control unit 42 generates a danger notice based on the map information and information indicating the dangerous location stored in the storage unit 44 and the received position information, and outputs the generated danger notice to the communication unit 41.

制御部42は、第1携帯端末2から受信した位置情報及び車両情報と、サーバ5から受信した緊急情報と、モデル記憶部43が記憶するモデル情報と、記憶部44が記憶する地図情報及び位置情報とに基づいて、交通情報、メッセージ及び緊急情報のうち少なくとも1つを生成する。なお、メッセージは音声信号であり、テキスト情報を言語モデル又は辞書を用いて周知の手法で音声信号に変換したものである。制御部42は、生成した交通情報、メッセージ及び緊急情報を通信部41に出力する。制御部42は、生成したメッセージを音声メッセージとし、緊急情報を緊急通知として通信部41に出力する。
また、制御部42は、携帯端末の電話番号又は識別情報に基づいて、携帯者が所持する第1携帯端末2と、保護者が所持する第2携帯端末3とを関連付けて記憶部44に記憶させる。これにより、データセンター4は、複数組の第1携帯端末2及び第2携帯端末3に対して処理を行う。
The control unit 42 stores the position information and vehicle information received from the first mobile terminal 2, the emergency information received from the server 5, the model information stored in the model storage unit 43, and the map information and position stored in the storage unit 44. At least one of traffic information, messages, and emergency information is generated based on the information. Note that the message is an audio signal, which is obtained by converting text information into an audio signal using a language model or dictionary using a well-known method. The control unit 42 outputs the generated traffic information, message, and emergency information to the communication unit 41. The control unit 42 outputs the generated message as a voice message and the emergency information as an emergency notification to the communication unit 41.
Further, the control unit 42 associates the first mobile terminal 2 owned by the carrier with the second mobile terminal 3 owned by the guardian based on the phone number or identification information of the mobile terminal, and stores the association in the storage unit 44. let Thereby, the data center 4 processes the plurality of sets of first mobile terminals 2 and second mobile terminals 3.

モデル記憶部43は、モデル情報として、統計地域交通モデル、交通予測モデル等を記憶している。
統計地域交通モデルとは、統計的に地域における交通状態等を示すものであり、移動体端末等から地図情報又は交通情報に関するデータをデータセンター4が取得し、各地域における交通情報等を統計的に示したモデルである。
交通予測モデルとは、過去に蓄積した各地域における交通状況から将来に亘る該当地域における交通量等を予測するモデルであり、前記統計地域交通モデルからのデータに基づいて決定してもよい。例えば、交通予測モデルは、第1携帯端末2を所持する携帯者の登下校のルートにおける、登下校時の交通量などであってもよい。
The model storage unit 43 stores statistical regional traffic models, traffic prediction models, etc. as model information.
A statistical regional traffic model is one that statistically shows traffic conditions in a region, and the data center 4 acquires data related to map information or traffic information from mobile terminals, etc., and statistically calculates traffic information, etc. in each region. This is the model shown in .
The traffic prediction model is a model that predicts the future traffic volume, etc. in a corresponding area based on traffic conditions in each area accumulated in the past, and may be determined based on data from the statistical regional traffic model. For example, the traffic prediction model may be the traffic volume when commuting to and from school on the route of the person carrying the first mobile terminal 2 to and from school.

記憶部44は、地図情報を記憶する。なお、地図情報は、例えば自宅から学校までの通学路を含む地図と、携帯者が寄り道するお店(例えば、スーパーマーケット、書店及び文房具屋等)の位置情報と、帰宅前に行く塾等の位置情報とを含む。また、地図情報は、歩道及び道路の経路ネットワーク(岐点、枝)等の情報を含む。また、記憶部44は、第1携帯端末2の位置情報を格納する。記憶部44は、危険箇所を示す情報と不審者情報を記憶する。記憶部44は、危険情報を生成する際に使用される所定値を記憶する。 The storage unit 44 stores map information. The map information includes, for example, a map that includes the route from home to school, location information of shops that the user detours to (e.g., supermarkets, bookstores, stationery stores, etc.), and locations of cram schools, etc. that the user goes to before returning home. Contains information. Furthermore, the map information includes information such as the route network (junctions, branches) of sidewalks and roads. Furthermore, the storage unit 44 stores position information of the first mobile terminal 2. The storage unit 44 stores information indicating dangerous locations and suspicious person information. The storage unit 44 stores predetermined values used when generating danger information.

サーバ5は、例えば学校及び区役所等に設置されている。サーバ5は、地震及び台風等の自然災害に関する災害情報と、不審者情報等とを、ネットワーク6を介してデータセンター4へ送信する。なお、データセンター4は、これらの情報を、サーバ5との通信によって取得してもよい。 The server 5 is installed at a school, a ward office, etc., for example. The server 5 transmits disaster information regarding natural disasters such as earthquakes and typhoons, suspicious person information, etc. to the data center 4 via the network 6. Note that the data center 4 may acquire this information through communication with the server 5.

次に、情報通信システム1の利用シーン例を説明する。
図2は、本実施形態に係る情報通信システム1の利用シーン例を示す図である。図2に示すように、第1携帯端末2は、例えばランドセルの肩ベルト等に取り付けられて用いられる。後述するように、第1携帯端末2は、マイクロフォン、レーダ、スピーカ、位置検出部等を備えている。第1携帯端末2は、例えば第1携帯端末2を所持する子供が発話した音声を取得して送信する。また、第1携帯端末2は、レーダの検知結果の信号をデータセンター4へ送信する。また、第1携帯端末2は、データセンター4が送信した情報及びメッセージを受信して再生及び報知する。ランドセルは、携行物、肩掛け鞄及び背負い鞄の一例である。
Next, an example of a usage scene of the information communication system 1 will be explained.
FIG. 2 is a diagram showing an example of a usage scene of the information communication system 1 according to the present embodiment. As shown in FIG. 2, the first mobile terminal 2 is used by being attached to, for example, a shoulder belt of a school bag. As will be described later, the first mobile terminal 2 includes a microphone, a radar, a speaker, a position detection section, and the like. The first mobile terminal 2 acquires and transmits, for example, a voice uttered by a child who owns the first mobile terminal 2. Further, the first mobile terminal 2 transmits a signal of the radar detection result to the data center 4. Further, the first mobile terminal 2 receives information and messages transmitted by the data center 4, and reproduces and broadcasts the information and messages. A school bag is an example of a carry-on item, a shoulder bag, and a backpack bag.

データセンター4は、第1携帯端末2から受信した情報及びサーバ5から受信した情報に基づいて生成した交通情報、メッセージ及び緊急情報を第1携帯端末2へ送信する。また、データセンター4は、第1携帯端末2から受信した情報と、サーバ5から受信した情報とに基づいて生成した第1携帯端末位置情報、緊急通知及び音声メッセージを第2携帯端末3へ送信する。なお、データセンター4は、例えば登下校時に他の子供が他の第1携帯端末2を所持している場合、これらの複数の第1携帯端末2が捉えたリアルタイム情報(例えば、現在位置、同一グループ歩行者情報、周辺歩行者情報及び車両情報等)を相互に利用して各情報を生成してもよい。 The data center 4 transmits traffic information, messages, and emergency information generated based on the information received from the first mobile terminal 2 and the information received from the server 5 to the first mobile terminal 2. The data center 4 also transmits the first mobile terminal location information, emergency notification, and voice message generated based on the information received from the first mobile terminal 2 and the information received from the server 5 to the second mobile terminal 3. do. Note that, for example, when another child is in possession of another first mobile terminal 2 when commuting to and from school, the data center 4 stores real-time information (for example, current location, same (Group pedestrian information, surrounding pedestrian information, vehicle information, etc.) may be mutually used to generate each information.

第2携帯端末3は、第1携帯端末2を所持する子供が歩いているルートを含む地図情報等を含む第1携帯端末位置情報をデータセンター4から受信し、受信した第1携帯端末位置情報を状況情報として表示する。また、第2携帯端末3は、データセンター4が送信した緊急通知及び音声メッセージを受信し、受信した緊急通知又は音声メッセージを表示又は再生する。なお、第2携帯端末3に表示される画像については後述する。 The second mobile terminal 3 receives from the data center 4 the first mobile terminal position information including map information including the route that the child who owns the first mobile terminal 2 is walking, and receives the received first mobile terminal position information. Display as status information. Further, the second mobile terminal 3 receives the emergency notification and audio message sent by the data center 4, and displays or reproduces the received emergency notification or audio message. Note that the image displayed on the second mobile terminal 3 will be described later.

サーバ5は、例えば防災行政無線による放送内容を、ネットワーク6を介してデータセンター4へ送信する。
なお、図2に示した利用シーンは一例であり、これに限らない。
The server 5 transmits, for example, broadcast content by disaster prevention administrative radio to the data center 4 via the network 6.
Note that the usage scene shown in FIG. 2 is an example, and is not limited to this.

<第1携帯端末2の構成例>
次に、第1携帯端末2の構成例を説明する。
図3は、本実施形態に係る第1携帯端末2の構成例を示すブロック図である。図3に示すように、第1携帯端末2は、通信部21、レーダ22、マイクロフォン23、位置検出部24、バイブレータ25、スピーカ26、表示部27、加速度センサ28及び制御部29を備える。なお、第1携帯端末2は、操作部を備えてもよい。
<Configuration example of first mobile terminal 2>
Next, a configuration example of the first mobile terminal 2 will be explained.
FIG. 3 is a block diagram showing a configuration example of the first mobile terminal 2 according to the present embodiment. As shown in FIG. 3, the first mobile terminal 2 includes a communication section 21, a radar 22, a microphone 23, a position detection section 24, a vibrator 25, a speaker 26, a display section 27, an acceleration sensor 28, and a control section 29. Note that the first mobile terminal 2 may include an operation section.

通信部21は、例えば、通信用ICカードと、通信アンテナと、通信モジュールとを備える。
通信部21は、制御部29が出力する情報(例えば、位置情報、同一グループ歩行者情報、周辺歩行者情報及び車両情報)を、ネットワーク6を介してデータセンター4へ送信する。通信部21は、データセンター4が送信した情報(例えば、交通情報、メッセージ及び緊急情報)を受信し、受信した情報(例えば、交通情報、メッセージ及び緊急情報)を制御部29に出力する。通信部21は、データセンター4が送信した危険情報を受信し、受信した危険情報を制御部29に出力する。
The communication unit 21 includes, for example, a communication IC card, a communication antenna, and a communication module.
The communication unit 21 transmits information output by the control unit 29 (for example, position information, same group pedestrian information, surrounding pedestrian information, and vehicle information) to the data center 4 via the network 6. The communication unit 21 receives information (for example, traffic information, messages, and emergency information) transmitted by the data center 4 and outputs the received information (for example, traffic information, messages, and emergency information) to the control unit 29 . The communication unit 21 receives the danger information transmitted from the data center 4 and outputs the received danger information to the control unit 29.

レーダ22は、第1携帯端末2の周囲における前方の物体を検知するフロントレーダと、第1携帯端末2の周囲における後方(例えば、フロントレーダよりも後方)の物体を検知するリヤレーダとを備える。フロントレーダ及びリヤレーダは、例えばミリ波レーダなどである。レーダ22は、例えば外部の物体に対する距離、相対速度、相対位置及び方位等に係る検知信号を制御部29に出力する。 The radar 22 includes a front radar that detects objects in front of the first mobile terminal 2 and a rear radar that detects objects behind the first mobile terminal 2 (for example, behind the front radar). The front radar and rear radar are, for example, millimeter wave radars. The radar 22 outputs detection signals relating to, for example, distance, relative velocity, relative position, and direction to an external object to the control unit 29.

マイクロフォン23は、収音により得られる信号(例えば、音声信号など)を制御部29に出力する。なお、マイクロフォン23は、複数のマイクロフォンによって構成されるマイクロフォンアレイであってもよい。
位置検出部24は、衛星などから測位信号を受信する測位信号受信アンテナを備える。位置検出部24は、受信した測位信号を制御部29に出力する。なお、第1携帯端末2は、例えば基地局との通信に基づいて現在位置を示す情報を取得してもよい。
The microphone 23 outputs a signal (for example, an audio signal) obtained by collecting sound to the control unit 29 . Note that the microphone 23 may be a microphone array composed of a plurality of microphones.
The position detection unit 24 includes a positioning signal receiving antenna that receives positioning signals from a satellite or the like. The position detection unit 24 outputs the received positioning signal to the control unit 29. Note that the first mobile terminal 2 may acquire information indicating the current location based on communication with a base station, for example.

バイブレータ25は、振動子であり、制御部29が出力する報知情報に応じて振動を発生させる。
スピーカ26は、制御部29が出力する信号(例えば、音声信号)を音に変換する。
表示部27は、制御部29が出力する報知情報に応じて動作する。表示部27は、例えば赤色、緑色及び青色の3色発光のLED(発光ダイオード)を備える。なお、表示部27は、例えば、液晶表示装置、有機EL(エレクトロルミネッセンス)表示装置又は電子インク表示装置等であってもよい。
加速度センサ28は、第1携帯端末2のX軸、Y軸及びZ軸の3方向の加速度を検出し、検出した加速度の信号を制御部29に出力する。
The vibrator 25 is a vibrator, and generates vibrations according to the notification information output by the control unit 29.
The speaker 26 converts a signal (for example, an audio signal) output by the control unit 29 into sound.
The display unit 27 operates according to the notification information output by the control unit 29. The display unit 27 includes, for example, LEDs (light emitting diodes) that emit light in three colors: red, green, and blue. Note that the display section 27 may be, for example, a liquid crystal display device, an organic EL (electroluminescence) display device, an electronic ink display device, or the like.
The acceleration sensor 28 detects acceleration of the first mobile terminal 2 in three directions: the X-axis, the Y-axis, and the Z-axis, and outputs a signal of the detected acceleration to the control unit 29.

制御部29は、レーダ22が出力する検知信号を取得する。制御部29は、マイクロフォン23が出力する音声信号を取得する。制御部29は、位置検出部24が出力する測位情報を取得する。制御部29は、通信部21が出力する危険情報を取得する。制御部29は、位置検出部24から取得した測位情報に基づく位置情報を通信部21に出力する。制御部29は、例えばレーダ22から取得した検知信号から周知の認識手法を用いて人が含まれているか否かを判別する。制御部29は、検知信号に人が含まれている場合、その検知信号を同一グループ歩行者情報又は周辺歩行者情報とし、同一グループ歩行者情報又は周辺歩行者情報を通信部21に出力する。なお、制御部29は、例えば、検知信号に含まれている人の大きさが閾値未満の場合に周辺歩行者と判別し、閾値以上の場合に同一グループ歩行者と判別する。また、制御部29は、検知信号から周知の認識手法を用いて車両が含まれているか否かを判別する。制御部29は、検知信号に車両が含まれている場合、その検知信号を車両情報とし、車両情報を通信部21に出力する。 The control unit 29 acquires the detection signal output by the radar 22. The control unit 29 acquires the audio signal output by the microphone 23. The control unit 29 acquires the positioning information output by the position detection unit 24. The control unit 29 acquires the danger information output by the communication unit 21. The control unit 29 outputs position information based on the positioning information acquired from the position detection unit 24 to the communication unit 21. The control unit 29 uses a well-known recognition method to determine whether a person is included, based on the detection signal obtained from the radar 22, for example. When a person is included in the detection signal, the control unit 29 sets the detection signal as same group pedestrian information or surrounding pedestrian information, and outputs the same group pedestrian information or surrounding pedestrian information to the communication unit 21 . Note that, for example, the control unit 29 determines that the person included in the detection signal is a nearby pedestrian when the size of the person is less than a threshold value, and determines that the person is a pedestrian in the same group when the size of the person is larger than the threshold value. Further, the control unit 29 determines whether or not a vehicle is included from the detection signal using a well-known recognition method. When the detection signal includes a vehicle, the control unit 29 uses the detection signal as vehicle information and outputs the vehicle information to the communication unit 21 .

制御部29は、通信部21が出力する情報(例えば、交通情報、メッセージ及び緊急情報)を取得する。制御部29は、通信部21からの情報が音声信号の場合、音声信号をスピーカ26に出力する。制御部29は、通信部21からの情報が音声信号ではない場合、情報を表示部27及びバイブレータ25の少なくとも1つに出力する。なお、制御部29は、通信部21からの情報を表示部27に出力する場合、例えば情報に応じて発光させる色又は点滅状態等を制御する。また、制御部29は、通信部21からの情報をバイブレータ25に出力する場合、例えば情報に応じて振動間隔又は振動の強さを制御する。 The control unit 29 acquires information (for example, traffic information, messages, and emergency information) output by the communication unit 21. If the information from the communication unit 21 is an audio signal, the control unit 29 outputs the audio signal to the speaker 26 . If the information from the communication unit 21 is not an audio signal, the control unit 29 outputs the information to at least one of the display unit 27 and the vibrator 25. Note that, when outputting information from the communication unit 21 to the display unit 27, the control unit 29 controls, for example, the color of the light emitted, the blinking state, etc. according to the information. Further, when outputting information from the communication unit 21 to the vibrator 25, the control unit 29 controls the vibration interval or vibration intensity depending on the information, for example.

制御部29は、危険情報に基づいて、音声メッセージを生成し、生成した音声メッセージをスピーカ26に出力する。また、制御部29は、危険情報に基づいて報知情報を生成し、生成した報知情報をバイブレータ25に出力する。
制御部29は、加速度センサ28が出力する検出値を取得し、取得した検出値を通信部21によって、データセンター4へ送信する。
The control unit 29 generates a voice message based on the danger information, and outputs the generated voice message to the speaker 26. Further, the control unit 29 generates notification information based on the danger information, and outputs the generated notification information to the vibrator 25.
The control unit 29 acquires the detected value output by the acceleration sensor 28 and transmits the acquired detected value to the data center 4 through the communication unit 21.

<第2携帯端末3の構成例>
次に、第2携帯端末3の構成例を説明する。
図4は、本実施形態に係る第2携帯端末3の構成例を示すブロック図である。図4に示すように、第2携帯端末3は、通信部31、マイクロフォン32、操作部33、表示部34、スピーカ35、制御部36及びバイブレータ37を備える。
<Configuration example of second mobile terminal 3>
Next, a configuration example of the second mobile terminal 3 will be explained.
FIG. 4 is a block diagram showing a configuration example of the second mobile terminal 3 according to this embodiment. As shown in FIG. 4, the second mobile terminal 3 includes a communication section 31, a microphone 32, an operation section 33, a display section 34, a speaker 35, a control section 36, and a vibrator 37.

通信部31は、データセンター4が送信した第1携帯端末位置情報を受信し、受信した第1携帯端末位置情報を制御部36に出力する。通信部31は、データセンター4が送信した緊急通知又は音声メッセージを受信し、受信した緊急通知又は音声メッセージを制御部36に出力する。
マイクロフォン32は、収音により得られる信号(例えば、音声信号など)を制御部36に出力する。なお、マイクロフォン32は、複数のマイクロフォンによって構成されるマイクロフォンアレイであってもよい。
The communication unit 31 receives the first mobile terminal position information transmitted by the data center 4 and outputs the received first mobile terminal position information to the control unit 36. The communication unit 31 receives the emergency notification or voice message sent by the data center 4 and outputs the received emergency notification or voice message to the control unit 36 .
The microphone 32 outputs a signal (for example, an audio signal) obtained by collecting sound to the control unit 36 . Note that the microphone 32 may be a microphone array composed of a plurality of microphones.

操作部33は、例えば表示部34上に設けられたタッチパネルセンサである。操作部33は、利用者の操作による信号を制御部36に出力する。
表示部34は、制御部36が出力する第1携帯端末位置情報を表示する。表示部34は、例えば、液晶表示装置、有機EL表示装置又は電子インク表示装置等である。
スピーカ35は、制御部36が出力する信号(例えば、音声信号など)を音に変換する。
バイブレータ37は、振動子であり、制御部36が出力する報知情報に応じて振動を発生させる。
The operation unit 33 is, for example, a touch panel sensor provided on the display unit 34. The operation unit 33 outputs a signal generated by a user's operation to the control unit 36 .
The display unit 34 displays the first mobile terminal position information output by the control unit 36. The display unit 34 is, for example, a liquid crystal display device, an organic EL display device, an electronic ink display device, or the like.
The speaker 35 converts a signal (for example, an audio signal) output by the control unit 36 into sound.
The vibrator 37 is a vibrator, and generates vibrations according to the notification information output by the control unit 36.

制御部36は、通信部31が出力する第1携帯端末位置情報を取得する。制御部36は、通信部31が出力する緊急通知又は音声メッセージを取得する。制御部36は、取得した第1携帯端末位置情報を表示部34に出力する。制御部36は、緊急通知が画像情報の場合、緊急情報を表示部34に出力する。制御部36は、取得した音声メッセージをスピーカ35に出力する。制御部36は、通信部31が出力する危険情報を取得する。制御部36は、危険情報に基づいて、音声メッセージを生成し、生成した音声メッセージをスピーカ35に出力する。又は、制御部36は、危険情報に基づいて報知情報を生成し、生成した報知情報をバイブレータ37に出力する。 The control unit 36 acquires the first mobile terminal position information output by the communication unit 31. The control unit 36 acquires the emergency notification or voice message output by the communication unit 31. The control unit 36 outputs the acquired first mobile terminal position information to the display unit 34. When the emergency notification is image information, the control unit 36 outputs the emergency information to the display unit 34. The control unit 36 outputs the acquired voice message to the speaker 35. The control unit 36 acquires the danger information output by the communication unit 31. The control unit 36 generates a voice message based on the danger information, and outputs the generated voice message to the speaker 35. Alternatively, the control unit 36 generates notification information based on the danger information and outputs the generated notification information to the vibrator 37.

<第1携帯端末位置情報の送信手順>
次に、第1携帯端末位置情報をデータセンター4が第2携帯端末3へ送信する処理手順例を説明する。
図5は、本実施形態に係る第1携帯端末位置情報をデータセンター4が第2携帯端末3へ送信する処理手順例のフローチャートである。
<Procedure for transmitting first mobile terminal location information>
Next, an example of a processing procedure in which the data center 4 transmits the first mobile terminal location information to the second mobile terminal 3 will be described.
FIG. 5 is a flowchart of an example of a processing procedure in which the data center 4 transmits the first mobile terminal location information to the second mobile terminal 3 according to the present embodiment.

(ステップS11)制御部42は、第1携帯端末2から位置情報を、ネットワーク6を介して通信部41によって受信する。なお、位置情報には、受信した時刻情報が含まれている。
(ステップS12)制御部42は、受信した位置情報を記憶部44に格納する。
(Step S11) The control unit 42 receives position information from the first mobile terminal 2 via the network 6 by the communication unit 41. Note that the position information includes received time information.
(Step S12) The control unit 42 stores the received position information in the storage unit 44.

(ステップS13)制御部42は、記憶部44が記憶する位置情報と地図情報を用いて、第1携帯端末位置情報を生成する。なお、制御部42は、位置情報に含まれる時刻情報を時系列順に繋いで、第1携帯端末2を所持する携帯者の移動軌跡を生成する。続けて、制御部42は、第1携帯端末位置情報を、ネットワーク6を介して通信部41によって第2携帯端末3へ送信する。 (Step S13) The control unit 42 generates first mobile terminal position information using the position information and map information stored in the storage unit 44. Note that the control unit 42 connects the time information included in the position information in chronological order to generate a movement trajectory of the person carrying the first mobile terminal 2. Subsequently, the control unit 42 transmits the first mobile terminal position information to the second mobile terminal 3 via the network 6 through the communication unit 41 .

なお、データセンター4は、例えば、第1携帯端末位置情報の送信リクエストを第2携帯端末3から受信した場合に、図5に示した処理を行う。第1携帯端末位置情報の送信リクエストは、保護者による第2携帯端末3の操作部33に対する操作に応じて、制御部36から通信部31を介して送信される。
また、データセンター4は、例えば、予め設定されている時刻に、図5に示した処理を実行してもよい。予め設定される時刻は、例えば、保護者による第2携帯端末3の操作部33に対する操作に応じて設定される携帯者の登校時刻及び下校時刻などである。
Note that, for example, when the data center 4 receives a request to transmit the first mobile terminal position information from the second mobile terminal 3, the data center 4 performs the processing shown in FIG. The request to send the first mobile terminal position information is transmitted from the control unit 36 via the communication unit 31 in response to the operation on the operation unit 33 of the second mobile terminal 3 by the guardian.
Further, the data center 4 may execute the process shown in FIG. 5 at a preset time, for example. The preset times are, for example, the school arrival time and school leaving time of the wearer, which are set in accordance with the operation of the operation unit 33 of the second mobile terminal 3 by the guardian.

図6は、本実施形態に係る第2携帯端末3の表示部34に表示される第1携帯端末位置情報の例を示す図である。
図6に示す第1携帯端末位置情報は、例えば携帯者の下校時の第1携帯端末位置情報である。この第1携帯端末位置情報は、第1携帯端末2を所持する携帯者の移動軌跡g11及び現在位置g12の情報を備える。
FIG. 6 is a diagram showing an example of first mobile terminal position information displayed on the display unit 34 of the second mobile terminal 3 according to the present embodiment.
The first mobile terminal position information shown in FIG. 6 is, for example, the first mobile terminal position information when the user is leaving school. This first mobile terminal position information includes information on a movement trajectory g11 and a current position g12 of the person carrying the first mobile terminal 2.

<危険通知の送信手順>
以下に、データセンター4が危険通知を第1携帯端末2と第2携帯端末3へ送信する処理手順例を説明する。
図7は、本実施形態に係るデータセンター4が危険通知を第1携帯端末2と第2携帯端末3へ送信する処理手順例のフローチャートである。
<Procedure for sending danger notification>
An example of a processing procedure in which the data center 4 transmits a danger notification to the first mobile terminal 2 and the second mobile terminal 3 will be described below.
FIG. 7 is a flowchart of an example of a processing procedure in which the data center 4 transmits a danger notification to the first mobile terminal 2 and the second mobile terminal 3 according to the present embodiment.

(ステップS21)データセンター4の制御部42は、サーバ5にアクセスする。
(ステップS22)制御部42は、危険箇所を示す情報と不審者情報をサーバ5から通信部41によって取得する。制御部42は、取得した危険箇所を示す情報と不審者情報を記憶部44に記憶させる。なお、危険箇所は、例えば不審者情報が得られた位置(緯度経度)を含む所定の範囲又は不審者情報が得られた番地等の範囲を含む。なお、範囲は、制御部42が設定してもよい。
(Step S21) The control unit 42 of the data center 4 accesses the server 5.
(Step S22) The control unit 42 obtains information indicating a dangerous location and suspicious person information from the server 5 using the communication unit 41. The control unit 42 causes the storage unit 44 to store the acquired information indicating the dangerous location and suspicious person information. Note that the dangerous location includes, for example, a predetermined range including the position (latitude and longitude) where the suspicious person information was obtained, or a range such as a street address where the suspicious person information was obtained. Note that the range may be set by the control unit 42.

(ステップS23)制御部42は、第1携帯端末2から位置情報を取得する。なお、位置情報は、データセンター4からのリクエストに基づいて、第1携帯端末2が送信してもよく、第1携帯端末2が所定の周期で送信してもよい。制御部42は、取得した位置情報を記憶部44に記憶させる。 (Step S23) The control unit 42 acquires position information from the first mobile terminal 2. Note that the position information may be transmitted by the first mobile terminal 2 based on a request from the data center 4, or may be transmitted by the first mobile terminal 2 at a predetermined cycle. The control unit 42 causes the storage unit 44 to store the acquired position information.

(ステップS24)制御部42は、記憶部44が記憶する地図情報と危険箇所を示す情報と位置情報とに基づいて、危険箇所と携帯者の現在位置との間の距離を算出する。
(ステップS25)制御部42は、算出した距離が記憶部44に記憶された所定値未満であるか否かを判定する。制御部42は、距離が所定値未満であると判定した場合(ステップS25;YES)、ステップS26の処理に進める。制御部42は、距離が所定値以上であると判定した場合(ステップS25;NO)、ステップS21の処理に戻す。
(Step S24) The control unit 42 calculates the distance between the dangerous spot and the current location of the wearer based on the map information, the information indicating the dangerous spot, and the position information stored in the storage unit 44.
(Step S25) The control unit 42 determines whether the calculated distance is less than a predetermined value stored in the storage unit 44. If the control unit 42 determines that the distance is less than the predetermined value (step S25; YES), the process proceeds to step S26. When the control unit 42 determines that the distance is equal to or greater than the predetermined value (step S25; NO), the process returns to step S21.

(ステップS26)制御部42は、危険情報を生成する。制御部42は、生成した危険情報を通信部41によって、第2携帯端末3へ送信することで危険を通知する。なお、制御部42は、危険情報が報知音の場合、第1携帯端末2が危険箇所に近づくにつれて、報知音を大きくする。
(ステップS27)制御部42は、生成した危険情報を通信部41によって、第1携帯端末2へ送信することで危険を通知する。なお、制御部42は、危険情報が報知音の場合、第1携帯端末2が危険箇所に近づくにつれて、報知音を大きくする。
(Step S26) The control unit 42 generates danger information. The control unit 42 notifies the second mobile terminal 3 of the danger by transmitting the generated danger information to the second mobile terminal 3 via the communication unit 41. In addition, when the danger information is a notification sound, the control unit 42 increases the notification sound as the first mobile terminal 2 approaches the dangerous location.
(Step S27) The control unit 42 notifies the first mobile terminal 2 of the danger by transmitting the generated danger information to the first mobile terminal 2 through the communication unit 41. In addition, when the danger information is a notification sound, the control unit 42 increases the notification sound as the first mobile terminal 2 approaches the dangerous location.

なお、上述した例では、データセンター4が、サーバ5から危険箇所を示す情報を取得する例を説明したが、これに限らない。危険箇所は、例えば保護者が第2携帯端末3の操作部33を操作して設定し、設定された情報をデータセンター4の制御部42が取得してもよい。 In addition, although the example mentioned above demonstrated the example where the data center 4 acquires the information which shows a dangerous location from the server 5, it is not limited to this. For example, the dangerous area may be set by a guardian by operating the operation unit 33 of the second mobile terminal 3, and the control unit 42 of the data center 4 may acquire the set information.

<危険通知の受信処理>
次に、携帯者が所持する第1携帯端末2が危険情報を受信した際の処理手順例を説明する。
図8は、本実施形態に係る第1携帯端末2が危険情報を受信した際の処理手順例のフローチャートである。
<Reception process of danger notification>
Next, an example of a processing procedure when the first mobile terminal 2 carried by the carrier receives danger information will be described.
FIG. 8 is a flowchart of an example of a processing procedure when the first mobile terminal 2 according to the present embodiment receives danger information.

(ステップS31)第1携帯端末2の制御部29は、データセンター4が送信した危険情報を通信部21によって受信する。
(ステップS32)制御部29は、危険情報に基づいて危険を知らせる音声メッセージを生成して、生成した音声メッセージをスピーカ26から再生させる。また、制御部29は、危険情報に基づいて、例えばブザー音を生成し、生成したブザー音をスピーカ26により再生する。なお、スピーカ26がブザーである場合、制御部29は、危険情報に基づいて所定の電圧をスピーカ26に出力する。これにより、制御部29は、危険情報に基づく音声出力を行う。なお、制御部29は、危険箇所と携帯者の現在位置との間の距離が短くなるほど、音量を大きくする。
(Step S31) The control unit 29 of the first mobile terminal 2 receives the danger information transmitted by the data center 4 through the communication unit 21.
(Step S32) The control unit 29 generates an audio message informing of danger based on the danger information, and causes the speaker 26 to reproduce the generated audio message. Further, the control unit 29 generates, for example, a buzzer sound based on the danger information, and reproduces the generated buzzer sound through the speaker 26. Note that when the speaker 26 is a buzzer, the control unit 29 outputs a predetermined voltage to the speaker 26 based on the danger information. Thereby, the control unit 29 performs audio output based on the danger information. Note that the control unit 29 increases the volume as the distance between the dangerous location and the current location of the wearer becomes shorter.

(ステップS33)制御部29は、スピーカ26からの音声出力が禁止されたバイブレータモードであるか否かを判別する。なお、制御部29は、バイブレータモードの設定を、例えば、第1携帯端末2が備える操作部(不図示)に対する操作に応じて実行してもよいし、第2携帯端末3からの指示に応じて実行してもよい。
制御部29は、バイブレータモードであると判別した場合(ステップS33;YES)、ステップS34の処理に進める。一方、制御部29は、バイブレータモードではない判別した場合(ステップS33;NO)、処理をステップS31に戻す。なお、制御部29は、バイブレータモードの場合、ステップS32の処理を行わなくてもよいし、又は、ステップS32の処理の代わりに表示部27を点滅等させてもよい。
(Step S33) The control unit 29 determines whether the mode is a vibrator mode in which audio output from the speaker 26 is prohibited. Note that the control unit 29 may set the vibrator mode in response to an operation on an operation unit (not shown) included in the first mobile terminal 2, or in response to an instruction from the second mobile terminal 3, for example. You can also execute it by
When the control unit 29 determines that the mode is the vibrator mode (step S33; YES), the control unit 29 advances the process to step S34. On the other hand, when the control unit 29 determines that the mode is not the vibrator mode (step S33; NO), the control unit 29 returns the process to step S31. In addition, in the case of the vibrator mode, the control unit 29 may not perform the process of step S32, or may cause the display unit 27 to blink or the like instead of the process of step S32.

(ステップS34)制御部29は、危険情報に基づいてバイブレータ25を駆動する。
なお、制御部29は、危険箇所と携帯者の現在位置との間の距離が短くなるほど、バイブレータ25の振動の振幅を大きくしてもよいし、又は、振動の間隔を短くしてもよい。
(Step S34) The control unit 29 drives the vibrator 25 based on the danger information.
Note that the control unit 29 may increase the amplitude of the vibrations of the vibrator 25 or shorten the interval between vibrations as the distance between the dangerous location and the current position of the wearer becomes shorter.

次に、保護者が所持する第2携帯端末3が危険情報を受信した際の処理手順例を説明する。
図9は、本実施形態に係る第2携帯端末3が危険情報を受信した際の処理手順例のフローチャートである。
Next, an example of a processing procedure when the second mobile terminal 3 owned by a guardian receives danger information will be described.
FIG. 9 is a flowchart of an example of a processing procedure when the second mobile terminal 3 receives danger information according to the present embodiment.

(ステップS41)第2携帯端末3の制御部36は、データセンター4が送信した危険情報を通信部31によって受信する。
(ステップS42)制御部36は、危険情報に基づいて危険を知らせる音声メッセージを生成して、生成した音声メッセージをスピーカ35から再生させる。又は、制御部36は、危険情報に基づいて、例えばブザー音を生成し、生成したブザー音をスピーカ35によって再生する。なお、スピーカ35がブザーである場合、制御部36は、危険情報に基づいて所定の電圧をスピーカ35に出力する。これにより、制御部36は、危険情報に基づく音声出力が行う。なお、制御部36は、危険箇所と携帯者の現在位置との間の距離が短くなるほど、音量を大きくする。
(Step S41) The control unit 36 of the second mobile terminal 3 receives the danger information transmitted by the data center 4 through the communication unit 31.
(Step S<b>42 ) The control unit 36 generates an audio message informing of danger based on the danger information, and causes the speaker 35 to reproduce the generated audio message. Alternatively, the control unit 36 may generate, for example, a buzzer sound based on the danger information, and the speaker 35 may reproduce the generated buzzer sound. Note that when the speaker 35 is a buzzer, the control unit 36 outputs a predetermined voltage to the speaker 35 based on the danger information. Thereby, the control unit 36 performs audio output based on the danger information. Note that the control unit 36 increases the volume as the distance between the dangerous location and the current location of the wearer becomes shorter.

(ステップS43)制御部36は、バイブレータモードであるか否かを判別する。なお、制御部36は、バイブレータモードの設定を、第2携帯端末3の操作部33が操作された結果に応じて設定する。制御部36は、バイブレータモードであると判別した場合(ステップS43;YES)、ステップS44の処理に進める。一方、制御部36は、バイブレータモードではない判別した場合(ステップS43;NO)、ステップS45の処理に進める。なお、制御部36は、バイブレータモードの場合、ステップS42の処理を行わなくてもよいし、又は、ステップS42の処理の代わりに表示部34を点滅等させてもよい。 (Step S43) The control unit 36 determines whether or not it is in the vibrator mode. Note that the control unit 36 sets the vibrator mode according to the result of the operation of the operation unit 33 of the second mobile terminal 3. When the control unit 36 determines that the mode is the vibrator mode (step S43; YES), the control unit 36 proceeds to the process of step S44. On the other hand, when the control unit 36 determines that the mode is not the vibrator mode (step S43; NO), the control unit 36 advances the process to step S45. In addition, in the case of the vibrator mode, the control unit 36 may not perform the process of step S42, or may cause the display unit 34 to blink or the like instead of the process of step S42.

(ステップS44)制御部36は、危険情報に基づいてバイブレータ37を駆動する。
なお、制御部36は、危険箇所と携帯者の現在位置との間の距離が短くなるほど、バイブレータ37の振動の振幅を大きくしてもよいし、又は、振動の間隔を短くしてもよい。
(Step S44) The control unit 36 drives the vibrator 37 based on the danger information.
Note that the control unit 36 may increase the amplitude of the vibration of the vibrator 37 or shorten the interval between vibrations as the distance between the dangerous location and the current position of the wearer becomes shorter.

(ステップS45)制御部36は、保護者が操作部33を操作した結果に基づいて、第1携帯端末位置情報の送信リクエストを通信部31によって、データセンター4へ送信する。データセンター4の制御部42は、受信した送信リクエストに基づいて、第1携帯端末位置情報に危険を知らせる警告画像を付与して、通信部31によって第2携帯端末3へ送信する。制御部36は、データセンター4が送信した第1携帯端末位置情報を通信部31によって受信する。制御部36は、受信した第1携帯端末位置情報を表示部34に表示させる。 (Step S45) Based on the result of the guardian's operation of the operation unit 33, the control unit 36 transmits a request to transmit the first mobile terminal position information to the data center 4 through the communication unit 31. Based on the received transmission request, the control unit 42 of the data center 4 adds a warning image to the first mobile terminal position information to notify of danger, and transmits the information to the second mobile terminal 3 through the communication unit 31 . The control unit 36 receives, through the communication unit 31, the first mobile terminal position information transmitted by the data center 4. The control unit 36 causes the display unit 34 to display the received first mobile terminal position information.

図10は、本実施形態に係る第2携帯端末3の表示部34に表示される警告画像を含む第1携帯端末位置情報の例を示す図である。
図10に示す第1携帯端末位置情報は、例えば携帯者の下校時の第1携帯端末位置情報である。この第1携帯端末位置情報は、第1携帯端末2を所持する携帯者の移動軌跡g11及び現在位置g12の情報と、危険箇所を示す画像g21と、警告画像g22とを備える。
図10に示す第1携帯端末位置情報では、携帯者が所持する第1携帯端末2の現在位置が、危険箇所内であるため、所定文言(例えば、「危険箇所にいます。ご注意ください!」)の警告画像g22が他の情報に重畳又は合成されて表示される。なお、警告画像は、制御部36が受信した警告情報に基づいて生成されてもよい。
FIG. 10 is a diagram showing an example of first mobile terminal position information including a warning image displayed on the display unit 34 of the second mobile terminal 3 according to the present embodiment.
The first mobile terminal position information shown in FIG. 10 is, for example, first mobile terminal position information when the wearer is leaving school. This first mobile terminal position information includes information on the movement trajectory g11 and current position g12 of the person carrying the first mobile terminal 2, an image g21 showing a dangerous spot, and a warning image g22.
In the first mobile terminal location information shown in FIG. 10, since the current position of the first mobile terminal 2 owned by the carrier is within a dangerous area, a predetermined message (for example, "You are in a dangerous area. Please be careful!") is displayed. ") warning image g22 is displayed superimposed or combined with other information. Note that the warning image may be generated based on warning information received by the control unit 36.

なお、第1携帯端末2の制御部29は、レーダ22から取得した検知信号を同一グループ歩行者情報、周辺歩行者情報又は車両情報として、通信部21によってデータセンター4へ送信してもよい。 Note that the control unit 29 of the first mobile terminal 2 may transmit the detection signal acquired from the radar 22 to the data center 4 through the communication unit 21 as same group pedestrian information, surrounding pedestrian information, or vehicle information.

また、データセンター4の制御部42は、例えばサーバ5から受信した情報に基づいて、交通量が多い箇所に第1携帯端末2の所持者が近づいたとき、交通情報を通信部41によって第1携帯端末2に送信してもよい。
なお、交通情報は音声信号であってもよい。第1携帯端末2の制御部29は、受信した交通情報を再生する。これにより、第1携帯端末2を所持する携帯者は、交通量が多い箇所に近づいたことを知ることができる。
また、データセンター4の制御部42は、例えばサーバ5から受信した情報に基づいて緊急情報を第1携帯端末2と第2携帯端末3へ送信してもよい。緊急情報とは、例えば災害や事故が発生した場合に、避難を呼びかける情報である。
Further, the control unit 42 of the data center 4 transmits traffic information to the first mobile terminal 2 via the communication unit 41 when the owner of the first mobile terminal 2 approaches a place with heavy traffic, for example, based on information received from the server 5. It may also be transmitted to the mobile terminal 2.
Note that the traffic information may be an audio signal. The control unit 29 of the first mobile terminal 2 reproduces the received traffic information. This allows the person carrying the first mobile terminal 2 to know that he or she is approaching a location with heavy traffic.
Further, the control unit 42 of the data center 4 may transmit emergency information to the first mobile terminal 2 and the second mobile terminal 3 based on information received from the server 5, for example. Emergency information is information that calls for evacuation in the event of a disaster or accident, for example.

以上のように、本実施形態では、携帯者が所持又は鞄等に取り付けた第1携帯端末2によって取得した位置情報を、データセンター4に集約して、保護者が所持する第2携帯端末3へ送信する。また、本実施形態では、不審者情報を、行政又は学校のサーバ5からデータセンター4へ集約する。データセンター4は、不審者情報を取得した際、第1携帯端末2の現在位置と危険箇所との距離が所定値未満の場合に、第1携帯端末2を所持する携帯者と、第2携帯端末3を所持する保護者とに、危険情報を送信する。
これにより、本実施形態によれば、第1携帯端末2の携帯者が危険箇所に近づいているときに、第1携帯端末2の携帯者(例えば、子供などの児童)又は第2携帯端末3の所持者(例えば、保護者など)に対して危険通知を行うことができる。
As described above, in this embodiment, the location information acquired by the first mobile terminal 2 carried by the carrier or attached to a bag or the like is aggregated in the data center 4, and the position information obtained by the second mobile terminal 2 carried by the guardian is Send to. Further, in this embodiment, suspicious person information is aggregated from the administrative or school server 5 to the data center 4. When the data center 4 acquires suspicious person information, if the distance between the current location of the first mobile terminal 2 and the dangerous location is less than a predetermined value, the data center Danger information is sent to the guardian who owns the terminal 3.
As a result, according to the present embodiment, when the person carrying the first portable terminal 2 approaches a dangerous place, the person carrying the first portable terminal 2 (for example, a child) or the second portable terminal 3 A danger notification can be sent to the owner (for example, a guardian, etc.) of the device.

また、本実施形態では、第1携帯端末2が危険箇所に近づくにつれて、警報音等を大きくする。
これにより、本実施形態によれば、第1携帯端末2の携帯者が危険箇所に近づいていることを、より一層、的確に通知することができる。
また、本実施形態では、第2携帯端末3は、第1携帯端末2の移動軌跡を取得する。
これにより、本実施形態によれば、第1携帯端末2の携帯者の移動軌跡(例えば、学校から自宅までの帰宅経路など)を第2携帯端末3の所持者が把握することができる。
Furthermore, in this embodiment, as the first mobile terminal 2 approaches a dangerous location, the alarm sound etc. is made louder.
Thereby, according to the present embodiment, it is possible to more accurately notify that the person carrying the first mobile terminal 2 is approaching a dangerous location.
Furthermore, in this embodiment, the second mobile terminal 3 acquires the movement trajectory of the first mobile terminal 2.
As a result, according to the present embodiment, the owner of the second mobile terminal 3 can grasp the movement trajectory of the person carrying the first mobile terminal 2 (for example, the route home from school to home, etc.).

<情報通信システムの第1変形例>
以下に、データセンター4Aが、第1携帯端末2から受信した情報に基づいて、通学経路等の所定位置において行うべき所定動作が行われた否かを判別して、判別した結果を第2携帯端末3へ送信する例を説明する。なお、後述するように所定位置は、上述した危険箇所を含む位置の情報であってもよい。
<First modification of information communication system>
Below, the data center 4A determines whether or not a predetermined action to be performed at a predetermined position such as on a school route is performed based on the information received from the first mobile terminal 2, and transmits the determined result to the second mobile terminal 2. An example of transmitting to terminal 3 will be explained. Note that, as described later, the predetermined position may be information on a position including the above-mentioned dangerous spot.

まず、実施形態の第1変形例の情報通信システム1Aの主な動作例を説明する。
図11は、実施形態の第1変形例に係る情報通信システム1Aの主な動作例を示す図である。
符号g100は、帰宅した際の第1携帯端末2と携帯者(例えば、子供などの児童)との対話例を示す図である。符号g100が示す図において、符号g101が子供の発話であり、符号g102が第1携帯端末2の発話である。
First, a main operation example of the information communication system 1A according to the first modification of the embodiment will be described.
FIG. 11 is a diagram showing a main operation example of the information communication system 1A according to the first modification of the embodiment.
Reference numeral g100 is a diagram illustrating an example of the interaction between the first mobile terminal 2 and the user (for example, a child) when the user returns home. In the diagram indicated by g100, g101 is the child's utterance, and g102 is the utterance of the first mobile terminal 2.

符号g110は、帰宅した際の子供と保護者との対話例を示す図である。符号g110が示す図において、符号g111が保護者の発話であり、符号g112が子供の発話であり、符号g113が第1携帯端末2の発話である。 Reference numeral g110 is a diagram showing an example of the interaction between the child and the parent when the child returns home. In the diagram indicated by g110, g111 is the utterance of the guardian, g112 is the child's utterance, and g113 is the utterance of the first mobile terminal 2.

符号g120は、第2携帯端末3に表示される画像例を示す図である。表示される画像は、データセンター4から受信した画像である。符号g121は、データセンター4から受信した画像である。画像g121は、スコアの画像g122、子供の移動軌跡の画像g122、確認箇所での動作確認結果の画像g123とg124が含まれている。 Reference numeral g120 is a diagram showing an example of an image displayed on the second mobile terminal 3. The displayed image is an image received from the data center 4. The code g121 is an image received from the data center 4. The image g121 includes an image g122 of the score, an image g122 of the child's movement trajectory, and images g123 and g124 of the movement confirmation results at the confirmation location.

<情報通信システム1Aの構成>
次に、情報通信システム1Aの構成例を説明する。
図12は、実施形態の第1変形例に係る情報通信システム1Aの構成例を示す図である。図12に示すように、情報通信システム1Aは、第1携帯端末2、第2携帯端末3、データセンター4A(センター)及びサーバ5を備えている。第1携帯端末2、第2携帯端末3、データセンター4A及びサーバ5は、ネットワーク6を介して相互に接続されている。なお、情報通信システム1と同様の動作を行う機能部については、同じ符号を用いて説明を省略又は簡略化する。図12に示すように、情報通信システム1と変形例の情報通信システム1Aとの差異は、データセンター4Aである。
<Configuration of information communication system 1A>
Next, a configuration example of the information communication system 1A will be explained.
FIG. 12 is a diagram illustrating a configuration example of an information communication system 1A according to a first modification of the embodiment. As shown in FIG. 12, the information communication system 1A includes a first mobile terminal 2, a second mobile terminal 3, a data center 4A (center), and a server 5. The first mobile terminal 2, the second mobile terminal 3, the data center 4A, and the server 5 are interconnected via a network 6. Note that for functional units that perform the same operations as those in the information communication system 1, the same reference numerals are used to omit or simplify the description. As shown in FIG. 12, the difference between the information communication system 1 and the information communication system 1A of the modification is a data center 4A.

図12に示すように、データセンター4Aは、通信部41、制御部42A、モデル記憶部43、記憶部44A、音声認識モデル記憶部45、音声認識部46及びシナリオ記憶部47を備えている。 As shown in FIG. 12, the data center 4A includes a communication section 41, a control section 42A, a model storage section 43, a storage section 44A, a speech recognition model storage section 45, a speech recognition section 46, and a scenario storage section 47.

音声認識モデル記憶部45は、例えば音響モデル、言語モデル、単語辞書等を記憶している。音響モデルとは、音の特徴量に基づくモデルであり、言語モデルとは、単語とその並び方の情報のモデルである。また、単語辞書とは、多数の語彙による辞書であり、例えば大語彙単語辞書である。 The speech recognition model storage unit 45 stores, for example, an acoustic model, a language model, a word dictionary, and the like. The acoustic model is a model based on sound feature amounts, and the language model is a model of information about words and how they are arranged. Further, the word dictionary is a dictionary with a large number of vocabulary words, for example, a large vocabulary word dictionary.

音声認識部46は、制御部42Aが出力する音声信号に対して発話区間の音声信号を検出する。発話区間の検出は、例えば所定のしきい値以上の音声信号を発話区間として検出する。なお、音声認識部46は、発話区間の検出を周知の他の手法を用いて行ってもよい。音声認識部46は、検出した発話区間の音声信号に対して、音声認識モデル記憶部45を参照して、周知の手法を用いて音声認識を行う。なお、音声認識部46は、例えば特開2015-64554号公報に開示されている手法等を用いて音声認識を行う。音声認識部46は、認識した認識結果に対して音声認識モデル記憶部45を参照してテキストに変換する。音声認識部46は、テキスト情報に対して音声認識モデル記憶部45を参照して形態素解析と係り受け解析を行う。係り受け解析には、例えば、Shift-reduce法や全域木の手法やチャンク同定の段階適用手法においてSVM(Support Vector Machines)を用いる。音声認識部46は、解析結果を制御部42Aに出力する。 The speech recognition section 46 detects the speech signal in the utterance section from the speech signal output by the control section 42A. The speech section is detected by detecting, for example, an audio signal equal to or higher than a predetermined threshold value as the speech section. Note that the speech recognition unit 46 may detect the utterance section using other well-known techniques. The speech recognition section 46 refers to the speech recognition model storage section 45 and performs speech recognition on the speech signal of the detected speech section using a well-known method. Note that the speech recognition unit 46 performs speech recognition using, for example, a method disclosed in Japanese Patent Application Publication No. 2015-64554. The speech recognition section 46 refers to the speech recognition model storage section 45 and converts the recognized recognition result into text. The speech recognition section 46 performs morphological analysis and dependency analysis on the text information by referring to the speech recognition model storage section 45 . For dependency analysis, SVM (Support Vector Machines) is used, for example, in the shift-reduce method, the spanning tree method, and the stepwise application method for chunk identification. The speech recognition section 46 outputs the analysis result to the control section 42A.

シナリオ記憶部47は、第1携帯端末2が用いられる環境で行われる対話を、例えばテキスト形式で記憶する。 The scenario storage unit 47 stores, for example, in text format, the dialogue that takes place in the environment in which the first mobile terminal 2 is used.

制御部42Aは、制御部42が行う処理に加えて以下の処理を行う。
制御部42Aは、第1携帯端末2から通信部41が受信したレーダ22の検知信号と、第1携帯端末2から通信部41が受信した加速度センサ28の検出値とを受信する。制御部42Aは、設定されている位置で所定動作が行われてか否かを、受信したレーダ22の検知信号と加速度センサ28の検出値の少なくとも1つに基づいて判別する。制御部42Aは、判別した結果に基づいて、例えば帰宅時のスコアを求める。制御部42Aは、求めたスコアを記憶部44Aに記憶させる。
制御部42Aは、子供の移動軌跡の画像に、スコアの画像と、判別した結果を示す画像とを含めた画像を生成する。制御部42Aは、第2携帯端末3からスコア送信のリクエストを受信した場合、生成した画像を第2携帯端末3へ送信する。なお、所定動作が行われたか否かの判別方法及びスコアの求め方については後述する。
また、制御部42Aは、音声認識部46が出力する解析結果を取得する。制御部42Aは、解析結果に基づいて、シナリオ記憶部47を参照して、第1携帯端末2から受信した音声信号に対する返答を選択する。制御部42Aは、選択した応答を、例えばフォルマント合成の手法等によって音声信号に変換し、変換した音声信号を通信部41によって第1携帯端末2へ送信する。
The control unit 42A performs the following processing in addition to the processing performed by the control unit 42.
The control unit 42A receives the detection signal of the radar 22 that the communication unit 41 receives from the first mobile terminal 2 and the detection value of the acceleration sensor 28 that the communication unit 41 receives from the first mobile terminal 2. The control unit 42A determines whether a predetermined operation is performed at the set position based on at least one of the received detection signal of the radar 22 and the detection value of the acceleration sensor 28. The control unit 42A calculates, for example, a score at the time of returning home based on the determined result. The control unit 42A stores the obtained score in the storage unit 44A.
The control unit 42A generates an image that includes an image of the child's movement trajectory, an image of the score, and an image showing the determined result. When the control unit 42A receives a score transmission request from the second mobile terminal 3, the control unit 42A transmits the generated image to the second mobile terminal 3. Note that a method for determining whether a predetermined action has been performed and a method for obtaining a score will be described later.
Further, the control unit 42A obtains the analysis results output by the speech recognition unit 46. Based on the analysis result, the control unit 42A refers to the scenario storage unit 47 and selects a response to the audio signal received from the first mobile terminal 2. The control unit 42A converts the selected response into an audio signal using, for example, a formant synthesis method, and transmits the converted audio signal to the first mobile terminal 2 through the communication unit 41.

記憶部44Aは、記憶部44が記憶する情報に加えて、所定位置を示す情報(緯度経度、地点名)に所定動作とスコアを関連付けて記憶する。また、記憶部44Aは、例えば帰宅時におけるスコアの合計を記憶する。また、記憶部44は、所定動作が行われたか否かを判別する際に用いる閾値を記憶する。さらに、記憶部44Aは、レーダ22の検知信号に対する検出に用いられる顔部のモデルデータ及び腕部のモデルデータを記憶する。 In addition to the information stored in the storage unit 44, the storage unit 44A stores information indicating a predetermined position (latitude and longitude, location name) in association with a predetermined action and a score. Furthermore, the storage unit 44A stores, for example, the total score at the time of returning home. Furthermore, the storage unit 44 stores a threshold value used when determining whether or not a predetermined operation has been performed. Furthermore, the storage unit 44A stores face model data and arm model data used for detection of the detection signal of the radar 22.

なお、保護者は、第2携帯端末3の操作部33を操作して、通学経路を予め設定してもよい。この場合、第2携帯端末3の制御部36は、通学経路を示す情報を、通信部31によってデータセンター4Aへ送信してもよい。また、保護者は、第2携帯端末3の操作部33を操作して、所定動作を行うべき所定位置を設定してもよい。この場合、第2携帯端末3の制御部36は、所定位置を示す情報を、通信部31によってデータセンター4Aへ送信してもよい。また、保護者は、第2携帯端末3の操作部33を操作して、所定動作を設定してもよい。この場合、第2携帯端末3の制御部36は、所定位置で行う所定動作を示す情報を、通信部31によってデータセンター4Aへ送信してもよい。
なお、データセンター4Aは、例えばサーバ5から危険箇所を取得し、取得した危険箇所を所定位置に設定してもよい。そして、所定位置の種類に応じて、所定動作を設定してもよい。
Note that the guardian may operate the operation unit 33 of the second mobile terminal 3 to set the school route in advance. In this case, the control unit 36 of the second mobile terminal 3 may transmit information indicating the school route to the data center 4A through the communication unit 31. Further, the guardian may operate the operation unit 33 of the second mobile terminal 3 to set a predetermined position at which a predetermined action should be performed. In this case, the control unit 36 of the second mobile terminal 3 may transmit information indicating the predetermined position to the data center 4A through the communication unit 31. Further, the guardian may operate the operation unit 33 of the second mobile terminal 3 to set a predetermined operation. In this case, the control unit 36 of the second mobile terminal 3 may transmit information indicating a predetermined operation to be performed at a predetermined position to the data center 4A through the communication unit 31.
Note that the data center 4A may, for example, acquire the dangerous spot from the server 5 and set the acquired dangerous spot at a predetermined position. Then, the predetermined operation may be set depending on the type of the predetermined position.

次に、所定位置、所定動作及びスコアの例を説明する。
図13は、実施形態の第1変形例に係る所定位置、所定動作及びスコアの例を示す図である。
なお、図13に示す例は、帰宅経路(帰宅路)における所定位置と、所定動作及びスコアの一部であり、スコアの合計が帰宅経路において100点になるように設定されている。
図13に示す例では、所定箇所は、A交差点と、B交差点と、C交差点である。所定動作は、例えばA交差点において、一時停止と左右確認である。また、スコアは、例えばA交差点において、一時停止が10、左右確認が10である。
制御部42Aは、A交差点において、一時停止の動作が行われていた場合にスコアを10、行われていなかった場合にスコアを0とする。そして、学校から自宅までにおけるスコアの合計を求め、求めたスコアの合計を記憶部44Aに記憶させる。なお、制御部42Aは、100点から、行われなかった所定動作のスコアを減算して合計のスコアを求めてもよい。
Next, an example of a predetermined position, a predetermined action, and a score will be explained.
FIG. 13 is a diagram illustrating an example of a predetermined position, a predetermined operation, and a score according to the first modification of the embodiment.
Note that the example shown in FIG. 13 is a predetermined position, a predetermined action, and a part of the score on the route home (home route), and the total score is set to be 100 points on the route home.
In the example shown in FIG. 13, the predetermined locations are intersection A, intersection B, and intersection C. The predetermined operation is, for example, at intersection A, stopping temporarily and checking left and right directions. Further, for example, at intersection A, the score is 10 for a temporary stop and 10 for checking left and right.
The control unit 42A sets the score to 10 if a temporary stop action has been performed at intersection A, and sets the score to 0 if no action has been taken. Then, the total score from school to home is determined, and the determined total score is stored in the storage section 44A. Note that the control unit 42A may calculate the total score by subtracting the score of the predetermined motion that was not performed from the 100 points.

次に、データセンター4Aが行う処理手順例を説明する。
図14は、実施形態の第1変形例に係るデータセンター4Aが行う処理手順例のフローチャートである。なお、図14に示す例は、制御部42Aが、レーダ22の検知信号に基づいて所定動作が行われたか否かを判別する例である。
Next, an example of a processing procedure performed by the data center 4A will be described.
FIG. 14 is a flowchart of an example of a processing procedure performed by the data center 4A according to the first modification of the embodiment. Note that the example shown in FIG. 14 is an example in which the control unit 42A determines whether a predetermined operation has been performed based on the detection signal of the radar 22.

(ステップS51)データセンター4Aの制御部42Aは、第1携帯端末2が送信した位置情報を受信する。
(ステップS52)制御部42Aは、第1携帯端末2が送信したレーダ22の検知信号を受信する。なお、第1携帯端末2は、所定周期毎に位置情報と検知信号をデータセンター4Aへ送信する。
(Step S51) The control unit 42A of the data center 4A receives the position information transmitted by the first mobile terminal 2.
(Step S52) The control unit 42A receives the detection signal of the radar 22 transmitted by the first mobile terminal 2. Note that the first mobile terminal 2 transmits position information and a detection signal to the data center 4A at predetermined intervals.

(ステップS53)制御部42Aは、位置が所定箇所の場合、受信した検知信号に基づいて、所定動作が行われたか否かを判別することで動作分析を行う。
(ステップS54)制御部42Aは、動作分析した結果と記憶部44Aが記憶する情報に基づいて、スコアリング処理を行う。なお、スコアリング処理とは、例えば、加点、減点処理である。
(Step S53) When the position is at a predetermined location, the control unit 42A performs motion analysis by determining whether or not a predetermined motion has been performed based on the received detection signal.
(Step S54) The control unit 42A performs a scoring process based on the result of the motion analysis and the information stored in the storage unit 44A. Note that the scoring process is, for example, point addition and point subtraction processing.

(ステップS55)制御部42Aは、第2携帯端末3からスコア送信のリクエストを受信したか否かを判別する。制御部42Aは、第2携帯端末3からリクエストを受信したと判別した場合(ステップS55;YES)、処理をステップS56に進める。一方、制御部42Aは、第2携帯端末3からリクエストを受信していないと判別した場合(ステップS55;NO)、処理をステップS51に戻す。 (Step S55) The control unit 42A determines whether a request for score transmission has been received from the second mobile terminal 3. When the control unit 42A determines that a request has been received from the second mobile terminal 3 (step S55; YES), the process proceeds to step S56. On the other hand, when the control unit 42A determines that no request has been received from the second mobile terminal 3 (step S55; NO), the process returns to step S51.

(ステップS56)制御部42Aは、子供の移動軌跡の画像に、スコアの画像及び判別した結果を示す画像を含めた画像を生成する。制御部42Aは、生成した画像を第2携帯端末3へ送信する。 (Step S56) The control unit 42A generates an image including an image of the score and an image showing the determined result in the image of the child's movement trajectory. The control unit 42A transmits the generated image to the second mobile terminal 3.

なお、図14に示した例では、データセンター4Aは、第2携帯端末3からリクエストを受信したと判別した場合にスコアを含む情報を送信する例を説明したが、これに限らない。データセンター4Aは、例えば保護者によって設定された時刻又は所定の周期毎にスコアを含む情報を送信するようにしてもよい。 Note that in the example shown in FIG. 14, an example has been described in which the data center 4A transmits information including the score when determining that a request has been received from the second mobile terminal 3, but the present invention is not limited to this. The data center 4A may transmit information including scores, for example, at a time set by a parent or at a predetermined period.

次に、第2携帯端末3が行う処理手順例を説明する。
図15は、実施形態の第1変形例に係る第2携帯端末3が行う処理手順例のフローチャートである。
(ステップS61)第2携帯端末3の制御部36は、データセンター4Aが送信したスコアを含む情報を受信する。
(ステップS62)制御部36は、受信したスコアを含む情報を表示部34に表示させる。
なお、図15に示した処理は、第2携帯端末3からリクエストを送信したとき、保護者によって設定された時刻又は所定の周期毎に実行されてもよい。
Next, an example of a processing procedure performed by the second mobile terminal 3 will be explained.
FIG. 15 is a flowchart of an example of a processing procedure performed by the second mobile terminal 3 according to the first modification of the embodiment.
(Step S61) The control unit 36 of the second mobile terminal 3 receives the information including the score transmitted from the data center 4A.
(Step S62) The control unit 36 causes the display unit 34 to display information including the received score.
Note that the process shown in FIG. 15 may be executed at a time set by the parent or at a predetermined period when a request is sent from the second mobile terminal 3.

図16は、実施形態の第1変形例に係る第2携帯端末3の表示部34に表示されるスコアを含む情報の画像例である。
画像g200は、表示部34上に表示される画像である。
符号g201は、学校を示している。符号g202は、自宅を示している。
符号g203は、子供の移動軌跡を示す画像である。
符号g211、g212およびg213は、所定箇所を示している。
FIG. 16 is an image example of information including scores displayed on the display unit 34 of the second mobile terminal 3 according to the first modification of the embodiment.
Image g200 is an image displayed on the display section 34.
Code g201 indicates a school. Code g202 indicates home.
Reference numeral g203 is an image showing the movement trajectory of the child.
Codes g211, g212, and g213 indicate predetermined locations.

符号g221は、符号g211における所定動作の判別結果を表している。なお、○印は、所定動作を行ったことを表している。
符号g222は、符号g212における所定動作の判別結果を表している。
符号g223は、符号g213における所定動作の判別結果を表している。なお、×印は、所定動作を行っていないことを表している。
符号g230は、合計スコアを表す画像である。
The code g221 represents the determination result of the predetermined operation in the code g211. Note that the circle mark indicates that a predetermined operation has been performed.
Symbol g222 represents the determination result of the predetermined operation at symbol g212.
The code g223 represents the determination result of the predetermined operation in the code g213. Note that the x mark indicates that the predetermined operation is not performed.
Symbol g230 is an image representing the total score.

なお、図16において、所定動作を行った場合の符号g221、g222を例えば青色で表示し、所定動作を行っていない場合の符号g223を、例えば赤色で表示してもよい。このような画像は、データセンター4Aの制御部42Aが生成する。 In addition, in FIG. 16, the symbols g221 and g222 when the predetermined operation is performed may be displayed in blue, for example, and the symbol g223 when the predetermined operation is not performed may be displayed in red, for example. Such an image is generated by the control unit 42A of the data center 4A.

以下、所定位置における一時停止の動作分析方法の例を説明する。
図17は、実施形態の第1変形例に係る所定位置における一時停止の動作分析方法の処理手順例のフローチャートである。なお、制御部42Aは、カウンタ値Tをゼロに初期化した後に以下の処理を開始する。また、制御部42Aは、以下の処理を所定位置で行う。
Hereinafter, an example of a motion analysis method for a temporary stop at a predetermined position will be described.
FIG. 17 is a flowchart of a processing procedure example of a motion analysis method for a temporary stop at a predetermined position according to a first modification of the embodiment. Note that the control unit 42A starts the following process after initializing the counter value T to zero. Further, the control unit 42A performs the following processing at a predetermined position.

(ステップS71)データセンター4Aの制御部42Aは、第1携帯端末2から位置情報を受信する。制御部42Aは、受信した位置情報を受信した時刻情報に関連付けて記憶部44に記憶させる。 (Step S71) The control unit 42A of the data center 4A receives position information from the first mobile terminal 2. The control unit 42A causes the storage unit 44 to store the received position information in association with the received time information.

(ステップS72)制御部42Aは、記憶部44Aに記憶させた前回の位置(現在時刻に最も近い時刻の位置情報)と、受信した位置情報とを比較し、前回と同じ位置であるか否かを判別する。制御部42Aは、前回と同じ位置であると判別した場合(ステップS72;YES)、ステップS73の処理に進める。一方、制御部42Aは、前回と同じ位置ではないと判別した場合(ステップS72;NO)、処理をステップS74に進める。 (Step S72) The control unit 42A compares the previous position stored in the storage unit 44A (position information at the time closest to the current time) with the received position information, and determines whether it is the same position as the previous time. Determine. When the control unit 42A determines that it is the same position as the previous time (step S72; YES), the control unit 42A proceeds to the process of step S73. On the other hand, when the control unit 42A determines that the position is not the same as the previous time (step S72; NO), the control unit 42A advances the process to step S74.

(ステップS73)制御部42Aは、カウンタ値Tに1を加算し、処理をステップS75に進める。
(ステップS74)制御部42Aは、カウンタ値Tに0を代入し、処理をステップS71に戻す。
(Step S73) The control unit 42A adds 1 to the counter value T, and advances the process to step S75.
(Step S74) The control unit 42A assigns 0 to the counter value T, and returns the process to step S71.

(ステップS75)制御部42Aは、カウンタ値Tが、所定動作が行われたか否かを判別する際に用いられる閾値より大きいか否かを判別する。制御部42Aは、カウンタ値Tが閾値より大きいと判別した場合(ステップS75;YES)、処理をステップS76に進める。一方、制御部42Aは、カウンタ値Tが閾値以下であると判別した場合(ステップS75;NO)、処理をステップS71に戻す。
(ステップS76)制御部42Aは、第1携帯端末2を所持する子供が所定位置で一時停止したと判別する。
(Step S75) The control unit 42A determines whether the counter value T is larger than a threshold value used to determine whether a predetermined operation has been performed. When the control unit 42A determines that the counter value T is larger than the threshold value (step S75; YES), the control unit 42A advances the process to step S76. On the other hand, when the control unit 42A determines that the counter value T is less than or equal to the threshold value (step S75; NO), the process returns to step S71.
(Step S76) The control unit 42A determines that the child holding the first mobile terminal 2 has paused at a predetermined position.

なお、制御部42Aは、一時停止の動作分析を、第1携帯端末2の加速度センサ28の検出値に基づいて行ってもよい。
この場合、ステップS71において、制御部42Aは加速度センサ28の検出値を受信する。そして、ステップS72において、制御部42Aは前回の検出値と今回の検出値との差がゼロを含む所定範囲内の場合に、同じ位置であると判別してもよい。
なお、制御部42Aは、子供が所定の動作を行ったか否かを、加速度センサ28の検出値と、他の情報(例えば、レーダ22が出力する検知信号など)との少なくとも1つに基づいて検出してもよい。
Note that the control unit 42A may perform the motion analysis of the temporary stop based on the detected value of the acceleration sensor 28 of the first mobile terminal 2.
In this case, the control unit 42A receives the detected value of the acceleration sensor 28 in step S71. Then, in step S72, the control unit 42A may determine that the positions are the same if the difference between the previous detected value and the current detected value is within a predetermined range that includes zero.
The control unit 42A determines whether the child has performed a predetermined action based on at least one of the detection value of the acceleration sensor 28 and other information (for example, a detection signal output by the radar 22). May be detected.

次に、所定位置における左右確認の動作分析方法の例を説明する。
図18は、実施形態の第1変形例に係る所定位置における左右確認の動作分析方法の処理手順例のフローチャートである。なお、制御部42Aは、以下の処理を所定位置で行う。
Next, an example of a motion analysis method for checking left and right at a predetermined position will be described.
FIG. 18 is a flowchart of a processing procedure example of a motion analysis method for checking left and right at a predetermined position according to a first modification of the embodiment. Note that the control unit 42A performs the following processing at a predetermined position.

(ステップS81)データセンター4Aの制御部42Aは、第1携帯端末2からレーダ22が出力する検知信号を受信する。
(ステップS82)制御部42Aは、受信した検知信号から周知の手法によって第1携帯端末2の携帯者の顔部を検出する。続けて、制御部42Aは、検出した顔部の検知信号を取得した時刻情報に関連付けて記憶部44Aに記憶させる。
(Step S81) The control unit 42A of the data center 4A receives the detection signal output by the radar 22 from the first mobile terminal 2.
(Step S82) The control unit 42A detects the face of the person carrying the first mobile terminal 2 from the received detection signal using a well-known method. Subsequently, the control unit 42A causes the storage unit 44A to store the detection signal of the detected face in association with the acquired time information.

(ステップS83)制御部42Aは、記憶部44Aに記憶させた顔部の検知信号に基づいて、取得した顔部の検知信号と、前回の顔部の検知信号とを比較する。制御部42Aは、比較した結果、顔部が左右に動いているか否かを判別する。制御部42Aは、顔部が左右に動いていると判別した場合(ステップS83;YES)、処理をステップS84に進める。一方、制御部42Aは、顔部が左右に動いていないと判別した場合(ステップS83;NO)、処理をステップS85に進める。 (Step S83) The control unit 42A compares the acquired facial detection signal with the previous facial detection signal based on the facial detection signal stored in the storage unit 44A. As a result of the comparison, the control unit 42A determines whether the face is moving left or right. When the control unit 42A determines that the face is moving left and right (step S83; YES), the control unit 42A advances the process to step S84. On the other hand, if the control unit 42A determines that the face is not moving left or right (step S83; NO), the control unit 42A advances the process to step S85.

(ステップS84)制御部42Aは、第1携帯端末2の携帯者が左右確認を行った(左右確認OK)と判別する。
(ステップS85)制御部42Aは、第1携帯端末2の携帯者が左右確認を行っていない(左右確認NG)と判別する。
(Step S84) The control unit 42A determines that the person carrying the first mobile terminal 2 has checked left and right (left and right check OK).
(Step S85) The control unit 42A determines that the person carrying the first mobile terminal 2 has not checked left and right (left and right check NG).

なお、左右確認の処理においても、制御部42Aは、加速度センサ28の検出値に基づいて、検出値の左右方向の値が所定値以上変化している場合に顔部が左右に動いたか否かを判別してもよい。
なお、制御部42Aは、携帯者が所定の動作を行ったか否かを、加速度センサ28の検出値と、他の情報(例えば、レーダ22が出力する検知信号など)との少なくとも1つに基づいて検出してもよい。
In addition, in the left-right confirmation process, the control unit 42A determines whether the face has moved left or right, based on the detected value of the acceleration sensor 28, if the detected value in the left-right direction has changed by a predetermined value or more. may be determined.
The control unit 42A determines whether the wearer has performed a predetermined action based on at least one of the detection value of the acceleration sensor 28 and other information (for example, a detection signal output by the radar 22). It may also be detected by

以下に、所定位置における手挙げ動作の動作分析方法の例を説明する。
図19は、実施形態の第1変形例に係る所定位置における手挙げ動作の動作分析方法の処理手順例のフローチャートである。なお、制御部42Aは、以下の処理を所定位置で行う。
An example of a motion analysis method for a hand-raising motion at a predetermined position will be described below.
FIG. 19 is a flowchart of a processing procedure example of a motion analysis method for a hand-raising motion at a predetermined position according to a first modification of the embodiment. Note that the control unit 42A performs the following processing at a predetermined position.

(ステップS91)データセンター4Aの制御部42Aは、第1携帯端末2からレーダ22が出力する検知信号を受信する。
(ステップS92)制御部42Aは、受信した検知信号から周知の手法によって第1携帯端末2の所持者の腕部を検出する。制御部42Aは、検出した腕部の検知信号を取得した時刻情報に関連付けて記憶部44Aに記憶させる。
(Step S91) The control unit 42A of the data center 4A receives the detection signal output by the radar 22 from the first mobile terminal 2.
(Step S92) The control unit 42A detects the arm of the owner of the first mobile terminal 2 from the received detection signal using a well-known method. The control unit 42A causes the storage unit 44A to store the detected arm detection signal in association with the acquired time information.

(ステップS93)制御部42Aは、腕部を検出できたか否かにより、腕が挙がっているか否かを判別する。制御部42Aは、腕が挙がっていると判別した場合(ステップS93;YES)、処理をステップS94に進める。一方、制御部42Aは、腕が挙がっていない(腕を検出できない)と判別した場合(ステップS93;NO)、処理をステップS95に進める。 (Step S93) The control unit 42A determines whether or not the arm is raised based on whether or not the arm can be detected. When the control unit 42A determines that the arm is raised (step S93; YES), the control unit 42A advances the process to step S94. On the other hand, when the control unit 42A determines that the arm is not raised (the arm cannot be detected) (step S93; NO), the control unit 42A advances the process to step S95.

(ステップS94)制御部42Aは、第1携帯端末2の携帯者が手挙げ動作を行った(手挙げOK)と判別する。
(ステップS95)制御部42Aは、第1携帯端末2の携帯者が手挙げ動作を行っていない(手挙げNG)と判別する。
(Step S94) The control unit 42A determines that the person carrying the first mobile terminal 2 has raised his hand (raised hand OK).
(Step S95) The control unit 42A determines that the person carrying the first mobile terminal 2 has not raised his/her hand (hand-raising NG).

以上のように、実施形態の第1変形例では、通学路において、例えば交通安全上、必要な行動を行ったか否かを判定してスコアで提示する。これにより、第1携帯端末2を携帯する子供は、あきず、楽しみながらスコアを上げようとする。このため、実施形態の第1変形例によれば、第1携帯端末2を携帯する子供に対して、継続的に交通安全教育に行うことができる。また、実施形態の第1変形例では、第1携帯端末2を携帯する子供の行動及びスコアを、保護者が所持する第2携帯端末3へ送信するので、保護者が子供のスキルを把握することができる。実施形態の第1変形例によれば、保護者と子供とが、第2携帯端末3に表示される情報を見ながら、コミュニケーションすることで、保護者と子供とのコミュニケーションの機会を増やし、さらなる安全意識向上も同時にはかれる。 As described above, in the first modified example of the embodiment, it is determined whether or not a necessary action has been taken in terms of traffic safety, for example, on the route to school, and the result is presented as a score. As a result, the child carrying the first mobile terminal 2 tries to improve his score while having fun. Therefore, according to the first modification of the embodiment, traffic safety education can be continuously provided to children who carry the first mobile terminal 2. Furthermore, in the first modification of the embodiment, the behavior and score of the child carrying the first mobile terminal 2 are transmitted to the second mobile terminal 3 owned by the guardian, so that the guardian can grasp the child's skills. be able to. According to the first modified example of the embodiment, the parents and children communicate while viewing the information displayed on the second mobile terminal 3, thereby increasing opportunities for communication between the parents and children, and further improving the communication between the parents and children. Safety awareness will also be improved at the same time.

以下に、第1携帯端末2と、第1携帯端末2の携帯者である子供とのコミュニケーションの例を図11の符号g100が示す図を参照して説明する。 Below, an example of communication between the first mobile terminal 2 and a child who is carrying the first mobile terminal 2 will be described with reference to a diagram indicated by the reference numeral g100 in FIG. 11.

子供は、例えば帰宅したとき、「ただいま!」と発話する。
第1携帯端末2の制御部29は、マイクロフォン23が収音したこの音声信号を通信部21によってデータセンター4Aへ送信する。データセンター4Aの音声認識部46は、受信した音声信号に対して音声認識処理を行う。制御部42Aは、音声認識処理された結果に基づいて返答の音声信号を生成して、生成した音声信号を通信部41によって第1携帯端末2へ送信する。この結果、第1携帯端末2の制御部29は、データセンター4Aから受信した「おかえりなさい!」を再生することで発話する。
For example, when a child returns home, he or she utters, "I'm home!"
The control unit 29 of the first mobile terminal 2 transmits this audio signal picked up by the microphone 23 to the data center 4A through the communication unit 21. The voice recognition unit 46 of the data center 4A performs voice recognition processing on the received voice signal. The control unit 42A generates a response voice signal based on the result of the voice recognition process, and transmits the generated voice signal to the first mobile terminal 2 through the communication unit 41. As a result, the control unit 29 of the first mobile terminal 2 reproduces and speaks "Welcome back!" received from the data center 4A.

続けて、子供が「今日の点数は?」と発話した音声信号をデータセンター4Aが受信し、制御部42Aは音声認識された結果と、シナリオ記憶部47及び記憶部44が記憶する情報とに基づいて、返答である「90点」の音声信号を生成する。制御部42Aは返答である音声信号を通信部41によって第1携帯端末2へ送信する。この結果、第1携帯端末2の制御部29は、データセンター4Aから受信した「90点」を発話する。 Next, the data center 4A receives a voice signal in which the child says, "What's your score today?", and the control unit 42A receives the voice recognition result and the information stored in the scenario storage unit 47 and the storage unit 44. Based on the answer, a "90-point" audio signal is generated. The control unit 42A transmits a voice signal as a response to the first mobile terminal 2 through the communication unit 41. As a result, the control unit 29 of the first mobile terminal 2 utters "90 points" received from the data center 4A.

このように上記のコミュニケーションの例では、第1携帯端末2が収音した音声信号をデータセンター4Aへ送信し、データセンター4Aが受信した音声信号の応答を第1携帯端末2へ送信する。これにより、第1携帯端末2を携帯する子供と、第1携帯端末2との間でコミュニケーションを行うことができ、第1携帯端末2を携帯する子供に対して、継続的に交通安全教育に行うことができる。 In this manner, in the above communication example, the first mobile terminal 2 transmits the collected audio signal to the data center 4A, and the data center 4A transmits a response to the received audio signal to the first mobile terminal 2. This allows communication between the child carrying the first mobile terminal 2 and the first mobile terminal 2, and provides ongoing traffic safety education to the child carrying the first mobile terminal 2. It can be carried out.

なお、データセンター4Aが第1携帯端末2へ送信する音声信号は、スコアが例えば70以上の場合に「よくがんばったね!」、スコアが例えば50以下の場合に「一時停止しなかったね。明日は一時停止しようね。」等であってもよい。 Note that the audio signal sent by the data center 4A to the first mobile terminal 2 is, for example, when the score is 70 or higher, it says, "You did a good job!", and when the score is, for example, 50 or less, it says, "You didn't pause. Tomorrow. Let's pause for a while.'' etc.

以下に、保護者と子供と第1携帯端末2とのコミュニケーションの例を図11の符号g110が示す図を参照して説明する。 Below, an example of communication between a guardian, a child, and the first mobile terminal 2 will be described with reference to a diagram indicated by the reference numeral g110 in FIG. 11.

この例の場合、保護者と子供は、第2携帯端末3に表示された画像を見ながら交通安全ポイント確認を行うため会話を行う。
この例でも、第1携帯端末2又は第2携帯端末3は、収音した音声信号をデータセンター4Aへ送信する。データセンター4Aは、音声認識した結果に基づいてアドバイスの音声信号を第1携帯端末2へ送信する。この結果、第1携帯端末2は、アドバイスの音声信号「一時停止はOKだから手挙げだけね!」を再生する。
なお、データセンター4Aは、このようなアドバイスの音声信号を第2携帯端末3へも送信するようにしてもよい。
In this example, the guardian and the child have a conversation while looking at the image displayed on the second mobile terminal 3 in order to confirm the traffic safety points.
Also in this example, the first mobile terminal 2 or the second mobile terminal 3 transmits the collected audio signal to the data center 4A. The data center 4A transmits an advice voice signal to the first mobile terminal 2 based on the voice recognition result. As a result, the first mobile terminal 2 reproduces the advice audio signal "Pause is OK, just raise your hand!".
Note that the data center 4A may also transmit an audio signal of such advice to the second mobile terminal 3.

このように上記のコミュニケーションの例では、第1携帯端末2又は第2携帯端末3が収音した音声信号をデータセンター4Aへ送信し、データセンター4Aが受信した音声信号の応答を第1携帯端末2へ送信する。これにより、保護者と子供と第1携帯端末2であるロボットとの間でコミュニケーションを行うことができ、第1携帯端末2を携帯する子供に対して、継続的に交通安全教育に行うことができる。 In this example of communication, the first mobile terminal 2 or the second mobile terminal 3 transmits the collected audio signal to the data center 4A, and the data center 4A transmits the received audio signal response to the first mobile terminal. Send to 2. This allows communication between parents, children, and the robot that is the first mobile terminal 2, and provides continuous traffic safety education to children who carry the first mobile terminal 2. can.

なお、上記の実施形態では、第1携帯端末2を子供が携帯する例を説明したが、第1携帯端末2を例えば移動者、歩行者又は高齢者が携帯してもよい。 In the above embodiment, an example in which the first mobile terminal 2 is carried by a child has been described, but the first mobile terminal 2 may be carried by, for example, a moving person, a pedestrian, or an elderly person.

<情報通信システムの第2変形例>
以下に、予め定められた地理的位置を、第1携帯端末2を携帯する携帯者に報知する処理の詳細について説明する。なお、上述した実施形態又は第1変形例と同様の構成については、同一の符号を付して説明を省略又は簡略化する。なお、地理的位置は、上述した危険箇所及び所定位置を含む位置の情報であってもよい。
<Second modification of information communication system>
Below, details of the process of notifying the person carrying the first mobile terminal 2 of a predetermined geographical location will be explained. Note that configurations similar to those of the above-described embodiment or the first modification are given the same reference numerals, and description thereof will be omitted or simplified. Note that the geographic location may be location information including the above-mentioned dangerous location and predetermined location.

図20は、実施形態の第2変形例に係る情報通信システム1Bの構成の一例を示す図である。図20に示される通り、情報通信システム1Bは、第1携帯端末2と、第2携帯端末3と、データセンター4Bと、サーバ5とを備える。データセンター4Bは、通信部41と、制御部42Bと、モデル記憶部43と、記憶部44Bと、音声認識モデル記憶部45と、音声認識部46と、シナリオ記憶部47とを備える。 FIG. 20 is a diagram illustrating an example of the configuration of an information communication system 1B according to a second modification of the embodiment. As shown in FIG. 20, the information communication system 1B includes a first mobile terminal 2, a second mobile terminal 3, a data center 4B, and a server 5. The data center 4B includes a communication section 41, a control section 42B, a model storage section 43, a storage section 44B, a speech recognition model storage section 45, a speech recognition section 46, and a scenario storage section 47.

記憶部44Bは、例えば、HDD、フラッシュメモリ、EEPROM(Electrically Erasable Programmable Read Only Memory)、ROM(Read Only Memory)又はRAM(Random Access Memory)などを備える。記憶部44Bは、例えば、地図情報と、危険情報と、不審者情報と、地理的位置情報とを記憶する。なお、不審者情報は、不審者が現れた位置情報及び時刻等に加えて、不審者パターンを含む。不審者パターンは、不審者の行動及び挙動の特徴を示す情報である。地理的位置情報の詳細については、後述する。 The storage unit 44B includes, for example, an HDD, a flash memory, an EEPROM (Electrically Erasable Programmable Read Only Memory), a ROM (Read Only Memory), or a RAM (Random Access Memory). The storage unit 44B stores, for example, map information, danger information, suspicious person information, and geographic location information. Note that the suspicious person information includes a suspicious person pattern in addition to location information and time when the suspicious person appeared. The suspicious person pattern is information indicating the actions and behavior characteristics of a suspicious person. Details of the geographical location information will be described later.

制御部42Bは、例えば、報知部421を機能部として備える。制御部42Bは、例えば、CPU(Central Processing Unit)などのハードウェアプロセッサが記憶部44Bに格納されたプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部又は全部は、LSI(Large Scale Integration)、ASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)及びGPU(Graphics Processing Unit)などのハードウェア(回路部;circuitryを含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。 The control unit 42B includes, for example, a notification unit 421 as a functional unit. The control unit 42B is realized, for example, by a hardware processor such as a CPU (Central Processing Unit) executing a program (software) stored in the storage unit 44B. In addition, some or all of these components are hardware (circuits) such as LSI (Large Scale Integration), ASIC (Application Specific Integrated Circuit), FPGA (Field-Programmable Gate Array), and GPU (Graphics Processing Unit). (including circuitry), or may be realized by collaboration between software and hardware.

報知部421は、第1携帯端末2の位置情報と、地理的位置情報とに基づいて、地理的位置の接近を、第1携帯端末2を保持する携帯者(例えば、子供などの児童)に報知する。地理的位置情報は、地理的位置を示す情報である。地理的位置は、第1携帯端末2の携帯者が通行する経路上の位置であり、例えば子供に危険が及ぶ可能性が有る位置などである。地理的位置は、例えば、経路上の交差点、車道と区分された歩道上の位置及び危険性がある構造物の近傍等を含む。地理的位置は、例えば停止動作、左右確認動作及び挙手動作などの所定動作の実行が必要とされる地点(例えば、安全確認地点など)を含む。
なお、以下の説明において、地理的位置情報には子供の登下校時に歩行する経路上の地理的位置が含まれる場合について説明する。
The notification unit 421 notifies the carrier holding the first mobile terminal 2 (for example, a child) of the proximity of the geographical position based on the position information of the first mobile terminal 2 and the geographical position information. inform. Geographical location information is information indicating a geographic location. The geographical location is a location on a route taken by the person carrying the first mobile terminal 2, and is, for example, a location where there is a possibility that children may be in danger. The geographical location includes, for example, an intersection on a route, a location on a sidewalk separated from a road, and the vicinity of a potentially dangerous structure. The geographical location includes a point (for example, a safety confirmation point) where a predetermined action such as a stopping action, a left/right checking action, and a hand raising action is required to be performed.
In the following description, a case will be explained in which the geographical location information includes the geographical location on the route that the child walks when commuting to and from school.

第1携帯端末2は、例えば、位置検出部24によって衛星などから受信した測位信号に基づいて、第1携帯端末2の位置(つまり、子供の位置)を特定し、特定した位置を示す位置情報をデータセンター4Bに送信する。 The first mobile terminal 2 specifies the position of the first mobile terminal 2 (that is, the child's position) based on a positioning signal received from a satellite or the like by the position detecting unit 24, and provides position information indicating the specified position. is sent to data center 4B.

なお、情報通信システム1Bは、子供の位置を特定することができる手法であれば、位置検出部24以外の手法を採用してもよい。例えば、第1携帯端末2は、BLE(Bluetooth(登録商標)Low Energy)、PDR(Pedestrian Dead Reckoning)、IMES(IndoorMEssaging System)、SLAM(Simultaneous Localization and Mapping)等の手法によって、第1携帯端末2の位置を特定してもよい。第1携帯端末2は、レーダ22によって検知された周辺の情報に基づいて、第1携帯端末2の位置を特定してもよい。情報通信システム1Bは、例えば、第1携帯端末2の位置を特定する他のシステムから第1携帯端末2の位置を取得してもよい。例えば、他のシステムは、地理的位置に設置される検出装置を備え、検出装置が自装置の近傍に存在する第1携帯端末2を検出することによって、第1携帯端末2の位置を特定してもよい。 Note that the information communication system 1B may employ a method other than the position detection unit 24 as long as it can specify the child's position. For example, the first mobile terminal 2 uses a method such as BLE (Bluetooth (registered trademark) Low Energy), PDR (Pedestrian Dead Reckoning), IMES (IndoorMEssaging System), or SLAM (Simultaneous Localization and Mapping). may be located. The first mobile terminal 2 may specify the position of the first mobile terminal 2 based on surrounding information detected by the radar 22. The information communication system 1B may acquire the position of the first mobile terminal 2 from another system that specifies the position of the first mobile terminal 2, for example. For example, other systems include a detection device installed at a geographical location, and the detection device identifies the location of the first mobile terminal 2 by detecting the first mobile terminal 2 present in the vicinity of the detection device. It's okay.

報知部421は、第1携帯端末2から取得した第1携帯端末2の位置情報と、地理的位置情報とに基づいて、子供が地理的位置に接近している場合、第1携帯端末2が備える報知機能を制御し、子供に地理的位置の接近を報知する。第1携帯端末2が備える報知機能は、例えば、バイブレータ25及びスピーカ26等である。 Based on the location information of the first mobile terminal 2 acquired from the first mobile terminal 2 and the geographical position information, the notification unit 421 determines whether the first mobile terminal 2 It controls the notification function provided and notifies the child of the proximity of the geographical location. The notification function included in the first mobile terminal 2 is, for example, a vibrator 25, a speaker 26, and the like.

以下に、データセンター4Bの報知部421が、バイブレータ25の制御信号を第1携帯端末2に送信し、第1携帯端末2が当該制御信号に基づいて、バイブレータ25を動作(振動)させることにより、子供に地理的位置の接近を報知する場合について説明する。なお、以下の説明において、報知部421が、バイブレータ25の制御信号を第1携帯端末2に送信し、第1携帯端末2が当該制御信号に基づいて、バイブレータ25を振動させることを、報知部421がバイブレータ25を振動させるとも記載する。 Below, the notification unit 421 of the data center 4B transmits a control signal for the vibrator 25 to the first mobile terminal 2, and the first mobile terminal 2 operates (vibrates) the vibrator 25 based on the control signal. , a case will be explained in which a child is notified of the proximity of a geographical location. In the following description, the notification unit 421 transmits a control signal for the vibrator 25 to the first mobile terminal 2, and the notification unit 421 indicates that the first mobile terminal 2 vibrates the vibrator 25 based on the control signal. It is also described that 421 causes the vibrator 25 to vibrate.

図21は、実施形態の第2変形例に係る報知の開始タイミングを模式的に示す図である。図21に示される一例において、第1携帯端末2の携帯者である子供C1は、交差点の方向に直進し、交差点を右折する経路(図示する経路rt)を歩行する。地理的位置PT1は、交差点の位置に予め設定される。地理的位置PT1は、交差点の中央よりも、子供C1が歩行する経路rt上に設定されることが好ましい。例えば、車道と歩道とが区分された道において、経路rtは、歩道であり、地理的位置PT1は、歩道上(より具体的には、歩道と車道との境界)に設定される。 FIG. 21 is a diagram schematically showing the start timing of notification according to the second modified example of the embodiment. In the example shown in FIG. 21, a child C1 who is carrying the first mobile terminal 2 walks along a route (route rt shown) that goes straight in the direction of an intersection and turns right at the intersection. Geographical position PT1 is preset to the position of an intersection. It is preferable that the geographical position PT1 is set on the route rt that the child C1 walks, rather than the center of the intersection. For example, on a road divided into a roadway and a sidewalk, the route rt is a sidewalk, and the geographic position PT1 is set on the sidewalk (more specifically, at the boundary between the sidewalk and the roadway).

報知部421は、地理的位置PT1から所定距離(図示する第1所定距離dt1)だけ離れた位置(つまり、図示する所定範囲ARP)まで子供C1が接近した場合、バイブレータ25を動作させる。第1所定距離dt1は、例えば、数m程度の距離である。また、報知部421は、地理的位置PT1までの距離に応じて、報知の強度(例えば、振動の強度)を変化させてもよい。子供C1は、バイブレータ25によって地理的位置PT1(つまり、交差点)を報知されることにより、周囲に注意しながら歩行する。このため、情報通信システム1Bは、子供C1と、子供C1の進行方向に進行する車両mとが接触することを抑制することができる。 The notification unit 421 operates the vibrator 25 when the child C1 approaches a position (that is, the predetermined range ARP shown) that is a predetermined distance (first predetermined distance dt1 shown) away from the geographical position PT1. The first predetermined distance dt1 is, for example, a distance of about several meters. Further, the notification unit 421 may change the intensity of notification (for example, the intensity of vibration) depending on the distance to the geographical position PT1. The child C1 is notified of the geographical position PT1 (that is, the intersection) by the vibrator 25, and walks while paying attention to the surroundings. Therefore, the information communication system 1B can suppress contact between the child C1 and the vehicle m traveling in the direction of movement of the child C1.

図22は、実施形態の第2変形例に係る報知部421の処理の一例を示すフローチャートである。
報知部421は、図22に示される処理を、所定の時間間隔毎に実行する。
まず、報知部421は、第1携帯端末2から子供C1の位置を示す位置情報を取得する(ステップS100)。
次に、報知部421は、子供C1の位置から地理的位置PT1までの距離が第1所定距離dt1未満であるか否かを判定する(ステップS102)。
報知部421は、子供C1の位置から地理的位置PT1までの距離が第1所定距離dt1未満ではない場合、処理を終了する。
一方、報知部421は、子供C1の位置から地理的位置PT1までの距離が第1所定距離dt1未満である場合、処理をステップS104に進める。
報知部421は、地理的位置PT1の接近を子供C1に報知する地理的位置接近報知処理を行い(ステップS104)、処理を終了する。
FIG. 22 is a flowchart illustrating an example of processing of the notification unit 421 according to the second modification of the embodiment.
The notification unit 421 executes the process shown in FIG. 22 at predetermined time intervals.
First, the notification unit 421 acquires position information indicating the position of the child C1 from the first mobile terminal 2 (step S100).
Next, the notification unit 421 determines whether the distance from the position of the child C1 to the geographical position PT1 is less than the first predetermined distance dt1 (step S102).
The notification unit 421 ends the process when the distance from the child C1's position to the geographical position PT1 is not less than the first predetermined distance dt1.
On the other hand, if the distance from the position of the child C1 to the geographical position PT1 is less than the first predetermined distance dt1, the notification unit 421 advances the process to step S104.
The notification unit 421 performs a geographical position approach notification process to notify the child C1 of the approach of the geographical position PT1 (step S104), and ends the process.

図23は、図22に示されるステップS104の地理的位置接近報知処理の詳細を示すフローチャートである。
まず、報知部421は、地理的位置PT1の接近を子供C1に知らせる報知を開始する(ステップS200)。この一例では、報知部421は、バイブレータ25の振動を開始させる。
次に、報知部421は、位置検出部24によって子供C1の位置を取得する(ステップS202)。
次に、報知部421は、ステップS100において取得した子供C1の位置と、ステップS202において取得した子供C1の位置とに基づいて、子供C1が地理的位置PT1に近づいているか否かを判定する(ステップS204)。
報知部421は、子供C1が地理的位置PT1に近づいていると判定した場合(ステップS204のYES側)、処理をステップS206に進める。
一方、報知部421は、子供C1が地理的位置PT1に近づいていないと判定した場合、(ステップS204のNO側)、処理をステップS208に進める。
そして、報知部421は、バイブレータ25の報知量を増加させ(ステップS206)、処理をステップS212に進める。報知量を増加させるとは、例えば、バイブレータ25の振動を大きくすること、及び、振動の頻度を多くすることのうち、少なくともいずれかである。
FIG. 23 is a flowchart showing details of the geographical location approach notification process in step S104 shown in FIG. 22.
First, the notification unit 421 starts notification to notify the child C1 of the approach of the geographical position PT1 (step S200). In this example, the notification unit 421 causes the vibrator 25 to start vibrating.
Next, the notification unit 421 obtains the position of the child C1 using the position detection unit 24 (step S202).
Next, the notification unit 421 determines whether the child C1 is approaching the geographical position PT1 based on the position of the child C1 acquired in step S100 and the position of the child C1 acquired in step S202 ( Step S204).
When the notification unit 421 determines that the child C1 is approaching the geographic position PT1 (YES in step S204), the notification unit 421 advances the process to step S206.
On the other hand, if the notification unit 421 determines that the child C1 is not approaching the geographical position PT1 (NO in step S204), the process proceeds to step S208.
Then, the notification unit 421 increases the notification amount of the vibrator 25 (step S206), and advances the process to step S212. Increasing the amount of notification means, for example, at least one of increasing the vibration of the vibrator 25 and increasing the frequency of vibration.

また、報知部421は、子供C1が地理的位置PT1から遠ざかっているか否かを判定する(ステップS208)。
報知部421は、子供C1が地理的位置PT1から遠ざかっていると判定した場合(ステップS208のYES側)、処理をステップS210に進める。
一方、報知部421は、子供C1が地理的位置PT1に近づいても遠ざかってもいないと判定した場合(ステップS208のNO側)、バイブレータ25の報知量を変更せず、処理をステップS212に進める。
そして、報知部421は、バイブレータ25の報知量を減少させ(ステップS210)、処理をステップS212に進める。報知量を減少させるとは、バイブレータ25の振動を小さくすること、及び、振動の頻度を少なくすることのうち、すくなくともいずれかである。
Furthermore, the notification unit 421 determines whether the child C1 is moving away from the geographical position PT1 (step S208).
When the notification unit 421 determines that the child C1 is moving away from the geographical position PT1 (YES in step S208), the notification unit 421 advances the process to step S210.
On the other hand, if the notification unit 421 determines that the child C1 is neither approaching nor moving away from the geographical position PT1 (NO in step S208), the notification unit 421 does not change the notification amount of the vibrator 25 and advances the process to step S212. .
Then, the notification unit 421 reduces the notification amount of the vibrator 25 (step S210), and advances the process to step S212. Reducing the amount of notification means at least one of reducing the vibration of the vibrator 25 and reducing the frequency of vibration.

報知部421は、子供C1の位置から地理的位置PT1までの距離が第1所定距離dt1以上であるか否かを判定する(ステップS212)。
報知部421は、子供C1の位置から地理的位置PT1までの距離が第1所定距離dt1未満であると判定する間(ステップS212のNO側、つまり、子供C1が所定範囲ARPの外に出るまでの間)、処理をステップS204に戻す。報知部421は、ステップS204~S210までの処理を繰り返すことによって報知量を調整する。
一方、報知部421は、子供C1の位置から地理的位置PT1までの距離が第1所定距離dt1以上であると判定した場合(ステップS212のYES側)、処理をステップS214に進める。
そして、報知部421は、報知を停止する(ステップS214)。
The notification unit 421 determines whether the distance from the position of the child C1 to the geographical position PT1 is greater than or equal to the first predetermined distance dt1 (step S212).
While the notification unit 421 determines that the distance from the position of the child C1 to the geographical position PT1 is less than the first predetermined distance dt1 (NO side of step S212, that is, until the child C1 leaves the predetermined range ARP) ), the process returns to step S204. The notification unit 421 adjusts the notification amount by repeating the processing from steps S204 to S210.
On the other hand, when the notification unit 421 determines that the distance from the position of the child C1 to the geographical position PT1 is equal to or greater than the first predetermined distance dt1 (YES in step S212), the notification unit 421 advances the process to step S214.
Then, the notification unit 421 stops notification (step S214).

なお、上述では、子供C1の位置から地理的位置PT1までの距離が直線距離である場合について説明したが、これに限られない。子供C1の位置から地理的位置PT1までの距離は、子供C1の経路rtに沿った距離であってもよい。報知部421は、子供C1の経路rtに沿った地理的位置PT1までの距離に基づいて、報知を行うことにより、長時間報知が行われることを抑制し、子供C1が報知状態に慣れることを抑制することができる。
以上説明したように、実施形態の第2変形例の情報通信システム1Bは、より適切に地理的位置の接近を子供C1に報知することができる。
In addition, although the case where the distance from the position of the child C1 to the geographical position PT1 is a straight line distance was described above, it is not limited to this. The distance from the child C1's location to the geographic location PT1 may be the distance along the child C1's route rt. The notification unit 421 performs notification based on the distance to the geographical position PT1 along the route rt of the child C1, thereby suppressing notification from being performed for a long time and allowing the child C1 to get used to the notification state. Can be suppressed.
As described above, the information communication system 1B of the second modified example of the embodiment can more appropriately notify the child C1 of the proximity of the geographical location.

<情報通信システムの第3変形例>
以下に、第1携帯端末2を携帯する携帯者に接近する物体及び人を携帯者に報知する場合について説明する。なお、上述した実施形態、第1変形例又は第2変形例と同様の構成については、同一の符号を付して説明を省略又は簡略化する。
<Third modification of information communication system>
Below, a case will be described in which the user who carries the first mobile terminal 2 is notified of an object or person approaching the user. Note that the same configurations as those of the embodiment, the first modification, or the second modification described above are given the same reference numerals, and the description thereof will be omitted or simplified.

図24は、実施形態の第3変形例に係る第1携帯端末2Bの構成の一例を示す図である。図24に示される通り、第1携帯端末2Bは、通信部21と、レーダ22と、マイクロフォン23と、位置検出部24と、バイブレータ25と、スピーカ26と、表示部27と、加速度センサ28と、制御部29Bとを備える。 FIG. 24 is a diagram illustrating an example of the configuration of a first mobile terminal 2B according to a third modification of the embodiment. As shown in FIG. 24, the first mobile terminal 2B includes a communication section 21, a radar 22, a microphone 23, a position detection section 24, a vibrator 25, a speaker 26, a display section 27, and an acceleration sensor 28. , and a control section 29B.

制御部29Bは、例えば、制御部29が備える構成に加えて接近判定部291を機能部として備える。制御部29Bは、例えば、CPUなどのハードウェアプロセッサが記憶部(不図示)に格納されたプログラム(ソフトウェア)を実行することにより実現される。また、これらの構成要素のうち一部又は全部は、LSI、ASIC、FPGA又はGPUなどのハードウェア(回路部を含む)によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。 The control unit 29B includes, for example, an approach determination unit 291 as a functional unit in addition to the configuration included in the control unit 29. The control unit 29B is realized, for example, by a hardware processor such as a CPU executing a program (software) stored in a storage unit (not shown). Further, some or all of these components may be realized by hardware (including circuit parts) such as LSI, ASIC, FPGA, or GPU, or may be realized by collaboration of software and hardware. Good too.

接近判定部291は、例えば、第1携帯端末2Bが備える検出機能の検出結果に基づいて、携帯者の周囲に存在する物体が携帯者に接近したか否かを判定する。以降の説明において、第1携帯端末2Bが備える検出機能がレーダ22である場合について説明する。 The approach determination unit 291 determines whether an object existing around the wearer has approached the wearer, for example, based on the detection result of the detection function provided in the first mobile terminal 2B. In the following description, a case where the detection function included in the first mobile terminal 2B is the radar 22 will be described.

図25は、実施形態の第3変形例に係る報知の開始タイミングを模式的に示す図である。第1携帯端末2Bが備えるレーダ22は、例えば子供C1の周囲を検知可能に構成される。レーダ22は、例えば複数(図示では2つ)のミリ波レーダによって構成され、第1携帯端末2Bの周囲(つまり、子供C1の周囲)を検知可能なように、検知方向が異なる向きに設けられる。図25に示される一例では、レーダ22が備えるフロントレーダ及びリヤレーダは、それぞれ異なる範囲(図示する前方検知範囲AF及び後方検知範囲AR)を検知する。レーダ22は、子供C1の周囲を全域(例えば、鉛直軸周りの360度の範囲など)に亘って検知可能に設定される場合、前方検知範囲AF及び後方検知範囲ARは相互に重畳してもよい。レーダ22は、例えば、所定の時間間隔毎に携帯者の周囲を検知し、検知信号を生成する。なお、レーダ22は、子供C1の周囲を検知することが可能であれば、1つ又は複数のミリ波レーダを備えてもよい。 FIG. 25 is a diagram schematically showing the start timing of notification according to the third modification of the embodiment. The radar 22 included in the first mobile terminal 2B is configured to be able to detect the surroundings of the child C1, for example. The radar 22 is configured by, for example, a plurality of (two in the illustration) millimeter wave radars, and is provided with different detection directions so as to be able to detect the surroundings of the first mobile terminal 2B (that is, the surroundings of the child C1). . In the example shown in FIG. 25, the front radar and rear radar included in the radar 22 detect different ranges (front detection range AF and rear detection range AR shown in the figure). When the radar 22 is set to be able to detect the entire area around the child C1 (for example, a 360 degree range around the vertical axis), the front detection range AF and the rear detection range AR may overlap each other. good. For example, the radar 22 detects the surroundings of the wearer at predetermined time intervals and generates a detection signal. Note that the radar 22 may include one or more millimeter wave radars as long as it is possible to detect the surroundings of the child C1.

なお、第1携帯端末2Bは、携帯者の周囲環境を検知する構成として、レーダ22以外の機器を備えてもよい。第1携帯端末2Bは、レーダ22の代わりに、カメラ、LIDAR(Light Detection and Ranging又はLaser Imaging Detection and Ranging)又は赤外線センサなどの遠隔的に検出を行う検出装置を備えてもよい。
例えば、第1携帯端末2Bは、レーダ22の代わりに、1つ又は複数のカメラを備えてもよい。例えば第1携帯端末2Bに備えられる3つのカメラは、図25に示すように、それぞれ異なる範囲(図示する撮像範囲AR1~AR3)を撮像する。3つのカメラの撮像範囲AR1~AR3のそれぞれは、互いに重畳してもよい。3つのカメラは、所定の時間間隔毎に携帯者の周囲を撮像し、撮像画像(例えば、静止画像又は動画)を生成してもよい。
Note that the first mobile terminal 2B may include equipment other than the radar 22 as a configuration for detecting the surrounding environment of the wearer. The first mobile terminal 2B may include a detection device that performs remote detection, such as a camera, LIDAR (Light Detection and Ranging or Laser Imaging Detection and Ranging), or an infrared sensor, instead of the radar 22.
For example, the first mobile terminal 2B may include one or more cameras instead of the radar 22. For example, as shown in FIG. 25, the three cameras provided in the first mobile terminal 2B take images of different ranges (the illustrated imaging ranges AR1 to AR3). The imaging ranges AR1 to AR3 of the three cameras may overlap each other. The three cameras may capture images around the wearer at predetermined time intervals and generate captured images (for example, still images or moving images).

接近判定部291は、レーダ22によって生成された検知信号に基づいて、子供C1の位置から所定距離(図示する第2所定距離dt2)だけ離れた位置(つまり、図示する所定範囲ARC)まで物体が接近した場合、子供C1に物体が接近したと判定し、レーダ22の検知信号をデータセンター4Bに送信する。第2所定距離dt2は、数m程度の距離である。 Based on the detection signal generated by the radar 22, the approach determination unit 291 determines whether the object is within a predetermined distance (a second predetermined distance dt2 in the figure) from the position of the child C1 (that is, a predetermined range ARC in the figure). If the object approaches the child C1, it is determined that the object approaches the child C1, and a detection signal from the radar 22 is transmitted to the data center 4B. The second predetermined distance dt2 is a distance of approximately several meters.

データセンター4Bの報知部421は、第1携帯端末2Bから受信したレーダ22の検知信号に基づいて、子供C1に物体が接近している場合、第1携帯端末2Bが備える報知機能を制御し、子供C1に物体の接近を報知する。報知部421は、子供C1に接近する物体のうち、車両mの接近と、不審者の接近とを子供C1に報知する。 The notification unit 421 of the data center 4B controls the notification function of the first mobile terminal 2B when an object is approaching the child C1 based on the detection signal of the radar 22 received from the first mobile terminal 2B, Notify the child C1 of the approach of an object. The notification unit 421 notifies the child C1 of the approach of the vehicle m and the approach of a suspicious person among the objects approaching the child C1.

図26は、実施形態の第3変形例に係る接近判定部291及び報知部421の処理の一例を示すフローチャートである。
まず、接近判定部291は、レーダ22によって出力された検知信号を取得する(ステップS300)。
次に、接近判定部291は、取得した検知信号に基づいて、子供C1から検知される物体までの距離が第2所定距離dt2未満であるか否かを判定する(ステップS302)。
接近判定部291は、子供C1から検知される物体までの距離が第2所定距離dt2未満ではないと判定する場合(ステップS302のNO側)、処理をステップS300に戻して、待機する。
一方、接近判定部291は、子供C1から検知される物体までの距離が第2所定距離dt2未満であると判定する場合(ステップS302のYES側)、処理をステップS304に進める。
そして、報知部421は、物体の接近を子供C1に報知する物体接近報知処理を行い(ステップS304)、処理を終了する。
FIG. 26 is a flowchart illustrating an example of processing by the approach determination unit 291 and the notification unit 421 according to the third modification of the embodiment.
First, the approach determination unit 291 acquires the detection signal output by the radar 22 (step S300).
Next, the approach determination unit 291 determines whether the distance from the child C1 to the detected object is less than the second predetermined distance dt2 based on the acquired detection signal (step S302).
When the approach determination unit 291 determines that the distance from the child C1 to the detected object is not less than the second predetermined distance dt2 (NO in step S302), the process returns to step S300 and waits.
On the other hand, when the approach determination unit 291 determines that the distance from the child C1 to the detected object is less than the second predetermined distance dt2 (YES in step S302), the process proceeds to step S304.
Then, the notification unit 421 performs object approach notification processing to notify the child C1 of the approach of the object (step S304), and ends the process.

図27は、図26に示されるステップS304の物体接近報知処理の詳細を示すフローチャートである。
まず、報知部421は、ステップS300において取得された検知信号に示される物体の大きさが所定の大きさ以上であるか否かを判定する(ステップS400)。所定の大きさは、例えば、一般的な適宜の車両の大きさである。
報知部421は、検知信号に示される物体の大きさが所定の大きさ以上であると判定した場合(ステップS400のYES側)、処理をステップS402に進める。
一方、報知部421は、物体の大きさが所定の大きさ以上ではないと判定した場合、処理をステップS410に進める。
そして、報知部421は、物体が車両mであると判定する(ステップS402)。
次に、報知部421は、ステップS300において取得された検知信号よりも後に出力された検知信号を取得する(ステップS404)。
FIG. 27 is a flowchart showing details of the object approach notification process in step S304 shown in FIG. 26.
First, the notification unit 421 determines whether the size of the object indicated by the detection signal acquired in step S300 is greater than or equal to a predetermined size (step S400). The predetermined size is, for example, the size of a general appropriate vehicle.
If the notification unit 421 determines that the size of the object indicated by the detection signal is equal to or larger than the predetermined size (YES in step S400), the notification unit 421 advances the process to step S402.
On the other hand, if the notification unit 421 determines that the size of the object is not larger than the predetermined size, the notification unit 421 advances the process to step S410.
Then, the notification unit 421 determines that the object is the vehicle m (step S402).
Next, the notification unit 421 acquires a detection signal output after the detection signal acquired in step S300 (step S404).

次に、報知部421は、ステップS300において取得された検知信号と、ステップS404において取得された検知信号とに基づいて、車両mの速度が所定速度以上であるか否かを判定する(ステップS406)。所定速度は、例えば、数~数十km/h程度の速度である。
報知部421は、車両mの速度が所定速度以上ではない場合(ステップS406のNO側)、処理をステップS408に進める。
一方、報知部421は、車両mの速度が所定の速度以上であると判定した場合(ステップS406のYES側)、処理をステップS412に進める。
そして、報知部421は、車両mが子供C1の近傍を通過し終えたか否かを判定する(ステップS408)。
報知部421は、車両mが子供C1の近傍を通過し終えた場合(ステップS408のYES側)、子供C1に危険が及ばないと推定し、子供C1に車両mの接近を知らせる報知を開始せず、処理を終了する。
一方、報知部421は、車両mが子供C1の近傍を通過し終えていないと判定する場合(ステップS408のNO側)、処理をステップS404に戻す。報知部421は、ステップS404~S406を繰り返す際に、子供C1に接近する車両mが所定速度以上ではない場合(ステップS406のNO側)、接近しても子供C1に危険が及ばないと推定し、報知を開始しない。
Next, the notification unit 421 determines whether the speed of the vehicle m is equal to or higher than a predetermined speed based on the detection signal acquired in step S300 and the detection signal acquired in step S404 (step S406 ). The predetermined speed is, for example, a speed of several to several tens of km/h.
If the speed of vehicle m is not equal to or higher than the predetermined speed (NO in step S406), the notification unit 421 advances the process to step S408.
On the other hand, when the notification unit 421 determines that the speed of the vehicle m is equal to or higher than the predetermined speed (YES in step S406), the notification unit 421 advances the process to step S412.
Then, the notification unit 421 determines whether the vehicle m has passed near the child C1 (step S408).
When the vehicle m has passed near the child C1 (YES in step S408), the notification unit 421 estimates that the child C1 is not in danger and starts notifying the child C1 of the approach of the vehicle m. The process ends immediately.
On the other hand, when the notification unit 421 determines that the vehicle m has not finished passing near the child C1 (NO in step S408), the process returns to step S404. When repeating steps S404 to S406, if the vehicle m approaching the child C1 is not at a predetermined speed or higher (NO in step S406), the notification unit 421 estimates that the child C1 will not be in danger even if the vehicle m approaches. , does not start notification.

また、報知部421は、物体の移動パターンが不審者のパターンと合致するか否かを判定する(ステップS410)。不審者のパターンは、例えば、子供C1の移動に係る単位期間中(例えば、適宜の日の登校中又は下校中等)に、所定回数以上に亘って特定の物体に遭遇するパターンである。また、不審者のパターンは、例えば、子供C1の移動に係る単位期間中に、子供C1の移動経路に合致する経路において物体が往復移動するパターンである。また、不審者のパターンは、例えば、物体の特徴が不審者情報の不審者の特徴と合致するパターンである。
報知部421は、物体の移動パターンが不審者のパターンと合致しないと判定した場合(ステップS410のNO側)、物体が不審者ではないと推定し、子供C1に物体の接近を知らせる報知を開始せず、処理を終了する。
一方、報知部421は、物体の移動パターンが不審者のパターンと合致する(ステップS410のYES側、つまり、物体が不審者である)と判定した場合、処理をステップS412に進める。
そして、報知部421は、車両m又は不審者の接近を子供C1に知らせる報知を開始する(ステップS412)。
Furthermore, the notification unit 421 determines whether the movement pattern of the object matches the pattern of the suspicious person (step S410). The suspicious person pattern is, for example, a pattern in which the child C1 encounters a specific object a predetermined number of times or more during a unit period of movement (for example, while going to school or leaving school on an appropriate day). Further, the suspicious person pattern is, for example, a pattern in which an object moves back and forth on a route that matches the movement route of the child C1 during a unit period related to the movement of the child C1. Further, the suspicious person pattern is, for example, a pattern in which the characteristics of the object match the characteristics of the suspicious person in the suspicious person information.
If the notification unit 421 determines that the movement pattern of the object does not match the pattern of the suspicious person (NO in step S410), the notification unit 421 estimates that the object is not a suspicious person, and starts notification to notify the child C1 of the approach of the object. Terminate the process without doing so.
On the other hand, if the notification unit 421 determines that the movement pattern of the object matches the pattern of a suspicious person (YES in step S410, that is, the object is a suspicious person), the notification unit 421 advances the process to step S412.
Then, the notification unit 421 starts notification to notify the child C1 of the approach of the vehicle m or the suspicious person (step S412).

次に、報知部421は、ステップS300において取得された検知信号よりも後に出力された検知信号を取得する(ステップS414)。
次に、報知部421は、ステップS300において取得された検知信号と、ステップS414において取得された検知信号とに基づいて、車両m又は不審者が子供C1に近づいているか否かを判定する(ステップS416)。
報知部421は、車両m又は不審者が子供C1に近づいている場合(ステップS410のYES側)、処理をステップS418に進める。
一方、報知部421は、車両m又は不審者が子供C1に近づいていない場合(ステップS410のNO側)、処理をステップS420に進める。
Next, the notification unit 421 acquires a detection signal output after the detection signal acquired in step S300 (step S414).
Next, the notification unit 421 determines whether the vehicle m or the suspicious person is approaching the child C1 based on the detection signal acquired in step S300 and the detection signal acquired in step S414 (step S416).
If the vehicle m or the suspicious person is approaching the child C1 (YES in step S410), the notification unit 421 advances the process to step S418.
On the other hand, if the vehicle m or the suspicious person is not approaching the child C1 (NO in step S410), the notification unit 421 advances the process to step S420.

そして、報知部421は、報知量を増加させ(ステップS418)、処理をステップS416に戻す。
また、報知部421は、車両m又は不審者が子供C1の近傍を通過し終えたか否かを判定する(ステップS420)。
報知部421は、車両m又は不審者が子供C1の近傍を通過し終えていないと判定する場合(ステップS420のNO側)、処理をステップS416に戻し、ステップS416~S418の処理を繰り返す。
一方、報知部421は、車両m又は不審者が子供C1の近傍を通過し終えた場合(ステップS420のYES側)、処理をステップS422に進める。
報知部421は、報知を停止する(ステップS422)。
Then, the notification unit 421 increases the notification amount (step S418), and returns the process to step S416.
The notification unit 421 also determines whether the vehicle m or the suspicious person has passed near the child C1 (step S420).
If the notification unit 421 determines that the vehicle m or the suspicious person has not finished passing near the child C1 (NO in step S420), the process returns to step S416 and repeats the processes in steps S416 to S418.
On the other hand, when the vehicle m or the suspicious person has passed near the child C1 (YES in step S420), the notification unit 421 advances the process to step S422.
The notification unit 421 stops notification (step S422).

以上説明したように、実施形態の第3変形例に係る情報通信システム1Bは、より適切に車両又は不審者の接近を子供C1に報知することができる。 As described above, the information communication system 1B according to the third modification of the embodiment can more appropriately notify the child C1 of the approach of a vehicle or a suspicious person.

<情報通信システムの第4変形例>
以下に、地理的位置おける携帯者の所定動作を認識する場合について説明する。なお、上述した実施形態、第1変形例、第2変形例又は第3変形例と同様の構成については、同一の符号を付して説明を省略又は簡略化する。
<Fourth modification of information communication system>
In the following, a case will be described in which a predetermined movement of a wearer at a geographical location is recognized. Note that configurations similar to those of the embodiment, the first modification, the second modification, or the third modification described above are given the same reference numerals, and the description thereof will be omitted or simplified.

図28は、実施形態の第4変形例に係る第1携帯端末2Cの構成の一例を示す図である。実施形態の第4変形例に係る情報通信システム1Bは、第1携帯端末2Bに代えて、又は、第1携帯端末2Bに加えて、第1携帯端末2Cを備える。
図28に示される通り、第1携帯端末2Cは、通信部21と、レーダ22と、マイクロフォン23と、位置検出部24と、バイブレータ25と、スピーカ26と、表示部27と、加速度センサ28と、制御部29Cとを備える。制御部29Cは、例えば、制御部29が備える構成に加えて、接近判定部291と動作認識部292とを機能部として備える。
FIG. 28 is a diagram illustrating an example of the configuration of a first mobile terminal 2C according to a fourth modification of the embodiment. The information communication system 1B according to the fourth modification of the embodiment includes a first mobile terminal 2C instead of or in addition to the first mobile terminal 2B.
As shown in FIG. 28, the first mobile terminal 2C includes a communication section 21, a radar 22, a microphone 23, a position detection section 24, a vibrator 25, a speaker 26, a display section 27, and an acceleration sensor 28. , and a control section 29C. The control unit 29C includes, for example, an approach determination unit 291 and a motion recognition unit 292 as functional units in addition to the configuration included in the control unit 29.

動作認識部292は、例えば、第1携帯端末2Cが備える検出機能(この一例では、レーダ22)の検出結果に基づいて、携帯者が所定動作を行ったか否かを認識する。所定動作は、地理的位置において、携帯者が行うことが好ましい動作である。所定動作は、例えば、地理的位置において停止する停止動作である。また、所定動作は、例えば、地理的位置において左右を確認する左右確認動作である。また、所定動作は、例えば、地理的位置において手を挙げる挙手動作である。
レーダ22の検知範囲は、携帯者の頭部の可動範囲及び携帯者の手部の可動範囲を含む。動作認識部292は、レーダ22によって出力された検知信号に基づいて、携帯者によって行われた所定動作を認識し、認識された所定動作を示す情報をデータセンター4Bに送信する。
The motion recognition unit 292 recognizes whether or not the wearer has performed a predetermined motion, for example, based on the detection result of the detection function (in this example, the radar 22) provided in the first mobile terminal 2C. The predetermined action is an action that is preferably performed by the wearer at the geographical location. The predetermined operation is, for example, a stopping operation that stops at a geographical location. Further, the predetermined operation is, for example, a left-right confirmation operation for checking left and right at a geographical position. Further, the predetermined action is, for example, a hand-raising action at a geographical location.
The detection range of the radar 22 includes the movable range of the wearer's head and the movable range of the wearer's hands. The motion recognition unit 292 recognizes a predetermined motion performed by the wearer based on the detection signal output by the radar 22, and transmits information indicating the recognized predetermined motion to the data center 4B.

図29は、実施形態の第4変形例に係る所定動作の認識処理を行うタイミングを模式的に示す図である。上述したように、第1携帯端末2Cは、地理的位置PT1までの距離が第1所定距離dt1未満の位置(図示する、「時刻tの子供C1」の位置)において、バイブレータ25によって報知を開始する。図29に示される一例において、子供C1は、地理的位置PT1において停止する停止動作を行う。以下、動作認識部292が各種の所定動作を認識する場合の処理について説明する。 FIG. 29 is a diagram schematically showing the timing of performing recognition processing of a predetermined motion according to a fourth modification of the embodiment. As described above, the first mobile terminal 2C starts the notification using the vibrator 25 at a position where the distance to the geographical position PT1 is less than the first predetermined distance dt1 (the position of "child C1 at time t" shown in the figure). do. In the example shown in FIG. 29, the child C1 performs a stopping action to stop at the geographic position PT1. Below, a description will be given of a process in which the motion recognition unit 292 recognizes various predetermined motions.

<停止動作を認識する場合>
動作認識部292は、位置検出部24によって取得された位置情報を、データセンター4Bに送信する。データセンター4Bは、記憶部44Bに記憶された地理的位置情報を参照し、位置情報が示す子供C1の位置の近傍に存在する地理的位置PT1を特定する。データセンター4Bは、特定した地理的位置PT1を示す情報を第1携帯端末2Cに送信する。動作認識部292は、位置検出部24によって特定した子供C1の位置が、地理的位置PT1であるか否かを判定する。また、動作認識部292は、レーダ22によって出力された検知信号に基づいて、検知信号に取得される周囲環境に所定時間に亘って変化がない場合、子供C1が停止していると認識する。動作認識部292は、上述した判定を総合し、地理的位置PT1において、子供C1が停止している場合、停止動作を行ったと認識する。なお、動作認識部292は、地理的位置PT1から所定距離(図示する一例では、第3所定距離dt3)だけ離隔した離隔位置から地理的位置PT1までの間に停止動作を認識する処理を行ってもよい。この場合、動作認識部292は、データセンター4Bから取得した現在位置の近傍の地理的位置PT1から、第3所定距離dt3だけ手前の離隔位置を特定し、特定した離隔位置から地理的位置PT1に到着するまでの間、停止動作を認識する処理を行ってもよい。
<When recognizing stop operation>
The motion recognition unit 292 transmits the position information acquired by the position detection unit 24 to the data center 4B. The data center 4B refers to the geographic location information stored in the storage unit 44B and specifies a geographic location PT1 that exists near the location of the child C1 indicated by the location information. The data center 4B transmits information indicating the specified geographical position PT1 to the first mobile terminal 2C. The motion recognition unit 292 determines whether the position of the child C1 specified by the position detection unit 24 is at the geographical position PT1. Further, based on the detection signal output by the radar 22, the motion recognition unit 292 recognizes that the child C1 is stopped when there is no change in the surrounding environment acquired by the detection signal for a predetermined period of time. The motion recognition unit 292 integrates the above-mentioned determinations and recognizes that the child C1 has performed a stopping motion when the child C1 is stopped at the geographical position PT1. The motion recognition unit 292 performs a process of recognizing a stopping motion between a remote position that is a predetermined distance away from the geographical position PT1 (in the illustrated example, a third predetermined distance dt3) and the geographical position PT1. Good too. In this case, the motion recognition unit 292 specifies a distant position that is a third predetermined distance dt3 from the geographical position PT1 near the current position acquired from the data center 4B, and moves from the specified remote position to the geographical position PT1. Until the arrival, processing for recognizing the stopping operation may be performed.

<左右確認動作を認識する場合>
動作認識部292は、レーダ22によって出力された検知信号に基づいて、子供C1の頭部(例えば、顔など)が子供C1に対して左方向及び右方向に向いた場合、左右確認動作を行ったと認識する。
<When recognizing left/right confirmation motion>
Based on the detection signal output by the radar 22, the motion recognition unit 292 performs a left/right confirmation motion when the head (for example, face) of the child C1 is turned to the left or right with respect to the child C1. I recognize that.

<挙手動作を認識する場合>
動作認識部292は、レーダ22によって出力された検知信号に基づいて、子供C1の手部(例えば、手のひらなど)が子供C1に対して上方向に位置した場合、挙手動作を行ったと認識する。
<When recognizing hand raising motion>
Based on the detection signal output by the radar 22, the motion recognition unit 292 recognizes that the child C1 has made a hand-raising motion when the hand (for example, the palm of the hand) is positioned upward relative to the child C1.

動作認識部292は、所定動作が行われたことを認識したタイミングにおいて、所定動作が認識されたことを示す情報をデータセンター4Bに送信する。報知部421は、地理的位置の接近を子供C1に知らせる報知が開始されている場合であって、動作認識部292から所定動作が行われたことを示す情報を受信した場合、報知を停止する。 The motion recognition unit 292 transmits information indicating that the predetermined motion has been recognized to the data center 4B at the timing when it recognizes that the predetermined motion has been performed. When the notification unit 421 has started the notification to notify the child C1 of the approach of the geographical location and receives information from the motion recognition unit 292 indicating that a predetermined action has been performed, the notification unit 421 stops the notification. .

なお、動作認識部292は、所定動作の全て(例えば、停止動作、左右確認動作及び挙手動作など)を認識可能としてもよいし、所定動作の一部のみ(例えば、左右確認動作及び挙手動作のみなど)を認識可能としてもよい。 The motion recognition unit 292 may be able to recognize all of the predetermined motions (for example, stopping motion, left/right confirmation motion, and hand raising motion), or may be able to recognize only a part of the predetermined motions (for example, only the left/right confirmation motion and hand raising motion). etc.) may be recognized.

図30は、実施形態の第4変形例に係る報知部421の報知の停止処理の一例を示すフローチャートである。
まず、報知部421は、報知が開始されたか否かを判定する(ステップS500)。
報知部421は、報知が開始されていない場合(ステップS500のNO側)、ステップS500の処理を繰り返し、報知が開始されるまでの間に待機する。
一方、報知部421は、報知が開始されている場合(ステップS500のYES側)、処理をステップS502に進める。
そして、報知部421は、第1携帯端末2Cから所定動作が行われたことを示す情報を受信したか否かを判定する(ステップS502)。
報知部421は、所定動作が行われていない場合(ステップS502のNO側)、ステップS502の処理を繰り返し、所定動作が行われたことを示す情報を受信するまでの間に待機する。
一方、報知部421は、所定動作が行われたことを示す情報を受信した場合(ステップS502のYES側)、処理をステップS504に進める。
そして、報知部421は、報知を停止する(ステップS504)。
FIG. 30 is a flowchart illustrating an example of a notification stop process of the notification unit 421 according to the fourth modification of the embodiment.
First, the notification unit 421 determines whether notification has been started (step S500).
If the notification has not been started (NO in step S500), the notification unit 421 repeats the process of step S500 and waits until the notification is started.
On the other hand, if the notification has been started (YES in step S500), the notification unit 421 advances the process to step S502.
Then, the notification unit 421 determines whether or not information indicating that a predetermined operation has been performed is received from the first mobile terminal 2C (step S502).
If the predetermined action is not performed (NO in step S502), the notification unit 421 repeats the process of step S502 and waits until it receives information indicating that the predetermined action has been performed.
On the other hand, when the notification unit 421 receives information indicating that the predetermined operation has been performed (YES in step S502), the notification unit 421 advances the process to step S504.
Then, the notification unit 421 stops notification (step S504).

以上説明したように、実施形態の第4変形例の情報通信システム1Bは、子供C1が地理的位置において所定動作を行った場合、交通安全上、必要な行動が行われたと推定し、不要に報知が継続されることを抑制することができる。 As explained above, when the child C1 performs a predetermined action at a geographical location, the information communication system 1B of the fourth modification of the embodiment estimates that the action is necessary for traffic safety, and eliminates unnecessary actions. Continuation of notification can be suppressed.

<報知手法について>
なお、上述した第2変形例から第4変形例において、報知部421がバイブレータ25を振動させることにより、子供C1に各種報知を行う場合について説明したが、これに限られない。報知は、例えば、スピーカ26が音声を出力することによって行われてもよい。この場合、報知量を増加させるとは、例えば、音声の音量を大きくすること、及び、音声出力の頻度を多くすることのうち、少なくともいずれかである。
<About notification method>
In addition, in the second modification to the fourth modification described above, a case has been described in which the notification unit 421 vibrates the vibrator 25 to give various notifications to the child C1, but the present invention is not limited to this. The notification may be performed, for example, by the speaker 26 outputting audio. In this case, increasing the amount of notification means, for example, increasing the volume of the audio and increasing the frequency of audio output.

<移動速度の認識について>
また、上述した第4変形例において、動作認識部292がレーダ22によって出力された検知信号に基づいて、子供C1の移動速度を認識する場合について説明したが、これに限られない。子供C1の移動速度は、例えば、加速度センサ28の出力に基づいて、認識されてもよい。この場合、動作認識部292は、加速度センサ28の出力を積分し、子供C1の移動速度を導出することにより、子供C1の移動速度を認識する。
<About recognition of movement speed>
Further, in the fourth modification described above, a case has been described in which the motion recognition unit 292 recognizes the moving speed of the child C1 based on the detection signal output by the radar 22, but the present invention is not limited to this. The moving speed of the child C1 may be recognized based on the output of the acceleration sensor 28, for example. In this case, the motion recognition unit 292 recognizes the moving speed of the child C1 by integrating the output of the acceleration sensor 28 and deriving the moving speed of the child C1.

<移動速度に基づく報知について>
また、上述した第2変形例から第4変形例では、報知部421が、子供C1から地理的位置PT1までの距離に基づいて、報知を開始する場合について説明したが、これに限られない。報知部421は、子供C1の移動速度に基づいて、報知を行ってもよい。報知部421は、例えば、子供C1の移動速度が速い場合、移動速度が遅い場合と比して、報知の開始タイミングを速めてもよく、報知量を増加させてもよい。これにより、情報通信システム1Bは、走って道路に飛び出す可能性が高い子供C1に対して、早急に報知を行うことができる。
<About notifications based on moving speed>
Furthermore, in the second to fourth modified examples described above, a case has been described in which the notification unit 421 starts notification based on the distance from the child C1 to the geographical position PT1, but the present invention is not limited to this. The notification unit 421 may perform notification based on the moving speed of the child C1. For example, when the moving speed of the child C1 is fast, the notifying unit 421 may accelerate the start timing of the notification or may increase the amount of notification when the moving speed of the child C1 is fast compared to when the moving speed is slow. Thereby, the information communication system 1B can promptly notify the child C1 who is likely to run out onto the road.

<地理的位置の接近の判定について>
また、上述した第3変形例及び第4変形例において、報知部421は、位置検出部24によって取得された子供C1の位置情報と、地理的位置情報とに基づいて、地理的位置PT1の接近を判定する場合について説明したが、これに限られない。報知部421は、子供C1の移動速度に基づいて、地理的位置PT1の予想到着時刻を導出し、導出した予想到着時刻に基づいて、地理的位置PT1に接近したか否かを判定してもよい。この場合、報知部421は、地理的位置PT1に到着する予想到着時刻を導出し、導出した予想到着時刻に基づいて、地理的位置PT1が接近したか否かを判定する。
<About determining the proximity of geographical locations>
In addition, in the third and fourth modifications described above, the notification unit 421 determines whether the geographical position PT1 is approaching based on the position information of the child C1 acquired by the position detection unit 24 and the geographical position information. Although the case where the determination is made has been described, the present invention is not limited to this. The notification unit 421 may derive an expected arrival time at the geographical position PT1 based on the moving speed of the child C1, and determine whether or not the child C1 has approached the geographical position PT1 based on the derived expected arrival time. good. In this case, the notification unit 421 derives the expected arrival time at the geographical position PT1, and determines whether the geographical position PT1 has approached based on the derived expected arrival time.

<地理的位置の設定について>
また、上述した第2変形例から第4変形例において、地理的位置PT1は、予め定められており、記憶部44Bに地理的位置情報として記憶される場合について説明したが、これに限られない。地理的位置PT1は、例えば、子供C1の保護者が所持する第2携帯端末3から指定されてもよい。この場合、第2携帯端末3は、第2携帯端末3の記憶部(不図示)に記憶されたプログラム(ソフトウェア)として、地理的位置PT1を設定する際に用いられるプログラム(ソフトウェア)を実行する。例えば、このプログラム(ソフトウェア)を実行することにより、地図画像が表示部34に表示される。保護者は、第2携帯端末3が備える受付部(不図示)に、子供C1の登下校時に歩行する経路の開始位置と終了位置とを入力する。受付部は、例えば、ボタン、キーボード及びマウス等の操作デバイスである。
以降の説明において、受付部は、表示部34と一体に形成されるタッチパネルである場合について説明する。第2携帯端末3は、受付部によって受け付けられた開始位置と、終了位置とに基づいて、子供C1が歩行すると推定される複数の経路rtの候補を地図画像に重畳し、表示部34に提示する。保護者は、提示された複数の経路rtの候補のうち、実際に子供C1が歩行する経路rtを選択する。
<About geographical location settings>
Furthermore, in the second to fourth modifications described above, the geographical position PT1 is predetermined and is stored as geographical position information in the storage unit 44B, but the present invention is not limited to this. . Geographical location PT1 may be designated, for example, from the second mobile terminal 3 owned by the guardian of child C1. In this case, the second mobile terminal 3 executes the program (software) used when setting the geographical position PT1 as a program (software) stored in the storage unit (not shown) of the second mobile terminal 3. . For example, by executing this program (software), a map image is displayed on the display unit 34. The guardian inputs into a reception unit (not shown) included in the second mobile terminal 3 the starting position and ending position of the route that the child C1 walks when commuting to and from school. The reception unit is, for example, an operation device such as a button, a keyboard, and a mouse.
In the following description, a case will be described in which the reception section is a touch panel formed integrally with the display section 34. The second mobile terminal 3 superimposes a plurality of route candidates rt that are estimated to be walked by the child C1 on the map image based on the start position and end position accepted by the reception unit, and presents them on the display unit 34. do. The guardian selects the route rt that the child C1 actually walks from among the multiple route rt candidates presented.

次に、受付部は、選択(指定)された経路rt上において子供C1に所定動作を行わせたい地理的位置PT1を指定する保護者の操作を受け付ける。記憶部44Bの地理的位置PT1の情報には、保護者によって指定された地理的位置PT1を示す情報が含まれる。これにより、情報通信システム1Bは、保護者が指定した地理的位置PT1の接近を子供C1に報知することができる。 Next, the reception unit receives an operation by the guardian to designate a geographical position PT1 on the selected (designated) route rt at which the child C1 wants to perform a predetermined action. The information on the geographical position PT1 in the storage unit 44B includes information indicating the geographical position PT1 designated by the guardian. Thereby, the information communication system 1B can notify the child C1 of the approach of the geographical position PT1 designated by the guardian.

なお、受付部は、表示された地図画像に対して保護者が経路rtの位置をタッチパネルになぞって入力することにより、実際に子供C1が歩行する経路rtを指定してもよい。また、制御部36は、保護者の操作によって指定される位置(例えば、経路rtの開始位置、終了位置及び地理的位置PT1)が、経路rt上又は歩道上ではない場合、指定した位置の近傍の経路rt上又は歩道上の位置に補正してもよい。 Note that the reception unit may specify the route rt that the child C1 actually walks by having the guardian trace and input the position of the route rt on the touch panel on the displayed map image. In addition, if the position specified by the guardian's operation (for example, the start position, end position, and geographical position PT1 of the route rt) is not on the route rt or on the sidewalk, the control unit 36 The position may be corrected to the position on the route rt or on the sidewalk.

<所定動作の報知について>
また、上述では、報知部421が、地理的位置PT1の接近又は車両m若しくは不審者の接近を子供C1に報知する場合について説明したが、これに限られない。報知部421は、例えば、地理的位置PT1における所定動作を促す報知を行ってもよい。この場合、報知部421は、例えば、接近判定部291によって子供C1が地理的位置PT1に接近したと判定された場合、スピーカ26から「交差点では一時停止だよ!」又は「みぎ、ひだりを確認して、手を挙げて横断歩道を渡ろうね!」等の音声を出力することにより、所定動作を促す報知を行う。
<About notification of predetermined operations>
Further, in the above description, a case has been described in which the notification unit 421 notifies the child C1 of the approach of the geographical position PT1 or the approach of the vehicle m or a suspicious person, but the present invention is not limited to this. The notification unit 421 may, for example, provide notification to prompt a predetermined action at the geographic location PT1. In this case, for example, when the approach determination unit 291 determines that the child C1 has approached the geographical position PT1, the notification unit 421 outputs from the speaker 26, “Stop at the intersection!” or “Check Migi, Hidari. By outputting a voice such as "Let's raise your hands and cross the crosswalk!", the system issues a notification to prompt a predetermined action.

<所定動作の評価結果の報知について>
また、報知部421は、子供C1が行った所定動作の評価結果を報知してもよい。この場合、報知部421は、第1携帯端末2Cから子供C1が所定動作を行ったことを示す情報を受信した場合、子供C1を称賛する報知を行ってもよい。子供C1を称賛する報知とは、バイブレータ25を所定のリズムによって振動させる、及び、スピーカ26から「右左の確認ができたね!えらい!」という子供C1を称賛する音声を出力させるなどの報知である。
また、報知部421は、子供C1が地理的位置PT1において所定動作を行わなかった場合、子供C1を注意する報知を行ってもよい。子供C1を注意する報知とは、バイブレータ25を所定のリズムによって振動させる、及び、スピーカ26から「ちゃんと止まらないと危ないよ!」という子供C1を注意する音声を出力させるなどの報知である。報知部421は、所定動作が行われる度、又は、子供C1から地理的位置PT1までの距離が第1所定距離dt1未満になる度などに、所定動作の評価結果を報知してもよい。
<About notification of evaluation results of predetermined operations>
Further, the notification unit 421 may notify the evaluation result of a predetermined action performed by the child C1. In this case, when the notification unit 421 receives information indicating that the child C1 has performed a predetermined action from the first mobile terminal 2C, the notification unit 421 may make a notification praising the child C1. The notification that praises the child C1 is a notification that causes the vibrator 25 to vibrate according to a predetermined rhythm, and outputs a voice that praises the child C1 from the speaker 26, such as "You were able to confirm right and left! That's great!" .
Further, the notification unit 421 may issue a notification to warn the child C1 when the child C1 does not perform a predetermined action at the geographical position PT1. The notification to warn the child C1 is a notification such as causing the vibrator 25 to vibrate according to a predetermined rhythm, and causing the speaker 26 to output a voice warning the child C1, saying, "It's dangerous if you don't stop properly!" The notification unit 421 may notify the evaluation result of the predetermined action each time the predetermined action is performed, or each time the distance from the child C1 to the geographical position PT1 becomes less than the first predetermined distance dt1.

なお、報知部421は、地理的位置PT1、車両m又は不審者の接近を報知している場合、評価結果の報知を行わなくてもよい。これにより、報知部421は、地理的位置PT1、評価結果の報知が車両m又は不審者の報知を妨げることを抑制することができる。
また、報知部421は、地理的位置PT1から第1所定距離dt1以内の範囲において、評価結果の報知を行わなくてもよい。これにより、報知部421は、評価結果の報知が地理的位置PT1、車両m又は不審者の報知を妨げることを抑制することができる。
Note that the notification unit 421 does not need to notify the evaluation result when reporting the geographical position PT1, the vehicle m, or the approach of a suspicious person. Thereby, the notification unit 421 can suppress the notification of the geographical position PT1 and the evaluation result from interfering with the notification of the vehicle m or the suspicious person.
Further, the notification unit 421 does not need to notify the evaluation result within the first predetermined distance dt1 from the geographical position PT1. Thereby, the notification unit 421 can prevent the notification of the evaluation result from interfering with the notification of the geographical position PT1, the vehicle m, or the suspicious person.

<所定動作の採点について>
また、制御部42Bは、子供C1が行った所定動作を採点する構成であってもよい。制御部42Bは、子供C1が地理的位置PT1において所定動作を行ったか、又は、所定動作を行わなかったかに基づいて、子供C1が行った所定動作を採点し、採点した結果を示す情報を、保護者の第2携帯端末3に送信してもよい。また、制御部42Bは、子供C1が地理的位置PT1に接近する度に、所定動作の採点結果を第2携帯端末3に送信してもよい。
<About scoring of prescribed movements>
Further, the control unit 42B may be configured to score a predetermined action performed by the child C1. The control unit 42B scores the predetermined action performed by the child C1 based on whether the child C1 performed the predetermined action or not performed the predetermined action at the geographical location PT1, and provides information indicating the scored result. It may also be transmitted to the second mobile terminal 3 of the guardian. Further, the control unit 42B may transmit the scoring result of the predetermined movement to the second mobile terminal 3 every time the child C1 approaches the geographical position PT1.

<情報通信システム1Bについて>
なお、上述した第2変形例から第4変形例において、情報通信システム1Bのうち、第1携帯端末2、第1携帯端末2B又は第1携帯端末2Cが備える構成と、データセンター4Bが備える構成とについて説明したが、これに限られない。例えば、第1携帯端末2、第1携帯端末2B又は第1携帯端末2Cが備える構成が、データセンター4Bに備えられていてもよく、データセンター4Bに備えられる構成が第1携帯端末2、第1携帯端末2B又は第1携帯端末2Cに備えられていてもよい。また、記憶部44Bに記憶される情報が、第1携帯端末2、第1携帯端末2B又は第1携帯端末2Cの記憶部(不図示)に記憶されていてもよい。
例えば、上述した第2変形例から第4変形例においては、データセンター4Bの報知部421が、第1携帯端末2の位置検出部24によって取得された位置情報と、記憶部44Bに記憶されている地理的位置情報とに基づいて、第1携帯端末2と地理的位置PT1の接近を判定するとしたが、これに限定されない。上述した第3変形例及び第4変形例に示す各第1携帯端末2B,2Cの接近判定部291が、データセンター4Bから地理的位置情報を受信して、第1携帯端末2と地理的位置PT1の接近を判定してもよい。
<About information and communication system 1B>
In addition, in the second modification to the fourth modification described above, the configuration included in the first mobile terminal 2, the first mobile terminal 2B, or the first mobile terminal 2C in the information communication system 1B, and the configuration provided in the data center 4B. However, the invention is not limited to this. For example, the configuration provided in the first mobile terminal 2, the first mobile terminal 2B, or the first mobile terminal 2C may be provided in the data center 4B, and the configuration provided in the data center 4B may be provided in the first mobile terminal 2, the first mobile terminal 2B, or the first mobile terminal 2C. It may be provided in the first mobile terminal 2B or the first mobile terminal 2C. Further, the information stored in the storage unit 44B may be stored in a storage unit (not shown) of the first mobile terminal 2, the first mobile terminal 2B, or the first mobile terminal 2C.
For example, in the second to fourth modifications described above, the notification unit 421 of the data center 4B uses the position information acquired by the position detection unit 24 of the first mobile terminal 2 and the position information stored in the storage unit 44B. Although the approach of the first mobile terminal 2 and the geographical position PT1 is determined based on the geographical position information of the first mobile terminal 2, the present invention is not limited thereto. The approach determination unit 291 of each of the first mobile terminals 2B and 2C shown in the third modification and the fourth modification described above receives the geographical position information from the data center 4B, and determines the geographical position of the first mobile terminal 2. The approach of PT1 may also be determined.

上述した実施形態及び各変形例において、各第1携帯端末2,2B,2Cは、フロントレーダ及びリヤレーダによるレーダ22を備えるとしたが、これに限定されず、レーダ22の代わりに、カメラ、LIDAR(Light Detection and Ranging又はLaser Imaging Detection and Ranging)又は赤外線センサなどを備えてもよい。 In the embodiment and each modified example described above, each of the first mobile terminals 2, 2B, 2C is equipped with a radar 22 including a front radar and a rear radar, but the invention is not limited to this, and instead of the radar 22, a camera, a LIDAR (Light Detection and Ranging or Laser Imaging Detection and Ranging) or an infrared sensor.

なお、本発明における各データセンター4,4A,4Bの機能の全て又は一部を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより各データセンター4,4A,4Bが行う処理の全て又は一部を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境(又は表示環境)を備えたWWWシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM及びCD-ROM等の可搬媒体、並びにコンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワーク又は電話回線等の通信回線を介してプログラムが送信された場合のサーバ又はクライアントとなるコンピュータシステム内部の揮発性メモリ(RAM)のように、一定時間プログラムを保持しているものも含むものとする。 Note that a program for realizing all or part of the functions of each data center 4, 4A, and 4B in the present invention is recorded on a computer-readable recording medium, and the program recorded on this recording medium is installed in a computer system. All or part of the processing performed by each data center 4, 4A, and 4B may be performed by reading and executing it. Note that the "computer system" herein includes hardware such as an OS and peripheral devices. Furthermore, the term "computer system" includes a WWW system equipped with a home page providing environment (or display environment). Furthermore, the term "computer-readable recording medium" refers to portable media such as flexible disks, magneto-optical disks, ROMs, and CD-ROMs, and storage devices such as hard disks built into computer systems. Furthermore, a "computer-readable recording medium" refers to a volatile memory (RAM) inside a computer system that serves as a server or client when a program is transmitted via a network such as the Internet or a communication line such as a telephone line. This also includes programs that are retained for a certain period of time.

また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、又は、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)又は電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であってもよい。 Further, the program may be transmitted from a computer system storing the program in a storage device or the like to another computer system via a transmission medium or by a transmission wave in the transmission medium. Here, the "transmission medium" that transmits the program refers to a medium that has a function of transmitting information, such as a network (communication network) such as the Internet or a communication line (communication line) such as a telephone line. Moreover, the above-mentioned program may be for realizing a part of the above-mentioned functions. Furthermore, it may be a so-called difference file (difference program) that can realize the above-described functions in combination with a program already recorded in the computer system.

本発明の実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。 The embodiments of the invention are presented by way of example and are not intended to limit the scope of the invention. These embodiments can be implemented in various other forms, and various omissions, substitutions, and changes can be made without departing from the gist of the invention. These embodiments and their modifications are included within the scope and gist of the invention as well as within the scope of the invention described in the claims and its equivalents.

本発明によれば、移動者の動作を評価することが可能な動作評価システムを提供することができる。 According to the present invention, it is possible to provide a motion evaluation system that can evaluate the motion of a moving person.

1,1A,1B…情報通信システム(動作評価システム)、2,2B,2C…第1携帯端末(端末)、3…第2携帯端末(他の端末)、4,4A,4B…データセンター(サーバ)、5…サーバ、6…ネットワーク、21…通信部、22…レーダ(動作取得部)、23…マイクロフォン、24…位置検出部、25…バイブレータ、26…スピーカ、27…表示部、28…加速度センサ、29…制御部、31…通信部、32…マイクロフォン、33…操作部、34…表示部、35…スピーカ、36…制御部、41…通信部、42,42A,42B…制御部(動作取得部、動作判断部、評価部)、43…モデル記憶部、44,44A,44B…記憶部、45…音声認識モデル記憶部、46…音声認識部、47…シナリオ記憶部、292…動作認識部(動作判断部、出力部)、421…報知部(出力部)、ARP…所定範囲、C1…子供(移動者、歩行者、児童)、PT1…地理的位置(第1設定位置) 1, 1A, 1B... Information communication system (operation evaluation system), 2, 2B, 2C... First mobile terminal (terminal), 3... Second mobile terminal (other terminal), 4, 4A, 4B... Data center ( server), 5... server, 6... network, 21... communication unit, 22... radar (operation acquisition unit), 23... microphone, 24... position detection unit, 25... vibrator, 26... speaker, 27... display unit, 28... Acceleration sensor, 29...Control unit, 31...Communication unit, 32...Microphone, 33...Operation unit, 34...Display unit, 35...Speaker, 36...Control unit, 41...Communication unit, 42, 42A, 42B...Control unit ( (motion acquisition section, motion judgment section, evaluation section), 43...model storage section, 44, 44A, 44B...storage section, 45...speech recognition model storage section, 46...speech recognition section, 47...scenario storage section, 292...motion Recognition section (motion judgment section, output section), 421... Notification section (output section), ARP... Predetermined range, C1... Child (movers, pedestrian, child), PT1... Geographical position (first set position)

Claims (10)

歩行者である移動者によって携帯される第1端末と、
前記移動者の動作を取得する動作取得部と、
前記第1端末又は前記第1端末と通信可能なサーバに設けられるとともに、前記動作取得部が取得した動作に基づき所定動作が行われたことを判断する動作判断部と、
前記第1端末又は前記サーバに設けられるとともに、前記移動者によって前記所定動作がなされるよう事前に設定された地理的位置である設定位置を記憶する記憶部と
を備え、
前記設定位置は、第1設定位置と、前記第1設定位置とは別の第2設定位置とを含み、
前記第1端末又は前記サーバは、前記第1設定位置において前記動作判断部が判断した第1判断結果及び前記第2設定位置において前記動作判断部が判断した第2判断結果に基づいて、前記移動者の動作を複合的に評価する評価部と、
前記第1設定位置と、前記第1判断結果とを関連付けて出力する出力部を備える
動作評価システム。
a first terminal carried by a traveler who is a pedestrian ;
a motion acquisition unit that acquires the motion of the moving person;
an action determining unit that is provided in the first terminal or a server that can communicate with the first terminal, and that determines that a predetermined action has been performed based on the action acquired by the action acquiring unit;
a storage unit that is provided in the first terminal or the server and stores a set position that is a geographical position set in advance so that the predetermined action is performed by the moving person;
The setting position includes a first setting position and a second setting position different from the first setting position,
The first terminal or the server controls the movement based on a first determination result determined by the motion determination section at the first setting position and a second determination result determined by the motion determination section at the second setting position. an evaluation section that comprehensively evaluates the person's movements ;
an output unit that outputs the first set position and the first determination result in association with each other;
Operation evaluation system.
前記出力部は、前記移動者の移動軌跡に重畳させて前記第1設定位置を出力する
請求項1に記載の動作評価システム。
The motion evaluation system according to claim 1, wherein the output unit outputs the first set position so as to be superimposed on a movement trajectory of the mover .
前記評価部は、同一の設定位置において前記移動者の動作を繰り返し評価する
請求項1または2に記載の動作評価システム。
The evaluation unit repeatedly evaluates the movement of the mover at the same set position.
The operation evaluation system according to claim 1 or 2.
前記出力部は、前記第1端末と異なる第2端末に前記第1設定位置を出力する
請求項1から3のいずれか一項に記載の動作評価システム。
The operation evaluation system according to any one of claims 1 to 3, wherein the output unit outputs the first setting position to a second terminal different from the first terminal .
前記出力部は、前記第2設定位置と、前記第2判断結果とを関連付けて出力する
請求項4に記載の動作評価システム。
The output unit outputs the second setting position and the second determination result in association with each other.
The motion evaluation system according to claim 4 .
前記設定位置は、前記第1端末とは異なる第2端末により設定された位置、又は、前記移動者とは異なる設定者によって設定された位置である
請求項4または5に記載の動作評価システム。
6. The motion evaluation system according to claim 4, wherein the set position is a position set by a second terminal different from the first terminal, or a position set by a setter different from the mover .
前記出力部は、前記第1端末の外部に前記評価を出力するとともに、前記設定位置の近傍では出力しない
請求項に記載の動作評価システム。
The motion evaluation system according to claim 1 , wherein the output unit outputs the evaluation to the outside of the first terminal, and does not output the evaluation near the setting position.
前記出力部は、前記第1端末と異なる第2端末に対して前記評価を出力するとともに、前記設定位置における前記評価の後に順次出力する
請求項に記載の動作評価システム。
8. The motion evaluation system according to claim 7 , wherein the output unit outputs the evaluation to a second terminal different from the first terminal , and sequentially outputs the evaluation after the evaluation at the set position.
前記動作判断部は、前記第1端末に設けられ、
前記評価部は、前記サーバに設けられる
請求項1から請求項のいずれか一項に記載の動作評価システム。
The operation determination unit is provided in the first terminal,
The operation evaluation system according to any one of claims 1 to 8 , wherein the evaluation unit is provided in the server.
前記第1端末は、前記移動者の携行物に配置される
請求項1から請求項のいずれか一項に記載の動作評価システム。
The motion evaluation system according to any one of claims 1 to 9 , wherein the first terminal is arranged in something carried by the moving person.
JP2020525546A 2018-06-11 2019-06-10 Operation evaluation system Active JP7424974B2 (en)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018111419 2018-06-11
JP2018111419 2018-06-11
JP2018146316 2018-08-02
JP2018146316 2018-08-02
PCT/JP2019/022888 WO2019240065A1 (en) 2018-06-11 2019-06-10 Action evaluation system

Publications (2)

Publication Number Publication Date
JPWO2019240065A1 JPWO2019240065A1 (en) 2021-06-24
JP7424974B2 true JP7424974B2 (en) 2024-01-30

Family

ID=68842253

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2020525546A Active JP7424974B2 (en) 2018-06-11 2019-06-10 Operation evaluation system
JP2020525549A Active JP7523347B2 (en) 2018-06-11 2019-06-10 Operation check system

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2020525549A Active JP7523347B2 (en) 2018-06-11 2019-06-10 Operation check system

Country Status (2)

Country Link
JP (2) JP7424974B2 (en)
WO (2) WO2019240070A1 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022018836A1 (en) * 2020-07-21 2022-01-27 ソニーグループ株式会社 Information processing device, information processing method, and program
JP7494825B2 (en) * 2021-10-05 2024-06-04 トヨタ自動車株式会社 Learning Support Devices
JP7613398B2 (en) 2022-03-11 2025-01-15 トヨタ自動車株式会社 Information processing device, method, and program
JP7722231B2 (en) * 2022-03-17 2025-08-13 トヨタ自動車株式会社 Information processing device, method, and program
WO2023203972A1 (en) * 2022-04-20 2023-10-26 ソニーグループ株式会社 Information processing system, server, and information processing method
JP7260042B1 (en) * 2022-06-24 2023-04-18 トヨタ自動車株式会社 Pedestrian notification device, pedestrian notification system, and pedestrian notification program
JP7768056B2 (en) 2022-07-04 2025-11-12 トヨタ自動車株式会社 User device, safety training system, control method, and control program
JP7666431B2 (en) 2022-07-15 2025-04-22 トヨタ自動車株式会社 Pedestrian warning device, pedestrian warning system and server
JP7740167B2 (en) 2022-08-25 2025-09-17 トヨタ自動車株式会社 Information processing device
JP7817296B2 (en) * 2024-02-01 2026-02-18 株式会社関電工 Control device for danger notification system, and danger notification system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005275529A (en) 2004-03-23 2005-10-06 Fujitsu Ltd Information management method and information management apparatus
JP2015184975A (en) 2014-03-25 2015-10-22 富士通テン株式会社 Vehicle apparatus and vehicle control method
WO2016111067A1 (en) 2015-01-05 2016-07-14 ソニー株式会社 Information processing device, information processing method, and program

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2715214B2 (en) * 1992-02-19 1998-02-18 本田技研工業株式会社 Vehicle travel guidance device
JP2005106742A (en) * 2003-10-01 2005-04-21 Clarion Co Ltd Navigation system, method and program
JP4895931B2 (en) * 2007-06-27 2012-03-14 株式会社エヌ・ティ・ティ・ドコモ Traffic accident prevention system, server device, and traffic accident prevention method
JP4913683B2 (en) * 2007-07-03 2012-04-11 株式会社エヌ・ティ・ティ・ドコモ Risk management system, server device, and risk management method
JP4981610B2 (en) * 2007-10-05 2012-07-25 三菱電機ビルテクノサービス株式会社 Air conditioning control system
JP5023988B2 (en) * 2007-11-16 2012-09-12 日産自動車株式会社 Information notification system, portable terminal device, in-vehicle device, and information transmission method
JP5352844B2 (en) * 2008-08-04 2013-11-27 株式会社ユピテル Vehicle alarm device and program
JP5546784B2 (en) * 2009-03-24 2014-07-09 シャープ株式会社 Notification device, notification system, control method for notification device, control program, and computer-readable recording medium recording the program
JP2011209794A (en) * 2010-03-29 2011-10-20 Hiromitsu Hama Object recognition system, monitoring system using the same, and watching system
JP5514640B2 (en) * 2010-06-15 2014-06-04 国立大学法人秋田大学 Walking environment simulator
JP6110608B2 (en) * 2012-06-28 2017-04-05 株式会社ゼンリンデータコム Route search system, portable terminal, and route guidance method
JP6617651B2 (en) * 2016-07-07 2019-12-11 株式会社デンソー Pedestrian detection device, pedestrian detection method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005275529A (en) 2004-03-23 2005-10-06 Fujitsu Ltd Information management method and information management apparatus
JP2015184975A (en) 2014-03-25 2015-10-22 富士通テン株式会社 Vehicle apparatus and vehicle control method
WO2016111067A1 (en) 2015-01-05 2016-07-14 ソニー株式会社 Information processing device, information processing method, and program

Also Published As

Publication number Publication date
JPWO2019240065A1 (en) 2021-06-24
JPWO2019240070A1 (en) 2021-07-29
JP7523347B2 (en) 2024-07-26
WO2019240065A1 (en) 2019-12-19
WO2019240070A1 (en) 2019-12-19

Similar Documents

Publication Publication Date Title
JP7424974B2 (en) Operation evaluation system
JP7699678B2 (en) Notification System
US10902263B1 (en) Image processing system for object identification
JP7345683B2 (en) A system for performing scene recognition dialogue
US11455792B2 (en) Robot capable of detecting dangerous situation using artificial intelligence and method of operating the same
US11164586B2 (en) Artificial intelligence apparatus and method for recognizing utterance voice of user
KR102936555B1 (en) Electronic apparatus and method for assisting driving of a vehicle
US20130293586A1 (en) Information processing device, alarm method, and program
JP2017536595A (en) Pedestrian information system
US11769047B2 (en) Artificial intelligence apparatus using a plurality of output layers and method for same
US11449074B2 (en) Robot for providing guidance service using artificial intelligence and method of operating the same
US11322134B2 (en) Artificial intelligence device and operating method thereof
US11182922B2 (en) AI apparatus and method for determining location of user
US11977384B2 (en) Control system for controlling a plurality of robots using artificial intelligence
Mancini et al. Embedded multisensor system for safe point-to-point navigation of impaired users
WO2023061927A1 (en) Method for notifying a visually impaired user of the presence of object and/or obstacle
JP2021072043A (en) Electronic device
WO2020203605A1 (en) Notification system, notification method, program, and storage medium
JP7289618B2 (en) Notification system
JP2020166507A (en) Electronics
WO2020203691A1 (en) Display system, display method, program, and storage medium
JP7442295B2 (en) Electronics
US20170270782A1 (en) Event detecting method and electronic system applying the event detecting method and related accessory
JP2020022128A (en) Terminal device
WO2021085583A1 (en) Electronic instrument

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220603

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230905

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231101

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231219

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240118

R150 Certificate of patent or registration of utility model

Ref document number: 7424974

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150