JP7773443B2 - Severe weather video providing system, management device, and severe weather video providing method - Google Patents
Severe weather video providing system, management device, and severe weather video providing methodInfo
- Publication number
- JP7773443B2 JP7773443B2 JP2022130828A JP2022130828A JP7773443B2 JP 7773443 B2 JP7773443 B2 JP 7773443B2 JP 2022130828 A JP2022130828 A JP 2022130828A JP 2022130828 A JP2022130828 A JP 2022130828A JP 7773443 B2 JP7773443 B2 JP 7773443B2
- Authority
- JP
- Japan
- Prior art keywords
- unit
- severe weather
- vehicle
- route
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Traffic Control Systems (AREA)
- Navigation (AREA)
- Closed-Circuit Television Systems (AREA)
Description
本発明は、集中豪雨、豪雪、台風等の荒天の状況を撮像した映像を提供する技術に関する。 The present invention relates to technology for providing video footage of severe weather conditions such as torrential rain, heavy snow, and typhoons.
従来、車両に搭載された車載装置が、他地点のカメラ映像を取得して表示するようにしたシステムが知られている。 Conventionally, systems have been known in which an onboard device installed in a vehicle acquires and displays camera images from other locations.
例えば、特許文献1には、車載装置が、ゲリラ豪雨などの局所的な大雨地帯を注目地点として設定し、注目地点を通過予定の他車両に搭載された車載カメラや注目地点を撮像可能な定点カメラを候補カメラとして選択し、候補カメラからカメラ映像を取得して表示するようにした配信システムが記載されている。 For example, Patent Document 1 describes a distribution system in which an in-vehicle device sets a localized area of heavy rain, such as a sudden downpour, as a point of interest, selects in-vehicle cameras mounted on other vehicles that are scheduled to pass through the point of interest, or fixed cameras that can capture the point of interest, as candidate cameras, and acquires and displays camera images from the candidate cameras.
特許文献1に記載の配信システムでは、例えば、目的地までの経路上で現在発生している荒天のカメラ映像を表示することはできるものの、目的地までの経路上で未来に発生し得る荒天の映像を表示することはできない。従来の他のシステムにおいても同様である。 The distribution system described in Patent Document 1, for example, can display camera footage of currently occurring severe weather along the route to the destination, but cannot display footage of severe weather that may occur in the future along the route to the destination. This is also true for other conventional systems.
1つの側面において、本発明は、車両の目的地までの経路上で未来に発生し得る荒天の映像を乗員に提供可能にすることを目的とする。 In one aspect, the present invention aims to provide occupants with images of severe weather that may occur in the future along the vehicle's route to its destination.
本開示の1つの態様の荒天映像提供システムは、管理装置と、撮像装置と、車両に搭載された車載装置とを含む。管理装置は、記憶部と、荒天情報取得部と、特定部と、要求部と、管理側荒天映像データ取得部と、記憶制御部と、経路情報取得部と、判定部と、管理側提供部とを備える。荒天情報取得部は、現在の荒天の発生エリアと荒天の今後の移動予測に関する情報を含む荒天情報を取得する。特定部は、発生エリアに存在する撮像装置を特定する。要求部は、特定部により特定された撮像装置に荒天映像データの要求を行う。管理側荒天映像データ取得部は、特定部により特定された撮像装置から荒天映像データを取得する。記憶制御部は、荒天映像データを荒天情報と対応付けて記憶部に記憶させる。経路情報取得部は、車両の目的地までの経路に関する情報を含む経路情報を取得する。判定部は、車両の経路上の未来の位置が、荒天の未来の発生エリアに含まれるか否かを判定する。管理側提供部は、判定部により含まれると判定された場合に、車載装置に荒天映像データを提供する。撮像装置は、要求取得部と、撮像部と、撮像側提供部とを備える。撮像部は、荒天の状況を撮像して荒天映像データを生成する。要求取得部は、管理装置から荒天映像データの要求を取得する。撮像側提供部は、要求取得部により要求が取得された場合に、撮像部により生成された荒天映像データを管理装置に提供する。車載装置は、表示部と、車載側荒天映像データ取得部と、表示制御部とを備える。車載側荒天映像データ取得部は、管理装置から荒天映像データを取得する。表示制御部は、経路が示された地図と共に、経路上で未来に発生し得る荒天の映像として荒天映像データが表す荒天映像を、表示部に表示させる。 A severe weather video provision system according to one aspect of the present disclosure includes a management device, an imaging device, and an on-board device mounted on a vehicle. The management device includes a memory unit, a severe weather information acquisition unit, an identification unit, a request unit, a management-side severe weather video data acquisition unit, a memory control unit, a route information acquisition unit, a determination unit, and a management-side provision unit. The severe weather information acquisition unit acquires severe weather information including information regarding the current severe weather occurrence area and a predicted future movement of the severe weather. The identification unit identifies imaging devices present in the occurrence area. The request unit requests severe weather video data from the imaging devices identified by the identification unit. The management-side severe weather video data acquisition unit acquires the severe weather video data from the imaging devices identified by the identification unit. The memory control unit associates the severe weather video data with the severe weather information and stores it in the memory unit. The route information acquisition unit acquires route information including information regarding the route to the vehicle's destination. The determination unit determines whether a future position on the vehicle's route is included in the area where severe weather will occur in the future. If the determination unit determines that the data is included, the management-side providing unit provides the inclement weather video data to the invehicle-mounted device. The imaging device includes a request acquisition unit, an imaging unit, and an imaging-side providing unit. The imaging unit captures images of inclement weather conditions and generates inclement weather video data. The request acquisition unit acquires a request for inclement weather video data from the management device. If the request acquisition unit acquires the request, the imaging-side providing unit provides the inclement weather video data generated by the imaging unit to the management device. The invehicle-mounted device includes a display unit, an invehicle-side inclement weather video data acquisition unit, and a display control unit. The invehicle-side inclement weather video data acquisition unit acquires the inclement weather video data from the management device. The display control unit displays inclement weather video represented by the inclement weather video data as video of inclement weather that may occur in the future along the route, along with a map showing the route, on the display unit.
本開示の1つの態様の管理装置は、記憶部と、荒天情報取得部と、特定部と、要求部と、荒天映像データ取得部と、記憶制御部と、経路情報取得部と、判定部と、提供部とを備える。荒天情報取得部は、現在の荒天の発生エリアと荒天の今後の移動予測に関する情報を含む荒天情報を取得する。特定部は、発生エリアに存在する撮像装置を特定する。要求部は、特定部により特定された撮像装置に荒天映像データの要求を行う。荒天映像データ取得部は、特定部により特定された撮像装置から荒天映像データを取得する。記憶制御部は、荒天映像データを荒天情報と対応付けて記憶部に記憶させる。経路情報取得部は、車両の目的地までの経路に関する情報を含む経路情報を取得する。判定部は、車両の経路上の未来の位置が、荒天の未来の発生エリアに含まれるか否かを判定する。提供部は、判定部により含まれると判定された場合に、車両に搭載された車載装置に荒天映像データを提供する。 A management device according to one aspect of the present disclosure includes a memory unit, a severe weather information acquisition unit, an identification unit, a request unit, a severe weather video data acquisition unit, a memory control unit, a route information acquisition unit, a determination unit, and a provision unit. The severe weather information acquisition unit acquires severe weather information, including information regarding the current severe weather occurrence area and the predicted future movement of the severe weather. The identification unit identifies imaging devices present in the occurrence area. The request unit requests severe weather video data from the imaging devices identified by the identification unit. The severe weather video data acquisition unit acquires the severe weather video data from the imaging devices identified by the identification unit. The memory control unit associates the severe weather video data with the severe weather information and stores it in the memory unit. The route information acquisition unit acquires route information, including information regarding the route to the vehicle's destination. The determination unit determines whether a future position on the vehicle's route is included in the area where severe weather will occur in the future. If the determination unit determines that the location is included, the provision unit provides the severe weather video data to an on-board device installed in the vehicle.
本開示の1つの態様の荒天情報提供方法は、現在の荒天の発生エリアと荒天の今後の移動予測に関する情報を含む荒天情報を取得し、発生エリアに存在する撮像装置を特定し、特定した撮像装置に荒天映像データの要求を行い、特定した撮像装置から荒天映像データを取得し、荒天映像データを荒天情報と対応付けて記憶部に記憶させ、車両の目的地までの経路に関する情報を含む経路情報を取得し、車両の経路上の未来の位置が、荒天の未来の発生エリアに含まれるか否かを判定し、含まれると判定した場合に、車両に搭載された車載装置に荒天映像データを提供する処理をコンピュータが実行する。 In one aspect of the present disclosure, a method for providing severe weather information involves a computer executing a process in which it acquires severe weather information including information regarding the current severe weather occurrence area and the predicted future movement of the severe weather, identifies an imaging device present in the occurrence area, requests severe weather video data from the identified imaging device, acquires the severe weather video data from the identified imaging device, associates the severe weather video data with the severe weather information and stores it in a memory unit, acquires route information including information regarding the route to the vehicle's destination, determines whether a future position on the vehicle's route is included in the future severe weather occurrence area, and if it is determined that the position is included, provides the severe weather video data to an on-board device installed in the vehicle.
車両の目的地までの経路上で未来に発生し得る荒天の映像を乗員に提供することができる。 It can provide occupants with images of potential future severe weather along the vehicle's route to its destination.
以下、図面を参照しながら本発明の実施の形態について説明する。 The following describes an embodiment of the present invention with reference to the drawings.
図1は、荒天映像提供システム1の構成を例示する図である。 Figure 1 is a diagram illustrating the configuration of the severe weather video provision system 1.
図1に例示した荒天映像提供システム1は、管理装置10と、撮像装置20と、車両30に搭載された車載装置40とを含む。管理装置10と、撮像装置20と、車載装置40は、通信ネットワーク50に接続され、例えば、管理装置10と撮像装置20や、管理装置10と車載装置40は、通信ネットワーク50を介して通信可能である。また、通信ネットワーク50には、天気サーバ60や地図サーバ70も接続され、例えば、管理装置10と天気サーバ60や、車載装置40と地図サーバ70は、通信ネットワーク50を介して通信可能である。 The severe weather video provision system 1 illustrated in FIG. 1 includes a management device 10, an imaging device 20, and an in-vehicle device 40 mounted on a vehicle 30. The management device 10, the imaging device 20, and the in-vehicle device 40 are connected to a communications network 50; for example, the management device 10 and the imaging device 20, or the management device 10 and the in-vehicle device 40, can communicate via the communications network 50. A weather server 60 and a map server 70 are also connected to the communications network 50; for example, the management device 10 and the weather server 60, or the in-vehicle device 40 and the map server 70 can communicate via the communications network 50.
管理装置10は、例えば、現在の荒天の発生エリアとその荒天の今後の移動予測に関する情報を含む荒天情報を天気サーバ60から取得すると、現在の荒天の発生エリアに存在する撮像装置20を特定し、その撮像装置20に荒天映像データを要求し、その撮像装置20から荒天映像データを取得する。また、管理装置10は、例えば、車両30の目的地までの経路に関する情報を含む経路情報を、その車両30に搭載された車載装置40から取得すると、その車両30の経路上の未来の位置が、荒天の未来の発生エリアに含まれるか否かを判定し、含まれると判定した場合は、その車両30に搭載された車載装置40に荒天映像データを提供する。管理装置10は、例えば、サーバ等のコンピュータである。 For example, when the management device 10 obtains severe weather information from the weather server 60, including information about the current severe weather area and the predicted future movement of that severe weather, it identifies the imaging device 20 located in the current severe weather area, requests severe weather video data from that imaging device 20, and obtains the severe weather video data from that imaging device 20. Furthermore, when the management device 10 obtains route information, including information about the route to the vehicle's 30 destination, from an on-board device 40 installed in the vehicle 30, it determines whether the vehicle's 30 future location on the route is included in the future severe weather area, and if it determines that the location is included, provides the severe weather video data to the on-board device 40 installed in the vehicle 30. The management device 10 is, for example, a computer such as a server.
撮像装置20は、例えば、管理装置10から荒天映像データの要求を取得すると、荒天の状況(例えば荒天状況21)を撮像して荒天映像データを生成し、生成した荒天映像データを管理装置10に提供する。撮像装置20は、例えば、監視カメラ等の定点カメラ、車両30に搭載されたカメラ(ドライブレコーダ等)、カメラ付きのスマートフォンやタブレット端末等の携帯端末である。なお、カメラを備えた車載装置40が、撮像装置20として動作してもよい。 For example, when the imaging device 20 receives a request for severe weather video data from the management device 10, it captures images of the severe weather conditions (e.g., severe weather condition 21) to generate severe weather video data and provides the generated severe weather video data to the management device 10. The imaging device 20 is, for example, a fixed camera such as a surveillance camera, a camera mounted on the vehicle 30 (e.g., a drive recorder), or a mobile device such as a smartphone or tablet with a camera. Note that an in-vehicle device 40 equipped with a camera may also operate as the imaging device 20.
車載装置40は、例えば、地図サーバ70から取得した地図データと、車載装置40(車両30)の現在位置とに基づいて、車両30の目的地までの経路を探索し、目的地までの経路案内(ナビゲーション)を行う。このときの目的地は、例えば、車両30の乗員により入力される。また、車載装置40は、例えば、探索した経路に関する情報を含む経路情報を管理装置10に送信する。また、車載装置40は、例えば、管理装置10から荒天映像データを取得すると、車両30の目的地までの経路が示された地図(不図示)と共に、その経路上で未来に発生し得る荒天の映像として、荒天映像データが表す荒天映像(例えば荒天映像41)を表示する。このときの表示では、関連するメッセージ(例えばメッセージ42)等を更に表示してもよい。 The in-vehicle device 40 searches for a route to the destination of the vehicle 30 based on, for example, map data acquired from the map server 70 and the current position of the in-vehicle device 40 (vehicle 30), and provides route guidance (navigation) to the destination. The destination is input, for example, by an occupant of the vehicle 30. The in-vehicle device 40 also transmits route information, including information about the searched route, to the management device 10. Furthermore, when the in-vehicle device 40 acquires severe weather video data from the management device 10, it displays a map (not shown) showing the route to the destination of the vehicle 30, along with severe weather video (e.g., severe weather video 41) represented by the severe weather video data as video of severe weather that may occur in the future along that route. This display may also include related messages (e.g., message 42), etc.
天気サーバ60は、現在の荒天の発生エリアとその荒天の今後の移動予測に関する情報を含む荒天情報を管理装置10等に提供する。この提供は、例えば、定期的に行われる。 The weather server 60 provides severe weather information to the management device 10, etc., including information on the current area where severe weather is occurring and the predicted future movement of that severe weather. This provision is performed, for example, periodically.
地図サーバ70は、地図データを車載装置40等に提供する。この提供は、例えば、地図データが更新される度に行われる。 The map server 70 provides map data to the in-vehicle device 40, etc. This provision is performed, for example, every time the map data is updated.
このような荒天映像提供システム1では、車両30の目的地までの経路上で未来に発生し得る荒天の映像を乗員に提供することが可能である。以下、荒天映像提供システム1について、より詳細に説明する。 Such a severe weather video provision system 1 can provide the occupants of the vehicle 30 with video of severe weather that may occur in the future along the route to the destination. The severe weather video provision system 1 will be described in more detail below.
図2は、管理装置10の機能構成を例示する図である。 Figure 2 is a diagram illustrating the functional configuration of the management device 10.
図2に例示した管理装置10は、制御部101と、記憶部102と、通信部103とを含む。 The management device 10 illustrated in FIG. 2 includes a control unit 101, a memory unit 102, and a communication unit 103.
制御部101は、管理装置10の各部を制御する。 The control unit 101 controls each part of the management device 10.
また、制御部101は、荒天情報取得部111と、特定部112と、要求部113と、荒天映像データ取得部(管理側荒天映像データ取得部)114と、記憶制御部115、経路情報取得部116と、判定部117と、提供部(管理側提供部)118とを含む。 The control unit 101 also includes a severe weather information acquisition unit 111, an identification unit 112, a request unit 113, a severe weather video data acquisition unit (management-side severe weather video data acquisition unit) 114, a memory control unit 115, a route information acquisition unit 116, a determination unit 117, and a provision unit (management-side provision unit) 118.
荒天情報取得部111は、通信部103を介して、天気サーバ60から荒天情報を取得する。荒天情報は、現在の荒天の発生エリアとその荒天の今後の移動予測に関する情報を含み、更に、その荒天の種類や状態に関する情報を含んでもよい。現在の荒天の発生エリアに関する情報は、例えば、荒天レベル(降水量や降雪量等)が所定の閾値以上のエリア(発生エリア)を示す。あるいは、現在の荒天の発生エリアに関する情報は、例えば、降水量が第1の閾値以上のエリア、降水量が第2の閾値以上のエリア等といったように、荒天レベル別のエリア(発生エリア)を示すものであってもよい。荒天の今後の移動予測に関する情報は、例えば、現在発生している荒天の未来の各時刻における移動予測地点を示す。移動予測地点は、例えば、荒天レベルが最大になる地点(荒天レベルが最大になるエリアの中心地点)として予測される地点である。 The storm information acquisition unit 111 acquires storm information from the weather server 60 via the communication unit 103. The storm information includes information about the current storm occurrence area and the predicted future movement of that storm, and may further include information about the type and state of the storm. Information about the current storm occurrence area indicates, for example, an area (occurrence area) where the storm level (precipitation, snowfall, etc.) is above a predetermined threshold. Alternatively, information about the current storm occurrence area may indicate areas (occurrence areas) by storm level, such as an area where precipitation is above a first threshold, an area where precipitation is above a second threshold, etc. Information about the predicted future movement of stormy weather indicates, for example, the predicted movement location of the currently occurring storm at each future time. The predicted movement location is, for example, the location predicted to be the location where the storm level will be at its highest (the center of the area where the storm level will be at its highest).
特定部112は、荒天情報取得部111により取得された荒天情報が示す現在の荒天の発生エリアに存在する撮像装置20を特定する。この特定は、例えば、記憶部102に記憶されている撮像装置情報に基づいて行われる。撮像装置情報は、各撮像装置20の現在位置情報を含む。各撮像装置20の現在位置情報は、撮像装置20の識別子、現在位置に関する情報を含む。なお、撮像装置情報において、位置が変わり得る撮像装置20(例えば携帯端末、車両30に搭載されたカメラ、撮像装置20として動作する車載装置40)の現在位置情報は、例えば、当該撮像装置20から管理装置10に定期的に送信される現在位置情報に基づいて、その都度更新される。また、位置が変わり得ない撮像装置20(例えば定点カメラ)の現在位置情報は、例えば、当該撮像装置20が設置されたときに撮像装置情報に登録される。このような更新及び登録は、制御部101が行うようにしてもよい。 The identification unit 112 identifies imaging devices 20 that are present in the current severe weather area indicated by the severe weather information acquired by the severe weather information acquisition unit 111. This identification is performed, for example, based on imaging device information stored in the storage unit 102. The imaging device information includes current location information for each imaging device 20. The current location information for each imaging device 20 includes the imaging device 20's identifier and information about the current location. Note that in the imaging device information, the current location information for imaging devices 20 whose locations may change (e.g., mobile terminals, cameras mounted on vehicles 30, and in-vehicle devices 40 operating as imaging devices 20) is updated each time based on current location information periodically transmitted from the imaging devices 20 to the management device 10. Furthermore, the current location information for imaging devices 20 whose locations may not change (e.g., fixed cameras) is registered in the imaging device information, for example, when the imaging device 20 is installed. Such updating and registration may be performed by the control unit 101.
要求部113は、特定部112により特定された撮像装置20に対し、通信部103を介して、荒天映像データの要求を行う。 The request unit 113 requests severe weather video data from the imaging device 20 identified by the identification unit 112 via the communication unit 103.
荒天映像データ取得部114は、通信部103を介して、特定部112により特定された撮像装置20から荒天映像データを取得する。 The severe weather video data acquisition unit 114 acquires severe weather video data from the imaging device 20 identified by the identification unit 112 via the communication unit 103.
記憶制御部115は、荒天映像データ取得部114により取得された荒天映像データを、荒天情報取得部111により取得された荒天情報と対応付けて記憶部102に記憶させる。なお、特定部112により複数の撮像装置20が特定され、荒天映像データ取得部114により複数の荒天映像データが取得された場合は、その複数の荒天映像データを荒天情報と対応付けて記憶部102に記憶させるようにしてもよい。 The storage control unit 115 stores the severe weather video data acquired by the severe weather video data acquisition unit 114 in the storage unit 102 in association with the severe weather information acquired by the severe weather information acquisition unit 111. Note that if multiple imaging devices 20 are identified by the identification unit 112 and multiple pieces of severe weather video data are acquired by the severe weather video data acquisition unit 114, the multiple pieces of severe weather video data may be stored in the storage unit 102 in association with the severe weather information.
経路情報取得部116は、通信部103を介して、車両30の目的地までの経路に関する情報を含む経路情報を、その車両30に搭載された車載装置40から取得する。なお、経路情報は、車両30の目的地までの経路上の各地点の通過予測時刻、目的地への到着予測時刻に関する情報を含んでもよい。 The route information acquisition unit 116 acquires route information, including information about the route to the destination of the vehicle 30, from the on-board device 40 installed in the vehicle 30 via the communication unit 103. The route information may also include information about the predicted time of passing each point on the route to the destination of the vehicle 30 and the predicted time of arrival at the destination.
判定部117は、経路情報取得部116により取得された経路情報が示す経路上の車両30の未来の位置が、荒天の未来の発生エリアに含まれるか否かを判定する。ここで、荒天の未来の発生エリアは、記憶部102に記憶されている荒天情報に含まれる今後の移動予測に関する情報に基づくものであり、例えば、その移動予測に関する情報が示す荒天の移動予測地点を中心とする半径が所定距離(例えば10km)の円の範囲のエリアとしてもよい。このときの所定距離は、例えば、荒天の移動予測地点と実際の移動地点との間で生じ得る誤差等を考慮して決定されてもよい。 The determination unit 117 determines whether the future position of the vehicle 30 on the route indicated by the route information acquired by the route information acquisition unit 116 is included in an area where severe weather will occur in the future. Here, the area where severe weather will occur in the future is based on information regarding future movement predictions included in the severe weather information stored in the memory unit 102, and may be, for example, an area within a circle with a radius of a predetermined distance (e.g., 10 km) centered on the predicted severe weather movement point indicated by the information regarding the movement prediction. In this case, the predetermined distance may be determined, for example, taking into account errors that may occur between the predicted severe weather movement point and the actual movement point.
提供部118は、判定部117により含まれると判定された場合に、当該判定時に使用された荒天情報と対応付けられて記憶部102に記憶されている荒天映像データを、経路情報取得部116により取得された経路情報の送信元である車載装置40に対し、通信部103を介して、提供する。また、提供部118は、その提供の際に、経路上の車両30の未来の位置が、荒天の未来の発生エリアに含まれると予測される最先の時刻とその時の車両30の位置とその時の荒天の種類に関する情報を含む付帯情報を、荒天映像データに付帯させるようにしてもよい。付帯情報は、荒天情報の一部を更に含むようにしてもよい。このような付帯情報は、経路情報と荒天情報とに基づいて制御部101が生成するようにしてもよい。また、提供部118は、荒天情報と対応付けられて記憶部102に記憶されている荒天映像データが複数の場合に、その複数の荒天映像データを車載装置40に提供するようにしてもよい。 If the determination unit 117 determines that the severe weather information is included, the provision unit 118 provides, via the communication unit 103, the severe weather video data stored in the memory unit 102 in association with the severe weather information used at the time of the determination to the in-vehicle device 40 that transmitted the route information acquired by the route information acquisition unit 116. When providing the severe weather video data, the provision unit 118 may also attach additional information to the severe weather video data, including the earliest time when the future position of the vehicle 30 on the route is predicted to be included in the future severe weather occurrence area, the position of the vehicle 30 at that time, and information about the type of severe weather at that time. The additional information may also include a portion of the severe weather information. Such additional information may be generated by the control unit 101 based on the route information and severe weather information. Furthermore, if there are multiple pieces of severe weather video data stored in the memory unit 102 in association with the severe weather information, the provision unit 118 may provide the multiple pieces of severe weather video data to the in-vehicle device 40.
なお、制御部101は、荒天映像データ取得部114により取得された荒天映像データを解析する解析部119を更に含んでもよい。この場合、荒天映像データが表す荒天映像が荒天を表す映像として不適切であると解析部119により解析された場合は、その荒天映像データが車載装置40に提供されないようにしてもよい。具体的には、記憶制御部115が、不適切であると解析された荒天映像データを荒天情報と対応付けて記憶部102に記憶させないようにしてもよい。なお、解析部119により不適切であると解析される荒天映像は、例えば、トンネル内を走行中の車両30に搭載されたカメラ(撮像装置20)により撮像された荒天映像データが表す荒天映像や、かばん内に収納されている携帯端末(撮像装置20)により撮像された荒天映像データが表す荒天映像等のように、荒天であることが目視で確認できないような荒天映像である。 The control unit 101 may further include an analysis unit 119 that analyzes the severe weather video data acquired by the severe weather video data acquisition unit 114. In this case, if the analysis unit 119 determines that the severe weather video represented by the severe weather video data is inappropriate for video representing severe weather, the severe weather video data may not be provided to the in-vehicle device 40. Specifically, the memory control unit 115 may associate severe weather video data analyzed as inappropriate with severe weather information and prevent it from being stored in the memory unit 102. Note that severe weather video analyzed as inappropriate by the analysis unit 119 is severe weather video that cannot be visually confirmed as severe weather, such as severe weather video represented by severe weather video data captured by a camera (imaging device 20) mounted on a vehicle 30 traveling through a tunnel or severe weather video represented by a mobile terminal (imaging device 20) stored in a bag.
記憶部102は、撮像装置情報、記憶制御部115により対応付けられた荒天映像データと荒天情報等を記憶する。また、記憶部102は、経路情報取得部116により取得された経路情報を更に記憶してもよい。 The memory unit 102 stores imaging device information, severe weather video data and severe weather information associated by the memory control unit 115, etc. The memory unit 102 may also store route information acquired by the route information acquisition unit 116.
通信部103は、通信ネットワーク50を介して、外部の装置(例えば撮像装置20、車載装置40、天気サーバ60)と通信を行う。 The communication unit 103 communicates with external devices (e.g., the imaging device 20, the in-vehicle device 40, and the weather server 60) via the communication network 50.
図3は、撮像装置20の機能構成を例示する図である。 Figure 3 is a diagram illustrating the functional configuration of the imaging device 20.
図3に例示した撮像装置20は、制御部201と、撮像部202と、現在位置検出部203と、記憶部204と、通信部205とを含む。なお、位置が変わり得ない撮像装置20(例えば定点カメラ)の場合は、現在位置検出部203を含んでいなくてもよい。 The imaging device 20 illustrated in FIG. 3 includes a control unit 201, an imaging unit 202, a current position detection unit 203, a storage unit 204, and a communication unit 205. Note that an imaging device 20 whose position does not change (e.g., a fixed camera) may not include the current position detection unit 203.
制御部201は、撮像装置20の各部を制御する。 The control unit 201 controls each part of the imaging device 20.
また、制御部201は、定期的に、撮像装置20の識別子と、現在位置検出部203により検出された現在位置(撮像装置20の現在位置)に関する情報を含む現在位置情報を、通信部205を介して、管理装置10に送信する。 In addition, the control unit 201 periodically transmits current location information, including the identifier of the imaging device 20 and information about the current location (current location of the imaging device 20) detected by the current location detection unit 203, to the management device 10 via the communication unit 205.
また、制御部201は、要求取得部211と、提供部(撮像側提供部)212とを含む。 The control unit 201 also includes a request acquisition unit 211 and a provision unit (imaging side provision unit) 212.
要求取得部211は、通信部205を介して、管理装置10から荒天映像データの要求を取得する。 The request acquisition unit 211 acquires a request for severe weather video data from the management device 10 via the communication unit 205.
提供部212は、通信部205を介して、要求取得部211により荒天映像データの要求が取得された場合に、撮像部202により生成された荒天映像データを管理装置10に提供する。 When a request for severe weather video data is acquired by the request acquisition unit 211 via the communication unit 205, the provision unit 212 provides the severe weather video data generated by the imaging unit 202 to the management device 10.
撮像部202は、荒天の状況を撮像して荒天映像データを生成する。 The imaging unit 202 captures images of stormy weather conditions and generates stormy weather video data.
現在位置検出部203は、現在位置(撮像装置20の現在位置)を検出する。 The current position detection unit 203 detects the current position (the current position of the imaging device 20).
記憶部204は、撮像部202により生成された荒天映像データ、現在位置検出部203により検出された現在位置に関する情報(現在位置データ)等を記憶する。 The storage unit 204 stores stormy weather video data generated by the imaging unit 202, information about the current position detected by the current position detection unit 203 (current position data), etc.
通信部205は、通信ネットワーク50を介して、外部の装置(例えば管理装置10)と通信を行う。
図4は、車載装置40の機能構成を例示する図である。
The communication unit 205 communicates with an external device (for example, the management device 10) via the communication network 50.
FIG. 4 is a diagram illustrating an example of the functional configuration of the in-vehicle device 40. As shown in FIG.
図4に例示した車載装置40は、制御部401と、撮像部402と、現在位置検出部403と、表示部404と、記憶部405と、通信部406とを含む。 The in-vehicle device 40 illustrated in FIG. 4 includes a control unit 401, an imaging unit 402, a current position detection unit 403, a display unit 404, a memory unit 405, and a communication unit 406.
制御部401は、車載装置40の各部を制御する。 The control unit 401 controls each part of the in-vehicle device 40.
また、制御部401は、通信部406を介して地図サーバ70から取得した地図データと、現在位置検出部403により検出された現在位置(車載装置40(車両30)の現在位置)とに基づいて、車両30の目的地までの経路を探索し、目的地までの経路案内を行う。このときの目的地は、例えば、乗員により入力される。また、制御部401は、探索した経路に関する情報を含む経路情報を、通信部406を介して管理装置10に送信する。このときの経路情報には、車載装置40の識別子が含まれてもよい。 The control unit 401 also searches for a route to the destination of the vehicle 30 based on map data acquired from the map server 70 via the communication unit 406 and the current position (current position of the in-vehicle device 40 (vehicle 30)) detected by the current position detection unit 403, and provides route guidance to the destination. The destination at this time is input, for example, by the occupant. The control unit 401 also transmits route information including information about the searched route to the management device 10 via the communication unit 406. The route information at this time may include an identifier for the in-vehicle device 40.
また、制御部401は、荒天映像データ取得部(車載側荒天映像データ取得部)411と、表示制御部412とを含む。 The control unit 401 also includes a severe weather video data acquisition unit (vehicle-mounted severe weather video data acquisition unit) 411 and a display control unit 412.
荒天映像データ取得部411は、通信部406を介して、管理装置10から荒天映像データを取得する。 The severe weather video data acquisition unit 411 acquires severe weather video data from the management device 10 via the communication unit 406.
表示制御部412は、車両30の目的地までの経路が示された地図と共に、その経路上で未来に発生し得る荒天の映像として、荒天映像データ取得部411により取得された荒天映像データが表す荒天映像を、表示部404に表示させる。このときの表示では、荒天映像データに付帯されている付帯情報に基づいて、関連するメッセージ等を更に表示部404に表示させるようにしてもよい。また、荒天映像データ取得部411により取得された荒天映像データが複数の場合には、各荒天映像データが表す荒天映像を順番に表示部404に表示させるようにしてもよい。 The display control unit 412 causes the display unit 404 to display, together with a map showing the route to the destination of the vehicle 30, severe weather video represented by the severe weather video data acquisition unit 411 as video of severe weather that may occur in the future along that route. In this display, the display unit 404 may also display related messages, etc., based on additional information attached to the severe weather video data. Furthermore, if multiple pieces of severe weather video data are acquired by the severe weather video data acquisition unit 411, the severe weather video represented by each piece of severe weather video data may be displayed in sequence on the display unit 404.
撮像部402は、例えば、車載装置40が搭載された車両30の前方を撮像して、映像データを生成する。 The imaging unit 402, for example, captures an image of the area ahead of the vehicle 30 in which the in-vehicle device 40 is installed, and generates video data.
現在位置検出部403は、現在位置(車載装置40(車両30)の現在位置)を検出する。 The current position detection unit 403 detects the current position (the current position of the in-vehicle device 40 (vehicle 30)).
表示部404は、例えば、目的地までの経路が示された地図と共に、その経路上で未来に発生し得る荒天の映像として、荒天映像データが表す荒天映像等を表示する。 The display unit 404 displays, for example, a map showing the route to the destination, as well as severe weather images represented by the severe weather image data as images of severe weather that may occur in the future along that route.
記憶部405は、地図サーバ70から取得された地図データ、撮像部402により生成された映像データ、現在位置検出部403により検出された現在位置に関する情報等を記憶する。 The memory unit 405 stores map data obtained from the map server 70, video data generated by the imaging unit 402, information about the current position detected by the current position detection unit 403, etc.
通信部406は、通信ネットワーク50を介して、外部の装置(例えば管理装置10、地図サーバ70)と通信を行う。 The communication unit 406 communicates with external devices (e.g., the management device 10, the map server 70) via the communication network 50.
なお、管理装置10や、撮像装置20や、車載装置40は、図5に例示するハードウェア構成を有するコンピュータ80により実現されてもよい。 The management device 10, imaging device 20, and in-vehicle device 40 may be realized by a computer 80 having the hardware configuration illustrated in FIG. 5.
図5は、コンピュータ80のハードウェア構成を例示する図である。 Figure 5 is a diagram illustrating the hardware configuration of computer 80.
図5に例示したコンピュータ80は、プロセッサ801、メモリ802、記憶装置803、読取装置804、通信インタフェース806、及び入出力インタフェース807を含み、それらは、データバス808を介して相互にデータの送受信が可能に接続されている。 The computer 80 illustrated in FIG. 5 includes a processor 801, memory 802, storage device 803, reading device 804, communication interface 806, and input/output interface 807, which are connected via a data bus 808 to enable data transmission and reception between them.
プロセッサ801は、例えば、シングルプロセッサであっても、マルチプロセッサやマルチコアであってもよい。プロセッサ801は、メモリ802を利用して、プログラム(例えば、後述する処理の手順を記述したプログラム)を実行することで、管理装置10の制御部101や、撮像装置20の制御部201や、車載装置40の制御部401として機能する。 The processor 801 may be, for example, a single processor, or a multi-processor or multi-core. The processor 801 uses the memory 802 to execute a program (for example, a program describing the processing procedures described below) to function as the control unit 101 of the management device 10, the control unit 201 of the imaging device 20, or the control unit 401 of the in-vehicle device 40.
なお、プロセッサ801には、カメラ811、GPS機器812が接続されていてもよい。カメラ811は、例えばCCDやCMOS等のイメージセンサを含む。GPS機器812は、現在位置を検出するセンサを含む。コンピュータ80により撮像装置20を実現する場合には、カメラ811、GPS機器812が、撮像部202、現在位置検出部203の機能を提供してもよい。コンピュータ80により車載装置40を実現する場合には、カメラ811、GPS機器812が、撮像部402、現在位置検出部403の機能を提供してもよい。なお、GPSは、Global Positioing Systemの略称である。CCDは、Charge Coupled Deviceの略称である。CMOSは、Complementary Metal Oxide Semiconductorの略称である。 The processor 801 may be connected to a camera 811 and a GPS device 812. The camera 811 includes an image sensor such as a CCD or CMOS. The GPS device 812 includes a sensor that detects the current position. When the imaging device 20 is realized by the computer 80, the camera 811 and the GPS device 812 may provide the functions of the imaging unit 202 and the current position detection unit 203. When the in-vehicle device 40 is realized by the computer 80, the camera 811 and the GPS device 812 may provide the functions of the imaging unit 402 and the current position detection unit 403. Note that GPS is an abbreviation for Global Positioning System. CCD is an abbreviation for Charge Coupled Device. CMOS is an abbreviation for Complementary Metal Oxide Semiconductor.
メモリ802は、例えば半導体メモリであり、RAM領域及びROM領域を含む。なお、RAMは、Random Access Memoryの略称である。ROMは、Read Only Memoryの略称である。 Memory 802 is, for example, semiconductor memory and includes a RAM area and a ROM area. Note that RAM is an abbreviation for Random Access Memory. ROM is an abbreviation for Read Only Memory.
記憶装置803は、例えばハードディスク、フラッシュメモリ等の半導体メモリ、または外部記憶装置である。コンピュータ80により管理装置10を実現する場合には、記憶装置803が記憶部102の機能を提供してもよい。コンピュータ80により撮像装置20を実現する場合には、記憶装置803が記憶部204の機能を提供してもよい。コンピュータ80により車載装置40を実現する場合には、記憶装置803が記憶部405の機能を提供してもよい。 The storage device 803 is, for example, a semiconductor memory such as a hard disk or flash memory, or an external storage device. When the management device 10 is implemented using the computer 80, the storage device 803 may provide the functions of the storage unit 102. When the imaging device 20 is implemented using the computer 80, the storage device 803 may provide the functions of the storage unit 204. When the in-vehicle device 40 is implemented using the computer 80, the storage device 803 may provide the functions of the storage unit 405.
読取装置804は、プロセッサ801の指示に従って着脱可能記憶媒体805にアクセスする。着脱可能記憶媒体805は、例えば、半導体デバイス(USBメモリ等)、磁気的作用により情報が入出力される媒体(磁気ディスク等)、光学的作用により情報が入出力される媒体(CD-ROM、DVD等)などにより実現される。なお、USBは、Universal Serial Busの略称である。CDは、Compact Discの略称である。DVDは、Digital Versatile Diskの略称である。 The reading device 804 accesses the removable storage medium 805 in accordance with instructions from the processor 801. The removable storage medium 805 may be realized, for example, as a semiconductor device (such as a USB memory), a medium that inputs and outputs information magnetically (such as a magnetic disk), or a medium that inputs and outputs information optically (such as a CD-ROM or DVD). Note that USB is an abbreviation for Universal Serial Bus. CD is an abbreviation for Compact Disc. DVD is an abbreviation for Digital Versatile Disk.
通信インタフェース806は、プロセッサ801の指示に従って、各種の通信ネットワーク(例えば、通信ネットワーク50)を介して通信する。コンピュータ80により管理装置10を実現する場合には、通信インタフェース806が通信部103の機能を提供してもよい。コンピュータ80により撮像装置20を実現する場合には、通信インタフェース806が通信部205の機能を提供してもよい。コンピュータ80により車載装置40を実現する場合には、通信インタフェース806が通信部406の機能を提供してもよい。 The communication interface 806 communicates via various communication networks (e.g., communication network 50) in accordance with instructions from the processor 801. When the management device 10 is implemented using the computer 80, the communication interface 806 may provide the functions of the communication unit 103. When the imaging device 20 is implemented using the computer 80, the communication interface 806 may provide the functions of the communication unit 205. When the in-vehicle device 40 is implemented using the computer 80, the communication interface 806 may provide the functions of the communication unit 406.
入出力インタフェース807は、入力デバイス813、出力デバイス814とのインタフェースを提供する。入力デバイス813は、キーボード、マウス装置、ボタンスイッチ、タッチパネル等である。出力デバイス815は、表示装置、オーディオ出力装置等である。コンピュータ80により車載装置40を実現する場合には、出力デバイス814が表示部404の機能を提供し、入力デバイス813が乗員による目的地の入力等に使用されてもよい。 The input/output interface 807 provides an interface with the input device 813 and output device 814. The input device 813 is a keyboard, mouse device, button switch, touch panel, etc. The output device 815 is a display device, audio output device, etc. When the in-vehicle device 40 is realized by the computer 80, the output device 814 provides the functions of the display unit 404, and the input device 813 may be used by the occupant to input a destination, etc.
コンピュータ80のプロセッサ801により実行されるプログラムは、例えば、下記の形態で提供される。
(1)記憶装置803に予めインストールされている。
(2)着脱可能記憶媒体805により提供される。
(3)プログラムサーバから通信ネットワーク50を介して提供される。
The program executed by the processor 801 of the computer 80 is provided, for example, in the following form.
(1) It is pre-installed in the storage device 803.
(2) Provided by a removable storage medium 805.
(3) Provided from a program server via a communication network 50.
なお、コンピュータ80のハードウェア構成は、例示であり、実施の形態はこれに限定されるものではない。例えば、構成の一部が、削除されてもよく、また、新たな構成が追加されてもよい。また、例えば、上述の機能構成の一部または全部の機能が、FPGA、SoC、ASIC、PLDなどによるハードウェアとして実装されてもよい。なお、FPGAは、Field Programmable Gate Arrayの略称である。SoCは、System-on-a-chipの略称である。ASICは、Application Specific Integrated Circuitの略称である。PLDは、Programmable Logic Deviceの略称である。 Note that the hardware configuration of computer 80 is an example, and embodiments are not limited to this. For example, part of the configuration may be deleted, or new components may be added. Also, for example, some or all of the functions of the above-mentioned functional configuration may be implemented as hardware using FPGA, SoC, ASIC, PLD, etc. Note that FPGA is an abbreviation for Field Programmable Gate Array. SoC is an abbreviation for System-on-a-chip. ASIC is an abbreviation for Application Specific Integrated Circuit. PLD is an abbreviation for Programmable Logic Device.
次に、荒天映像提供システム1において実行される処理について、管理装置10において実行される処理を中心に説明する。 Next, we will explain the processing performed in the storm weather video provision system 1, focusing on the processing performed by the management device 10.
図6及び図7は、管理装置10において実行される処理を例示するフローチャートである。なお、図6に例示した処理は、例えば、天気サーバ60から管理装置10に荒天情報が提供される度に行われる処理であり、図7に例示した処理は、例えば、車載装置40から管理装置10に経路情報が送信される度に行われる処理である。 Figures 6 and 7 are flowcharts illustrating processing executed by the management device 10. Note that the processing illustrated in Figure 6 is, for example, processing performed each time severe weather information is provided to the management device 10 from the weather server 60, and the processing illustrated in Figure 7 is, for example, processing performed each time route information is sent from the in-vehicle device 40 to the management device 10.
図6に例示した処理では、まず、S101において、管理装置10の制御部101(荒天情報取得部111)は、天気サーバ60から荒天情報を取得する。 In the process illustrated in FIG. 6, first, in S101, the control unit 101 (storm information acquisition unit 111) of the management device 10 acquires storm information from the weather server 60.
次に、S102において、制御部101(特定部112)は、S101で取得された荒天情報が示す現在の荒天の発生エリアに存在する撮像装置20を特定する。この特定は、例えば、上述のとおり、記憶部102に記憶されている撮像装置情報に基づいて行われる。 Next, in S102, the control unit 101 (identification unit 112) identifies the imaging devices 20 that are present in the current severe weather area indicated by the severe weather information acquired in S101. This identification is performed, for example, based on the imaging device information stored in the memory unit 102, as described above.
次に、S103において、制御部101(要求部113)は、S102で特定された撮像装置20に対して、荒天映像データの要求を行う。 Next, in S103, the control unit 101 (request unit 113) requests severe weather video data from the imaging device 20 identified in S102.
S103の処理によって荒天映像データの要求が行われた撮像装置20は、その要求を取得すると、荒天の状況を撮像して荒天映像データを生成し、生成した荒天映像データを管理装置10に提供する。 When the imaging device 20 receives the request for stormy weather video data in the processing of S103, it captures images of the stormy weather conditions, generates stormy weather video data, and provides the generated stormy weather video data to the management device 10.
S103の後、S104において、制御部101(荒天映像データ取得部114)は、S102で特定された撮像装置20から荒天映像データを取得する。 After S103, in S104, the control unit 101 (stormy weather video data acquisition unit 114) acquires stormy weather video data from the imaging device 20 identified in S102.
次に、S105において、制御部101(記憶制御部115)は、S104で取得された荒天映像データを、S101で取得された荒天情報と対応付けて記憶部102に記憶させる。なお、S102で複数の撮像装置が特定され、S104で複数の荒天映像データが取得された場合には、複数の荒天映像データを荒天情報と対応付けて記憶部102に記憶させるようにしてもよい。 Next, in S105, the control unit 101 (storage control unit 115) stores the severe weather video data acquired in S104 in the storage unit 102 in association with the severe weather information acquired in S101. Note that if multiple imaging devices are identified in S102 and multiple pieces of severe weather video data are acquired in S104, the multiple pieces of severe weather video data may be stored in the storage unit 102 in association with the severe weather information.
S105が終了すると、図6に例示した処理が終了する。 When S105 ends, the processing illustrated in Figure 6 ends.
図7に例示した処理では、まず、S201において、管理装置10の制御部101(経路情報取得部116)は、車載装置40から経路情報を取得する。 In the process illustrated in FIG. 7, first, in S201, the control unit 101 (route information acquisition unit 116) of the management device 10 acquires route information from the in-vehicle device 40.
次に、S202において、制御部101(判定部117)は、S201で取得された経路情報が示す経路上の車両30の未来の位置が、荒天の未来の発生エリアに含まれるか否かを判定する。ここで、荒天の未来の発生エリアは、記憶部102に記憶されている荒天情報に含まれる今後の移動予測に関する情報に基づくものであり、例えば、その移動予測に関する情報が示す荒天の移動予測地点を中心とする半径が所定距離(例えば10km)の円の範囲のエリアとしてもよい。 Next, in S202, the control unit 101 (determination unit 117) determines whether the future position of the vehicle 30 on the route indicated by the route information acquired in S201 is included in the area where severe weather will occur in the future. Here, the area where severe weather will occur in the future is based on information regarding future movement predictions included in the severe weather information stored in the memory unit 102, and may be, for example, an area within a circle with a radius of a predetermined distance (e.g., 10 km) centered on the predicted movement point of severe weather indicated by the information regarding movement predictions.
S202の判定結果がYESの場合、S203において、制御部101(提供部118)は、S201で取得された経路情報の送信元である車載装置40に対し、S202の判定でYESと判定されたときに使用された荒天情報と対応付けられて記憶部102に記憶されている荒天映像データを提供する。このときの提供では、荒天映像データに上述の付帯情報が付帯されてもよい。また、荒天情報と対応付けられて記憶部102に記憶されている荒天映像データが複数の場合は、複数の荒天映像データが車載装置40に提供されてもよい。 If the determination result in S202 is YES, in S203, the control unit 101 (providing unit 118) provides the inclement weather video data stored in the memory unit 102 in association with the inclement weather information used when the determination in S202 was YES to the invehicle-mounted device 40 that transmitted the route information acquired in S201. When providing this data, the above-mentioned additional information may be provided to the inclement weather video data. Furthermore, if there are multiple pieces of inclement weather video data stored in the memory unit 102 in association with the inclement weather information, multiple pieces of inclement weather video data may be provided to the invehicle-mounted device 40.
S203が終了、又は、S202の判定結果がNOの場合は、図7に例示した処理が終了する。 When S203 ends, or if the determination result in S202 is NO, the processing illustrated in Figure 7 ends.
S203の処理によって荒天映像データが提供された車載装置40は、その荒天映像データを取得すると、当該車載装置40が搭載された車両30の目的地までの経路が示された地図と共に、その経路上で未来に発生し得る荒天の映像として、荒天映像データが表す荒天映像を、表示部404に表示する。このときの表示では、荒天映像データに付帯されている付帯情報に基づいて、関連するメッセージ等を更に表示部404に表示するようにしてもよい。また、取得された荒天映像データが複数の場合には、各荒天映像データが表す荒天映像を順番に表示部404に表示するようにしてもよい。 When the in-vehicle device 40 receives the severe weather video data provided by the processing of S203, it displays the severe weather video represented by the severe weather video data on the display unit 404 as video of severe weather that may occur in the future along a map showing the route to the destination of the vehicle 30 on which the in-vehicle device 40 is installed. During this display, related messages, etc. may also be displayed on the display unit 404 based on additional information attached to the severe weather video data. Furthermore, if multiple pieces of severe weather video data are acquired, the severe weather video represented by each piece of severe weather video data may be displayed in order on the display unit 404.
このときに表示部404に表示される表示画面例について、図8及び図9を用いて説明する。 Examples of the display screen displayed on the display unit 404 at this time are explained using Figures 8 and 9.
図8は、表示部404の表示画面例を示す図である。図9は、表示部404の他の表示画面例を示す図である。 Figure 8 shows an example of a display screen of the display unit 404. Figure 9 shows another example of a display screen of the display unit 404.
図8に表示画面例として示した表示画面90には、車両30の目的地までの経路901が示された地図902と共に、その経路901上で未来に発生し得る荒天の映像として、荒天映像データが表す荒天映像903が表示されている。また、表示画面90には、その他、関連するメッセージ904、荒天アイコン905、現在位置アイコン906等も表示されている。ここで、関連するメッセージ904、荒天アイコン905は、荒天映像データに付帯されている上述の付帯情報に基づいて表示されてもよい。荒天アイコン905は、経路901上において未来に車両30が荒天に遭遇する可能性が高い位置を示すアイコンである。なお、荒天アイコン905は、荒天の種類(豪雨や豪雪等)によってアイコンの形状等が変更されてもよい。現在位置アイコン906は、車両30の現在位置を示すアイコンである。 8 shows a map 902 indicating a route 901 to the destination of the vehicle 30, along with severe weather video 903 represented by severe weather video data as video of severe weather that may occur in the future on the route 901. The display screen 90 also displays a related message 904, a severe weather icon 905, a current location icon 906, and the like. The related message 904 and severe weather icon 905 may be displayed based on the aforementioned additional information attached to the severe weather video data. The severe weather icon 905 is an icon indicating a position on the route 901 where the vehicle 30 is likely to encounter severe weather in the future. The shape of the severe weather icon 905 may change depending on the type of severe weather (heavy rain, heavy snow, etc.). The current location icon 906 is an icon indicating the current location of the vehicle 30.
なお、このような表示画面90は、経路案内中の表示画面上に、荒天映像903、関連するメッセージ904、荒天アイコン905等が重畳表示されたものでもある。 In addition, this type of display screen 90 also displays severe weather images 903, related messages 904, severe weather icons 905, etc. superimposed on the display screen during route guidance.
図9に他の表示画面例として示した表示画面91には、車両30の目的地までの経路911が示された地図912と共に、その経路911上で未来に発生し得る荒天の映像として、荒天映像データが表す荒天映像913が表示されている。また、表示画面91には、その他、現在の荒天の発生エリア914、その荒天の移動予測ルート915、その荒天の未来の発生エリア(未来の荒天の発生エリア)916、現在位置アイコン918等も表示されている。ここで、現在の荒天の発生エリア914、その荒天の移動予測ルート915、その荒天の未来の発生エリア916は、荒天映像データに付帯されている上述の付帯情報に基づいて表示されてもよい。現在の荒天の発生エリア914は、例えば、降水量が第1の閾値以上のエリア、降水量が第2の閾値以上のエリア等といったように、荒天レベル別のエリアを色等によって識別可能に示すものであってもよい。その荒天の未来の発生エリア916は、経路911上において未来に車両30が荒天に遭遇する可能性が高いエリアを示す。なお、その荒天の未来の発生エリア916は、その荒天の移動予測地点917を中心とする半径が所定距離(例えば10km)の円の範囲とされてもよい。現在位置アイコン918は、車両30の現在位置を示すアイコンである。 Display screen 91, shown in FIG. 9 as another example of a display screen, displays a map 912 showing a route 911 to the destination of vehicle 30, along with severe weather video 913 represented by severe weather video data as video of severe weather that may occur in the future on route 911. Display screen 91 also displays a current severe weather occurrence area 914, a predicted travel route 915 for that severe weather, a future severe weather occurrence area (future severe weather occurrence area) 916, a current location icon 918, and the like. Here, current severe weather occurrence area 914, predicted travel route 915 for that severe weather, and future severe weather occurrence area 916 may be displayed based on the above-mentioned additional information attached to the severe weather video data. Current severe weather occurrence area 914 may be, for example, an area where precipitation is above a first threshold, an area where precipitation is above a second threshold, and the like, which indicates areas with different severe weather levels, distinguishable by color or the like. The future severe weather occurrence area 916 indicates an area on the route 911 where the vehicle 30 is likely to encounter severe weather in the future. The future severe weather occurrence area 916 may be a circular range with a radius of a predetermined distance (e.g., 10 km) centered on the predicted movement point 917 of the severe weather. The current location icon 918 is an icon that indicates the current location of the vehicle 30.
なお、このような表示画面91は、経路案内中の表示画面上に、荒天映像913、現在の荒天の発生エリア914、その荒天の移動予測ルート915、その荒天の未来の発生エリア916、その荒天の移動予測地点917等が重畳表示されたものでもある。 In addition, such a display screen 91 also displays, superimposed on the display screen during route guidance, a severe weather image 913, a current area where severe weather is occurring 914, a predicted route for that severe weather 915, a future area where severe weather will occur 916, a predicted location for that severe weather 917, etc.
以上のように、本実施の形態によれば、車両30に搭載された車載装置40の表示部404に、図8や図9の表示画面例に示したような表示画面が表示されるようになるので、車両30の目的地までの経路上で未来に発生し得る荒天の映像を車両30の乗員に提供することができる。これにより、乗員は、例えば、荒天に遭遇する前に安全な場所に車両30を停車させる等、荒天を避けるための回避行動をとることができる。 As described above, according to this embodiment, the display unit 404 of the in-vehicle device 40 installed in the vehicle 30 displays a display screen such as that shown in the example display screens of Figures 8 and 9, making it possible to provide the occupants of the vehicle 30 with images of severe weather that may occur in the future on the route to the destination of the vehicle 30. This allows the occupants to take evasive action to avoid severe weather, such as stopping the vehicle 30 in a safe place before encountering severe weather.
本実施の形態では、車載装置40が車両30の目的地までの経路を探索したが、この探索を、通信ネットワーク50に接続された他の装置(例えば管理装置10や地図サーバ70や図示しない他のサーバ)が行うようにしてもよい。この場合は、車載装置40が、当該車載装置40の識別子と車両30の目的地と車両30の現在位置等に関する情報を他の装置に送信し、他の装置が、車両30の目的地と車両30の現在位置に関する情報と地図データとに基づいて目的地までの経路を探索し、探索した経路に関する情報を車載装置40に送信するようにしてもよい。また、他の装置が管理装置10以外の装置である場合は、他の装置が管理装置10に経路情報を送信するようにしてもよい。このときの経路情報には、探索された経路に関する情報の他、管理装置10が車載装置40を特定可能なように、車載装置40から送信された当該車載装置40の識別子も含まれるようにしてもよい。 In this embodiment, the on-board device 40 searches for a route to the destination of the vehicle 30. However, this search may also be performed by another device connected to the communication network 50 (e.g., the management device 10, the map server 70, or another server not shown). In this case, the on-board device 40 may transmit information regarding the identifier of the on-board device 40, the destination of the vehicle 30, and the current location of the vehicle 30 to the other device. The other device may then search for a route to the destination based on the information regarding the destination and current location of the vehicle 30 and map data, and transmit information regarding the searched route to the on-board device 40. Furthermore, if the other device is a device other than the management device 10, the other device may transmit route information to the management device 10. In this case, the route information may include, in addition to information regarding the searched route, the identifier of the on-board device 40 transmitted from the on-board device 40 so that the management device 10 can identify the on-board device 40.
なお、以上までに説明した実施の形態には、下記のプログラムや当該プログラムを記録した記録媒体の実施の形態も含まれている。 Note that the embodiments described above also include the following programs and recording media on which these programs are recorded.
現在の荒天の発生エリアと前記荒天の今後の移動予測に関する情報を含む荒天情報を取得し、
前記発生エリアに存在する撮像装置を特定し、
特定した前記撮像装置に荒天映像データの要求を行い、
特定した前記撮像装置から前記荒天映像データを取得し、
前記荒天映像データを前記荒天情報と対応付けて記憶部に記憶させ、
車両の目的地までの経路に関する情報を含む経路情報を取得し、
前記車両の前記経路上の未来の位置が、前記荒天の未来の発生エリアに含まれるか否かを判定し、
含まれると判定した場合に、前記車両に搭載された車載装置に前記荒天映像データを提供する
処理をコンピュータに実行させることを特徴とするプログラム。
obtaining storm information including information regarding the current area of storm occurrence and the predicted future movement of said storm;
Identifying an imaging device present in the occurrence area;
a request for severe weather video data is made to the identified imaging device;
Acquire the stormy weather image data from the identified imaging device;
storing the stormy weather image data in a storage unit in association with the stormy weather information;
obtaining route information including information regarding a route to a destination of the vehicle;
determining whether a future location of the vehicle on the route is within the future occurrence area of the severe weather;
If it is determined that the severe weather image data is included, the program causes a computer to execute a process of providing the severe weather image data to an in-vehicle device installed in the vehicle.
以上、本発明の実施の形態について説明したが、本発明は、上述した実施の形態に限定されることなく、本発明の要旨を逸脱しない範囲内で種々の改良・変更が可能である。 The above describes an embodiment of the present invention, but the present invention is not limited to the above embodiment, and various improvements and modifications are possible without departing from the spirit of the present invention.
1 荒天映像提供システム
10 管理装置
20 撮像装置
21 荒天状況
30 車両
40 車載装置
41 荒天映像
42 メッセージ
50 通信ネットワーク
60 天気サーバ
70 地図サーバ
80 コンピュータ
90、91 表示画面
101 制御部
102 記憶部
103 通信部
111 荒天情報取得部
112 特定部
113 要求部
114 荒天映像データ取得部
115 記憶制御部
116 経路情報取得部
117 判定部
118 提供部
119 解析部
201 制御部
202 撮像部
203 現在位置検出部
204 記憶部
205 通信部
211 要求取得部
212 提供部
401 制御部
402 撮像部
403 現在位置検出部
404 表示部
405 記憶部
406 通信部
411 荒天映像データ取得部
412 表示制御部
801 プロセッサ
802 メモリ
803 記憶装置
804 読取装置
805 着脱可能記憶媒体
806 通信インタフェース
807 入出力インタフェース
808 データバス
811 カメラ
812 GPS機器
813 入力デバイス
814 出力デバイス
REFERENCE SIGNS LIST 1 Severe weather video provision system 10 Management device 20 Imaging device 21 Severe weather conditions 30 Vehicle 40 In-vehicle device 41 Severe weather video 42 Message 50 Communication network 60 Weather server 70 Map server 80 Computer 90, 91 Display screen 101 Control unit 102 Memory unit 103 Communication unit 111 Severe weather information acquisition unit 112 Identification unit 113 Request unit 114 Severe weather video data acquisition unit 115 Memory control unit 116 Route information acquisition unit 117 Determination unit 118 Provision unit 119 Analysis unit 201 Control unit 202 Imaging unit 203 Current position detection unit 204 Memory unit 205 Communication unit 211 Request acquisition unit 212 Provision unit 401 Control unit 402 Imaging unit 403 Current position detection unit 404 Display unit 405 Storage unit 406 Communication unit 411 Severe weather video data acquisition unit 412 Display control unit 801 Processor 802 Memory 803 Storage device 804 Reading device 805 Removable storage medium 806 Communication interface 807 Input/output interface 808 Data bus 811 Camera 812 GPS device 813 Input device 814 Output device
Claims (5)
前記管理装置は、
記憶部と、
現在の荒天の発生エリアと前記荒天の今後の移動予測に関する情報を含む荒天情報を取得する荒天情報取得部と、
前記発生エリアに存在する前記撮像装置を特定する特定部と、
前記特定部により特定された前記撮像装置に荒天映像データの要求を行う要求部と、
前記特定部により特定された前記撮像装置から前記荒天映像データを取得する管理側荒天映像データ取得部と、
前記荒天映像データを前記荒天情報と対応付けて前記記憶部に記憶させる記憶制御部と、
前記車両の目的地までの経路に関する情報を含む経路情報を取得する経路情報取得部と、
前記車両の前記経路上の未来の位置が、前記荒天の未来の発生エリアに含まれるか否かを判定する判定部と、
前記判定部により含まれると判定された場合に、前記車載装置に前記荒天映像データを提供する管理側提供部と
を備え、
前記撮像装置は、
前記荒天の状況を撮像した前記荒天映像データを生成する撮像部と、
前記管理装置から前記荒天映像データの要求を取得する要求取得部と、
前記要求取得部により前記要求が取得された場合に、前記撮像部により生成された前記荒天映像データを前記管理装置に提供する撮像側提供部と
を備え、
前記車載装置は、
表示部と、
前記管理装置から前記荒天映像データを取得する車載側荒天映像データ取得部と、
前記経路が示された地図と共に、前記経路上で未来に発生し得る荒天の映像として前記荒天映像データが表す荒天映像を、前記表示部に表示させる表示制御部と
を備える
ことを特徴とする荒天映像提供システム。 A severe weather video providing system including a management device, an imaging device, and an in-vehicle device mounted on a vehicle,
The management device
A memory unit;
a storm information acquisition unit that acquires storm information including information about a current storm occurrence area and a future movement prediction of the storm;
an identification unit that identifies the imaging device present in the occurrence area;
a request unit that requests stormy weather video data from the imaging device identified by the identification unit;
a management-side stormy weather image data acquisition unit that acquires the stormy weather image data from the imaging device identified by the identification unit;
a storage control unit that stores the stormy weather image data in the storage unit in association with the stormy weather information;
a route information acquisition unit that acquires route information including information about a route to a destination of the vehicle;
a determination unit that determines whether a future position of the vehicle on the route is included in the future occurrence area of severe weather;
a management-side providing unit that provides the in-vehicle device with the stormy weather image data when the determining unit determines that the stormy weather image data is included;
The imaging device is
an imaging unit that captures the stormy weather conditions and generates the stormy weather video data;
a request acquisition unit that acquires a request for the stormy weather video data from the management device;
an imaging side providing unit that provides the stormy weather video data generated by the imaging unit to the management device when the request obtaining unit obtains the request,
The in-vehicle device
A display unit;
an in-vehicle stormy weather image data acquisition unit that acquires the stormy weather image data from the management device;
a display control unit that causes the display unit to display, together with a map showing the route, severe weather images represented by the severe weather image data as images of severe weather that may occur in the future on the route.
ことを特徴とする請求項1記載の荒天映像提供システム。 The severe weather image providing system according to claim 1, characterized in that the area of future occurrence of severe weather is an area within a circle having a radius of a predetermined distance centered on the predicted point of movement of the severe weather based on information regarding the future movement prediction of the severe weather.
前記荒天映像データを解析する解析部
を更に備え、
前記荒天映像データが表す荒天映像が荒天を表す映像として不適切であると前記解析部により解析された場合は、前記荒天映像データが前記車載装置に提供されない
ことを特徴とする請求項1又は2記載の荒天映像提供システム。 The management device
an analysis unit that analyzes the storm video data,
The severe weather image providing system of claim 1 or 2, characterized in that if the analysis unit analyzes that the severe weather image represented by the severe weather image data is inappropriate as an image representing severe weather, the severe weather image data is not provided to the vehicle-mounted device.
現在の荒天の発生エリアと前記荒天の今後の移動予測に関する情報を含む荒天情報を取得する荒天情報取得部と、
前記発生エリアに存在する撮像装置を特定する特定部と、
前記特定部により特定された前記撮像装置に荒天映像データの要求を行う要求部と、
前記特定部により特定された前記撮像装置から前記荒天映像データを取得する荒天映像データ取得部と、
前記荒天映像データを前記荒天情報と対応付けて前記記憶部に記憶させる記憶制御部と、
車両の目的地までの経路に関する情報を含む経路情報を取得する経路情報取得部と、
前記車両の前記経路上の未来の位置が、前記荒天の未来の発生エリアに含まれるか否かを判定する判定部と、
前記判定部により含まれると判定された場合に、前記車両に搭載された車載装置に前記荒天映像データを提供する提供部と
を備えることを特徴とする管理装置。 A memory unit;
a storm information acquisition unit that acquires storm information including information about a current storm occurrence area and a future movement prediction of the storm;
an identification unit that identifies an imaging device present in the occurrence area;
a request unit that requests stormy weather video data from the imaging device identified by the identification unit;
a stormy weather image data acquisition unit that acquires the stormy weather image data from the imaging device identified by the identification unit;
a storage control unit that stores the stormy weather image data in the storage unit in association with the stormy weather information;
a route information acquisition unit that acquires route information including information about a route to a destination of the vehicle;
a determination unit that determines whether a future position of the vehicle on the route is included in the future occurrence area of severe weather;
a providing unit that provides the severe weather image data to an in-vehicle device mounted on the vehicle when the determining unit determines that the severe weather image data is included.
前記発生エリアに存在する撮像装置を特定し、
特定した前記撮像装置に荒天映像データの要求を行い、
特定した前記撮像装置から前記荒天映像データを取得し、
前記荒天映像データを前記荒天情報と対応付けて記憶部に記憶させ、
車両の目的地までの経路に関する情報を含む経路情報を取得し、
前記車両の前記経路上の未来の位置が、前記荒天の未来の発生エリアに含まれるか否かを判定し、
含まれると判定した場合に、前記車両に搭載された車載装置に前記荒天映像データを提供する
処理をコンピュータが実行することを特徴とする荒天映像提供方法。 obtaining storm information including information regarding the current area of storm occurrence and the predicted future movement of said storm;
Identifying an imaging device present in the occurrence area;
a request for severe weather video data is made to the identified imaging device;
Acquire the stormy weather image data from the identified imaging device;
storing the stormy weather image data in a storage unit in association with the stormy weather information;
obtaining route information including information regarding a route to a destination of the vehicle;
determining whether a future location of the vehicle on the route is within the future occurrence area of the severe weather;
and providing the severe weather image data to an in-vehicle device mounted on the vehicle when it is determined that the severe weather image data is included.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022130828A JP7773443B2 (en) | 2022-08-19 | 2022-08-19 | Severe weather video providing system, management device, and severe weather video providing method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022130828A JP7773443B2 (en) | 2022-08-19 | 2022-08-19 | Severe weather video providing system, management device, and severe weather video providing method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2024027753A JP2024027753A (en) | 2024-03-01 |
| JP7773443B2 true JP7773443B2 (en) | 2025-11-19 |
Family
ID=90039878
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2022130828A Active JP7773443B2 (en) | 2022-08-19 | 2022-08-19 | Severe weather video providing system, management device, and severe weather video providing method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7773443B2 (en) |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002081947A (en) | 2000-09-08 | 2002-03-22 | Mitsubishi Electric Corp | Mobile navigation system |
| JP2009053185A (en) | 2007-07-31 | 2009-03-12 | Denso Corp | Navigation device, program |
| US20150168167A1 (en) | 2013-12-18 | 2015-06-18 | Hyundai Motor Company | System and method of providing weather information |
| JP2017003416A (en) | 2015-06-10 | 2017-01-05 | 古野電気株式会社 | Rainfall prediction system |
| JP2019109157A (en) | 2017-12-19 | 2019-07-04 | ヤフー株式会社 | Estimation device, estimation method and estimation program |
| JP2019204211A (en) | 2018-05-22 | 2019-11-28 | トヨタ自動車株式会社 | Map generation system |
| JP2019211313A (en) | 2018-06-04 | 2019-12-12 | 本田技研工業株式会社 | Controller and program |
| JP2021124930A (en) | 2020-02-04 | 2021-08-30 | 株式会社デンソーテン | Information processing device, distribution system, and information processing method |
| WO2022009848A1 (en) | 2020-07-07 | 2022-01-13 | 株式会社デンソー | Host vehicle location estimation device and travel control device |
-
2022
- 2022-08-19 JP JP2022130828A patent/JP7773443B2/en active Active
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002081947A (en) | 2000-09-08 | 2002-03-22 | Mitsubishi Electric Corp | Mobile navigation system |
| JP2009053185A (en) | 2007-07-31 | 2009-03-12 | Denso Corp | Navigation device, program |
| US20150168167A1 (en) | 2013-12-18 | 2015-06-18 | Hyundai Motor Company | System and method of providing weather information |
| JP2017003416A (en) | 2015-06-10 | 2017-01-05 | 古野電気株式会社 | Rainfall prediction system |
| JP2019109157A (en) | 2017-12-19 | 2019-07-04 | ヤフー株式会社 | Estimation device, estimation method and estimation program |
| JP2019204211A (en) | 2018-05-22 | 2019-11-28 | トヨタ自動車株式会社 | Map generation system |
| JP2019211313A (en) | 2018-06-04 | 2019-12-12 | 本田技研工業株式会社 | Controller and program |
| JP2021124930A (en) | 2020-02-04 | 2021-08-30 | 株式会社デンソーテン | Information processing device, distribution system, and information processing method |
| WO2022009848A1 (en) | 2020-07-07 | 2022-01-13 | 株式会社デンソー | Host vehicle location estimation device and travel control device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2024027753A (en) | 2024-03-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6791200B2 (en) | Search support system, search support device, and search support method | |
| US10818177B2 (en) | Driving assistance device and driving assistance method | |
| CN110692063A (en) | Management of mobile objects | |
| JP2022538097A (en) | Collection of user-provided data about navigable networks | |
| JP7348725B2 (en) | Distribution system, distribution method and on-vehicle device | |
| CN117392620A (en) | A traffic behavior recognition method, device, storage medium and electronic device | |
| JP2019109157A (en) | Estimation device, estimation method and estimation program | |
| CN113170092B (en) | Image processing apparatus, image processing method, and image processing system | |
| JP2019079453A (en) | Information generation system, information generation apparatus, information generation method, and computer program | |
| JP2022118371A (en) | Vehicle video collection system | |
| US10403144B1 (en) | Mobile device transport parking notification and movement tracking | |
| KR101070882B1 (en) | method of providing real-map information and system thereof | |
| JP7347502B2 (en) | Traffic jam information providing device, traffic jam information processing method and program | |
| CN112567427B (en) | Image processing device, image processing method, and program | |
| US9892642B1 (en) | Mobile device transport parking notification and movement tracking | |
| JP7028237B2 (en) | Information processing equipment, information processing system, program, information processing method and navigation equipment | |
| JP7773443B2 (en) | Severe weather video providing system, management device, and severe weather video providing method | |
| EP3565233B1 (en) | Camera, camera processing method, server, server processing method, and information processing device | |
| US20240159549A1 (en) | Information processing device and information processing method | |
| JP2022118321A (en) | Vehicle video collection system | |
| US11410555B2 (en) | Method for monitoring the area surrounding a first element located on a circulation route, and associated system | |
| JP6956687B2 (en) | Abandonment detection device, abandonment detection method and abandonment detection program | |
| KR20160117985A (en) | Service Method and System for Intermediating Recorded Video | |
| JP4769102B2 (en) | Vehicle information acquisition system | |
| JP2024048558A (en) | Event information providing system, management device, and event information providing method |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20231026 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20250206 |
|
| RD07 | Notification of extinguishment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7427 Effective date: 20250311 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20251010 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20251022 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20251107 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7773443 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |