Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7570533B2 - Road surface condition estimation system, road surface condition estimation device, and road surface condition estimation program - Google Patents
[go: Go Back, main page]

JP7570533B2 - Road surface condition estimation system, road surface condition estimation device, and road surface condition estimation program - Google Patents

Road surface condition estimation system, road surface condition estimation device, and road surface condition estimation program Download PDF

Info

Publication number
JP7570533B2
JP7570533B2 JP2023555878A JP2023555878A JP7570533B2 JP 7570533 B2 JP7570533 B2 JP 7570533B2 JP 2023555878 A JP2023555878 A JP 2023555878A JP 2023555878 A JP2023555878 A JP 2023555878A JP 7570533 B2 JP7570533 B2 JP 7570533B2
Authority
JP
Japan
Prior art keywords
road surface
information
probe
surface condition
condition estimation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023555878A
Other languages
Japanese (ja)
Other versions
JPWO2023073747A5 (en
JPWO2023073747A1 (en
Inventor
泰三 吉田
光生 下谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of JPWO2023073747A1 publication Critical patent/JPWO2023073747A1/ja
Publication of JPWO2023073747A5 publication Critical patent/JPWO2023073747A5/en
Application granted granted Critical
Publication of JP7570533B2 publication Critical patent/JP7570533B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Description

本開示は、路面状態推定システム、路面状態推定装置、および路面状態推定プログラムに関する。
The present disclosure relates to a road surface condition estimation system, a road surface condition estimation device , and a road surface condition estimation program.

特許文献1には、路面標示の劣化を判定する運行情報管理システムが開示されている。この運行情報管理システムは、複数の車両と、各車両の運行情報を管理する管理装置と、により構成されている。複数の車両にはそれぞれカメラが搭載されている。各カメラは、各車両の走行中における、各車両の周囲の画像データを取得する。取得された画像データは、各車両が備える画像認識用CPUによって読み込まれる。画像認識用CPUは、画像データを用いて、走行位置に対応した路面標示を認識し、路面標示情報を生成する。管理装置は、複数の車両がそれぞれ生成した路面標示情報を用い、走行位置が一致する路面標示について、類似度の推移を監視する。そして、類似度が低下したとき、その路面標示が劣化したと判定する。 Patent Document 1 discloses an operation information management system that determines the deterioration of road markings. This operation information management system is composed of multiple vehicles and a management device that manages the operation information of each vehicle. Each of the multiple vehicles is equipped with a camera. Each camera acquires image data of the surroundings of each vehicle while the vehicle is traveling. The acquired image data is read by an image recognition CPU equipped in each vehicle. The image recognition CPU uses the image data to recognize road markings corresponding to the traveling position and generates road marking information. The management device uses the road marking information generated by each of the multiple vehicles to monitor the progress of the similarity for road markings with matching traveling positions. Then, when the similarity decreases, it is determined that the road marking has deteriorated.

特開2015-118669号公報JP 2015-118669 A

特許文献1における画像データのように、車両(以下、プローブ移動体という)が取得する情報の品質は一定であるとは限らない。例えば、プローブ移動体に搭載されたカメラに異物が付着している場合、そのプローブ移動体が取得した画像データに異物が写り込む。ここで、品質が低下した情報に基づいて路面状態を推定した場合、その推定精度が低下する可能性がある。Like the image data in Patent Document 1, the quality of information acquired by a vehicle (hereinafter referred to as a probe mobile body) is not necessarily constant. For example, if a foreign object is attached to a camera mounted on the probe mobile body, the foreign object will be captured in the image data acquired by the probe mobile body. In this case, if road surface conditions are estimated based on information of degraded quality, the estimation accuracy may decrease.

本開示は、上記の事情に鑑みて、一部のプローブ移動体から送信された情報の品質が低下した場合でも、路面状態の推定精度が低下することを抑制可能な、路面状態推定システム、路面状態推定装置、プローブ移動体、および路面状態推定プログラムを提供することを目的とする。In view of the above circumstances, the present disclosure aims to provide a road surface condition estimation system, a road surface condition estimation device, a probe mobile body, and a road surface condition estimation program that can suppress a decrease in the estimation accuracy of road surface conditions even when the quality of information transmitted from some of the probe mobile bodies decreases.

本開示に係る路面状態推定システムの一つの態様は、画像取得部をそれぞれ有する複数のプローブ移動体と、複数の前記プローブ移動体がそれぞれ前記画像取得部によって取得した路面の画像に基づく路面状態情報、前記路面の位置を示す位置情報、および前記プローブ移動体の識別情報をそれぞれ含む、複数のプローブ情報を取得する情報取得部と、複数の前記プローブ情報に基づき、前記位置情報に関連付けられた路面状態に関する路面状態推定情報と、前記識別情報に関連付けられた前記路面状態情報の品質に関するプローブ品質推定情報と、を生成する制御部と、地図および前記路面状態推定情報を記憶する地図DB記憶部と、前記プローブ品質推定情報を記憶するプローブ情報記憶部と、を備える。One aspect of the road surface condition estimation system according to the present disclosure comprises a plurality of probe mobile bodies each having an image acquisition unit; an information acquisition unit that acquires a plurality of probe information each including road surface condition information based on an image of the road surface acquired by each of the plurality of probe mobile bodies by the image acquisition unit, position information indicating the position of the road surface, and identification information of the probe mobile body; a control unit that generates, based on the plurality of probe information, road surface condition estimation information relating to the road surface condition associated with the position information and probe quality estimation information relating to the quality of the road surface condition information associated with the identification information; a map DB storage unit that stores a map and the road surface condition estimation information; and a probe information storage unit that stores the probe quality estimation information.

本開示に係る路面状態推定装置の一つの態様は、複数のプローブ移動体がそれぞれ画像取得部によって取得した路面の画像に基づく路面状態情報、前記路面の位置を示す位置情報、および各々の前記プローブ移動体の識別情報をそれぞれ含む、複数のプローブ情報を取得する情報取得部と、複数の前記プローブ情報に基づき、前記位置情報に関連付けられた路面状態に関する路面状態推定情報と、前記識別情報に関連付けられた前記路面状態情報の品質に関するプローブ品質推定情報と、を生成する制御部と、地図および前記路面状態推定情報を記憶する地図DB記憶部と、前記プローブ品質推定情報を記憶するプローブ情報記憶部と、を備える。One aspect of the road surface condition estimation device according to the present disclosure includes an information acquisition unit that acquires multiple pieces of probe information, each of which includes road surface condition information based on an image of the road surface acquired by an image acquisition unit by multiple probe moving bodies, position information indicating the position of the road surface, and identification information of each of the probe moving bodies; a control unit that generates, based on the multiple pieces of probe information, road surface condition estimation information relating to the road surface condition associated with the position information and probe quality estimation information relating to the quality of the road surface condition information associated with the identification information; a map DB storage unit that stores a map and the road surface condition estimation information; and a probe information storage unit that stores the probe quality estimation information.

本開示に係るプローブ移動体の一つの態様は、自己の位置情報を生成するロケータ装置と、路面の画像を取得する画像取得部と、前記位置情報、前記位置情報に対応付けられるとともに前記画像に基づいて生成された路面状態情報、および自己の識別情報を含むプローブ情報を生成する移動体側制御部と、前記移動体側制御部が生成した前記プローブ情報を、路面状態推定装置に送信する通信装置と、を備え、前記路面状態推定装置は、前記プローブ情報を含む複数のプローブ情報に基づき、前記位置情報に関連付けられた路面状態に関する路面状態推定情報と、前記識別情報に関連付けられた前記路面状態情報の品質に関するプローブ品質推定情報と、を生成する。One aspect of a probe mobile body according to the present disclosure comprises a locator device that generates its own position information, an image acquisition unit that acquires an image of the road surface, a mobile body-side control unit that generates probe information including the position information, road surface condition information that is associated with the position information and generated based on the image, and its own identification information, and a communication device that transmits the probe information generated by the mobile body-side control unit to a road surface condition estimation device, and the road surface condition estimation device generates road surface condition estimation information regarding the road surface condition associated with the position information and probe quality estimation information regarding the quality of the road surface condition information associated with the identification information based on a plurality of probe information including the probe information.

本開示に係る路面状態推定プログラムの一つの態様は、コンピュータを、上記態様の路面状態推定装置として機能させる。One aspect of the road surface condition estimation program disclosed herein causes a computer to function as the road surface condition estimation device of the above aspect.

本開示によれば、一部のプローブ移動体から送信された情報の品質が低下した場合でも、路面状態の推定精度が低下することを抑制可能である。 According to the present disclosure, even if the quality of information transmitted from some of the probe mobile bodies deteriorates, it is possible to prevent a decrease in the accuracy of estimating road surface conditions.

実施の形態1における路面状態推定システムの概略構成を示す模式図である。1 is a schematic diagram showing a schematic configuration of a road surface condition estimation system in an embodiment 1. FIG. 実施の形態1における路面状態推定システムの概略構成を示す模式図である。1 is a schematic diagram showing a schematic configuration of a road surface condition estimation system in an embodiment 1. FIG. 実施の形態1において、プローブ移動体によって実行される処理の流れの一例を示すフローチャートである。5 is a flowchart showing an example of a flow of a process executed by a probe moving body in the first embodiment. 実施の形態1において、路面状態推定装置によって実行される処理の流れの一例を示すフローチャートである。4 is a flowchart showing an example of a flow of processing executed by the road surface condition estimating device in the first embodiment. 実施の形態1の変形例に係る路面状態推定システムの概略構成を示す模式図である。FIG. 13 is a schematic diagram showing a schematic configuration of a road surface condition estimation system according to a modified example of the first embodiment. 路面状態推定情報に基づき、路面状態の異常の発生個所を車線ごとに示した図である。11 is a diagram showing locations of abnormalities in road surface conditions for each lane based on road surface condition estimation information. FIG. 複数のプローブ情報の一例を示す表である。11 is a table showing an example of information on a plurality of probes. 複数のプローブ情報に基づいて生成されたプローブ品質推定情報の一例を示す表である。11 is a table showing an example of probe quality estimation information generated based on a plurality of pieces of probe information. 実施の形態2に係る路面状態推定システムの概略構成を示す模式図である。FIG. 11 is a schematic diagram showing a schematic configuration of a road surface condition estimation system according to a second embodiment. 実施の形態2において、路面状態推定装置によって実行される処理の流れの一例を示すフローチャートである。11 is a flowchart showing an example of a flow of processing executed by a road surface condition estimating device in the second embodiment. 実施の形態2において、特定移動体の使用者に対して提示される報知情報の一例である。13 is an example of notification information presented to a user of a specific moving object in the second embodiment. 実施の形態2において、特定移動体の使用者に対して提示される報知情報の一例である。13 is an example of notification information presented to a user of a specific moving object in the second embodiment.

以下、図面を参照しながら、本開示の実施の形態について説明する。なお、本開示の範囲は、以下の実施の形態に限定されず、本開示の技術的思想の範囲内で任意に変更可能である。Hereinafter, an embodiment of the present disclosure will be described with reference to the drawings. Note that the scope of the present disclosure is not limited to the following embodiment, and may be modified as desired within the scope of the technical concept of the present disclosure.

実施の形態1.
図1は、実施の形態1における路面状態推定システム1の概略構成を示す模式図である。路面状態推定システム1は、プローブ移動体群Gと、路面状態推定装置20と、を備えている。プローブ移動体群Gには、複数のプローブ移動体10が含まれている。各プローブ移動体10と路面状態推定装置20とは、ネットワークを介して、相互に無線通信可能に接続されている。プローブ移動体群Gの中に、路面状態推定装置20に対して送信する情報の品質が低下したプローブ移動体10が含まれている場合、路面状態推定装置20はそのプローブ移動体10を「特定移動体10s」として識別可能となっている。路面状態推定装置20によって特定移動体10sを識別する方法については後述する。
Embodiment 1.
FIG. 1 is a schematic diagram showing a schematic configuration of a road surface condition estimation system 1 in the first embodiment. The road surface condition estimation system 1 includes a probe mobile body group G and a road surface condition estimation device 20. The probe mobile body group G includes a plurality of probe mobile bodies 10. Each probe mobile body 10 and the road surface condition estimation device 20 are connected to each other via a network so as to be able to wirelessly communicate with each other. When the probe mobile body group G includes a probe mobile body 10 whose quality of information transmitted to the road surface condition estimation device 20 has deteriorated, the road surface condition estimation device 20 can identify the probe mobile body 10 as a "specific mobile body 10s". A method for identifying the specific mobile body 10s by the road surface condition estimation device 20 will be described later.

プローブ移動体10は、車両であってもよいし、飛行体であってもよい。プローブ移動体10としての車両は、自動車であってもよいし、自転車であってもよいし、自動二輪車であってもよい。プローブ移動体10としての飛行体は、無人航空機(UAV:Unmanned Aerial Vehicle)であってもよいし、ドローンであってもよい。プローブ移動体群Gに、車両であるプローブ移動体10と飛行体であるプローブ移動体10とが含まれてもよい。以下では、プローブ移動体10が自動車である場合を例にして説明する。The probe mobile body 10 may be a vehicle or an air vehicle. The vehicle as the probe mobile body 10 may be an automobile, a bicycle, or a motorcycle. The air vehicle as the probe mobile body 10 may be an unmanned aerial vehicle (UAV) or a drone. The probe mobile body group G may include a probe mobile body 10 that is a vehicle and a probe mobile body 10 that is an air vehicle. In the following, an example in which the probe mobile body 10 is an automobile will be described.

図2に示すように、プローブ移動体10は、画像取得部11と、灯火装置12と、路面状態検出装置13と、ロケータ装置14と、通信装置15と、を備える。画像取得部11は、撮影装置11aおよび画像処理センサ11bを含んでいる。ただし、一部または全部のプローブ移動体10が備える画像取得部11が、画像処理センサ11bを含んでいなくてもよい。2, the probe mobile body 10 includes an image acquisition unit 11, a lighting device 12, a road surface condition detection device 13, a locator device 14, and a communication device 15. The image acquisition unit 11 includes an imaging device 11a and an image processing sensor 11b. However, the image acquisition units 11 included in some or all of the probe mobile bodies 10 do not necessarily have to include the image processing sensor 11b.

撮影装置11aは、例えば自動車に搭載されたフロントカメラ、リアカメラ等である。フロントカメラは、プローブ移動体10の前方における路面の画像を撮影する。リアカメラは、プローブ移動体10の後方における路面の画像を撮影する。これらの画像は、静止画であってもよいし、動画であってもよい。また、撮影装置11aには、電子ミラー、側面撮影カメラ等の、プローブ移動体10の進行方向に対する側方の画像を取得する装置が含まれてもよい。The photographing device 11a is, for example, a front camera or a rear camera mounted on an automobile. The front camera photographs an image of the road surface in front of the probe mobile body 10. The rear camera photographs an image of the road surface behind the probe mobile body 10. These images may be still images or videos. The photographing device 11a may also include a device for acquiring images to the side of the traveling direction of the probe mobile body 10, such as an electronic mirror or a side photographing camera.

画像処理センサ11bは、撮影装置11aが撮影した画像を処理することで、路面状態を検出する。「路面状態」とは、路面の変形の有無、路面上に表示された標識の劣化の有無、路面上の落下物の有無、等である。路面状態に異常がある場合とは、路面の変形が有る場合、路面上に表示された標識が劣化している場合、路面上に落下物が有る場合、等である。「路面の変形」とは、例えば路面に穴が開くこと、路面がひび割れること、路面が窪むこと、等である。「標識」とは、文字、図形、線等である。「標識の劣化」とは、標識のかすれ、消滅、等である。The image processing sensor 11b detects the road surface condition by processing the image captured by the image capture device 11a. "Road surface condition" refers to the presence or absence of deformation of the road surface, the presence or absence of deterioration of signs displayed on the road surface, the presence or absence of fallen objects on the road surface, etc. Abnormalities in the road surface condition refer to deformation of the road surface, deterioration of signs displayed on the road surface, the presence of fallen objects on the road surface, etc. "Road surface deformation" refers to, for example, holes in the road surface, cracks in the road surface, depressions in the road surface, etc. "Signs" refer to letters, figures, lines, etc. "Deterioration of signs" refers to signs becoming faded or disappearing, etc.

灯火装置12は、路面を照らす装置であり、例えばヘッドライトである。
路面状態検出装置13は、移動体側制御部13aと、移動体側通信部13bと、自位置検出部13cと、を含んでいる。移動体側制御部13aは、プローブ情報Ipを生成する。また、移動体側制御部13aは、路面状態推定装置20へのプローブ情報Ipの送信命令を移動体側通信部13bに出力する。移動体側制御部13aを構成するハードウェアは、CPU(Central Processing Unit)等である。なお、路面状態検出装置13に、ロケータ装置14、通信装置15、画像処理センサ11b、等が含まれてもよい。路面状態検出装置13は、車両に搭載された通信型ドライブレコーダに内蔵されてもよい。また、路面状態検出装置13は、通信型ドライブレコーダとは別の装置であってもよい。
The lighting device 12 is a device that illuminates the road surface, and is, for example, a headlight.
The road surface condition detection device 13 includes a mobile unit control unit 13a, a mobile unit communication unit 13b, and a self-position detection unit 13c. The mobile unit control unit 13a generates probe information Ip. The mobile unit control unit 13a also outputs a transmission command of the probe information Ip to the road surface condition estimation device 20 to the mobile unit communication unit 13b. The hardware constituting the mobile unit control unit 13a is a CPU (Central Processing Unit) or the like. The road surface condition detection device 13 may also include a locator device 14, a communication device 15, an image processing sensor 11b, and the like. The road surface condition detection device 13 may be built into a communication type drive recorder mounted on a vehicle. The road surface condition detection device 13 may also be a device separate from the communication type drive recorder.

移動体側通信部13bは、移動体側制御部13aからの送信命令に基づき、通信装置15と通信を行う。通信装置15は、プローブ移動体10に搭載されて無線通信を実行する。図2の例では、通信装置15と路面状態推定装置20とがインターネット上のクラウドを介して無線接続されている。ただし、通信装置15と路面状態推定装置20とが通信を行うことができれば、クラウドを介さなくてもよい。The mobile body communication unit 13b communicates with the communication device 15 based on a transmission command from the mobile body control unit 13a. The communication device 15 is mounted on the probe mobile body 10 and performs wireless communication. In the example of Figure 2, the communication device 15 and the road surface condition estimation device 20 are wirelessly connected via a cloud on the Internet. However, as long as the communication device 15 and the road surface condition estimation device 20 can communicate with each other, it is not necessary to go through the cloud.

ロケータ装置14は、例えばGNSS(Global Navigation Satellite System)を用いて、自らの位置に関する信号を生成し、自位置検出部13cに出力するように構成されている。自位置検出部13cは、ロケータ装置14から入力された信号に基づいて、プローブ移動体10の位置情報Imを生成する。また、自位置検出部13cは生成した位置情報Imを移動体側制御部13aに入力する。The locator device 14 is configured to generate a signal related to its own position using, for example, the Global Navigation Satellite System (GNSS) and output the signal to the self-position detection unit 13c. The self-position detection unit 13c generates position information Im of the probe mobile body 10 based on the signal input from the locator device 14. The self-position detection unit 13c also inputs the generated position information Im to the mobile body control unit 13a.

移動体側制御部13aは、移動体側通信部13bおよび通信装置15を介して、プローブ情報Ipを路面状態推定装置20に送信する。プローブ情報Ipには、路面状態情報Is、位置情報Im、および識別情報Idが含まれる。路面状態情報Isとは、個々のプローブ移動体10が画像取得部11によって取得した路面の画像に基づいて得られた、路面の状態に関する情報である。画像取得部11に画像処理センサ11bが含まれる場合、路面状態情報Isには、画像処理センサ11bが検出した路面状態を含めることができる。ただし、路面状態情報Isに路面状態を含めず、単に撮影装置11aが撮影した画像のみを含めてもよい。位置情報Imとは、プローブ移動体10の位置に関する情報である。位置情報Imは、例えば緯度および経度の組み合わせであってもよい。識別情報Idとは、個々のプローブ移動体10を識別するための情報である。プローブ情報Ipに識別情報Idが含まれることで、いずれのプローブ移動体10から送信されたプローブ情報Ipであるかを、路面状態推定装置20が識別することが可能である。The mobile-side control unit 13a transmits the probe information Ip to the road surface condition estimation device 20 via the mobile-side communication unit 13b and the communication device 15. The probe information Ip includes road surface condition information Is, position information Im, and identification information Id. The road surface condition information Is is information about the condition of the road surface obtained based on the image of the road surface acquired by each probe mobile body 10 by the image acquisition unit 11. If the image acquisition unit 11 includes an image processing sensor 11b, the road surface condition information Is can include the road surface condition detected by the image processing sensor 11b. However, the road surface condition information Is may not include the road surface condition, and may simply include only the image captured by the imaging device 11a. The position information Im is information about the position of the probe mobile body 10. The position information Im may be, for example, a combination of latitude and longitude. The identification information Id is information for identifying each probe mobile body 10. Since the probe information Ip includes the identification information Id, the road surface condition estimation device 20 can identify which probe mobile body 10 transmitted the probe information Ip.

ここで、路面状態情報Isは、画像取得部11によって取得した路面の画像に基づいて生成される。画像取得部11に異常が生じている場合には、路面状態情報Isの品質が低下する。画像取得部11に生じる異常の態様としては、撮影装置11aへの異物の付着、撮影装置11aの故障、画像処理センサ11bの劣化、等が挙げられる。例えば、撮影装置11aに異物が付着している場合、その撮影装置11aによって撮影された画像に基づいて生成された路面状態情報Isには、路面状態が正確に反映されていない可能性がある。このような、品質の低下した路面状態情報Isに基づいて路面状態を推定すると、推定の精度が低下する。そこで本実施の形態に係る路面状態推定システム1は、異なるプローブ移動体10から送信された複数のプローブ情報Ipを用いることで、路面状態の推定精度を高めることが可能な、路面状態推定装置20を備えている。Here, the road surface condition information Is is generated based on an image of the road surface acquired by the image acquisition unit 11. If an abnormality occurs in the image acquisition unit 11, the quality of the road surface condition information Is decreases. Examples of abnormalities occurring in the image acquisition unit 11 include adhesion of a foreign object to the photographing device 11a, a failure of the photographing device 11a, and deterioration of the image processing sensor 11b. For example, if a foreign object is attached to the photographing device 11a, the road surface condition information Is generated based on the image photographed by the photographing device 11a may not accurately reflect the road surface condition. If the road surface condition is estimated based on such road surface condition information Is of degraded quality, the accuracy of the estimation decreases. Therefore, the road surface condition estimation system 1 according to the present embodiment is equipped with a road surface condition estimation device 20 that can improve the estimation accuracy of the road surface condition by using multiple probe information Ip transmitted from different probe mobile bodies 10.

図1に示すように、路面状態推定装置20は、各プローブ移動体10と通信を行うように構成されている。路面状態推定装置20は、いわゆるエッジサーバであってもよいし、いわゆるセントラルサーバであってもよい。理解を容易にするため、以下では路面状態推定システム1が有する路面状態推定装置20の数が1つである場合を説明する。ただし、路面状態推定システム1は、複数の路面状態推定装置20を備えてもよい。そして、複数の路面状態推定装置20がそれぞれ、以下に説明する構成および機能を有してもよい。As shown in FIG. 1, the road surface condition estimation device 20 is configured to communicate with each probe mobile body 10. The road surface condition estimation device 20 may be a so-called edge server or a so-called central server. For ease of understanding, the following describes a case where the road surface condition estimation system 1 has one road surface condition estimation device 20. However, the road surface condition estimation system 1 may be equipped with multiple road surface condition estimation devices 20. Each of the multiple road surface condition estimation devices 20 may have the configuration and functions described below.

路面状態推定装置20は、情報取得部21と、制御部22と、プローブ情報記憶部23と、地図DB記憶部24と、を備えている。情報取得部21は、複数のプローブ移動体10がそれぞれ送信したプローブ情報Ipを受信する。制御部22を構成するハードウェアは、CPU等である。制御部22は、複数のプローブ移動体10がそれぞれ送信したプローブ情報Ipに基づき、位置情報Imに関連付けられた、路面状態に関する路面状態推定情報Irを生成する。また、制御部22は、生成した路面状態推定情報Irを、地図DB記憶部24に記憶させる。地図DB記憶部24は、地図とともに路面状態推定情報Irを記憶する。制御部22は、複数のプローブ移動体10がそれぞれ送信したプローブ情報Ipに基づき、識別情報Idに関連付けられた、路面状態情報Isの品質に関するプローブ品質推定情報Iqを生成する。また、制御部22は、生成したプローブ品質推定情報Iqを、プローブ情報記憶部23に記憶させる。The road surface condition estimation device 20 includes an information acquisition unit 21, a control unit 22, a probe information storage unit 23, and a map DB storage unit 24. The information acquisition unit 21 receives the probe information Ip transmitted by each of the multiple probe mobile bodies 10. The hardware constituting the control unit 22 is a CPU, etc. The control unit 22 generates road surface condition estimation information Ir related to the road surface condition, associated with the position information Im, based on the probe information Ip transmitted by each of the multiple probe mobile bodies 10. The control unit 22 also stores the generated road surface condition estimation information Ir in the map DB storage unit 24. The map DB storage unit 24 stores the road surface condition estimation information Ir together with the map. The control unit 22 generates probe quality estimation information Iq related to the quality of the road surface condition information Is, associated with the identification information Id, based on the probe information Ip transmitted by each of the multiple probe mobile bodies 10. The control unit 22 also stores the generated probe quality estimation information Iq in the probe information storage unit 23.

地図DB記憶部24およびプローブ情報記憶部23は、単一のハードウェア内に存在してもよいし、複数のハードウェア内に分かれて存在してもよい。地図DB記憶部24およびプローブ情報記憶部23を構成するハードウェアとしては、例えば、RAM(Random Access Memory)、フラッシュメモリ、EPROM(Erasable Programmable Read-Only Memory)、EEPROM(Electrically Erasable Programmable Read-Only Memory)等を採用できる。The map DB storage unit 24 and the probe information storage unit 23 may exist in a single piece of hardware, or may exist separately in multiple pieces of hardware. Examples of hardware that constitute the map DB storage unit 24 and the probe information storage unit 23 include RAM (Random Access Memory), flash memory, EPROM (Erasable Programmable Read-Only Memory), and EEPROM (Electrically Erasable Programmable Read-Only Memory).

次に、図3を用いて、プローブ移動体10の動作フローを説明する。
プローブ移動体10のエンジンが始動する等により、動作フローが開始されると、ステップS10が行われる。ステップS10では、撮影装置11aが、プローブ移動体10の周辺の画像を撮影する。より具体的には、フロントカメラによって、プローブ移動体10の前方の静止画または動画を撮影してもよい。あるいは、リアカメラによって、プローブ移動体10の後方の静止画または動画を撮影してもよい。プローブ移動体10の前方および後方のうち、一方の画像のみを取得してもよいし、両方の画像を取得してもよい。
Next, the operation flow of the probe moving body 10 will be described with reference to FIG.
When the operation flow is started by starting the engine of the probe mobile body 10, step S10 is performed. In step S10, the image capturing device 11a captures an image of the periphery of the probe mobile body 10. More specifically, a still image or a video of the front of the probe mobile body 10 may be captured by a front camera. Alternatively, a still image or a video of the rear of the probe mobile body 10 may be captured by a rear camera. Only one of the images of the front and the rear of the probe mobile body 10 may be captured, or both images may be captured.

次に、ステップS11に進む。ステップS11では、画像処理センサ11bが、撮影装置11aによって撮影された画像を処理し、路面状態を検出する。より具体的には、撮影装置11aが取得した画像は、画像取得部11が備えるバッファに格納される。画像処理センサ11bは、バッファに格納された画像を取り出し、検出処理を順次実行する。画像処理センサ11bは、撮影装置11aによって指定されたフレームレートに同調して、検出処理を実行してもよい。あるいは、検出処理のリアルタイム性が求められない場合には、撮影装置11aが取得した画像を記憶媒体(例えば、HDD:Hard Disk Drive等)に保存し、事後的に画像処理センサ11bが検出処理を実行してもよい。画像処理センサ11bによる検出処理の実行結果は、移動体側制御部13aに出力される。Next, proceed to step S11. In step S11, the image processing sensor 11b processes the image captured by the photographing device 11a to detect the road surface condition. More specifically, the image captured by the photographing device 11a is stored in a buffer provided in the image acquisition unit 11. The image processing sensor 11b takes out the images stored in the buffer and sequentially executes the detection process. The image processing sensor 11b may execute the detection process in synchronization with the frame rate specified by the photographing device 11a. Alternatively, if real-time performance of the detection process is not required, the image captured by the photographing device 11a may be stored in a storage medium (e.g., HDD: Hard Disk Drive, etc.), and the image processing sensor 11b may execute the detection process afterwards. The result of the detection process executed by the image processing sensor 11b is output to the mobile body side control unit 13a.

次に、ステップS12に進む。ステップS12では、路面状態検出装置13が、画像処理センサ11bによる検出処理の実行結果に基づいて、路面状態の異常についての判定を行う。具体的には、路面状態検出装置13は、路面の変形の有無、標識の劣化の有無、路面上の落下物の有無、等を判定する。路面状態検出装置13は、機械学習を用いたパターンマッチングにより当該判定を実行してもよい。あるいは、路面状態検出装置13は、その他の方法を用いて、当該判定を実行してもよい。路面状態検出装置13は、路面状態に異常が有ると判定したとき(ステップS12:YES)、ステップS13に進む。路面状態検出装置13は、路面状態に異常が無いと判定したとき(ステップS12:NO)、ステップS10に戻る。Next, the process proceeds to step S12. In step S12, the road surface condition detection device 13 judges whether there is an abnormality in the road surface condition based on the result of the detection process performed by the image processing sensor 11b. Specifically, the road surface condition detection device 13 judges whether the road surface is deformed, whether signs are deteriorated, whether there are fallen objects on the road surface, etc. The road surface condition detection device 13 may perform the judgment by pattern matching using machine learning. Alternatively, the road surface condition detection device 13 may perform the judgment using other methods. When the road surface condition detection device 13 judges that there is an abnormality in the road surface condition (step S12: YES), the process proceeds to step S13. When the road surface condition detection device 13 judges that there is no abnormality in the road surface condition (step S12: NO), the process returns to step S10.

路面状態検出装置13は、ステップS13において、プローブ情報Ipを生成する。先述の通り、プローブ情報Ipには、路面状態情報Is、位置情報Im、および識別情報Idが含まれる。また、一つのプローブ情報Ipに含まれる路面状態情報Is、位置情報Im、および識別情報Idは、互いに関連付けられている。したがって、プローブ情報Ipは、どの位置における道路に異常が生じ、その情報がどのプローブ移動体10によって得られたものであるか、を示す。路面状態情報Isは、ステップS12における判定結果に基づいて生成されることができる。路面状態情報Isには、路面の変形の種類、劣化した標識の種類、落下物の画像、等を含めることができる。路面状態検出装置13は、生成したプローブ情報Ipを、通信装置15を用いて路面状態推定装置20に送信する。プローブ情報Ipには、路面状態に異常があると路面状態検出装置13が判定した地点だけでなく、その他の地点についての路面状態情報Isおよび位置情報Imを含めることができる。In step S13, the road surface condition detection device 13 generates probe information Ip. As described above, the probe information Ip includes road surface condition information Is, position information Im, and identification information Id. In addition, the road surface condition information Is, position information Im, and identification information Id included in one piece of probe information Ip are associated with each other. Therefore, the probe information Ip indicates at which position an abnormality has occurred on the road and which probe mobile body 10 has obtained the information. The road surface condition information Is can be generated based on the judgment result in step S12. The road surface condition information Is can include the type of deformation of the road surface, the type of deteriorated sign, an image of a fallen object, etc. The road surface condition detection device 13 transmits the generated probe information Ip to the road surface condition estimation device 20 using the communication device 15. The probe information Ip can include road surface condition information Is and position information Im for not only the point at which the road surface condition detection device 13 has determined that there is an abnormality in the road surface condition, but also other points.

なお、ステップS12において、路面状態に異常が無いと判定された場合にも、プローブ移動体10がプローブ情報Ipを送信する動作フローを採用してもよい。このような動作フローは、例えば車両の通行量が少ない地域において、路面状態に異常が生じていなくてもプローブ情報Ipを収集したい場合等に有効である。路面状態に異常が無いと判定されているプローブ情報Ipを予め蓄積しておくことで、その後に当該地域の路面状態に異常が生じたことを示すプローブ情報Ipが得られた場合に、複数のプローブ情報Ipを比較し、路面状態の異常の推定精度を高めることが可能となるためである。また、プローブ移動体10は、必ずしもステップS12を実行しなくてもよい。つまり、プローブ移動体10は、路面状態についての判定を行わずに、プローブ情報Ipを路面状態推定装置20に送信してもよい。この場合、プローブ情報Ipに含まれる路面状態情報Isは、撮影装置11aが撮影した画像そのものとすることができる。 In addition, an operation flow in which the probe mobile body 10 transmits the probe information Ip may be adopted even if it is determined in step S12 that there is no abnormality in the road surface condition. Such an operation flow is effective, for example, in a region with low vehicle traffic, when it is desired to collect the probe information Ip even if there is no abnormality in the road surface condition. By accumulating the probe information Ip that is determined to be normal in the road surface condition in advance, when the probe information Ip indicating that an abnormality has occurred in the road surface condition in the region is obtained later, it is possible to compare the multiple pieces of probe information Ip and improve the estimation accuracy of the abnormality in the road surface condition. In addition, the probe mobile body 10 does not necessarily need to execute step S12. In other words, the probe mobile body 10 may transmit the probe information Ip to the road surface condition estimation device 20 without making a judgment on the road surface condition. In this case, the road surface condition information Is included in the probe information Ip can be the image itself captured by the imaging device 11a.

ステップS13の後、路面状態検出装置13はステップS14を実行する。ステップS14において、路面状態検出装置13は、プローブ移動体10の走行が終了したか否かを判定する。走行が終了した場合は処理を終了する(ステップS14:YES)。走行が継続している場合は、ステップS10に戻る(ステップS14:NO)。このように、プローブ移動体10の走行が継続している場合は、図3に示すフローが繰り返される。After step S13, the road surface condition detection device 13 executes step S14. In step S14, the road surface condition detection device 13 determines whether the traveling of the probe mobile body 10 has ended. If the traveling has ended, the processing ends (step S14: YES). If the traveling is continuing, the process returns to step S10 (step S14: NO). In this way, if the traveling of the probe mobile body 10 is continuing, the flow shown in FIG. 3 is repeated.

次に、図4を用いて、路面状態推定装置20の動作フローを説明する。
ステップS20において、路面状態推定装置20の情報取得部21は、プローブ移動体10から送信されたプローブ情報Ipを取得する。プローブ移動体10から路面状態推定装置20へとプローブ情報Ipが受け渡される際の経路は、特に限定されない。例えば、路面状態推定装置20ではないエッジサーバに、各プローブ移動体10がプローブ情報Ipを送信し、エッジサーバが複数のプローブ情報Ipを集約してもよい。そして、エッジサーバが、セントラルサーバである路面状態推定装置20に、集約したプローブ情報Ipを送信してもよい。あるいは、各プローブ移動体10が、路面状態推定装置20に直接的にプローブ情報Ipを送信してもよい。路面状態推定装置20がプローブ情報Ipを受信すると、ステップS21に進む。
Next, the operation flow of the road surface condition estimating device 20 will be described with reference to FIG.
In step S20, the information acquisition unit 21 of the road surface condition estimation device 20 acquires the probe information Ip transmitted from the probe mobile body 10. The route when the probe information Ip is transferred from the probe mobile body 10 to the road surface condition estimation device 20 is not particularly limited. For example, each probe mobile body 10 may transmit the probe information Ip to an edge server other than the road surface condition estimation device 20, and the edge server may aggregate the multiple pieces of probe information Ip. Then, the edge server may transmit the aggregated probe information Ip to the road surface condition estimation device 20, which is a central server. Alternatively, each probe mobile body 10 may transmit the probe information Ip directly to the road surface condition estimation device 20. When the road surface condition estimation device 20 receives the probe information Ip, the process proceeds to step S21.

ステップS21では、取得した1つのプローブ情報Ipに基づいて、そのプローブ情報Ipに含まれる1つの位置情報Imに対応する路面の、路面状態の異常の有無が判定される。図3のステップS12において、既に路面状態の異常の有無が判定されている場合は、その判定結果を援用してもよい。あるいは、ステップS12において既に路面状態の異常の有無が判定されている場合であっても、改めて当該判定を行ってもよい。ステップS21における、路面状態における異常の有無の判定は、制御部22が行ってもよい。制御部22は、路面状態検出装置13と同様の方法によって、当該判定を実行してもよい。また、路面状態推定装置20の管理者が、プローブ情報Ipに含まれる画像等を視認し、手動で判定を行ってもよい。あるいは、他の方法で路面状態における異常の有無を判定してもよい。任意の位置情報Imに対応する路面について、路面状態の異常があると判定された場合(ステップS21:YES)、ステップS22に進む。In step S21, based on one acquired piece of probe information Ip, the presence or absence of an abnormality in the road surface condition of the road surface corresponding to one piece of position information Im included in the probe information Ip is determined. If the presence or absence of an abnormality in the road surface condition has already been determined in step S12 of FIG. 3, the determination result may be used. Alternatively, even if the presence or absence of an abnormality in the road surface condition has already been determined in step S12, the determination may be made again. The determination of the presence or absence of an abnormality in the road surface condition in step S21 may be performed by the control unit 22. The control unit 22 may execute the determination by a method similar to that of the road surface condition detection device 13. In addition, the administrator of the road surface condition estimation device 20 may visually check the image etc. included in the probe information Ip and manually make the determination. Alternatively, the presence or absence of an abnormality in the road surface condition may be determined by another method. If it is determined that there is an abnormality in the road surface condition for the road surface corresponding to any position information Im (step S21: YES), proceed to step S22.

ステップS22において、制御部22は、路面状態の異常があると判定された地点に対応する位置情報Imをそれぞれ含む、複数のプローブ情報Ipを比較する。この比較結果に基づき、制御部22は、当該位置情報Imに関連付けられた路面状態推定情報Irを生成する。路面状態推定情報Irとは、複数のプローブ情報Ipを比較することで得られる、任意の地点において路面状態に異常が発生しているか否かを推定した結果を含む情報である。In step S22, the control unit 22 compares multiple pieces of probe information Ip, each of which includes position information Im corresponding to a point where it has been determined that there is an abnormality in the road surface condition. Based on the result of this comparison, the control unit 22 generates road surface condition estimation information Ir associated with the position information Im. The road surface condition estimation information Ir is information that includes a result of estimating whether or not an abnormality has occurred in the road surface condition at a given point, obtained by comparing multiple pieces of probe information Ip.

ここで、路面状態推定情報Irと路面状態情報Isとの相違について説明する。路面状態情報Isにも、路面状態に関する情報が含まれる。しかしながら、路面状態情報Isは、プローブ移動体10の移動体側制御部13aによって、当該プローブ移動体10の画像取得部11が取得した画像に基づいて生成される。このため、画像取得部11に異常が生じている場合には、路面状態情報Isに含まれる路面状態に関する情報が正確ではない場合がある。あるいは、路面状態検出装置13による処理に何らかのエラーが生じた結果、正確ではない路面状態情報Isがプローブ情報Ipに含まれる可能性もある。これに対して路面状態推定情報Irは、複数のプローブ移動体10から送信された複数のプローブ情報Ipの比較結果に基づいて生成される。Here, the difference between the road surface condition estimation information Ir and the road surface condition information Is will be explained. The road surface condition information Is also includes information about the road surface condition. However, the road surface condition information Is is generated by the mobile body side control unit 13a of the probe mobile body 10 based on the image acquired by the image acquisition unit 11 of the probe mobile body 10. For this reason, if an abnormality occurs in the image acquisition unit 11, the information about the road surface condition included in the road surface condition information Is may not be accurate. Alternatively, as a result of some error occurring in the processing by the road surface condition detection device 13, inaccurate road surface condition information Is may be included in the probe information Ip. In contrast, the road surface condition estimation information Ir is generated based on the comparison result of multiple probe information Ip transmitted from multiple probe mobile bodies 10.

例えば、画像取得部11等に異常が生じているプローブ移動体10から送信されたプローブ情報Ipは、画像取得部11等に異常が生じていないプローブ移動体10から送信されたプローブ情報Ipとは、同一地点の路面状態に関する情報が異なる蓋然性が高い。そして、プローブ移動体群Gに含まれる、各プローブ移動体10に搭載された画像取得部11等の多くには、異常が生じていないと考えられる。したがって、ある特定のプローブ移動体10(以下、特定移動体10sという)が送信したプローブ情報Ipに含まれる路面状態情報Isが、その他の複数のプローブ移動体10が送信したプローブ情報Ipに含まれる路面状態情報Isとは異なっている場合、特定移動体10sの画像取得部11等に異常が生じていることが推定できる。For example, the probe information Ip transmitted from a probe mobile body 10 having an abnormality in the image acquisition unit 11, etc. is likely to have different information regarding the road surface condition at the same location from the probe information Ip transmitted from a probe mobile body 10 having no abnormality in the image acquisition unit 11, etc. Furthermore, it is considered that no abnormality occurs in many of the image acquisition units 11, etc. mounted on each probe mobile body 10 included in the probe mobile body group G. Therefore, if the road surface condition information Is included in the probe information Ip transmitted by a specific probe mobile body 10 (hereinafter referred to as a specific mobile body 10s) is different from the road surface condition information Is included in the probe information Ip transmitted by the other multiple probe mobile bodies 10, it can be estimated that an abnormality has occurred in the image acquisition unit 11, etc. of the specific mobile body 10s.

より具体的には、ステップS22において、ステップS21で路面状態の異常があると判定された位置情報Imを含む複数のプローブ情報Ipを比較して、当該位置情報Imにおいて発生したと判定された路面状態の異常についての、出現頻度を演算する。そして、出現頻度が所定の閾値以上である路面状態の異常については、実際に当該異常が発生していると推定(ステップS22:YES)し、位置情報Imに関連付けて路面状態推定情報Irを生成する。そして、制御部22は、生成した路面状態推定情報Irを地図DB記憶部24に記憶させる(ステップS23)。制御部22は、出現頻度が所定の閾値未満である路面状態の異常については、実際に当該異常が発生しているのではなく、画像取得部11等の異常によるものであると推定する(ステップS22:NO)。このとき、制御部22は、画像取得部11等に異常が発生していると推定されたプローブ移動体10(特定移動体10s)に関する、識別情報Idに関連付けられたプローブ品質推定情報Iqを生成する。そして、制御部22は、生成したプローブ品質推定情報Iqをプローブ情報記憶部23に記憶させる(ステップS24)。More specifically, in step S22, a plurality of pieces of probe information Ip including the position information Im determined to have an abnormality in the road surface condition in step S21 are compared, and the occurrence frequency of the abnormality in the road surface condition determined to have occurred in the position information Im is calculated. Then, for the abnormality in the road surface condition whose occurrence frequency is equal to or greater than a predetermined threshold, it is estimated that the abnormality has actually occurred (step S22: YES), and road surface condition estimation information Ir is generated in association with the position information Im. Then, the control unit 22 stores the generated road surface condition estimation information Ir in the map DB storage unit 24 (step S23). For the abnormality in the road surface condition whose occurrence frequency is less than a predetermined threshold, the control unit 22 estimates that the abnormality has not actually occurred, but is due to an abnormality in the image acquisition unit 11, etc. (step S22: NO). At this time, the control unit 22 generates probe quality estimation information Iq associated with the identification information Id for the probe mobile unit 10 (specific mobile unit 10s) estimated to have an abnormality in the image acquisition unit 11, etc. Then, the control unit 22 stores the generated probe quality estimation information Iq in the probe information storage unit 23 (step S24).

ステップS22における推定に用いられる「所定の閾値」は、適宜変更可能であるが、例えば90%である。つまり、任意の位置情報Imに対応する地点において出現頻度が90%以上である路面状態の異常については、実際に当該異常が発生してると推定してもよい。そして、任意の位置情報Imに対応する地点において、出現頻度が10%未満である路面状態の異常については、実際に当該異常が発生しておらず、画像取得部11等の異常(つまり、誤検知)によるものであると推定してもよい。「所定の閾値」については、全ての地点で共通である必要はなく、例えば地域ごとに異なってもよい。具体例を挙げれば、交通量の少ない地域においてはプローブ情報Ipのサンプル数が少ないため、「所定の閾値」を低く(例えば50%以上に)設定することで、実効性のある推定結果が得られる場合がある。The "predetermined threshold" used for the estimation in step S22 can be changed as appropriate, but is, for example, 90%. In other words, for an abnormality in road surface conditions that occurs at a point corresponding to any position information Im with a frequency of 90% or more, it may be estimated that the abnormality actually occurs. And, for an abnormality in road surface conditions that occurs at a point corresponding to any position information Im with a frequency of less than 10%, it may be estimated that the abnormality does not actually occur and is due to an abnormality (i.e., a false detection) in the image acquisition unit 11 or the like. The "predetermined threshold" does not need to be common to all points, and may be different for each area, for example. To give a specific example, since the number of samples of probe information Ip is small in areas with low traffic volume, an effective estimation result may be obtained by setting the "predetermined threshold" low (for example, 50% or more).

ステップS23またはS24を実行した後、路面状態推定装置20の動作フローは再びステップS20に戻る。路面状態推定装置20による路面状態推定情報Irまたはプローブ品質推定情報Iqの生成および記憶は、繰り返し実行される。After executing step S23 or S24, the operation flow of the road surface condition estimation device 20 returns to step S20 again. The generation and storage of the road surface condition estimation information Ir or the probe quality estimation information Iq by the road surface condition estimation device 20 is repeatedly performed.

なお、本実施の形態における路面状態推定システム1の構成、または処理フローは、上記の説明に限定されず、種々の変更を加えることが可能である。以下、実施の形態1の変形例について説明する。 Note that the configuration or processing flow of the road surface condition estimation system 1 in this embodiment is not limited to the above description, and various modifications can be made. Below, we will explain a modified example of embodiment 1.

例えば、図3のステップS12において、路面状態検出装置13は、路面の変形の程度、標識の劣化の程度等の、路面の劣化状態を数値化した劣化度Rdを演算してもよい。劣化度Rdは、例えば機械学習の結果を用いて演算されてもよい。路面状態検出装置13が劣化度Rdを演算する場合、劣化度Rdが所定の閾値を上回るときにステップS12の判定結果をYESとし、ステップS13に進む。また、劣化度Rdが所定の閾値以下であるときに、路面状態検出装置13はステップS12の判定結果をNOとし、ステップS10に戻る。このようなフローを採用することも可能である。For example, in step S12 of FIG. 3, the road surface condition detection device 13 may calculate a deterioration degree Rd that quantifies the deterioration state of the road surface, such as the degree of deformation of the road surface and the degree of deterioration of signs. The deterioration degree Rd may be calculated, for example, using the results of machine learning. When the road surface condition detection device 13 calculates the deterioration degree Rd, if the deterioration degree Rd exceeds a predetermined threshold, the road surface condition detection device 13 determines the judgment result of step S12 to be YES and proceeds to step S13. Also, if the deterioration degree Rd is equal to or less than the predetermined threshold, the road surface condition detection device 13 determines the judgment result of step S12 to be NO and returns to step S10. Such a flow can also be adopted.

また、図5に示すように、プローブ移動体10は、高精度ロケータ14Aを備えてもよい。高精度ロケータ14Aは、ロケータ装置14の一種である。高精度ロケータ14Aは、cm精度の道路形状データを含む、高精度地図DBを内蔵している。また、高精度ロケータ14Aは、GNSS測位によって、高精度地図DBにおける自らの位置を、高精度に取得することができる。プローブ移動体10が高精度ロケータ14Aを備える場合、位置情報Imには、プローブ移動体10の走行車線についての情報である、車線情報Ilを含めることができる。図6に、車線情報Ilを含むプローブ情報Ipを用いて生成される路面状態推定情報Irの一例を示す。プローブ情報Ipに車線情報Ilが含まれている場合は、路面状態の異常の発生位置を、車線ごとに示すことができる。なお、図6の例では、「路面の変形」の一種として、マンホールの周囲の隆起、轍、凹み等が示されている。路面状態推定装置20の使用者は、図6に示すような、地図と路面状態の異常とが組み合わされた画像をディスプレイに表示させて、路面の工事の手配などを行ってもよい。 As shown in FIG. 5, the probe mobile body 10 may also be equipped with a high-precision locator 14A. The high-precision locator 14A is a type of locator device 14. The high-precision locator 14A has a built-in high-precision map DB including road shape data with centimeter accuracy. The high-precision locator 14A can also acquire its own position in the high-precision map DB with high accuracy by GNSS positioning. When the probe mobile body 10 is equipped with the high-precision locator 14A, the position information Im can include lane information Il, which is information about the lane in which the probe mobile body 10 is traveling. FIG. 6 shows an example of road surface condition estimation information Ir generated using probe information Ip including lane information Il. When the probe information Ip includes lane information Il, the location of the occurrence of an abnormality in the road surface condition can be shown for each lane. In the example of FIG. 6, bumps, ruts, depressions, etc. around a manhole are shown as a type of "road surface deformation". A user of the road surface condition estimating device 20 may display an image on a display combining a map and abnormalities in the road surface condition, as shown in FIG. 6, and make arrangements for road surface repairs, etc.

また、プローブ移動体10がロケータ装置14を有さず、路面状態検出装置13自体がGPS(Global Positioning System)測位機能を有してもよい。この場合も、位置情報Imをプローブ情報Ipに含めることができる。 In addition, the probe mobile body 10 may not have a locator device 14, and the road surface condition detection device 13 itself may have a GPS (Global Positioning System) positioning function. In this case, too, the position information Im can be included in the probe information Ip.

また、図5に示すように、プローブ移動体10は、照度センサ16を備えてもよい。照度センサ16は、プローブ移動体10の周辺の照度を検出する。例えば、照度センサ16は、プローブ移動体10の前方または後方の路面の照度を検出してもよい。照度センサ16による検出結果は、灯火装置12の出力制御のために用いられてもよい。路面状態検出装置13は、プローブ情報Ipに、照度センサ16による照度の検出結果を含ませてもよい。 As shown in FIG. 5, the probe mobile body 10 may also be equipped with an illuminance sensor 16. The illuminance sensor 16 detects the illuminance around the probe mobile body 10. For example, the illuminance sensor 16 may detect the illuminance of the road surface in front of or behind the probe mobile body 10. The detection result by the illuminance sensor 16 may be used for output control of the lighting device 12. The road surface condition detection device 13 may include the detection result of the illuminance by the illuminance sensor 16 in the probe information Ip.

また、画像取得部11に異常が生じている場合、その特定移動体10sから送信されるプローブ情報Ipに基づいて路面状態に異常が有ると判定される回数は、画像取得部11が正常である他のプローブ移動体10から送信されたプローブ情報Ipに基づいて路面状態に異常が有ると判定される回数より大きく異なる場合がある。したがって、複数のプローブ情報Ipを比較する際に、路面状態に異常が有ると判定された回数を参照し、画像取得部11に異常が生じた特定移動体10sを推定してもよい。
また、路面状態の異常の種類によっては、路面状態の異常の発生を、回数ではなく距離として把握することが適当な場合がある。例えば、路面上の線におけるかすれまたは消滅ついては、広い区間(例えば1m以上)で継続して発生する場合もある。このような場合、複数のプローブ情報Ipを比較する際に、道路に沿って異常の発生が継続している長さを参照し、画像取得部11に異常が発生した特定移動体10sを特定してもよい。
Furthermore, when an abnormality occurs in the image acquisition unit 11, the number of times that it is determined that there is an abnormality in the road surface condition based on the probe information Ip transmitted from that specific moving body 10s may be significantly different from the number of times that it is determined that there is an abnormality in the road surface condition based on the probe information Ip transmitted from another probe moving body 10 whose image acquisition unit 11 is normal. Therefore, when comparing multiple pieces of probe information Ip, the number of times that it is determined that there is an abnormality in the road surface condition may be referred to in order to estimate the specific moving body 10s in which the abnormality has occurred in the image acquisition unit 11.
Depending on the type of abnormality in the road surface condition, it may be appropriate to grasp the occurrence of the abnormality in the road surface condition in terms of distance rather than the number of times. For example, the fading or disappearance of a line on the road surface may occur continuously over a wide section (e.g., 1 m or more). In such a case, when comparing multiple pieces of probe information Ip, the length of time that the abnormality continues along the road may be referenced to identify the specific moving body 10s in which the abnormality has occurred in the image acquisition unit 11.

図7は、複数のプローブ情報Ipの一例である。図7の例では、各プローブ情報Ipに、識別情報Id、緯度、経度、種別、回数、距離、照度、天候についての情報が含まれている。「緯度」および「経度」は、位置情報Imの一例である。「照度」は、照度センサ16による検出結果に基づく、プローブ移動体10の周辺の照度である。「種別」は、検出された道路状態の異常の種類を示す。「回数」は、道路状態の異常が検出された回数を示す。「距離」は、検出された道路状態の異常についての路面上の距離を示す。「天候」は、道路状態の異常が検出された際の天候を示している。「天候」に関する情報は、照度センサ16による検出結果に基づいて求められてもよいし、気象情報を参照して取得されてもよい。 Figure 7 is an example of multiple probe information Ip. In the example of Figure 7, each probe information Ip includes information on the identification information Id, latitude, longitude, type, number of times, distance, illuminance, and weather. "Latitude" and "longitude" are examples of location information Im. "Illuminance" is the illuminance around the probe mobile body 10 based on the detection result by the illuminance sensor 16. "Type" indicates the type of abnormality in the detected road condition. "Number of times" indicates the number of times the abnormality in the road condition has been detected. "Distance" indicates the distance on the road surface for the detected abnormality in the road condition. "Weather" indicates the weather when the abnormality in the road condition was detected. Information on "weather" may be obtained based on the detection result by the illuminance sensor 16, or may be obtained by referring to meteorological information.

図7の例において、識別情報Idが1、3,5,6に対応するプローブ情報Ipでは、同一座標において、Line Faint(車線境界線等のかすれ)が検出されている。しかしながら、識別情報Idが3に対応するプローブ情報Ipについては、識別情報Idが1,5,6に対応するプローブ情報Ipと比較して、「回数」および「距離」が明らかに大きい。したがって、識別情報Idが3に対応するプローブ移動体10は、画像取得部11に異常が生じた特定移動体10sであると推定できる。具体的な推定の方法としては、例えば「適合度Rf」という尺度を用いることができる。適合度Rfは、同一の位置情報Imについて、推定対象となるプローブ移動体10から送信されたプローブ情報Ipが、その他のプローブ移動体10から送信されたプローブ情報Ipに対して、どの程度適合しているか、を示す指標である。例えば図7に示す複数のプローブ情報Ipにおいては、適合度Rfを、推定対象となる識別情報Idに対応した「回数」の、その他の識別情報Idにおける「回数」の平均値に対する差異としてもよい。同様に複数のプローブ情報Ipに含まれる「距離」の情報を用いて、適合度Rfを算出してもよい。平均値に対する差異ではなく、その他の統計的手法を用いて、適合度Rfを算出してもよい。適合度Rfが所定の閾値を下回るプローブ情報Ipを送信したプローブ移動体10が、特定移動体10sであると推定することができる。In the example of FIG. 7, in the probe information Ip corresponding to the identification information Id of 1, 3, 5, and 6, Line Faint (blurring of lane boundaries, etc.) is detected at the same coordinates. However, for the probe information Ip corresponding to the identification information Id of 3, the "number of times" and "distance" are clearly larger than those of the probe information Ip corresponding to the identification information Id of 1, 5, and 6. Therefore, it can be estimated that the probe mobile body 10 corresponding to the identification information Id of 3 is a specific mobile body 10s in which an abnormality has occurred in the image acquisition unit 11. As a specific estimation method, for example, a measure called "fit Rf" can be used. The fit Rf is an index indicating how much the probe information Ip transmitted from the probe mobile body 10 to be estimated matches the probe information Ip transmitted from other probe mobile bodies 10 for the same position information Im. For example, in the multiple probe information Ips shown in FIG. 7, the fit Rf may be the difference between the "number of times" corresponding to the identification information Id to be estimated and the average value of the "number of times" in the other identification information Ids. Similarly, the compatibility Rf may be calculated using the "distance" information included in multiple pieces of probe information Ip. The compatibility Rf may be calculated using other statistical methods instead of the difference from the average value. It can be estimated that the probe mobile object 10 that transmitted the probe information Ip whose compatibility Rf is below a predetermined threshold is the specific mobile object 10s.

また、画像取得部11に異常が発生しているか否かの推定に、照度情報、天候に関する情報、等を用いてもよい。照度が低かったり、天候が悪かったりした場合、画像取得部11に異常が発生していないにも関わらず、画像取得部11に異常が発生したと判定される可能性があるためである。例えば、図7に示す識別情報Idが3に対応するプローブ情報Ipは、照度が標準的であり、天候も晴れである状況下において、「回数」および「距離」が他のプローブ情報Ipより顕著に大きい。したがって、識別情報Idが3に対応するプローブ移動体10の画像取得部11に、異常が発生していると推定できる。 In addition, illuminance information, weather information, etc. may be used to estimate whether an abnormality has occurred in the image acquisition unit 11. This is because when the illuminance is low or the weather is bad, it may be determined that an abnormality has occurred in the image acquisition unit 11 even though no abnormality has occurred in the image acquisition unit 11. For example, the probe information Ip corresponding to the identification information Id of 3 shown in FIG. 7 has significantly larger "number of times" and "distance" than the other probe information Ip under conditions of standard illuminance and sunny weather. Therefore, it can be estimated that an abnormality has occurred in the image acquisition unit 11 of the probe mobile body 10 corresponding to the identification information Id of 3.

また、各プローブ移動体10に搭載される画像処理センサ11bの性能は同等であるとは限らない。互いに性能が異なる画像処理センサ11bを搭載したプローブ移動体10のプローブ情報Ip同士を比較すると、路面状態の異常または画像取得部11の異常についての適切な推定ができない可能性がある。そこで、プローブ情報Ipに、画像処理センサ11bのHW型番およびセンサ型番についての情報が含まれてもよい。「センサ型番」とは、画像処理センサ11bに含まれる画像処理エンジンの型番である。「HW型番」とは、画像処理エンジンが実装されたハードウェアの型番である。図8は、HW型番およびセンサ型番をそれぞれ含む、複数のプローブ情報Ipに基づいて生成された、プローブ品質推定情報Iqの一例である。図8の例において、識別情報Idが1,3,4,5に対応するプローブ移動体10は、同一のHW型番とセンサ型番を有する。したがって、これらのプローブ移動体10は、同等の性能を有する画像処理センサ11bを有しているため、各々が送信したプローブ情報Ip同士を比較することで、路面状態の異常または画像取得部11の異常を適切に推定することができる。図8の例では、識別情報Idが3に対応するプローブ移動体10に搭載された画像処理センサ11bに劣化が発生したと推定されている。このため、図8に示すプローブ品質推定情報Iqでは、識別情報Idが3の「稼働状態」として、「劣化あり」が入力されている。 In addition, the performance of the image processing sensor 11b mounted on each probe mobile body 10 is not necessarily the same. When the probe information Ip of the probe mobile body 10 equipped with the image processing sensor 11b having different performance is compared, it may not be possible to appropriately estimate the abnormality of the road surface condition or the abnormality of the image acquisition unit 11. Therefore, the probe information Ip may include information on the HW model number and sensor model number of the image processing sensor 11b. The "sensor model number" is the model number of the image processing engine included in the image processing sensor 11b. The "HW model number" is the model number of the hardware in which the image processing engine is implemented. Figure 8 is an example of the probe quality estimation information Iq generated based on multiple probe information Ip, each of which includes the HW model number and the sensor model number. In the example of Figure 8, the probe mobile body 10 whose identification information Id corresponds to 1, 3, 4, and 5 has the same HW model number and sensor model number. Therefore, since these probe mobile bodies 10 have image processing sensors 11b with equivalent performance, by comparing the probe information Ip transmitted by each of them, it is possible to appropriately estimate an abnormality in the road surface condition or an abnormality in the image acquisition unit 11. In the example of Fig. 8, it is estimated that deterioration has occurred in the image processing sensor 11b mounted on the probe mobile body 10 corresponding to the identification information Id of 3. Therefore, in the probe quality estimation information Iq shown in Fig. 8, "deteriorated" is input as the "operating state" of the identification information Id of 3.

また、路面状態検出装置13若しくは路面状態推定装置20は、画像取得部11が取得した画像に基づいて、路面上の障害物の有無を判定し、障害物情報Ioを生成してもよい。路面状態検出装置13が障害物情報Ioを生成する場合、プローブ情報Ipに障害物情報Ioを含めてもよい。制御部22は、障害物が有ると判定された地点の位置情報Imに関連付けて、障害物情報Ioを地図DB記憶部24に記憶させてもよい。制御部22は、複数のプローブ情報Ipを比較する際に、障害物情報Ioを用いることで、より精度よく路面状態の異常の有無または画像取得部11の異常の有無を推定することが可能となる。 Furthermore, the road surface condition detection device 13 or the road surface condition estimation device 20 may determine the presence or absence of an obstacle on the road surface based on the image acquired by the image acquisition unit 11, and generate obstacle information Io. When the road surface condition detection device 13 generates the obstacle information Io, the obstacle information Io may be included in the probe information Ip. The control unit 22 may store the obstacle information Io in the map DB storage unit 24 in association with the position information Im of the point where it is determined that there is an obstacle. By using the obstacle information Io when comparing multiple pieces of probe information Ip, the control unit 22 can more accurately estimate the presence or absence of an abnormality in the road surface condition or the presence or absence of an abnormality in the image acquisition unit 11.

実施の形態2.
次に、実施の形態2に係る路面状態推定システム1について説明する。本実施の形態に係る路面状態推定システム1は、基本的な構成は実施の形態1の路面状態推定システム1と同様であるため、異なる点を中心に説明する。
Embodiment 2.
Next, a description will be given of a road surface condition estimation system 1 according to embodiment 2. The basic configuration of the road surface condition estimation system 1 according to this embodiment is similar to that of the road surface condition estimation system 1 according to embodiment 1, and therefore differences will be mainly described.

図9に示すように、本実施の形態に係る路面状態推定装置20は、ソフトウェア管理部25と、路面状態分析部26と、を備えている。路面状態分析部26は、プローブ情報Ipに含まれる路面状態情報Isに基づき、路面状態の異常の有無を分析する。ソフトウェア管理部25は、プローブ移動体10に搭載される装置(例えば、通信型ドライブレコーダ)のソフトウェアを管理する。以下、プローブ移動体10に搭載される装置のソフトウェアを、単に「移動体側ソフトウェア」という。移動体側ソフトウェアは、画像処理センサ11bにより実行されるソフトウェアであってもよいし、移動体側制御部13aにより実行されるソフトウェアであってもよい。ソフトウェア管理部25は、移動体側ソフトウェアのバージョンを把握可能であり、また、移動体側ソフトウェアのアップデートを実行させることができる。As shown in FIG. 9, the road surface condition estimation device 20 according to this embodiment includes a software management unit 25 and a road surface condition analysis unit 26. The road surface condition analysis unit 26 analyzes the presence or absence of abnormalities in the road surface condition based on the road surface condition information Is included in the probe information Ip. The software management unit 25 manages the software of a device (e.g., a communication type drive recorder) mounted on the probe mobile body 10. Hereinafter, the software of the device mounted on the probe mobile body 10 is simply referred to as "mobile body side software". The mobile body side software may be software executed by the image processing sensor 11b or software executed by the mobile body side control unit 13a. The software management unit 25 is capable of grasping the version of the mobile body side software and can also execute updates of the mobile body side software.

図10を用いて、本実施の形態に係る路面状態推定装置20が実行する、特定移動体10sに対する制御フローを説明する。なお、図10に示すステップS30の前に、図4に示すステップS20~S22が行われて、画像取得部11の異常の有無についての推定が行われる。
ステップS30において、制御部22が、特定移動体10sの画像取得部11等に異常が発生したと推定すると、ステップS31に進む。
ステップS31において、ソフトウェア管理部25は、特定移動体10sに対する制御命令Ocを生成する。制御命令Ocは、無線通信によって特定移動体10sに送信される。ステップS31において生成される制御命令Ocには、移動体側ソフトウェアをアップデートさせる命令が含まれる。
A control flow for a specific moving body 10s executed by the road surface condition estimation device 20 according to this embodiment will be described with reference to Fig. 10. Note that, before step S30 shown in Fig. 10, steps S20 to S22 shown in Fig. 4 are performed to estimate the presence or absence of an abnormality in the image acquisition unit 11.
In step S30, if the control unit 22 estimates that an abnormality has occurred in the image acquisition unit 11 or the like of the specific moving object 10s, the process proceeds to step S31.
In step S31, the software management unit 25 generates a control command Oc for the specific mobile unit 10s. The control command Oc is transmitted to the specific mobile unit 10s by wireless communication. The control command Oc generated in step S31 includes a command to update the mobile unit side software.

移動体側ソフトウェアをアップデートさせることで、画像取得部11の異常等が解消される場合がある。例えば、画像処理センサ11bの画像処理アルゴリズムに不具合が生じている場合には、画像処理センサ11bが実行するソフトウェアを、不具合の対策済みのバージョンにアップデートすることが有効である。画像処理センサ11b以外の装置についての移動体側ソフトウェアをアップデートさせてもよい。アップデートが完了すると、ステップS32に進む。 By updating the software on the mobile unit, abnormalities in the image acquisition unit 11 may be resolved. For example, if there is a problem with the image processing algorithm of the image processing sensor 11b, it is effective to update the software executed by the image processing sensor 11b to a version in which the problem has been fixed. Software on the mobile unit for devices other than the image processing sensor 11b may also be updated. When the update is complete, proceed to step S32.

ステップS32において、制御部22は、移動体側ソフトウェアのアップデートにより異常等が解消されたか否かを判定する。画像取得部11の異常等が解消されたと判定された場合(ステップS32:YES)、特定移動体10sに対する制御フローは終了する。画像取得部11の異常等が解消されていないと判定された場合(ステップS32:NO)、ステップS33に進む。In step S32, the control unit 22 determines whether the abnormality has been resolved by updating the mobile unit software. If it is determined that the abnormality of the image acquisition unit 11 has been resolved (step S32: YES), the control flow for the specific mobile unit 10s ends. If it is determined that the abnormality of the image acquisition unit 11 has not been resolved (step S32: NO), the control flow proceeds to step S33.

ステップS33において、制御部22は、特定移動体10sに対して、プローブ情報Ipを継続して送信させるか否かを決定する。例えば、交通量の少ない地域を特定移動体10sが走行している場合には、画像取得部11に異常が発生している特定移動体10sのプローブ情報Ipであっても、蓄積しておくことで有益となる場合がある。逆に、交通量の多い地域を特定移動体10sが走行している場合には、当該地域に関するプローブ情報Ipは充分に蓄積されるため、特定移動体10sのプローブ情報Ipは不要となる。このように、特定移動体10sが走行する地域に応じて、特定移動体10sにプローブ情報Ipを継続して送信させるか否かを決定してもよい。あるいは、他の判断基準を用いて、ステップS33の判定が実行されてもよい。In step S33, the control unit 22 determines whether or not to cause the specific mobile unit 10s to continue transmitting the probe information Ip. For example, when the specific mobile unit 10s is traveling in an area with low traffic volume, it may be useful to store the probe information Ip of the specific mobile unit 10s even if an abnormality occurs in the image acquisition unit 11. Conversely, when the specific mobile unit 10s is traveling in an area with high traffic volume, the probe information Ip related to the area is sufficiently stored, so that the probe information Ip of the specific mobile unit 10s is unnecessary. In this way, it may be determined whether or not to cause the specific mobile unit 10s to continue transmitting the probe information Ip depending on the area in which the specific mobile unit 10s is traveling. Alternatively, the judgment of step S33 may be performed using other judgment criteria.

特定移動体10sにプローブ情報Ipを送信させないと決定した場合(ステップS33:NO)、ステップS34に進む。ステップS34において、制御部22は、プローブ情報Ipの送信を停止する命令を含む制御命令Ocを生成する。この制御命令Ocを受信した特定移動体10sは、路面状態推定装置20に向けたプローブ情報Ipの送信を停止する。これにより、不要なプローブ情報Ipが路面状態推定装置20に送信されることが防止され、路面状態推定装置20の処理負荷を低減することができる。なお、この制御命令Ocを受信した特定移動体10sは、プローブ情報Ipの生成自体を停止してもよい。これにより、特定移動体10sにおける消費電力を抑制することも可能である。If it is determined that the specific moving body 10s should not transmit the probe information Ip (step S33: NO), the process proceeds to step S34. In step S34, the control unit 22 generates a control command Oc including a command to stop transmitting the probe information Ip. The specific moving body 10s that receives this control command Oc stops transmitting the probe information Ip to the road surface condition estimation device 20. This prevents unnecessary probe information Ip from being transmitted to the road surface condition estimation device 20, and reduces the processing load of the road surface condition estimation device 20. The specific moving body 10s that receives this control command Oc may also stop generating the probe information Ip itself. This makes it possible to reduce power consumption in the specific moving body 10s.

特定移動体10sにプローブ情報Ipを送信させると決定した場合(ステップS33:YES)、ステップS35に進む。ステップS35において、制御部22は、画像処理センサ11bによって処理される前の、撮影装置11aが撮影した画像を、プローブ情報Ipに含めるようにする命令を含む制御命令Ocを生成する。この制御命令Ocを受信した特定移動体10sの路面状態検出装置13は、画像処理センサ11bによって処理されていない画像を、路面状態情報Isとして含む、プローブ情報Ipを生成する。そのプローブ情報Ipを受信した路面状態推定装置20は、路面状態情報Is(つまり、画像処理センサ11bによって処理されていない画像)を、路面状態分析部26によって分析する。この分析には、畳み込みニューラルネットワーク(CNN:Convolutional Neural Network)を用いてもよい。制御部22は、路面状態分析部26による分析結果を、他のプローブ情報Ipと比較する。比較の結果、路面状態分析部26による分析結果が他のプローブ情報Ipに対して齟齬が無い場合、その分析結果に基づく路面状態推定情報Irを生成し、地図DB記憶部24に記憶させてもよい。If it is determined that the specific moving body 10s should transmit the probe information Ip (step S33: YES), the process proceeds to step S35. In step S35, the control unit 22 generates a control command Oc including a command to include in the probe information Ip the image captured by the image capture device 11a before being processed by the image processing sensor 11b. The road surface condition detection device 13 of the specific moving body 10s that receives this control command Oc generates probe information Ip that includes the image not processed by the image processing sensor 11b as road surface condition information Is. The road surface condition estimation device 20 that receives the probe information Ip analyzes the road surface condition information Is (i.e., the image not processed by the image processing sensor 11b) by the road surface condition analysis unit 26. A convolutional neural network (CNN) may be used for this analysis. The control unit 22 compares the analysis result by the road surface condition analysis unit 26 with other probe information Ip. If the comparison shows that the analysis results by the road surface condition analysis unit 26 are consistent with the other probe information Ip, road surface condition estimation information Ir may be generated based on the analysis results and stored in the map DB storage unit 24.

次に、実施の形態2に係る路面状態推定システム1の変形例について説明する。
ステップS31において、路面状態推定装置20が生成する制御命令Ocには、種々の命令を含めることができる。例えば、特定移動体10sの画像取得部11に対して修理が必要であると判定された場合、特定移動体10sの使用者に報知情報Cを提示してもよい。図11に、報知情報Cの一例を示す。図11の例では、画像取得部11の修理が必要な旨が、特定移動体10sの通信型ドライブレコーダ等に表示される。報知情報Cとして、修理センターの連絡先等を合わせて表示させてもよい。あるいは、修理が必要な旨を、音声によって特定移動体10sの使用者に知らせてもよい。このように、報知情報Cはディスプレイへの表示であってもよいし、音声等であってもよい。このような報知を特定移動体10sの使用者に対して行うために、制御命令Ocには、報知命令Oiを含めることができる。報知命令Oiは、特定移動体10sの移動体側制御部13aに対して発行される。報知命令Oiは、特定移動体10sの使用者に対して、画像取得部11等に異常が生じたことを報知する報知情報Cを提示するための命令である。
Next, a modification of the road surface condition estimating system 1 according to the second embodiment will be described.
In step S31, the control command Oc generated by the road surface condition estimation device 20 can include various commands. For example, when it is determined that the image acquisition unit 11 of the specific moving body 10s needs repair, the notification information C may be presented to the user of the specific moving body 10s. FIG. 11 shows an example of the notification information C. In the example of FIG. 11, the fact that the image acquisition unit 11 needs repair is displayed on the communication type drive recorder of the specific moving body 10s. The notification information C may also display the contact information of the repair center. Alternatively, the fact that the repair is needed may be notified to the user of the specific moving body 10s by voice. In this way, the notification information C may be displayed on a display or may be voice. In order to perform such a notification to the user of the specific moving body 10s, the control command Oc can include a notification command Oi. The notification command Oi is issued to the moving body side control unit 13a of the specific moving body 10s. The notification command Oi is a command for presenting notification information C to a user of the specific moving body 10s, notifying the user that an abnormality has occurred in the image acquisition unit 11 or the like.

また、報知情報Cには、撮影装置11aに付着した付着物についての情報が含まれてもよい。図12の例では、特定移動体10sのフロントカメラ(撮影装置11a)に汚れが付着していることを、通信型ドライブレコーダのディスプレイ等に表示させている。さらに図12の例では、フロントカメラにおけるどの部位に汚れが付着しているかについても、画像を用いて表示している。これにより、使用者に対して、汚れの除去を促すことができる。 The notification information C may also include information about an attachment attached to the image capture device 11a. In the example of FIG. 12, the fact that dirt is attached to the front camera (image capture device 11a) of a specific moving body 10s is displayed on the display of the communication type drive recorder, etc. Furthermore, in the example of FIG. 12, an image is also displayed showing which part of the front camera the dirt is attached to. This can encourage the user to remove the dirt.

また、制御部22が生成する路面状態推定情報Irには、路面状態の異常の有無に代えて、路面状態に異常が発生している可能性についての情報が含まれてもよい。例えば、特定の地点を通過する、90%を超えるプローブ移動体10が、その地点に路面状態の異常があると判定した場合に、制御部22は当該地点における路面状態の異常が確実に発生したと推定してもよい。また、特定の地点を通過する、30%以上90%以下のプローブ移動体10が、その地点に路面状態の異常があると判定した場合に、制御部22は、当該地点に路面状態の異常が発生したことが疑われると判定してもよい。そして制御部22は、路面状態に異常が発生している可能性についての情報に基づき、報知命令Oiの内容を決定してもよい。 The road surface condition estimation information Ir generated by the control unit 22 may include information on the possibility that an abnormality has occurred in the road surface condition, instead of the presence or absence of an abnormality in the road surface condition. For example, when more than 90% of the probe mobile bodies 10 passing a specific point determine that there is an abnormality in the road surface condition at that point, the control unit 22 may estimate that an abnormality in the road surface condition has definitely occurred at that point. When 30% to 90% of the probe mobile bodies 10 passing a specific point determine that there is an abnormality in the road surface condition at that point, the control unit 22 may determine that there is a suspicion that an abnormality has occurred in the road surface condition at that point. The control unit 22 may then determine the content of the notification command Oi based on the information on the possibility that an abnormality has occurred in the road surface condition.

その他の変形例として、制御部22が生成するプローブ品質推定情報Iqには、各プローブ移動体10における画像取得部11の異常の発生の有無に代えて、画像取得部11に異常が発生している可能性についての情報が含まれてもよい。そして制御部22は、画像取得部11に異常が発生している可能性についての情報に基づき、報知命令Oiの内容を決定してもよい。As another modification, the probe quality estimation information Iq generated by the control unit 22 may include information on the possibility that an abnormality has occurred in the image acquisition unit 11, instead of the presence or absence of an abnormality in the image acquisition unit 11 in each probe mobile body 10. The control unit 22 may then determine the content of the notification command Oi based on the information on the possibility that an abnormality has occurred in the image acquisition unit 11.

以上説明したように、本開示に係る路面状態推定システム1は、画像取得部11をそれぞれ有する複数のプローブ移動体10と、複数のプローブ移動体10がそれぞれ画像取得部11によって取得した路面の画像に基づく路面状態情報Is、路面の位置を示す位置情報Im、およびプローブ移動体10の識別情報Idをそれぞれ含む、複数のプローブ情報Ipを取得する情報取得部21と、複数のプローブ情報Ipに基づき、位置情報Imに関連付けられた路面状態に関する路面状態推定情報Irと、識別情報Idに関連付けられた路面状態情報Isの品質に関するプローブ品質推定情報Iqと、を生成する制御部22と、地図および路面状態推定情報Irを記憶する地図DB記憶部24と、プローブ品質推定情報Iqを記憶するプローブ情報記憶部23と、を備える。As described above, the road surface condition estimation system 1 of the present disclosure comprises a plurality of probe mobile bodies 10 each having an image acquisition unit 11, an information acquisition unit 21 that acquires a plurality of probe information Ip, each of which includes road surface condition information Is based on an image of the road surface acquired by the image acquisition unit 11 by the plurality of probe mobile bodies 10, position information Im indicating the position of the road surface, and identification information Id of the probe mobile body 10, a control unit 22 that generates road surface condition estimation information Ir regarding the road surface condition associated with the position information Im and probe quality estimation information Iq regarding the quality of the road surface condition information Is associated with the identification information Id based on the plurality of probe information Ip, a map DB memory unit 24 that stores a map and the road surface condition estimation information Ir, and a probe information memory unit 23 that stores the probe quality estimation information Iq.

上記構成の路面状態推定システム1によれば、路面状態推定情報Irに加えて、プローブ品質推定情報Iqが生成される。プローブ品質推定情報Iqは、複数のプローブ情報Ipの比較結果に基づいて生成されるため、特定のプローブ移動体10の画像取得部11等に異常が生じたことを推定できる。さらにプローブ品質推定情報Iqは、路面状態情報Isの取得元となったプローブ移動体10の識別情報Idと関連付けられている。このため、画像取得部11等に異常が生じたプローブ移動体10を、識別情報Idによって特定し、そのプローブ移動体10が送信したプローブ情報Ipの使用を停止することができる。あるいは、画像取得部11等に異常が生じたプローブ移動体10に対して、プローブ品質推定情報Iqの送信を停止させることできる。したがって、画像取得部11等に異常が生じたプローブ移動体10によって取得されたプローブ情報Ipを用いて路面の状態を推定してしまうことを防ぎ、推定精度の低下を抑制できる。According to the road surface condition estimation system 1 having the above configuration, in addition to the road surface condition estimation information Ir, the probe quality estimation information Iq is generated. Since the probe quality estimation information Iq is generated based on the comparison result of multiple pieces of probe information Ip, it can be estimated that an abnormality has occurred in the image acquisition unit 11 of a specific probe mobile body 10. Furthermore, the probe quality estimation information Iq is associated with the identification information Id of the probe mobile body 10 from which the road surface condition information Is was acquired. Therefore, the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like can be identified by the identification information Id, and the use of the probe information Ip transmitted by the probe mobile body 10 can be stopped. Alternatively, the transmission of the probe quality estimation information Iq can be stopped for the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like. Therefore, it is possible to prevent the road surface condition from being estimated using the probe information Ip acquired by the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like, and to suppress a decrease in the estimation accuracy.

また、複数のプローブ移動体10の少なくとも一部の画像取得部11には、路面を撮影する撮影装置11aと、撮影装置11aにより撮影された路面の画像に基づいて路面状態を検出する画像処理センサ11bと、が含まれ、路面状態情報Isには、画像処理センサ11bによって検出された路面状態が含まれてもよい。この場合、プローブ移動体10が備える画像処理センサ11bによって路面状態を検出するため、例えば路面状態推定装置20によって路面状態を検出する場合と比較して、路面状態推定装置20の処理負荷を低減できる。 In addition, at least some of the image acquisition units 11 of the multiple probe mobile bodies 10 include an imaging device 11a that captures an image of the road surface, and an image processing sensor 11b that detects the road surface condition based on the image of the road surface captured by the imaging device 11a, and the road surface condition information Is may include the road surface condition detected by the image processing sensor 11b. In this case, since the road surface condition is detected by the image processing sensor 11b provided in the probe mobile body 10, the processing load of the road surface condition estimation device 20 can be reduced compared to the case where the road surface condition is detected by, for example, the road surface condition estimation device 20.

また、路面状態推定情報Irには、路面の変形の有無および路面に設けられた標識の劣化の有無の少なくとも一方が含まれてもよい。 The road surface condition estimation information Ir may also include at least one of the presence or absence of deformation of the road surface and the presence or absence of deterioration of signs on the road surface.

また、制御部22は、制御部22が複数のプローブ情報Ipに基づいて特定地点における路面状態に関する推定を複数回行い、異なる複数の推定結果を得た場合に、出現頻度が所定の閾値を下回る推定結果に対応するプローブ情報Ipを送信したプローブ移動体10の画像取得部11に異常が発生したと判定してもよい。 In addition, when the control unit 22 performs multiple estimations regarding road surface conditions at a specific point based on multiple pieces of probe information Ip and obtains multiple different estimation results, the control unit 22 may determine that an abnormality has occurred in the image acquisition unit 11 of the probe mobile body 10 that transmitted the probe information Ip corresponding to an estimation result whose occurrence frequency is below a predetermined threshold.

また、制御部22は、同一の位置情報Imに対応する複数のプローブ情報Ipを比較することで、任意のプローブ情報Ipにおけるその他のプローブ情報Ipに対する適合度Rfを算出し、適合度Rfが所定の閾値を下回る場合に、任意のプローブ情報Ipを送信したプローブ移動体10の画像取得部11に異常が発生したと判定してもよい。In addition, the control unit 22 may calculate the compatibility Rf of any given probe information Ip with other probe information Ip by comparing multiple probe information Ip corresponding to the same location information Im, and if the compatibility Rf falls below a predetermined threshold, determine that an abnormality has occurred in the image acquisition unit 11 of the probe mobile body 10 that transmitted the given probe information Ip.

また、少なくとも一部のプローブ移動体10は、路面における照度を検出する照度センサ16を有し、プローブ情報Ipには、照度センサ16による照度の検出結果に基づく照度情報が含まれ、制御部22は、複数のプローブ移動体10から送信されたプローブ情報Ipに含まれる照度情報を参照し、類似環境において取得された路面状態情報Is同士を比較することで、プローブ移動体10の画像取得部11の異常に関する判定を行ってもよい。In addition, at least some of the probe mobile bodies 10 have an illuminance sensor 16 that detects the illuminance on the road surface, and the probe information Ip includes illuminance information based on the illuminance detection results by the illuminance sensor 16. The control unit 22 may refer to the illuminance information included in the probe information Ip transmitted from multiple probe mobile bodies 10 and compare the road surface condition information Is acquired in similar environments to make a judgment regarding an abnormality in the image acquisition unit 11 of the probe mobile body 10.

また、複数のプローブ移動体10の少なくとも一部の画像取得部11には、路面を撮影する撮影装置11aと、撮影装置11aにより撮影された路面の画像に基づいて路面状態を検出する画像処理センサ11bと、が含まれ、プローブ情報Ipには、画像処理センサ11bの型に関する情報が含まれ、制御部22は、同一の型の画像処理センサ11bを有する複数のプローブ移動体10から送信された複数のプローブ情報Ip同士を比較し、画像処理センサ11bの異常に関する判定を行ってもよい。In addition, at least some of the image acquisition units 11 of the multiple probe mobile bodies 10 include an imaging device 11a that images the road surface and an image processing sensor 11b that detects the road surface condition based on the image of the road surface captured by the imaging device 11a, and the probe information Ip includes information regarding the type of the image processing sensor 11b, and the control unit 22 may compare multiple pieces of probe information Ip transmitted from multiple probe mobile bodies 10 having the same type of image processing sensor 11b and make a judgment regarding an abnormality in the image processing sensor 11b.

また、制御部22は、位置情報Imと、路面上の障害物の有無に関する障害物情報Ioと、を対応付けて、地図DB記憶部24に記憶させてもよい。The control unit 22 may also associate the location information Im with obstacle information Io regarding the presence or absence of an obstacle on the road surface and store it in the map DB memory unit 24.

また、複数のプローブ移動体10の少なくとも一部は、車線単位の道路形状データを含む高精度地図データを記憶する高精度ロケータ14Aを有し、高精度ロケータ14Aは、自己の車線位置に関する車線情報Ilを生成し、高精度ロケータ14Aを有するプローブ移動体10が送信するプローブ情報Ipに、車線情報Ilが含まれてもよい。In addition, at least a portion of the multiple probe mobile bodies 10 have a high-precision locator 14A that stores high-precision map data including road shape data on a lane-by-lane basis, and the high-precision locator 14A generates lane information Il relating to its own lane position, and the lane information Il may be included in the probe information Ip transmitted by the probe mobile body 10 having the high-precision locator 14A.

また、プローブ情報Ipには、プローブ移動体10の車線位置に関する車線情報Ilが含まれ、制御部22は、車線情報Ilを含む複数のプローブ情報Ipの比較結果に基づき、車線ごとの路面状態に関する路面状態推定情報Irを生成し、制御部22は、車線情報Ilを含む複数のプローブ情報Ipの比較結果に基づき、プローブ品質推定情報Iqを生成してもよい。In addition, the probe information Ip includes lane information Il relating to the lane position of the probe mobile body 10, and the control unit 22 generates road surface condition estimation information Ir relating to the road surface condition for each lane based on the comparison results of the multiple probe information Ip including the lane information Il, and the control unit 22 may generate probe quality estimation information Iq based on the comparison results of the multiple probe information Ip including the lane information Il.

また、制御部22は、複数のプローブ移動体10に含まれる特定移動体10sの画像取得部11に異常が生じたと推定した場合、特定移動体10sに対して送信される制御命令Ocを生成してもよい。なお、路面状態推定装置20とプローブ移動体10との間で認証を行ってもよい。認証の方式は種々選択可能であるが、例えば、識別情報Idと組み合わされたパスワードが、各プローブ移動体10に対して事前に発行されてもよい。プローブ情報Ipに、識別情報Idとともにパスワードが含まれることで、正規のプローブ移動体10であることを路面状態推定装置20が認識できる。このような認証は、制御命令Ocが、誤ったプローブ移動体10に対して発行されないようにする点でも有効である。 In addition, when the control unit 22 estimates that an abnormality has occurred in the image acquisition unit 11 of a specific mobile body 10s included in the multiple probe mobile bodies 10, the control unit 22 may generate a control command Oc to be transmitted to the specific mobile body 10s. Note that authentication may be performed between the road surface condition estimation device 20 and the probe mobile body 10. Various authentication methods can be selected, but for example, a password combined with the identification information Id may be issued in advance to each probe mobile body 10. By including a password together with the identification information Id in the probe information Ip, the road surface condition estimation device 20 can recognize that the probe mobile body 10 is a legitimate probe mobile body 10. Such authentication is also effective in preventing the control command Oc from being issued to an incorrect probe mobile body 10.

また、制御命令Ocには、特定移動体10sに搭載された装置のソフトウェアをアップデートさせる命令が含まれてもよい。 The control command Oc may also include a command to update software of a device installed in a specific mobile body 10s.

また、制御命令Ocには、特定移動体10sによるプローブ情報Ipの送信を停止する命令が含まれてもよい。この場合、画像取得部11等に異常が生じたプローブ移動体10によってプローブ情報Ipが路面状態推定装置20に送信されることが停止される。したがって、制御部22による路面状態の推定精度が低下することを抑制できる。また、不要なプローブ情報Ipが路面状態推定装置20に送信されることで路面状態推定装置20の処理負荷が増大することも抑制できる。 The control command Oc may also include a command to stop the transmission of probe information Ip by the specific mobile body 10s. In this case, the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like stops transmitting the probe information Ip to the road surface condition estimation device 20. This prevents a decrease in the accuracy of the road surface condition estimation by the control unit 22. It also prevents an increase in the processing load of the road surface condition estimation device 20 due to unnecessary probe information Ip being transmitted to the road surface condition estimation device 20.

また、制御命令Ocには、特定移動体10sの移動体側制御部13aに対して発行される報知命令Oiが含まれ、報知命令Oiは、特定移動体10sの使用者に対して、画像取得部11等に異常が生じたことを報知する報知情報Cを移動体側制御部13aに示させる命令であってもよい。In addition, the control command Oc includes a notification command Oi issued to the mobile body side control unit 13a of the specific mobile body 10s, and the notification command Oi may be a command to cause the mobile body side control unit 13a to display notification information C to notify the user of the specific mobile body 10s that an abnormality has occurred in the image acquisition unit 11 or the like.

また、報知情報Cには、特定移動体10sの画像取得部11に含まれる撮影装置11aに付着した付着物についての情報が含まれてもよい。 The alarm information C may also include information about an attachment attached to the imaging device 11a included in the image acquisition unit 11 of the specific moving body 10s.

本開示に係る路面状態推定装置20は、複数のプローブ移動体10がそれぞれ画像取得部11によって取得した路面の画像に基づく路面状態情報Is、路面の位置を示す位置情報Im、および各々のプローブ移動体10の識別情報Idをそれぞれ含む、複数のプローブ情報Ipを取得する情報取得部21と、複数のプローブ情報Ipに基づき、路面状態に関する路面状態推定情報Irを生成し、当該路面の位置を示す位置情報Imと対応付ける制御部22と、複数のプローブ情報Ipの比較結果に基づき、識別情報Idに関連付けて路面状態情報Isの品質に関するプローブ品質推定情報Iqを生成する制御部22と、路面状態推定情報Irを記憶する地図DB記憶部24と、プローブ品質推定情報Iqを記憶するプローブ情報記憶部23と、を有する。The road surface condition estimation device 20 according to the present disclosure has an information acquisition unit 21 that acquires multiple probe information Ip, each of which includes road surface condition information Is based on images of the road surface acquired by the image acquisition unit 11 of multiple probe mobile bodies 10, position information Im indicating the position of the road surface, and identification information Id of each probe mobile body 10; a control unit 22 that generates road surface condition estimation information Ir relating to the road surface condition based on the multiple probe information Ip and associates it with position information Im indicating the position of the road surface; a control unit 22 that generates probe quality estimation information Iq relating to the quality of the road surface condition information Is in association with the identification information Id based on a comparison result of the multiple probe information Ip; a map DB memory unit 24 that stores the road surface condition estimation information Ir; and a probe information memory unit 23 that stores the probe quality estimation information Iq.

上記構成の路面状態推定装置20によれば、路面状態推定情報Irに加えて、プローブ品質推定情報Iqを生成する。プローブ品質推定情報Iqは、複数のプローブ情報Ipの比較結果に基づいて生成されるため、特定のプローブ移動体10の画像取得部11等に異常が生じたことを推定できる。さらにプローブ品質推定情報Iqは、路面状態情報Isの取得元となったプローブ移動体10の識別情報Idと関連付けられている。このため、画像取得部11等に異常が生じたプローブ移動体10を、識別情報Idによって特定し、そのプローブ移動体10が送信したプローブ情報Ipの使用を停止することができる。あるいは、画像取得部11等に異常が生じたプローブ移動体10に対して、プローブ品質推定情報Iqの送信を停止させることできる。したがって、画像取得部11等に異常が生じたプローブ移動体10によって取得されたプローブ情報Ipを用いて路面の状態を推定してしまうことを防ぎ、推定精度の低下を抑制できる。 According to the road surface condition estimation device 20 having the above configuration, in addition to the road surface condition estimation information Ir, the probe quality estimation information Iq is generated. Since the probe quality estimation information Iq is generated based on the comparison result of multiple pieces of probe information Ip, it is possible to estimate that an abnormality has occurred in the image acquisition unit 11 or the like of a specific probe mobile body 10. Furthermore, the probe quality estimation information Iq is associated with the identification information Id of the probe mobile body 10 from which the road surface condition information Is was acquired. Therefore, the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like can be identified by the identification information Id, and the use of the probe information Ip transmitted by the probe mobile body 10 can be stopped. Alternatively, the transmission of the probe quality estimation information Iq can be stopped for the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like. Therefore, it is possible to prevent the road surface condition from being estimated using the probe information Ip acquired by the probe mobile body 10 in which an abnormality has occurred in the image acquisition unit 11 or the like, and to suppress a decrease in the estimation accuracy.

また、路面状態推定装置20は、複数のプローブ移動体10の少なくとも一部によって取得された画像に基づいて路面状態を分析する路面状態分析部26を備えてもよい。 The road surface condition estimation device 20 may also be provided with a road surface condition analysis unit 26 that analyzes the road surface conditions based on images acquired by at least some of the multiple probe mobile bodies 10.

本開示に係るプローブ移動体10は、自己の位置情報Imを生成するロケータ装置14と、路面の画像を取得する画像取得部11と、位置情報Im、位置情報Imに対応付けられるとともに画像に基づいて生成された路面状態情報Is、および自己の識別情報Idを含むプローブ情報Ipを生成する移動体側制御部13aと、移動体側制御部13aが生成したプローブ情報Ipを、路面状態推定装置20に送信する通信装置15と、を備える。The probe mobile body 10 according to the present disclosure comprises a locator device 14 that generates its own position information Im, an image acquisition unit 11 that acquires an image of the road surface, a mobile body side control unit 13a that generates probe information Ip including the position information Im, road surface condition information Is that is associated with the position information Im and generated based on the image, and its own identification information Id, and a communication device 15 that transmits the probe information Ip generated by the mobile body side control unit 13a to the road surface condition estimation device 20.

上記構成のプローブ移動体10によれば、プローブ品質推定情報Iqおよび路面状態推定情報Irを生成する路面状態推定装置20と組み合わせて用いられることで、画像取得部11等に異常が生じた場合に路面状態推定情報Irの品質を低下させてしまうことを抑制できる。 According to the probe mobile body 10 configured as described above, when it is used in combination with a road surface condition estimation device 20 that generates probe quality estimation information Iq and road surface condition estimation information Ir, it is possible to prevent a decrease in the quality of the road surface condition estimation information Ir when an abnormality occurs in the image acquisition unit 11, etc.

また、コンピュータを路面状態推定装置20として機能させるための路面状態推定プログラムを、路面状態推定装置20が有する記憶部に記憶させてもよい。路面状態推定プログラムを記憶するハードウェアは、プローブ情報記憶部23、地図DB記憶部24等のハードウェアと同一であってもよいし、異なってもよい。In addition, a road surface condition estimation program for causing a computer to function as the road surface condition estimation device 20 may be stored in a memory unit possessed by the road surface condition estimation device 20. The hardware that stores the road surface condition estimation program may be the same as or different from the hardware of the probe information memory unit 23, the map DB memory unit 24, etc.

なお、本開示の技術的範囲は前記実施の形態に限定されず、本開示の趣旨を逸脱しない範囲において種々の変更を加えることが可能である。The technical scope of this disclosure is not limited to the above-described embodiments, and various modifications may be made without departing from the spirit of this disclosure.

例えば、画像取得部11はレーダーを用いて路面の画像を取得するように構成されていてもよい。この場合も、少なくとも画像取得部11が取得した画像に基づいて、路面の変形および路面上の落下物の有無を検出することは可能である。For example, the image acquisition unit 11 may be configured to acquire an image of the road surface using a radar. In this case, it is possible to detect deformation of the road surface and the presence or absence of fallen objects on the road surface based on at least the images acquired by the image acquisition unit 11.

その他、上記した実施の形態あるいは変形例を、適宜組み合わせてもよい。 In addition, the above-mentioned embodiments or variations may be combined as appropriate.

1…路面状態推定システム 10…プローブ移動体 10s…特定移動体 11…画像取得部 11a…撮影装置 11b…画像処理センサ 13a…移動体側制御部 14…ロケータ装置 14A…高精度ロケータ 15…通信装置 16…照度センサ 20…路面状態推定装置 21…情報取得部 22…制御部 23…プローブ情報記憶部 24…地図DB記憶部 1...Road surface condition estimation system 10...Probe mobile body 10s...Specific mobile body 11...Image acquisition unit 11a...Photographing device 11b...Image processing sensor 13a...Mobile body side control unit 14...Locator device 14A...High-precision locator 15...Communication device 16...Illuminance sensor 20...Road surface condition estimation device 21...Information acquisition unit 22...Control unit 23...Probe information storage unit 24...Map DB storage unit

Claims (18)

画像取得部をそれぞれ有する複数のプローブ移動体と、
複数の前記プローブ移動体がそれぞれ前記画像取得部によって取得した路面の画像に基づく路面状態情報、前記路面の位置を示す位置情報、および前記プローブ移動体の識別情報をそれぞれ含む、複数のプローブ情報を取得する情報取得部と、
複数の前記プローブ情報に基づき、前記位置情報に関連付けられた路面状態に関する路面状態推定情報と、前記識別情報に関連付けられた前記路面状態情報の品質に関するプローブ品質推定情報と、を生成するとともに、同一地点における複数の前記プローブ情報を基に前記プローブ移動体の前記画像取得部の異常の発生の有無を判定する、制御部と、
前記路面状態推定情報を記憶する地図DB記憶部と、
前記プローブ品質推定情報を記憶するプローブ情報記憶部と、
を備える、路面状態推定システム。
A plurality of probe moving bodies each having an image acquisition unit;
an information acquisition unit that acquires a plurality of pieces of probe information, each of which includes road surface condition information based on an image of a road surface acquired by the image acquisition unit of the plurality of probe moving bodies, position information indicating a position of the road surface, and identification information of the probe moving body;
a control unit that generates road surface condition estimation information related to the road surface condition associated with the position information and probe quality estimation information related to the quality of the road surface condition information associated with the identification information based on the plurality of pieces of probe information , and determines whether or not an abnormality has occurred in the image acquisition unit of the probe moving body based on the plurality of pieces of probe information at the same point ;
a map DB storage unit that stores the road surface condition estimation information;
a probe information storage unit that stores the probe quality estimation information;
A road surface condition estimation system comprising:
複数の前記プローブ移動体の少なくとも一部の前記画像取得部には、前記路面を撮影する撮影装置と、前記撮影装置により撮影された前記路面の前記画像に基づいて前記路面状態を検出する画像処理センサと、が含まれ、
前記路面状態情報には、前記画像処理センサによって検出された前記路面状態が含まれる、請求項1に記載の路面状態推定システム。
At least some of the image acquisition units of the plurality of probe moving bodies include an image capture device that captures an image of the road surface, and an image processing sensor that detects the road surface condition based on the image of the road surface captured by the image capture device,
The road surface condition estimation system according to claim 1 , wherein the road surface condition information includes the road surface condition detected by the image processing sensor.
前記路面状態推定情報には、路面の変形の有無および路面に設けられた標識の劣化の有無の少なくとも一方が含まれる、請求項1または2に記載の路面状態推定システム。 The road surface condition estimation system according to claim 1 or 2, wherein the road surface condition estimation information includes at least one of the presence or absence of deformation of the road surface and the presence or absence of deterioration of signs on the road surface. 前記制御部は、前記制御部が複数の前記プローブ情報に基づいて特定地点における路面状態に関する推定を複数回行い、異なる複数の推定結果を得た場合に、出現頻度が所定の閾値を下回る推定結果に対応するプローブ情報を送信したプローブ移動体の前記画像取得部に異常が発生したと判定する、請求項1から3のいずれか1項に記載の路面状態推定システム。 The road surface condition estimation system according to any one of claims 1 to 3, wherein the control unit performs multiple estimations of the road surface condition at a specific point based on multiple pieces of probe information, and when the control unit obtains multiple different estimation results, determines that an abnormality has occurred in the image acquisition unit of the probe mobile body that transmitted the probe information corresponding to an estimation result whose occurrence frequency is below a predetermined threshold. 前記制御部は、同一の前記位置情報に対応する複数の前記プローブ情報を比較することで、任意のプローブ情報におけるその他のプローブ情報に対する適合度を算出し、前記適合度が所定の閾値を下回る場合に、前記任意のプローブ情報を送信した前記プローブ移動体の前記画像取得部に異常が発生したと判定する、請求項1から4のいずれか1項に記載の路面状態推定システム。 The road surface condition estimation system according to any one of claims 1 to 4, wherein the control unit calculates the conformance of an arbitrary piece of probe information to other pieces of probe information by comparing the multiple pieces of probe information corresponding to the same position information, and determines that an abnormality has occurred in the image acquisition unit of the probe mobile body that transmitted the arbitrary piece of probe information when the conformance falls below a predetermined threshold. 少なくとも一部の前記プローブ移動体は、路面における照度を検出する照度センサを有し、
前記プローブ情報には、前記照度センサによる前記照度の検出結果に基づく照度情報が含まれ、
前記制御部は、複数のプローブ移動体から送信された前記プローブ情報に含まれる前記照度情報を参照し、類似環境において取得された前記路面状態情報同士を比較することで、前記プローブ移動体の前記画像取得部の異常に関する判定を行う、請求項1から5のいずれか1項に記載の路面状態推定システム。
At least a part of the probe moving bodies has an illuminance sensor that detects illuminance on a road surface,
the probe information includes illuminance information based on a detection result of the illuminance by the illuminance sensor,
The control unit refers to the illuminance information contained in the probe information transmitted from a plurality of probe mobile bodies, and compares the road surface condition information acquired in similar environments to determine whether there is an abnormality in the image acquisition unit of the probe mobile body.
複数の前記プローブ移動体の少なくとも一部の前記画像取得部には、路面を撮影する撮影装置と、前記撮影装置により撮影された前記路面の前記画像に基づいて前記路面状態を検出する画像処理センサと、が含まれ、
前記プローブ情報には、前記画像処理センサの型に関する情報が含まれ、
前記制御部は、同一の型の画像処理センサを有する複数の前記プローブ移動体から送信された複数の前記プローブ情報同士を比較し、前記画像処理センサの異常に関する判定を行う、請求項1から6のいずれか1項に記載の路面状態推定システム。
At least some of the image acquisition units of the plurality of probe moving bodies include an image capture device that captures an image of a road surface, and an image processing sensor that detects the road surface condition based on the image of the road surface captured by the image capture device,
the probe information includes information regarding a type of the imaging sensor;
The road surface condition estimation system according to claim 1 , wherein the control unit compares the multiple pieces of probe information transmitted from the multiple probe mobile bodies having the same type of image processing sensor, and makes a determination regarding an abnormality in the image processing sensor.
前記制御部は、前記位置情報と、路面上の障害物の有無に関する障害物情報と、を対応付けて、前記地図DB記憶部に記憶させる、請求項1から7のいずれか1項に記載の路面状態推定システム。 The road surface condition estimation system according to any one of claims 1 to 7, wherein the control unit associates the position information with obstacle information regarding the presence or absence of an obstacle on the road surface and stores the information in the map DB storage unit. 複数の前記プローブ移動体の少なくとも一部は、車線単位の道路形状データを含む高精度地図データを記憶する高精度ロケータを有し、
前記高精度ロケータは、自己の車線位置に関する車線情報を生成し、
前記高精度ロケータを有する前記プローブ移動体が送信する前記プローブ情報に、前記車線情報が含まれる、請求項1から8のいずれか1項に記載の路面状態推定システム。
At least some of the plurality of probe moving bodies have a high-precision locator that stores high-precision map data including road shape data in units of lanes;
The high accuracy locator generates lane information related to its lane position;
The road surface condition estimation system according to claim 1 , wherein the lane information is included in the probe information transmitted by the probe mobile object having the high-precision locator.
前記プローブ情報には、前記プローブ移動体の車線位置に関する車線情報が含まれ、
前記制御部は、前記車線情報を含む複数の前記プローブ情報の比較結果に基づき、車線ごとの路面状態に関する前記路面状態推定情報を生成する、請求項1から9のいずれか1項に記載の路面状態推定システム。
The probe information includes lane information regarding a lane position of the probe moving body,
The road surface condition estimation system according to claim 1 , wherein the control unit generates the road surface condition estimation information relating to a road surface condition for each lane based on a comparison result of the plurality of pieces of probe information including the lane information.
前記制御部は、複数の前記プローブ移動体に含まれる特定移動体の画像取得部に異常が生じたと推定した場合、前記特定移動体に対して送信される制御命令を生成する、請求項1から10のいずれか1項に記載の路面状態推定システム。 The road surface condition estimation system according to any one of claims 1 to 10, wherein the control unit generates a control command to be transmitted to a specific moving body when it is estimated that an abnormality has occurred in an image acquisition unit of the specific moving body included in the plurality of probe moving bodies. 前記制御命令には、前記特定移動体に搭載された装置のソフトウェアをアップデートさせる命令が含まれる、請求項11に記載の路面状態推定システム。 The road surface condition estimation system according to claim 11, wherein the control command includes a command to update software of a device mounted on the specific moving body. 前記制御命令には、前記特定移動体による前記プローブ情報の送信を停止する命令が含まれる、請求項11または12に記載の路面状態推定システム。 The road surface condition estimation system according to claim 11 or 12, wherein the control command includes a command to stop the specific moving body from transmitting the probe information. 前記制御命令には、前記特定移動体の移動体側制御部に対して発行される報知命令が含まれ、
前記報知命令は、前記特定移動体の使用者に対して、前記画像取得部に異常が発生したことを報知する報知情報を前記移動体側制御部に示させる命令である、請求項11から13のいずれか1項に記載の路面状態推定システム。
the control command includes a notification command to be issued to a mobile-body-side control unit of the specific mobile body,
The road surface condition estimation system according to any one of claims 11 to 13, wherein the notification command is a command to cause the mobile body side control unit to display notification information notifying a user of the specific mobile body that an abnormality has occurred in the image acquisition unit.
前記報知情報には、前記特定移動体の前記画像取得部に含まれる撮影装置に付着した付着物についての情報が含まれる、請求項14に記載の路面状態推定システム。 The road surface condition estimation system according to claim 14, wherein the notification information includes information about an object attached to an image capture device included in the image acquisition unit of the specific moving object. 複数のプローブ移動体がそれぞれ画像取得部によって取得した路面の画像に基づく路面状態情報、前記路面の位置を示す位置情報、および各々の前記プローブ移動体の識別情報をそれぞれ含む、複数のプローブ情報を取得する情報取得部と、
複数の前記プローブ情報に基づき、前記位置情報に関連付けられた路面状態に関する路面状態推定情報と、前記識別情報に関連付けられた前記路面状態情報の品質に関するプローブ品質推定情報と、を生成するとともに、同一地点における複数の前記プローブ情報を基に前記プローブ移動体の前記画像取得部の異常の発生の有無を判定する、制御部と、
前記路面状態推定情報を記憶する地図DB記憶部と、
前記プローブ品質推定情報を記憶するプローブ情報記憶部と、を備える、路面状態推定装置。
an information acquisition unit that acquires a plurality of pieces of probe information, each of which includes road surface condition information based on an image of the road surface acquired by an image acquisition unit of a plurality of probe moving bodies, position information indicating a position of the road surface, and identification information of each of the probe moving bodies;
a control unit that generates road surface condition estimation information related to the road surface condition associated with the position information and probe quality estimation information related to the quality of the road surface condition information associated with the identification information based on the plurality of pieces of probe information , and determines whether or not an abnormality has occurred in the image acquisition unit of the probe moving body based on the plurality of pieces of probe information at the same point ;
a map DB storage unit that stores the road surface condition estimation information;
a probe information storage unit that stores the probe quality estimation information.
複数の前記プローブ移動体の少なくとも一部によって取得された画像に基づいて路面状態を分析する路面状態分析部を備える、請求項16に記載の路面状態推定装置。 The road surface condition estimation device according to claim 16, further comprising a road surface condition analysis unit that analyzes road surface conditions based on images acquired by at least some of the multiple probe mobile bodies. コンピュータを、請求項16または17に記載の前記路面状態推定装置として機能させるための、路面状態推定プログラム。 A road surface condition estimation program for causing a computer to function as the road surface condition estimation device according to claim 16 or 17.
JP2023555878A 2021-10-25 2021-10-25 Road surface condition estimation system, road surface condition estimation device, and road surface condition estimation program Active JP7570533B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2021/039210 WO2023073747A1 (en) 2021-10-25 2021-10-25 Road surface condition estimation system, road surface condition estimation device, probe mobile body, and road surface condition estimation program

Publications (3)

Publication Number Publication Date
JPWO2023073747A1 JPWO2023073747A1 (en) 2023-05-04
JPWO2023073747A5 JPWO2023073747A5 (en) 2024-01-29
JP7570533B2 true JP7570533B2 (en) 2024-10-21

Family

ID=86157481

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023555878A Active JP7570533B2 (en) 2021-10-25 2021-10-25 Road surface condition estimation system, road surface condition estimation device, and road surface condition estimation program

Country Status (2)

Country Link
JP (1) JP7570533B2 (en)
WO (1) WO2023073747A1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017211957A (en) 2016-05-27 2017-11-30 株式会社東芝 Traffic information estimation device and traffic information estimation method
WO2020016924A1 (en) 2018-07-17 2020-01-23 三菱電機株式会社 Traffic information generation system
JP2021168144A (en) 2017-01-25 2021-10-21 株式会社ユピテル Data collection device, road status evaluation support device, and program

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017211957A (en) 2016-05-27 2017-11-30 株式会社東芝 Traffic information estimation device and traffic information estimation method
JP2021168144A (en) 2017-01-25 2021-10-21 株式会社ユピテル Data collection device, road status evaluation support device, and program
WO2020016924A1 (en) 2018-07-17 2020-01-23 三菱電機株式会社 Traffic information generation system

Also Published As

Publication number Publication date
WO2023073747A1 (en) 2023-05-04
JPWO2023073747A1 (en) 2023-05-04

Similar Documents

Publication Publication Date Title
US11815362B2 (en) Map data generation apparatus
CN102741900B (en) Road condition management system and road condition management method
US12313428B2 (en) Position estimation method, position estimation device, and position estimation program
CN108701396B (en) A detection and alarm method, storage medium and server for snow and icing in front of a vehicle
JP2020115322A (en) System and method for vehicle position estimation
JP2018124787A (en) Information processing apparatus, data management apparatus, data management system, method, and program
JP6520740B2 (en) Object detection method, object detection device, and program
CN113076851B (en) Method and device for collecting vehicle violation data and computer equipment
US11482020B2 (en) Looking away determination device, looking away determination system, looking away determination method, and storage medium
US12236682B2 (en) Method for tracking sport participants, device for tracking sport participants, and system for tracking sport participants
US20220404170A1 (en) Apparatus, method, and computer program for updating map
CN116892949A (en) Ground object detection device, ground object detection method and computer program for ground object detection
JP2014182007A (en) Inter-vehicular distance measuring apparatus and inter-vehicular distance measuring method
CN117789141A (en) Artificial Intelligence-Based Road Sprinkling Incident Detection Method
CN114264310B (en) Positioning and navigation method, device, electronic device, and computer storage medium
CN114852057A (en) Automatic parking data acquisition method and device, computer equipment and storage medium
JP7013993B2 (en) Diagnostic device and diagnostic method
US20210240991A1 (en) Information processing method, information processing device, non-transitory computer-readable recording medium recording information processing program, and information processing system
JP6970568B2 (en) Vehicle peripheral monitoring device and peripheral monitoring method
CN114526744B (en) Map updating device and map updating method
JP7570533B2 (en) Road surface condition estimation system, road surface condition estimation device, and road surface condition estimation program
CN113643374A (en) Method, device, device and medium for multi-objective camera calibration based on road features
JP2024005056A (en) In-vehicle device, data collection device, data collection system, and data collection method
CN116803074A (en) Apparatus and method for verifying estimated depth information
CN118968437A (en) Data collection device, method, computer program for collecting data, and data collection instruction device

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231020

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231020

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240910

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20241008

R150 Certificate of patent or registration of utility model

Ref document number: 7570533

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150