Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7634185B2 - Pipe Inspection System - Google Patents
[go: Go Back, main page]

JP7634185B2 - Pipe Inspection System - Google Patents

Pipe Inspection System Download PDF

Info

Publication number
JP7634185B2
JP7634185B2 JP2021064876A JP2021064876A JP7634185B2 JP 7634185 B2 JP7634185 B2 JP 7634185B2 JP 2021064876 A JP2021064876 A JP 2021064876A JP 2021064876 A JP2021064876 A JP 2021064876A JP 7634185 B2 JP7634185 B2 JP 7634185B2
Authority
JP
Japan
Prior art keywords
pipe
light
inspection
flying
inspected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021064876A
Other languages
Japanese (ja)
Other versions
JP2022160242A (en
Inventor
軌雄 五十嵐
正明 白井
信貴 廣富
大作 井上
崇伸 高山
博幸 宮本
巧治 清水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Management Co Ltd
Original Assignee
Panasonic Intellectual Property Management Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Management Co Ltd filed Critical Panasonic Intellectual Property Management Co Ltd
Priority to JP2021064876A priority Critical patent/JP7634185B2/en
Publication of JP2022160242A publication Critical patent/JP2022160242A/en
Application granted granted Critical
Publication of JP7634185B2 publication Critical patent/JP7634185B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Examining Or Testing Airtightness (AREA)

Description

本発明は、工場施設内に配置された配管の液漏れを検査するパイプ検査システムに関する。 The present invention relates to a pipe inspection system that inspects pipes installed within a factory facility for leaks.

工場の敷地は、広大なものが多く、様々な建屋に沿って、建物外部に配管が配置されている場合が多い。これらの配管には液体が流れている場合が多く、液漏れは速やかな修復が必要である。 Factory sites are often vast, and pipes are often located outside the various buildings along the premises. Liquids often flow through these pipes, and leaks require prompt repair.

ところが、配管の配置箇所は地上数mの場所が多く、人の目の高さに配管の下面が配置されていることは、非常にまれである。したがって、従来配管の液漏れは、パイプの下の地面に液体の溜まりが生じている、臭気がする液体の場合は、臭気があるといった状態でないと検知することができなかった。また、広大な敷地内を人が巡回して検査するのは、検査だけでコストがかかっていた。そこで、液漏れ検査を機械化する要請が生じた。 However, pipes are often located several meters above ground, and it is extremely rare for the bottom of a pipe to be at eye level. Therefore, with the past, pipe leaks could only be detected when liquid pooled on the ground below the pipe, or, in the case of smelly liquids, when there was an odor. Also, having people patrol a vast site to inspect the area was costly just for the inspections. This led to a demand for mechanizing leak inspections.

液漏れの検査を機械的に行う発明としては、例えば特許文献1には、自動車などの乗員室内および荷室などの水漏れを検査する装置が開示されている。ここでは、対称面に赤外線を照射し、その反射波について、液漏れがない場合の反射波を基準データとして保持し、その基準データと比較することで液漏れの有無を検査する。 As an example of an invention that mechanically checks for leaks, Patent Document 1 discloses a device that checks for water leaks in the passenger compartment and luggage compartment of an automobile. In this device, infrared light is irradiated onto the symmetrical surface, and the reflected waves when there is no leak are stored as reference data, and the presence or absence of leaks is checked by comparing them with this reference data.

特開平11-160185号公報Japanese Patent Application Publication No. 11-160185

特許文献1は、微小な水漏れを検査することができるが、比較的狭面積に対する検査であって、広大な敷地内に配置されたパイプの水漏れを検査するには、時間がかかりすぎる。 Patent Document 1 is capable of detecting minute water leaks, but it tests a relatively small area, and it takes too much time to test for leaks in pipes located across a large site.

本発明は、上記の課題に鑑みて想到されたもので、広大な敷地内に配置された長いパイプの液漏れを早期に検出できるパイプ検査システムを提供するものである。 The present invention was conceived in consideration of the above problems, and provides a pipe inspection system that can detect leaks in long pipes installed across a large site at an early stage.

より具体的に本発明に係るパイプ検査システムは、
パイプの液体漏れを検査するパイプ検査システムであって、
ライトとカメラを搭載した移動体と、
前記移動体と通信する制御装置を有し、
前記移動体は、設定された経路に沿って移動し、
被検査パイプに前記ライトにより光を照射し、前記カメラにより、パイプの下面に輝点を観察した際に、前記観察した位置を記録することを特徴とする。
More specifically, the pipe inspection system according to the present invention comprises:
1. A pipe inspection system for inspecting a pipe for liquid leaks, comprising:
A mobile object equipped with a light and a camera,
a control device in communication with the moving object;
The moving object moves along a set route,
The light is irradiated onto the pipe to be inspected, and when a bright spot is observed on the underside of the pipe by the camera, the position of the observed spot is recorded.

本発明に係るパイプ検査システムは、移動体にライトとカメラを搭載し、被検査パイプに照射したライトの光がパイプ下面に生じる液滴に反射して輝点となった位置を液漏れの位置として記録するので、広大な敷地内のパイプの液漏れについて、機械的に検査を行い、早期に検出することができる。 The pipe inspection system of the present invention is equipped with a light and a camera on a mobile body, and the light is shone on the pipe being inspected, and the position of the bright spot that is reflected by droplets that form on the underside of the pipe is recorded as the location of the leak, making it possible to mechanically inspect pipes across a large site for leaks and detect them early.

実施形態1に係るパイプ検査システムの構成を示す図である。1 is a diagram showing a configuration of a pipe inspection system according to a first embodiment. 第1の飛行体の構成を示す図である。FIG. 2 is a diagram showing the configuration of a first flying object. 第2の飛行体の構成を示す図である。FIG. 2 is a diagram showing the configuration of a second flying object. 第2の飛行体の行う画像処理を示すフロー図である。FIG. 11 is a flow chart showing image processing performed by the second flying object. 第1の飛行体と第2の飛行体の飛行時の位置関係を示す図である。2 is a diagram showing the positional relationship between a first flying body and a second flying body during flight. FIG. 第1の飛行体と第2の飛行体の飛行時の他の位置関係を示す図である。13A to 13C are diagrams showing other positional relationships between the first and second flying bodies during flight. 第1の飛行体の処理を示すフロー図である。FIG. 11 is a flow chart showing the processing of the first flying object. 第1の飛行体の検査時の処理を示すフロー図である。FIG. 11 is a flow chart showing the process of inspecting the first flying object. 結合フランジを検査する時の第1の飛行体および第2の飛行体の動きを示す図である。11A-11C are diagrams illustrating the movements of the first and second flying bodies when inspecting a coupling flange. 第2の飛行体の処理を示すフロー図である。FIG. 11 is a flow chart showing the processing of a second flying object. 制御装置の処理を示すフロー図である。FIG. 4 is a flow chart showing the processing of the control device. パイプ検査システムの他の形態の構成を示す図である。FIG. 13 is a diagram showing the configuration of another embodiment of a pipe inspection system. 飛行隊が飛行ルートから外れた時の処理を示すフロー図である。FIG. 11 is a flow diagram showing the process when a squadron deviates from its flight route. 他の形態における制御装置の処理を示すフロー図である。FIG. 11 is a flowchart showing the process of a control device in another embodiment. 自動走行車の構成を示す図である。FIG. 1 is a diagram illustrating a configuration of an autonomous vehicle. 自動走行車がパイプを検査する様子を示す図である。FIG. 1 illustrates an autonomous vehicle inspecting a pipe. 赤外線カメラを搭載した自動走行車の構成を示す図である。FIG. 1 is a diagram showing the configuration of an autonomous vehicle equipped with an infrared camera.

以下に本発明に係るパイプ検査システム1について図面を示し説明を行う。なお、以下の説明は、本発明の一実施形態を例示するものであり、本発明が以下の説明に限定されるものではない。以下の説明は本発明の趣旨を逸脱しない範囲で改変することができる。 The following is an explanation of the pipe inspection system 1 according to the present invention, with reference to the drawings. Note that the following explanation is merely an example of one embodiment of the present invention, and the present invention is not limited to the following explanation. The following explanation can be modified without departing from the spirit of the present invention.

本発明では、広大な工場敷地内に配置されたパイプの液漏れを監視するために、移動体を設定された経路またはパイプに沿って走行させ監視させる。ここで、移動体は飛行体(空中を飛行する移動体)であってもよいし、自動走行車(陸上を走行する)であってもよい。以下、飛行体の場合と自動走行車の場合の実施形態について説明する。 In the present invention, in order to monitor for leaks in pipes arranged within a vast factory site, a mobile object is made to travel along a set route or along a set pipe for monitoring. Here, the mobile object may be an air vehicle (a mobile object that flies in the air) or an autonomous vehicle (that travels on land). Below, embodiments in the case of an air vehicle and an autonomous vehicle are described.

(実施形態1)
本実施形態に係るパイプ検査システム1は、工場内に設置された配管の液漏れを早期に発見するためのシステムである。より具体的には、パイプに液漏れが生じた際には、まずパイプの下面に液滴が溜まる。パイプ検査システム1はこのパイプの下面の液滴を発見する。本実施形態では、移動体9は飛行体10および飛行体20として説明する。
(Embodiment 1)
The pipe inspection system 1 according to this embodiment is a system for early detection of liquid leakage from piping installed in a factory. More specifically, when a liquid leakage occurs in a pipe, liquid droplets first accumulate on the bottom surface of the pipe. The pipe inspection system 1 detects the liquid droplets on the bottom surface of the pipe. In this embodiment, the moving body 9 will be described as an aircraft 10 and an aircraft 20.

図1に本実施形態のパイプ検査システム1の構成を示す。図1は検査対象である被検査パイプ50の長さ方向に直角な断面側から見た図である。本実施形態に係るパイプ検査システム1は、第1の飛行体10と、第2の飛行体20と、制御装置30および基地40を有する。被検査パイプ50は、工場の建物の外に配置されているパイプである。一般にパイプ中には液体が輸送されている。本実施形態に係るパイプ検査システム1は、このパイプの継ぎ目若しくはパイプの中ほどで液漏れが生じていることの有無を検査する。 Figure 1 shows the configuration of the pipe inspection system 1 of this embodiment. Figure 1 is a cross-sectional view perpendicular to the longitudinal direction of the inspected pipe 50, which is the object of inspection. The pipe inspection system 1 of this embodiment has a first flying object 10, a second flying object 20, a control device 30, and a base 40. The inspected pipe 50 is a pipe located outside a factory building. Generally, liquid is transported through the pipe. The pipe inspection system 1 of this embodiment inspects whether or not there is any liquid leakage at the joints of the pipe or in the middle of the pipe.

第1の飛行体10および第2の飛行体20は、被検査パイプ50を挟んで互いに反対側を飛行する。なお、第1の飛行体10および第2の飛行体20をまとめて「飛行隊」と呼ぶ場合もある。第1の飛行体10には、ライト12が搭載されている。また、第2の飛行体20には、カメラ22が搭載されている。第1の飛行体10は被検査パイプ50の下側を照らす。第2の飛行体20は、被検査パイプ50の反対側から被検査パイプ50の下側を撮影する。 The first aircraft 10 and the second aircraft 20 fly on opposite sides of the inspected pipe 50. The first aircraft 10 and the second aircraft 20 are sometimes collectively referred to as a "flight squadron." The first aircraft 10 is equipped with a light 12. The second aircraft 20 is equipped with a camera 22. The first aircraft 10 illuminates the underside of the inspected pipe 50. The second aircraft 20 photographs the underside of the inspected pipe 50 from the opposite side of the inspected pipe 50.

ここで、被検査パイプ50に液漏れが発生していると、被検査パイプ50の下側に液滴55が発生している。すると第1の飛行体10からのライト12の照射光12Lは、液滴55で屈折し、第2の飛行体20のカメラ22では輝点55Fとして観察される。特に、パイプとパイプの継ぎ目の結合フランジ50fの下側でこのような液滴55を観察できる場合が多い。 If a liquid leak occurs in the inspected pipe 50, liquid droplets 55 will appear on the underside of the inspected pipe 50. The light 12L emitted by the light 12 from the first flying object 10 will then be refracted by the liquid droplets 55, and will be observed as bright spots 55F by the camera 22 of the second flying object 20. In particular, such liquid droplets 55 can often be observed on the underside of the connecting flange 50f at the joint between the pipes.

第2の飛行体20は被検査パイプ50の下側に輝点55Fを観察した時は観察した位置を記録する。ここで観察した位置とは、液滴55を観察した際の第2の飛行体20の工場の敷地内での位置であるが、液滴55を観察した被検査パイプ50の位置であってもよい。本実施形態に係るパイプ検査システム1では、液漏れを早期に発見することが重要であり、詳細な液漏れの位置や、その修理に関しては人手に任せる。したがって、液滴55を発見したおおよその位置が分かればよいからである。 When the second flying object 20 observes a bright spot 55F on the underside of the inspected pipe 50, it records the observed position. The observed position here refers to the position of the second flying object 20 within the factory grounds when the droplet 55 was observed, but it may also be the position of the inspected pipe 50 where the droplet 55 was observed. In the pipe inspection system 1 according to this embodiment, it is important to detect leakage early, and the detailed location of the leakage and its repair are left to manual labor. Therefore, it is sufficient to know the approximate location where the droplet 55 was found.

第2の飛行体20は輝点55Fを記録したら、その位置情報を制御装置30に無線連絡する。ただし、建物や設備が立設されている工場内では、基地40に設置された制御装置30とのリアルタイムの通信は可能でない場合もある。したがって、制御装置30と連絡がつかない場合は、第2の飛行体20が位置情報を記録するだけでよい。 When the second flying object 20 records the bright spot 55F, it wirelessly transmits the location information to the control device 30. However, in a factory where buildings and equipment are installed, real-time communication with the control device 30 installed at the base 40 may not be possible. Therefore, if it is not possible to contact the control device 30, the second flying object 20 simply needs to record the location information.

本実施形態に係るパイプ検査システム1では、第1の飛行体10および第2の飛行体20は、夜間に飛行するのが好ましい。日中では、液滴55からの光の輝点55Fを判別しにくいからである。 In the pipe inspection system 1 according to this embodiment, it is preferable for the first flying object 10 and the second flying object 20 to fly at night. This is because it is difficult to distinguish the bright spot 55F of light from the droplet 55 during the day.

<飛行隊>
図2に第1の飛行体10を、図3に第2の飛行体20の構成を示す。いずれの図も(a)は上方からの平面図であり、(b)は側面図であり、(c)は正面図である。(b)図において、通常の進行方向前を矢印で示す。なお、以下の説明では、共通する構成は符号を並べて示す。飛行体(10、20)は、プロペラ(10a、20a)と、筐体(10d、20d)および脚部(10g、20g)で構成される。
<Squadron>
The configuration of the first flying body 10 is shown in Fig. 2, and the configuration of the second flying body 20 is shown in Fig. 3. In each figure, (a) is a plan view from above, (b) is a side view, and (c) is a front view. In (b), the arrow indicates the normal forward direction of travel. In the following explanation, common components are indicated by the same reference numerals. The flying bodies (10, 20) are composed of propellers (10a, 20a), housings (10d, 20d), and legs (10g, 20g).

なお、筐体(10d、20d)には、通信部(10c、20c)、バッテリー(図示せず)および制御部(図示せず)を有する。プロペラ(10a、20a)は、複数個を有し、モータ(10b、20b)で回転制御される。空中にホバリングできるタイプのものが好ましい。パイプ検査の段階では、ホバリングしたり、その位置での高度変更という動作が必要になるからである。 The housing (10d, 20d) has a communication unit (10c, 20c), a battery (not shown), and a control unit (not shown). There are multiple propellers (10a, 20a), and their rotation is controlled by a motor (10b, 20b). A type that can hover in the air is preferable. This is because during the pipe inspection stage, it is necessary to hover and change altitude from that position.

また、飛行隊は、自身が飛行している位置、方向、高度についての情報を得る手段を有する。このような機能がないと自律飛行できないからである。これらの手段については公知の方法および機器を利用することができる。 The squadron will also have the means to obtain information about its position, direction, and altitude, since autonomous flight is not possible without such functionality. These means can utilize known methods and equipment.

第1の飛行体10はさらにライト12を搭載する。なお、ライト照射中心軸を照射軸12axと呼ぶ。ライト12は、進行方向に対して直角方向を向いているが、水平面内および仰角方向で所定の範囲の角度は回転および揺動可能に形成されているのが望ましい。 The first flying object 10 is further equipped with a light 12. The central axis of the light's illumination is called the illumination axis 12ax. The light 12 is oriented perpendicular to the direction of travel, but it is desirable for the light 12 to be able to rotate and swing within a specified range of angles in the horizontal plane and in the elevation direction.

ライト12は、白色光でもよいが、特定波長の光でもよい。夜間の工場の敷地内は、照明として水銀灯若しくはLEDライトが点灯される場合が多い。これらの光源は特定波長を発光している場合が多い。したがって、工場の敷地内で用いられる照明に使用されていない波長の光を用いることで、第2の飛行体20が観測する輝点55Fが敷地内の照明に起因する場合を排除することができる。 The light 12 may be white light, or light of a specific wavelength. Mercury lamps or LED lights are often used as illumination within the factory premises at night. These light sources often emit a specific wavelength. Therefore, by using light of a wavelength that is not used for illumination within the factory premises, it is possible to eliminate cases where the bright spot 55F observed by the second flying object 20 is caused by the lighting within the premises.

また、進行方向を照らす前方ライト14、前方を撮影する前方カメラ16および、照射軸12axと平行な側面カメラ18を有していてもよい。被検査パイプ50には、結合フランジ50fがあり、その結合フランジ50f部分では、第1の飛行体10および第2の飛行体20も高度を変更しなければならない。したがって、飛行隊は飛行前方に結合フランジ50fの有無を検出しなければならないからである。また、ライト12の照射方向を撮影できる側面カメラ18があれば、被検査パイプ50の下面をより確実に確認することができる。 The aircraft may also have a forward light 14 that illuminates the direction of travel, a forward camera 16 that captures images of the front, and a side camera 18 that is parallel to the illumination axis 12ax. The inspected pipe 50 has a connecting flange 50f, and the first aircraft 10 and the second aircraft 20 must also change altitude at the connecting flange 50f. This is because the aircraft must detect the presence or absence of the connecting flange 50f ahead of the flight. If there is a side camera 18 that can capture images in the direction of illumination of the light 12, the underside of the inspected pipe 50 can be more reliably confirmed.

第2の飛行体20は、カメラ22を搭載する。カメラ22は第1の飛行体10が特定波長の光を照射する場合は、その波長のフィルタを有する。ここでフィルタは、物理的なフィルタでもよいが、画像処理で実質的にその波長だけを判別するデジタルフィルタであってもよい。なお、カメラ22のレンズ中心を光軸22axと呼ぶ。 The second flying object 20 is equipped with a camera 22. When the first flying object 10 emits light of a specific wavelength, the camera 22 has a filter for that wavelength. The filter may be a physical filter, but may also be a digital filter that essentially identifies only that wavelength through image processing. The center of the lens of the camera 22 is called the optical axis 22ax.

また、第2の飛行体20の制御部(図示せず)は、カメラ22で撮影した画像を画像処理する画像処理部(図示せず。)を有する。図4に画像処理部の処理のフローを示す。画像処理部は、スタートすると(ステップS100)、終了判断を行う(ステップS102)。終了判断は、検査の終了で判断してよい。例えば、検査を行う区画を終了し、他の区画へ移動する若しくは、基地40に帰投する等である。 The control unit (not shown) of the second flying object 20 also has an image processing unit (not shown) that processes the images captured by the camera 22. FIG. 4 shows the flow of processing by the image processing unit. When the image processing unit starts (step S100), it makes an end determination (step S102). The end determination may be made when the inspection is completed. For example, the inspection area is completed and the inspection area is moved to another area or the inspection area is returned to the base 40.

なお、検査区画とは、パイプ検査システム1が検査を行う範囲を複数の区画に分けた場合の1つの区画を示す。飛行隊は、バッテリーで飛行するため、飛行時間には限りがある。そこで、1回の充電で飛行できる範囲を検査の単位とするためである。 Note that an inspection section refers to one section when the area inspected by the pipe inspection system 1 is divided into multiple sections. Since the squadron flies on batteries, there is a limit to the flight time. Therefore, the area that can be flown on a single charge is used as the unit of inspection.

終了する場合(ステップS102のY分岐)は、終了する(ステップS104)。そうでない場合(ステップS102のN分岐)は、処理を続行する。 If it is to be terminated (Y branch of step S102), the process is terminated (step S104). If it is not to be terminated (N branch of step S102), the process is continued.

画像処理部は、まずカメラ22で撮影した画像を取り込む(ステップS106)。そして、2値化処理を行う(ステップS108)。2値化することで、被検査パイプ50や背景など暗い部分は黒となり、第1の飛行体10が照射した光を集めた液滴55部分は輝点55F(白)となる。 The image processing unit first imports the image captured by the camera 22 (step S106). Then, it performs binarization processing (step S108). By binarizing, dark areas such as the inspected pipe 50 and the background become black, and the droplet 55 part that collects the light irradiated by the first flying object 10 becomes a bright spot 55F (white).

次に、2値化した画像中に輝点55Fが存在するか判断する(ステップS110)。輝点55Fは予め所定の半径以上のものを輝点55Fとするようにしておいてもよい。 Next, it is determined whether or not a bright spot 55F exists in the binarized image (step S110). Bright spots 55F may be determined to be those with a predetermined radius or greater.

輝点55Fがあると判断した場合(ステップS110のY分岐)は、その輝点55Fが液滴55である妥当性を判断する(ステップS112)。後述するように、第1および第2の飛行体(10、20)は、被検査パイプ50に対して一定の位置関係を維持して飛行する。 If it is determined that a bright spot 55F is present (Y branch of step S110), the validity of the bright spot 55F being a droplet 55 is determined (step S112). As described below, the first and second flying bodies (10, 20) fly while maintaining a constant positional relationship with respect to the inspected pipe 50.

したがって、第2の飛行体20のカメラ22には、被検査パイプ50がどの位置に映っているか否かがおおよそわかる。そこで、発見された輝点55Fが被検査パイプ50の下面付近であれば、液滴55と判断する。一方、被検査パイプ50の位置とは無関係の位置に生じた輝点55Fはノイズと判断する。 Therefore, it is possible to roughly determine where the inspected pipe 50 is located on the camera 22 of the second flying object 20. If the bright spot 55F is found near the bottom surface of the inspected pipe 50, it is determined to be a droplet 55. On the other hand, a bright spot 55F that appears in a position unrelated to the position of the inspected pipe 50 is determined to be noise.

輝点55Fが液滴55と判断した場合(ステップS112のY分岐)は、現在の位置を記録する(ステップS114)。これは第2飛行体20の位置であってもよいし、液滴55を観測した被検査パイプ50の位置であってもよい。 If it is determined that the bright spot 55F is a droplet 55 (Y branch in step S112), the current position is recorded (step S114). This may be the position of the second flying object 20, or it may be the position of the inspected pipe 50 where the droplet 55 was observed.

輝点55Fを液滴55と判断しなかった場合(ステップS112のN分岐)は、処理を終了判定(ステップS102)まで戻す。 If the bright spot 55F is not determined to be a droplet 55 (N branch in step S112), the process returns to the end determination (step S102).

また、輝点55Fがないと判断した場合(ステップS110のN分岐)の場合も処理を終了判定(ステップS102)まで戻す。 Also, if it is determined that there is no bright spot 55F (N branch in step S110), the process returns to the end determination (step S102).

以上の処理を繰り返すことで、第2の飛行体20は、カメラ22で撮影した画像中で輝点55Fの有無を探すことができる。 By repeating the above process, the second flying object 20 can search for the presence or absence of a bright spot 55F in the image captured by the camera 22.

<飛行フォーメーション>
第1および第2の飛行体(10、20)は、被検査パイプ50に対して一定の位置を維持しながら飛行する。図5には、被検査パイプ50に対するそれぞれの飛行体の位置関係を示す。図5(a)には、被検査パイプ50を下側から見た図を示す。第1および第2の飛行体(10、20)は、被検査パイプ50をはさんでそれぞれ反対側を飛行する。
<Flight formation>
The first and second flying bodies (10, 20) fly while maintaining a constant position relative to the inspected pipe 50. Fig. 5 shows the positional relationship of each flying body with respect to the inspected pipe 50. Fig. 5(a) shows a view of the inspected pipe 50 from below. The first and second flying bodies (10, 20) fly on opposite sides of the inspected pipe 50.

第1の飛行体10は被検査パイプ50に向かってライト12を照射する。一方、第2の飛行体20は、第1の飛行体10のライト12の照射軸12axに対して、プラスマイナス10°の角度(θ)の範囲で飛行するのが望ましい。この角度から外れると、照射された光の液滴55の通過光を観測しにくくなる。 The first flying object 10 irradiates the light 12 toward the inspected pipe 50. On the other hand, it is desirable for the second flying object 20 to fly within an angle (θ) of ±10° with respect to the irradiation axis 12ax of the light 12 of the first flying object 10. If it deviates from this angle, it becomes difficult to observe the light passing through the droplets 55 of the irradiated light.

図5(b)には、被検査パイプ50の長手方向に直角な断面方向からの位置関係を示す。第1の飛行体10は、被検査パイプ50の下面付近と同じ平面内に照射軸12axが存在するように飛行する。一方、第2の飛行体20は、照射軸12axから10°の角度(φ)の間の高さから被検査パイプ50の下面を観察するような位置に、カメラ22の光軸22axが来るように飛行する。 Figure 5 (b) shows the positional relationship from a cross-sectional direction perpendicular to the longitudinal direction of the inspected pipe 50. The first flying object 10 flies so that the illumination axis 12ax is in the same plane as the vicinity of the underside of the inspected pipe 50. Meanwhile, the second flying object 20 flies so that the optical axis 22ax of the camera 22 is in a position where it can observe the underside of the inspected pipe 50 from a height between the illumination axis 12ax and an angle (φ) of 10°.

第1および第2の飛行体(10、20)は、図5(a)および(b)に示される範囲θおよびφにお互いが存在できるように飛行すればよい。一例として、図6を参照して、第1の飛行体10が先行し、第2の飛行体20は、所定距離DLだけ後方を飛行する。被検査パイプ50には結合フランジ50fが存在するので、高度を変更する必要がある。そこで、結合フランジ50fへの接近を第1の飛行体10が検知し、第2の飛行体20に通知して減速するためである。 The first and second flying bodies (10, 20) should fly so that they are both within the ranges θ and φ shown in Figures 5(a) and (b). As an example, referring to Figure 6, the first flying body 10 goes ahead and the second flying body 20 flies a predetermined distance DL behind. Since the inspected pipe 50 has a connecting flange 50f, it is necessary to change the altitude. This is because the first flying body 10 detects the approach to the connecting flange 50f and notifies the second flying body 20 to slow down.

第1の飛行体10および第2の飛行体20は、予め飛行フォーメーションまでプログラムすることで、行ってもよい。しかし、実際の飛行は様々な要因で誤差が生じる。そのため、互いの位置や速度を調整できるように、互いに通信を行えることが望ましい。第1の飛行体10からは、現在位置(高度情報を含む)、現在速度、照射軸12axの方向に関するデータを第2の飛行体20に送信する。一方、第2の飛行体20は、現在位置(高度を含む)、現在速度、カメラ22の光軸22axの方向を第1の飛行体10に送信することができる。 The first flying body 10 and the second flying body 20 may be programmed in advance into a flight formation. However, errors occur in actual flight due to various factors. For this reason, it is desirable for them to be able to communicate with each other so that they can adjust their positions and speeds. The first flying body 10 transmits data regarding the current position (including altitude information), current speed, and the direction of the illumination axis 12ax to the second flying body 20. Meanwhile, the second flying body 20 can transmit its current position (including altitude), current speed, and the direction of the optical axis 22ax of the camera 22 to the first flying body 10.

また、第2の飛行体20は、第1の飛行体10に対して、ライト12のからの輝点55Fの検出範囲を外れそうな場合に、減速依頼の信号を送信してもよい。 The second flying object 20 may also transmit a signal to the first flying object 10 requesting it to decelerate if it is about to leave the detection range of the bright spot 55F from the light 12.

<飛行プラン>
本実施形態に係るパイプ検査システム1では、液漏れが発生した場合にパイプの下面に発生する液滴55を発見することでパイプの液漏れの早期発見を可能にする。通常、このような液漏れはパイプの結合部分(結合フランジ50f部分)で発生することが多い。しかし、パイプが縦方向に並んで配置されている場合は、上方のパイプからの液漏れが下方のパイプに滴下し、その結果、下方のパイプでは結合フランジ50f以外の場所でもパイプの下面に液滴55が生じる場合がある。
<Flight plan>
The pipe inspection system 1 according to the present embodiment enables early detection of liquid leakage from pipes by detecting liquid droplets 55 that appear on the underside of the pipe when a liquid leakage occurs. Usually, such liquid leakage occurs at the joint of the pipes (the joint flange 50f). However, when the pipes are arranged vertically, liquid leakage from the upper pipe drips onto the lower pipe, and as a result, liquid droplets 55 may appear on the underside of the lower pipe in places other than the joint flange 50f.

また、パイプ自体の亀裂によっても、結合フランジ50f以外の部分でも液漏れが生じるおそれがある。そこで、パイプ検査システム1では、パイプの下面および結合フランジ50fの下面も検査するのが望ましい。 In addition, cracks in the pipe itself may cause liquid leakage in areas other than the connecting flange 50f. Therefore, it is desirable for the pipe inspection system 1 to also inspect the underside of the pipe and the underside of the connecting flange 50f.

しかし、結合フランジ50fはパイプの外径よりも大きい。そのため、第1および第2の飛行体(10、20)にとっては、飛行高度を変更する必要がある。結合フランジ50fの位置は、予め与えられていてもよいし、第1の飛行体10が自ら発見してもよい。 However, the connecting flange 50f is larger than the outer diameter of the pipe. Therefore, the first and second aircraft (10, 20) need to change their flight altitude. The position of the connecting flange 50f may be given in advance, or the first aircraft 10 may discover it by itself.

図7には、第1の飛行体10の検査飛行に関する処理フローを示す。パイプ検査システム1は、被検査パイプ50の位置および構内のマップといった検査に必要な位置情報は予め制御装置30から入力されているとする。第1および第2の飛行体(10、20)は、バッテリーで飛行するため、1回の充電で飛行できる範囲は決まっている。したがって、工場の敷地内において、1度に検査する範囲を予め決めておく。この範囲を「検査区間」と呼ぶ。 Figure 7 shows a processing flow for the inspection flight of the first flying object 10. The pipe inspection system 1 is assumed to have received position information required for inspection, such as the position of the pipe 50 to be inspected and a map of the premises, input in advance from the control device 30. The first and second flying objects (10, 20) fly on batteries, so the range they can fly on a single charge is fixed. Therefore, the range within the factory premises that will be inspected at one time is determined in advance. This range is called the "inspection section."

処理が開示されると(ステップS200)、終了判定が行われる(ステップS202)。終了判定の基準は、検査区間の終了若しくは緊急事態によって終了してよい。処理を終了する場合(ステップS202のY分岐)は、基地40へ帰投し処理を終了する(ステップS204)。処理を継続する場合(ステップS202のN分岐)は、処理を次のフローに移す。 When the process is started (step S200), a termination determination is made (step S202). The criteria for the termination determination may be the end of the inspection section or an emergency situation. If the process is to be terminated (Y branch in step S202), the process returns to base 40 and ends (step S204). If the process is to be continued (N branch in step S202), the process moves to the next flow.

次に、構内の検査区間まで飛行する(ステップS206)。検査区間までの飛行は決められたルートによって飛行する。検査区間まで飛行すると、検査準備を行う(ステップS208)。検査準備とは、ライト12の点灯、自機および第2の飛行体20が所定の位置に着くことを確認するといった事項である。 Then, the aircraft flies to the inspection section within the premises (step S206). The flight to the inspection section follows a predetermined route. Once the aircraft has flown to the inspection section, preparations for inspection are made (step S208). Preparations for inspection include checking that the lights 12 are on and that the aircraft and the second aircraft 20 have arrived at the designated positions.

次に検査を開始する(ステップS210)。第1の飛行体10は、被検査パイプ50の下面をライト12の光で照射しながら、被検査パイプ50に沿って飛行する。検査のステップは図8で詳説する。検査が終了したら終了判定(ステップS202)に戻り、次の検査区間の有無を判定する。 Next, the inspection begins (step S210). The first flying object 10 flies along the pipe 50 to be inspected while illuminating the underside of the pipe 50 with light from the light 12. The inspection steps are explained in detail in FIG. 8. When the inspection is completed, the process returns to the end determination (step S202) and determines whether or not there is a next inspection section.

図8には、検査工程(ステップS210)を詳説する。検査が開始されたら、第1の飛行体10は被検査パイプ50の下面をライト12で照射しながら、被検査パイプ50に沿って飛行する。そして、高度変更が所定時間後に発生するか否かを判断する(ステップS252)。高度変更は、被検査パイプ50の配管が上下方向に変化する場合、若しくは結合フランジ50fの有無といった場合がある。この判定は、第1の飛行体10が搭載された前方カメラ16を使って検知してもよいし、予め飛行プランとして組み込まれていてもよい。 Figure 8 shows the inspection process (step S210) in detail. When the inspection starts, the first aircraft 10 flies along the pipe 50 to be inspected while illuminating the underside of the pipe 50 with the light 12. It is then determined whether or not a change in altitude occurs after a predetermined time (step S252). A change in altitude may occur when the piping of the pipe 50 to be inspected changes in the vertical direction, or when a connecting flange 50f is present or absent. This determination may be made using the forward camera 16 mounted on the first aircraft 10, or may be incorporated in advance as a flight plan.

高度変更がなければ(ステップS252のN分岐)、現在の検査区間が終了したか否かを判断する(ステップS254)。終了していない場合(ステップS254のN分岐)は、ステップS252へ戻り、飛行(検査)を続ける。 If there is no change in altitude (N branch of step S252), it is determined whether the current inspection section has ended (step S254). If it has not ended (N branch of step S254), the process returns to step S252 and the flight (inspection) continues.

現在の検査区間が終了した場合(ステップS254のY分岐)は、検査工程(ステップS210)を抜ける(ステップS256)。 If the current inspection section has ended (Y branch in step S254), the inspection process (step S210) is exited (step S256).

高度変更がある場合(ステップS252のY分岐)は、結合フランジ50fか配管配置に基づく高度変更かを判断する(ステップS260)。ここでは、結合フランジ50fによる場合を「F]で表し、配管配置による高度変更を「A」で表した。 If there is an elevation change (Y branch in step S252), it is determined whether the elevation change is due to the connecting flange 50f or the piping arrangement (step S260). Here, the case due to the connecting flange 50f is represented by "F" and the elevation change due to the piping arrangement is represented by "A".

なお、この時の第1の飛行体10と第2の飛行体20の動きを図9に示す。以下、図9も参照する。結合フランジ50fの場合(ステップS260のフランジ(F)分岐)は、第2の飛行体20に通信し、結合フランジ50fの前で、一定加速度で停止し、高度を下げる(ステップS262、図9(a)および(b))。 The movements of the first flying body 10 and the second flying body 20 at this time are shown in FIG. 9. Refer to FIG. 9 below as well. In the case of the connecting flange 50f (the flange (F) branch of step S260), communication is made to the second flying body 20, and the flying body stops in front of the connecting flange 50f at a constant acceleration and lowers its altitude (step S262, FIGS. 9(a) and (b)).

第2の飛行体20が所定の位置に着いたことを確認し、第2の飛行体20にスタートを通信し、第2の飛行体20だけを結合フランジ50fを過ぎるまで前進させる(ステップS264、図9(b)の20’の位置)。その後、両機とも再度高度を上げる(ステップS266、図9(c))。第2の飛行体20が所定の位置に着くことを確認し、第1の飛行体10だけが所定の距離DLだけ前進する(ステップS268、図9(d))。その後両機とも前進し被検査パイプ50(パイプ本体50b)の下面の検査を再開する(ステップS270、図9(e))。 After confirming that the second aircraft 20 has reached the designated position, a start signal is sent to the second aircraft 20, and only the second aircraft 20 moves forward until it passes the connecting flange 50f (step S264, position 20' in Figure 9(b)). After that, both aircraft increase their altitude again (step S266, Figure 9(c)). After confirming that the second aircraft 20 has reached the designated position, only the first aircraft 10 moves forward a designated distance DL (step S268, Figure 9(d)). After that, both aircraft move forward and resume inspection of the underside of the inspected pipe 50 (pipe body 50b) (step S270, Figure 9(e)).

一方、高度変更が配管によるものである場合(ステップS260のA分岐)は、高度の変更率を第2の飛行体20に通知し(ステップS272)、飛行(検査)を継続する。 On the other hand, if the altitude change is due to piping (branch A of step S260), the altitude change rate is notified to the second aircraft 20 (step S272), and the flight (inspection) continues.

次に図10(a)に第2の飛行体20の処理フローを説明する。全体のフローは、図7の第1の飛行体10の処理フローとほぼ同じである。 Next, the processing flow of the second aircraft 20 is explained in FIG. 10(a). The overall flow is almost the same as the processing flow of the first aircraft 10 in FIG. 7.

処理が開示されると(ステップS300)、終了判定が行われる(ステップS302)。終了判定の基準は、検査区間の終了若しくは緊急事態によって終了してよい。処理を終了する場合(ステップS302のY分岐)は、基地40へ帰投し処理を終了する(ステップS304)。処理を継続する場合(ステップS302のN分岐)は、処理を次のフローに移す。 When processing is started (step S300), a termination determination is made (step S302). The criteria for the termination determination may be termination due to the end of the inspection section or an emergency situation. If processing is to be terminated (Y branch in step S302), the process returns to base 40 and terminates (step S304). If processing is to be continued (N branch in step S302), the process moves to the next flow.

次に、構内の検査区間まで飛行する(ステップS306)。検査区間までの飛行は決められたルートによって飛行する。検査区間まで飛行すると、検査準備を行う(ステップS308)。検査準備では、第2の飛行体20は、被検査パイプ50を挟んで、第1の飛行体10と反対側の所定高度に位置する。また、カメラ22の光軸22axを被検査パイプ50の下面に合わせる。そして、準備が整ったら、第1の飛行体10に、準備完了の通知を行う。 Then, the second flying body 20 flies to the inspection section within the premises (step S306). The flight to the inspection section follows a predetermined route. Once the second flying body 20 has flown to the inspection section, preparations for the inspection are made (step S308). In preparation for the inspection, the second flying body 20 is positioned at a predetermined altitude on the opposite side of the first flying body 10, across the pipe 50 to be inspected. The optical axis 22ax of the camera 22 is also aligned with the underside of the pipe 50 to be inspected. Then, when preparations are complete, the first flying body 10 is notified that preparations are complete.

次に検査を開始する(ステップS310)。第1の飛行体10からの検査開始の通知を受けたら、所定の加速度で増速し、被検査パイプ50の下面をカメラ22で撮影しながら、被検査パイプ50の下面に輝点55Fが現れるか否かを検査しながら飛行する。 Next, the inspection begins (step S310). When a notification of the start of the inspection is received from the first flying object 10, the flying object increases its speed at a predetermined acceleration rate and flies while photographing the underside of the pipe 50 to be inspected with the camera 22 and inspecting whether or not a bright spot 55F appears on the underside of the pipe 50 to be inspected.

ここで、第2の飛行体20は第1の飛行体10より進行方向で遅れた位置で飛行するのがよい。第1の飛行体10が結合フランジ50fの手前で減速するので、その動きに追従しなければならないからである。第1の飛行体10より、後ろを飛行していれば、第1の飛行体10の減速にも、ほぼ追従することができる。検査が終了したら終了判定(ステップS302)に戻り、次の検査区間の有無を判定する。 Here, it is preferable for the second flying body 20 to fly at a position behind the first flying body 10 in the direction of travel. This is because the first flying body 10 decelerates just before the connecting flange 50f, and the second flying body 20 must follow that movement. If the second flying body 20 flies behind the first flying body 10, it can also follow the deceleration of the first flying body 10 to a large extent. Once the inspection is completed, return to the end judgment (step S302) and judge whether there is a next inspection section.

図10(b)には、第2の飛行体20の検査工程(ステップS310)に対応する処理を詳説する。検査が開始されたら、第2の飛行体20は被検査パイプ50の下面をカメラ22で撮影しながら、被検査パイプ50を挟んで、第1の飛行体10と反対側を飛行する。 Figure 10(b) details the process corresponding to the inspection step (step S310) of the second flying object 20. When the inspection starts, the second flying object 20 flies on the opposite side of the first flying object 10, sandwiching the pipe 50 to be inspected, while taking an image of the underside of the pipe 50 to be inspected with the camera 22.

飛行の最中は、図4に示したフローチャートに従って画像解析による輝点55Fの発見に努める。そして、高度変更が所定時間後に発生するか否かを判断する(ステップS352)。高度変更は、この判定は、第1の飛行体10からの通知によって行ってもよいし、予め飛行プランとして組み込まれていてもよい。 During flight, the system attempts to find bright spot 55F by image analysis according to the flowchart shown in FIG. 4. Then, it is determined whether an altitude change will occur after a predetermined time (step S352). The altitude change may be determined by a notification from first flying object 10, or may be incorporated in advance as part of the flight plan.

高度変更がなければ(ステップS352のN分岐)、現在の検査区間が終了したか否かを判断する(ステップS354)。終了していない場合(ステップS354のN分岐)は、ステップS352へ戻り、検査飛行を続ける。 If there is no change in altitude (N branch of step S352), determine whether the current inspection section has ended (step S354). If it has not ended (N branch of step S354), return to step S352 and continue the inspection flight.

現在の検査区間が終了した場合(ステップS354のY分岐)は、検査工程(ステップS310)を抜ける(ステップS356)。 If the current inspection section has ended (Y branch in step S354), the inspection process (step S310) is exited (step S356).

高度変更がある場合(ステップS352のY分岐)は、第1の飛行体10からの通知の指示に従う(ステップS360)。第2の飛行体20は、第1の飛行体10の動きに合わせて移動しながら、輝点55Fの有無を検査するからである。つまり、第1の飛行体10に示されたコースを飛行しながら、カメラ22で被検査パイプ50を撮影しながら図4で示した画像処理を行い、輝点55Fの有無を調べる。 If there is a change in altitude (Y branch in step S352), the second aircraft 20 follows the instructions in the notification from the first aircraft 10 (step S360). This is because the second aircraft 20 checks for the presence or absence of a bright spot 55F while moving in accordance with the movement of the first aircraft 10. In other words, while flying along the course indicated by the first aircraft 10, the camera 22 photographs the inspected pipe 50 and performs the image processing shown in Figure 4 to check for the presence or absence of a bright spot 55F.

<基地>
再度図1を参照する。第1および第2の飛行体(10、20)は、基地40から発進し、基地40へ帰投する。基地40には少なくとも、充電設備40aとデータの転送設備(図示せず)を有する。制御装置30は基地40に備え付けられていてもよいし、他の場所に設置されていてもよい。ここでは、制御装置30が基地40に備えられているとする。
<Base>
Referring again to Fig. 1, the first and second flying bodies (10, 20) take off from a base 40 and return to the base 40. The base 40 has at least a charging facility 40a and a data transfer facility (not shown). The control device 30 may be installed in the base 40 or may be installed in another location. Here, it is assumed that the control device 30 is installed in the base 40.

基地40には、時計、風力計および降雨計(図示せず)が備えられている。本実施形態に係るパイプ検査システム1では、雨の日は検査できない。液漏れと雨滴の判別ができないからである。また、風が強すぎる場合は飛行体の飛行自体が困難である。 The base 40 is equipped with a clock, an anemometer, and a rain gauge (not shown). The pipe inspection system 1 according to this embodiment cannot perform inspections on rainy days because it is not possible to distinguish between liquid leaks and raindrops. Also, if the wind is too strong, it is difficult for the aircraft to fly at all.

基地40は、少なくとも2機の飛行体を格納し、各飛行体のバッテリーを充電する。また、検査予定区間の地図情報や、第2の飛行体20が取得した輝点55Fに関するデータを制御装置30へ転送する。基地40の動作については、制御装置30が行ってよい。 The base 40 stores at least two flying vehicles and charges the batteries of each flying vehicle. It also transfers map information of the planned inspection area and data related to the bright spot 55F acquired by the second flying vehicle 20 to the control device 30. The operation of the base 40 may be performed by the control device 30.

<制御装置>
制御装置30は、基地40の動作や第1の飛行体10、第2の飛行体20への指示およびデータの回収を行う。制御装置30には、MPU(Micro Processor Unit)30a、コントローラー30r、表示器30d、通信機30cが備えられる。本実施形態に係るパイプ検査システム1では、飛行体は自律飛行するが、人の操作による検査飛行であってもよい。その場合は、コントローラー30rが用いられる。また、制御装置30は携帯端末自体若しくは、固定局と携帯端末を含む構成であってもよい。
<Control device>
The control device 30 controls the operation of the base 40, issues instructions to the first aircraft 10 and the second aircraft 20, and collects data. The control device 30 is equipped with an MPU (Micro Processor Unit) 30a, a controller 30r, a display 30d, and a communication device 30c. In the pipe inspection system 1 according to the present embodiment, the aircraft flies autonomously, but may also be inspected by a human. In that case, the controller 30r is used. The control device 30 may be a mobile terminal itself, or may be configured to include a fixed station and a mobile terminal.

図11に制御装置30の処理フローを示す。処理を開始したら(ステップS400)、終了判定を行う(ステップS402)。終了の判定は、人による終了指示や、プログラムによる終了であってもよい。 Figure 11 shows the processing flow of the control device 30. Once processing has started (step S400), an end determination is made (step S402). The end determination may be based on an end instruction from a person or end determined by a program.

終了する場合(ステップS402のY分岐)は、データをバックアップして、終了する(ステップS404)。処理を継続する場合(ステップS402のN分岐)は、処理を次のフローに移す。 If the process is to end (Y branch at step S402), the data is backed up and the process ends (step S404). If the process is to continue (N branch at step S402), the process proceeds to the next flow.

次のフローでは、検査予定時刻確認が行われる(ステップS406)。パイプ検査システム1は検査のスケジュールが予め決められる。例えば、毎日全てのパイプについて検査を行う、1日おきに全てのパイプについて検査を行う、敷地内の全パイプについて3日で検査を行うといった検査のスケジュールである。 In the next flow, the scheduled inspection time is confirmed (step S406). The inspection schedule for the pipe inspection system 1 is determined in advance. For example, the inspection schedule may be to inspect all pipes every day, inspect all pipes every other day, or inspect all pipes on the site in three days.

また、2機で1編隊とすると、複数編隊を用いて、敷地内を区分けし、それぞれの区を別々の編隊で検査を行ってもよい。その場合、制御装置30には、各編隊への充電開始時刻と、出発時刻、帰投予定時刻といった、検査に伴う時刻が入力されている。 Also, if two aircraft make up one formation, multiple formations can be used to divide the site into sections, and each section can be inspected by a separate formation. In this case, the control device 30 is input with times associated with the inspection, such as the charging start time for each formation, the departure time, and the scheduled return time.

したがって、予定された時刻が来るまでは、制御装置30は待ち状態になっている。予定された時刻になったら(ステップS406のY分岐)、天候をチェックする(ステップS408)。雨天の場合は、検査できないからである。したがって、予定時刻になっても、雨が降っている場合(ステップS408のN分岐)は、検査の延期を決定し(ステップS410)、ステップS402に処理を戻す。 Therefore, the control device 30 is in a waiting state until the scheduled time arrives. When the scheduled time arrives (Y branch of step S406), the weather is checked (step S408). This is because the inspection cannot be carried out if it is raining. Therefore, if it is raining even when the scheduled time arrives (N branch of step S408), it is decided to postpone the inspection (step S410), and the process returns to step S402.

雨が降っていない場合(ステップS408のY分岐)は、第1の飛行体10および第2の飛行体20に出発指示を出す(ステップS412)。これによって、第1および第2の飛行体(10、20)は、検査のための飛行を開始する。飛行隊と通信可能な場合は、飛行隊の現在位置をモニタする。 If it is not raining (Y branch in step S408), a departure command is issued to the first aircraft 10 and the second aircraft 20 (step S412). This causes the first and second aircraft (10, 20) to begin their inspection flight. If communication with the squadron is possible, the current location of the squadron is monitored.

飛行隊を出発させたら、帰投するまで待ち状態となる(ステップS414)。また、飛行隊と通信可能であれば、第2の飛行体20からの情報(輝点55Fの発見位置)を受信して、時刻と共に記録する。 After the squadron departs, the system goes into a waiting state until it returns (step S414). Also, if communication with the squadron is possible, information from the second flying object 20 (the location where the bright spot 55F was found) is received and recorded together with the time.

飛行隊の帰投後(ステップS414のY分岐)は、リアルタイムに検査情報を取得していない場合は、第2の飛行体20から検査データを回収する(ステップS416)。そして、制御装置30は、飛行隊が観察した輝点55Fの位置および画像データを所定のフォーマットに編集し出力し、処理をS402に戻す。 After the squadron returns (Y branch in step S414), if the inspection information has not been acquired in real time, the inspection data is collected from the second flying object 20 (step S416). The control device 30 then edits the position and image data of the bright spot 55F observed by the squadron into a specified format, outputs the data, and returns the process to S402.

なお、実際に液漏れが発生しているか否か、修理の要否に関しては、人がその位置まで移動して肉眼で確認するのがよい。液漏れ箇所の特定と、その修理は、熟練を要するからである。しかし、初期の液漏れ箇所を広大な工場敷地内に配置されたパイプの液漏れを人手によって検査するのは、大変な時間を必要とするのに対して、本実施形態に係るパイプ検査システムにおいては、夜間にドローンによる自動検査が可能であるので、配管のメンテナンスに好適に寄与する。 In addition, to determine whether or not a leak has actually occurred and whether repairs are necessary, it is best for a person to go to the location and check with the naked eye, as identifying the location of the leak and repairing it requires skill. However, manually inspecting pipes located within a vast factory site for initial leak locations takes a lot of time, whereas the pipe inspection system according to this embodiment allows for automatic inspections using drones at night, which contributes ideally to piping maintenance.

(実施形態2)
実施形態1では、第2の飛行体20が、被検査パイプ50に生じた液滴55を通過する第1の飛行体10からの照明を輝点55Fとして検出することで液漏れを検査した。しかし、被検査パイプ50は屋外に配置されており、風の強い地域や、工場敷地内での建屋の配置によって、被検査パイプ50付近で飛行隊が風で煽られ、飛行隊が決まったルートを正確に飛行できない場合もある。
(Embodiment 2)
In the first embodiment, the second flying object 20 inspects for liquid leakage by detecting, as a bright spot 55F, the illumination from the first flying object 10 passing through the droplets 55 generated in the inspected pipe 50. However, the inspected pipe 50 is placed outdoors, and depending on the windy area or the layout of buildings within the factory site, the flying object may be blown by the wind near the inspected pipe 50, and the flying object may not fly the set route accurately.

図12は、第2の飛行体20が風に煽られて、輝点55Fを撮影できる領域を外れてしまった場合を示している。下方にコースを外れた場合の第2の飛行体20を点線で示した。 Figure 12 shows the case where the second flying object 20 is blown by the wind and goes outside the area where the bright spot 55F can be photographed. The dotted line shows the second flying object 20 going off course downward.

本実施形態に係るパイプ検査システム2はそのような状況でも被検査パイプ50の液漏れを検出することができる。なお、実施形態1で説明した構成および技術思想で本実施形態に適用できるものは、記載がなくても適用できるものとする。 The pipe inspection system 2 according to this embodiment can detect liquid leakage from the inspected pipe 50 even in such a situation. Note that the configuration and technical ideas described in embodiment 1 that can be applied to this embodiment are applicable even if not described.

本実施形態のパイプ検査システム2では、システムを構成する要素は、実施形態1の図1に示したものと同じである。ただし、制御装置については、新たな処理が含まれるので、制御装置32とする。したがって、制御装置32はMPU(Micro Processor Unit)32a、コントローラー32r、表示器32d、通信機32cが備えられる。 In the pipe inspection system 2 of this embodiment, the elements constituting the system are the same as those shown in FIG. 1 of the first embodiment. However, the control device includes new processes, so it is called the control device 32. Therefore, the control device 32 is equipped with an MPU (Micro Processor Unit) 32a, a controller 32r, a display 32d, and a communication device 32c.

本実施形態のパイプ検査システム2では、第1の飛行体10に搭載されたライト12は赤外線を照射し、側面カメラ18も赤外線カメラを搭載する。また、第2の飛行体20のカメラ22は、赤外線を受像可能なカメラ22を搭載する。 In the pipe inspection system 2 of this embodiment, the light 12 mounted on the first flying object 10 emits infrared light, and the side camera 18 is also equipped with an infrared camera. In addition, the camera 22 on the second flying object 20 is equipped with a camera 22 that can receive infrared light.

ここで、本実施形態のパイプ検査システム2は、第1の飛行体10は、ライト12から赤外光を発光するとともに、側面カメラ18で被検査パイプ50の下面に撮影しておく。第2の飛行体20の動作は実施形態1の場合と同様である。第1の飛行体10からの赤外光12Lrを受像することで、液滴55を輝度55Fとして撮影し、水漏れの適否を判断する。 In the pipe inspection system 2 of this embodiment, the first flying object 10 emits infrared light from the light 12 and captures the underside of the inspected pipe 50 with the side camera 18. The operation of the second flying object 20 is the same as in the first embodiment. By receiving the infrared light 12Lr from the first flying object 10, the droplets 55 are captured as luminance 55F, and it is determined whether or not there is a water leak.

一方、第2の飛行体20がコースを外れたり、風で煽られてしまい所定のコースから外れてしまった場合は、第1の飛行体10が撮影した画像に基づいて液漏れの判断を行う。より具体的には、第2の飛行体20が検査できなかった区間については、前回の検査時に第1の飛行体10が撮影した赤外線画像に基づいて液漏れの有無について判断する。 On the other hand, if the second flying object 20 strays from its course or is blown off course by the wind, a leak is determined based on the images captured by the first flying object 10. More specifically, for sections that the second flying object 20 was unable to inspect, the presence or absence of a leak is determined based on the infrared images captured by the first flying object 10 during the previous inspection.

図13に第1の飛行体10および第2の飛行体20に加えられる処理を示す。図13に示す処理以外は、第1の飛行体10は図7および図8で示したフローに従い、第2の飛行体20は図10に示すフローに従う。なお、図13は第1の飛行体10および第2の飛行体20の処理フローのどこに入れられてもよく、また、別ルーチンで常時実行される処理としてもよい。 Figure 13 shows the processing applied to the first aircraft 10 and the second aircraft 20. Other than the processing shown in Figure 13, the first aircraft 10 follows the flow shown in Figures 7 and 8, and the second aircraft 20 follows the flow shown in Figure 10. Note that Figure 13 may be inserted anywhere in the processing flow of the first aircraft 10 and the second aircraft 20, and may also be processing that is constantly executed in a separate routine.

例えば第1の飛行体10であれば、図7の検査(ステップS210)の直後(ステップS252の前)がよく、第2の飛行体20であれば、図10(b)の検査(ステップS310)の直後(ステップS360からのリターンの直前)に挿入するのが好ましい。また、それぞれ図8の検査(ステップS210)および図10(b)のステップS360中に含めてもよい。 For example, for the first flying object 10, it is preferable to insert it immediately after the inspection in FIG. 7 (step S210) (before step S252), and for the second flying object 20, it is preferable to insert it immediately after the inspection in FIG. 10(b) (step S310) (just before returning from step S360). Also, it may be included in the inspection in FIG. 8 (step S210) and step S360 in FIG. 10(b), respectively.

図13を参照して、処理がスタートすると(ステップS500)、飛行状態に変化があったか否かを判断する(ステップS502)。飛行状態の変化は、決められた飛行ルート(方向および高度)から所定の範囲以上にずれてしまった場合をいう。また、2機の間の相対位置のずれを含めてもよい。 Referring to FIG. 13, when the process starts (step S500), it is determined whether or not there has been a change in flight conditions (step S502). A change in flight conditions refers to a deviation from the determined flight route (direction and altitude) beyond a predetermined range. It may also include a deviation in the relative positions between the two aircraft.

飛行ルートから外れてしまった場合(ステップS502のY分岐)は、ルート修正が行われる(ステップS504)。これはそれぞれの飛行体に搭載された制御器による制御である。ルートの修正は、修正できるまで行われる(ステップS504)。 If the flight route is deviated from (Y branch in step S502), the route is corrected (step S504). This is controlled by a controller installed in each flying object. The route is corrected until it is possible to correct it (step S504).

修正が完了したら(ステップS506のY分岐)、ルートから逸脱してしまった範囲(以後「逸脱範囲Ro」と呼ぶ。)を記録し、この処理を抜ける(ステップS510)。また、ステップS502で飛行状態に変化がなければ(ステップS502のN分岐)、同様にこの処理を抜ける(ステップS510)。以上の処理は第1の飛行体10および第2の飛行体20の両方で行われる。 Once the correction is complete (Y branch of step S506), the range of deviation from the route (hereafter referred to as the "deviation range Ro") is recorded, and this process is terminated (step S510). Also, if there is no change in the flight state in step S502 (N branch of step S502), this process is similarly terminated (step S510). The above process is performed in both the first flying body 10 and the second flying body 20.

次にパイプ検査システム2の制御装置32の処理について説明する。制御装置32の処理は、図11に示した実施形態1の制御装置30の処理とほとんど同じである。しかし、パイプ検査システム2では、飛行隊が検査を行えなかった区間がある場合を予め想定しているので、飛行隊が帰投した後にデータ回収をし、解析を行う必要がある。 Next, the processing of the control device 32 of the pipe inspection system 2 will be described. The processing of the control device 32 is almost the same as the processing of the control device 30 of the first embodiment shown in FIG. 11. However, the pipe inspection system 2 anticipates that there may be sections where the squadron is unable to inspect, and therefore it is necessary to collect and analyze data after the squadron returns to base.

図14には、パイプ検査システム2でのデータ回収(ステップS416)の詳細な処理を示す。データ処理(ステップS416)に入ったら、第1の飛行体10および第2の飛行体20の記録データをダウンロードする(ステップS600)。記録データには、輝点55Fを観測した位置、第1の飛行体10の記録した赤外線画像IR、逸脱範囲Roのほか、飛行ルートや日時といったデータが含まれる。なおここで「」は、計測した順番を表す添え字である。 14 shows detailed processing of data collection (step S416) in the pipe inspection system 2. When data processing (step S416) begins, the recorded data of the first flying body 10 and the second flying body 20 is downloaded (step S600). The recorded data includes the position where the bright spot 55F was observed, the infrared image IR k recorded by the first flying body 10, the deviation range Ro, as well as data such as the flight route and date and time. Here, " k " is a subscript that indicates the order of measurement.

次に、逸脱範囲Roの記録の有無を調べる(ステップS602)。逸脱範囲Roがない場合(ステップS602のN分岐)は、輝点55Fを観測した位置を選択する(ステップS604)。ここで選択するとは出力(ステップS614)できる状態にすることをいう。 Next, it is checked whether or not the deviation range Ro has been recorded (step S602). If there is no deviation range Ro (N branch in step S602), the position where the bright spot 55F was observed is selected (step S604). Here, selecting means making it possible to output (step S614).

逸脱範囲Roがあった場合(ステップS602のY分岐)は、第1の飛行体10の側面カメラ18が撮影した赤外線画像IRの画像の内、周囲と異なる温度範囲TRが、前回の飛行の際に取得した赤外線画像IRk-1の周囲と異なる温度範囲TRk-1より大きくなっているかを比較する(ステップ608)。 If there is a deviation range Ro (Y branch in step S602), a comparison is made to see whether the temperature range TR k that is different from the surroundings in the infrared image IR k captured by the side camera 18 of the first flying body 10 is larger than the temperature range TR k-1 that is different from the surroundings in the infrared image IR k-1 acquired during the previous flight (step 608).

液漏れが発生した箇所は周囲と温度分布が異なるため、赤外線カメラを使うと発見できる場合が多い。しかし、他の理由で温度範囲が低い場合もあり得る。そこで、前回測定した赤外線画像IRk-1と今回の赤外線画像IRに映っている、周囲と温度分布が異なっている部分TR同士を比較することで、液漏れが生じているか否かを判断する趣旨である。 Since the location where the liquid leakage has occurred has a different temperature distribution from the surroundings, it can often be found by using an infrared camera. However, the temperature range may be low for other reasons. Therefore, the purpose of this method is to determine whether or not a liquid leakage has occurred by comparing the parts TR that have a different temperature distribution from the surroundings, which are shown in the previously measured infrared image IR k-1 and the current infrared image IR k .

周囲と異なる温度範囲TRがTRk-1よりも大きくなっていたら(ステップS608のY分岐)、液漏れが生じている可能性が高いと判断される(ステップS612)。一方、周囲と異なる温度範囲TRがTRk-1と同じか小さくなっていれば(ステップS608のN分岐)、液漏れは発生していないと判断できる(ステップS610)。そしてこれらの結果を出力(ステップS614)しこのルーチンを抜ける(ステップS616)。 If the temperature range TR k different from the surroundings is larger than TR k-1 (Y branch in step S608), it is determined that there is a high possibility that a liquid leak has occurred (step S612). On the other hand, if the temperature range TR k different from the surroundings is equal to or smaller than TR k-1 (N branch in step S608), it can be determined that a liquid leak has not occurred (step S610). These results are then output (step S614) and the routine ends (step S616).

以上のように第1の飛行体10および第2の飛行体20が共同して検査を行うことができない領域があった場合は、第1の飛行体10に搭載された側面カメラ18(赤外線カメラ)の画像から液漏れの有無を判断することができる。 As described above, if there is an area where the first flying body 10 and the second flying body 20 cannot jointly inspect, the presence or absence of leakage can be determined from images taken by the side camera 18 (infrared camera) mounted on the first flying body 10.

(実施形態3)
実施形態1、2では移動体9を複数の飛行体10および20の例で説明したが、本実施形態のパイプ検査システム3では、移動体9として地上の自動走行車1台の例を説明する。飛行体に比べ、大容量のバッテリーを搭載可能で走行時間を長くできるメリットがあり、1台で種々の機能の装置を搭載可能である。
(Embodiment 3)
In the first and second embodiments, the mobile body 9 has been described using examples of multiple flying bodies 10 and 20, but in the pipe inspection system 3 of this embodiment, an example of one ground-based autonomous vehicle will be described as the mobile body 9. Compared to flying bodies, autonomous vehicles have the advantage of being able to carry large-capacity batteries and have longer running times, and one vehicle can be equipped with devices with various functions.

本実施形態は、液漏れの早期発見が必要なパイプの下面が地上から直視できる場合に適用でき、飛行体には難しい屋内にも適用できる。 This embodiment can be applied when the underside of a pipe, where early detection of leaks is necessary, can be directly seen from the ground, and can also be applied indoors, where this is difficult for aircraft.

なお、実施形態1、2で説明した構成および技術思想で本実施形態に適用できるものは、記載がなくても適用できるものとする。 Note that the configurations and technical ideas described in embodiments 1 and 2 that can be applied to this embodiment are applicable even if not specified.

自動走行車は巡回中、液漏れの早期発見が必要なパイプの検査位置に到着すると、ライトはパイプの下面に光を照射し、カメラでパイプの下面を撮影する。液漏れによる輝点の有無は、リアルタイムで撮像を通信している制御装置に送り、画像処理部により判定される。通信が不可の場合は画像処理部を自動走行車に備えてもよい。光の照射径は任意に設定できるが、例えば2mの場合は、2mごとに、ライトによる光照射、カメラによる撮影を繰り返すことにより、液漏れの有無をパイプの全長に渡って自動で検査することが可能となる。 When the autonomous vehicle is on its patrol and arrives at a pipe inspection position where early detection of leaks is required, the light shines light onto the underside of the pipe and the camera takes an image of the underside of the pipe. The image is sent in real time to a control device with which the autonomous vehicle communicates, and the presence or absence of bright spots caused by leaks is determined by an image processing unit. If communication is not possible, the autonomous vehicle may be equipped with an image processing unit. The light irradiation diameter can be set as desired, but for example, in the case of a 2m diameter, the light can be shined on and the camera can be photographed every 2m, making it possible to automatically inspect the entire length of the pipe for leaks.

なお、パイプの水平方向及び垂直方向の曲がりに対して、ライトやカメラの仰角等の調整は、事前の試験走行で、自車内の制御部又は自車外の制御装置内に記憶されている。 In addition, adjustments to the elevation angles of lights and cameras in response to horizontal and vertical bends in the pipe are stored in a control unit inside the vehicle or in a control device outside the vehicle during prior test runs.

<自動走行車>
図15に自動走行車60の構成を示す。図15(a)は上方からの平面図であり、図15(b)は側面図であり、図15(c)は正面図である。また、図15(d)は制御装置70である。図15(a)および図15(b)において、通常の進行方向前を矢印で示す。自動走行車60は、タイヤ63aを4本有する四輪駆動の車両本体63の上面に略直方体形状の台座64を有し、台座64の天面に回転台66を備えている。回転台66は水平方向360度回転可能で、回転台66の両側にライト61とカメラ62が取付けられている。ライト61とカメラ62は垂直方向90度回転可能である。
<Autonomous vehicles>
FIG. 15 shows the configuration of the autonomous vehicle 60. FIG. 15(a) is a plan view from above, FIG. 15(b) is a side view, and FIG. 15(c) is a front view. FIG. 15(d) shows the control device 70. In FIG. 15(a) and FIG. 15(b), the normal forward direction is indicated by an arrow. The autonomous vehicle 60 has a substantially rectangular parallelepiped pedestal 64 on the upper surface of a four-wheel drive vehicle body 63 having four tires 63a, and is provided with a rotating platform 66 on the top surface of the pedestal 64. The rotating platform 66 can rotate 360 degrees horizontally, and a light 61 and a camera 62 are attached to both sides of the rotating platform 66. The light 61 and the camera 62 can rotate 90 degrees vertically.

なお、車両本体63には、通信部(図示せず)、バッテリー(図示せず)および制御部(図示せず)を有する。また、3Dレーザーセンサを備えることにより、巡回のマップを作成し、自律走行することができる。 The vehicle body 63 has a communication unit (not shown), a battery (not shown), and a control unit (not shown). It is also equipped with a 3D laser sensor, allowing it to create a route map and travel autonomously.

図16を参照して、自動走行車60は、被検査パイプ50の横または斜め下側を走行する。自動走行車60には、ライト61とカメラ62が搭載されている。自動走行車60は被検査パイプ50の下面を照らすとともに被検査パイプ50の下側を撮影する。 Referring to FIG. 16, an autonomous vehicle 60 travels next to or diagonally below the inspected pipe 50. The autonomous vehicle 60 is equipped with a light 61 and a camera 62. The autonomous vehicle 60 illuminates the underside of the inspected pipe 50 and captures an image of the underside of the inspected pipe 50.

ここで、被検査パイプ50に液漏れが発生していると、被検査パイプ50の下側に液滴55が発生している。すると自動走行車60からのライト61の照射光61Lは、液滴55で屈折し、カメラ62では輝点55Fとして観察される。特に、パイプとパイプの継ぎ目の結合フランジ50fの下側でこのような液滴55を観察できる場合が多い。 If a liquid leak occurs in the inspected pipe 50, liquid droplets 55 will appear on the underside of the inspected pipe 50. When this happens, the light 61L emitted by the light 61 from the autonomous vehicle 60 is refracted by the liquid droplets 55, and is observed by the camera 62 as a bright spot 55F. In particular, such liquid droplets 55 can often be observed on the underside of the connecting flange 50f at the joint between the pipes.

自動走行車60は被検査パイプ50の下側に輝点55Fを観察した時は観察した位置を記録する。ここで観察した位置とは、液滴55を観察した際の自動走行車60の工場の敷地内での位置であるが、液滴55を観察した被検査パイプ50の位置であってもよい。本実施形態に係るパイプ検査システム3では、液漏れを早期に発見することが重要であり、詳細な液漏れの位置や、その修理に関しては人手に任せる。したがって、液滴55を発見したおおよその位置が分かればよいからである。 When the autonomous vehicle 60 observes a bright spot 55F on the underside of the inspected pipe 50, it records the observed position. The observed position here refers to the position of the autonomous vehicle 60 within the factory grounds when the droplet 55 is observed, but it may also be the position of the inspected pipe 50 where the droplet 55 is observed. In the pipe inspection system 3 according to this embodiment, it is important to detect leakage early, and the detailed location of the leakage and its repair are left to manual labor. Therefore, it is sufficient to know the approximate location where the droplet 55 was found.

自動走行車60は輝点55Fを記録したら、その位置情報を制御装置70に無線連絡する。ただし、建物や設備が立設されている工場内では、基地80(図15(b)参照)に設置された制御装置70とのリアルタイムの通信は可能でない場合もある。したがって、制御装置70と連絡がつかない場合は、自動走行車60が位置情報を記録するだけでよい。 When the autonomous vehicle 60 records the bright spot 55F, it wirelessly transmits the location information to the control device 70. However, in a factory where buildings and equipment are installed, real-time communication with the control device 70 installed at the base 80 (see FIG. 15(b)) may not be possible. Therefore, if it is not possible to contact the control device 70, the autonomous vehicle 60 simply needs to record the location information.

自動走行車60の検査走行に関する処理フローは図7と同じである。図7を参照して、パイプ検査システム3は、被検査パイプ50の位置および構内のマップといった検査に必要な位置情報は予め制御装置70から入力されているとする。自動走行車60は、バッテリーで走行するため、1回の充電で走行できる範囲は決まっている。したがって、工場の敷地内において、1度に検査する範囲を予め決めておく。この範囲を「検査区間」と呼ぶ。 The processing flow for the inspection drive of the autonomous vehicle 60 is the same as that shown in Figure 7. Referring to Figure 7, the pipe inspection system 3 is assumed to have received position information required for inspection, such as the position of the inspected pipe 50 and a map of the premises, input in advance from the control device 70. Since the autonomous vehicle 60 runs on a battery, the range it can travel on a single charge is fixed. Therefore, the range within the factory premises that will be inspected at one time is determined in advance. This range is called the "inspection section."

処理が開示されると(ステップS200)、終了判定が行われる(ステップS202)。終了判定の基準は、検査区間の終了若しくは緊急事態によって終了してよい。処理を終了する場合(ステップS202のY分岐)は、基地80へ戻り処理を終了する(ステップS204)。処理を継続する場合(ステップS202のN分岐)は、処理を次のフローに移す。 When the process is started (step S200), an end determination is made (step S202). The end determination criteria may be the end of the inspection section or an emergency. If the process is to be ended (Y branch in step S202), the process returns to the base 80 and ends (step S204). If the process is to be continued (N branch in step S202), the process moves to the next flow.

次に、構内の検査区間まで走行する(ステップS206)。検査区間までの走行は決められたルートによって走行する。検査区間まで走行すると、検査準備を行う(ステップS208)。検査準備とは、ライト61の点灯である。 Next, the vehicle travels to the inspection section within the premises (step S206). The vehicle travels along a predetermined route to the inspection section. Once the vehicle has reached the inspection section, preparations for the inspection are made (step S208). Preparations for the inspection are made by turning on light 61.

次に検査を開始する(ステップS210)。自動走行車60は、被検査パイプ50の下面をライト61の光で照射しながら、所定間隔ごとにカメラ62で撮影し、図4に示したフローチャートに従って画像解析による輝点55Fの発見に努め、予め設定された巡回ルートを走行する。検査が終了したら終了判定(ステップS202)に戻り、次の検査区間の有無を判定する。 Next, the inspection begins (step S210). The autonomous vehicle 60 illuminates the underside of the inspected pipe 50 with light from the light 61, takes pictures with the camera 62 at predetermined intervals, and attempts to find bright spots 55F through image analysis according to the flowchart shown in FIG. 4, while traveling along a preset patrol route. When the inspection is complete, the process returns to the end determination (step S202), and determines whether or not there is a next inspection section.

<基地>
再度図15(b)を参照する。自動走行車60は、基地80から発進し、基地80へ戻る。基地80には少なくとも、充電設備80aとデータの転送設備(図示せず)を有する。制御装置70は基地80に備え付けられていてもよいし、他の場所に設置されていてもよい。ここでは、制御装置70が基地80に備えられているとする。
<Base>
15(b) again. The autonomous vehicle 60 starts from the base 80 and returns to the base 80. The base 80 has at least a charging facility 80a and a data transfer facility (not shown). The control device 70 may be provided at the base 80 or may be installed at another location. Here, it is assumed that the control device 70 is provided at the base 80.

基地80は、少なくとも自動走行車60を格納し、自動走行車60のバッテリーを充電する。また、検査予定区間の地図情報や、自動走行車60が取得した輝点55Fに関するデータを制御装置70へ転送する。基地80の動作については、制御装置70が行ってよい。図15のように、ステージ状であってもよい。 The base 80 stores at least the autonomous vehicle 60 and charges the battery of the autonomous vehicle 60. It also transfers map information of the section to be inspected and data related to the bright spot 55F acquired by the autonomous vehicle 60 to the control device 70. The operation of the base 80 may be performed by the control device 70. As shown in FIG. 15, it may be in the form of a stage.

<制御装置>
制御装置70は、基地80の動作や自動走行車60への指示およびデータの回収を行う。制御装置70には、MPU(Micro Processor Unit)70a、コントローラー70r、表示器70d、通信機70cが備えられる。本実施形態に係るパイプ検査システム3では、自動走行車60は自律走行するが、人の操作による検査走行であってもよい。その場合は、コントローラー70rが用いられる。また、制御装置70は携帯端末自体若しくは、固定局と携帯端末を含む構成であってもよい。
<Control device>
The control device 70 operates the base 80, issues instructions to the autonomous vehicle 60, and collects data. The control device 70 is equipped with an MPU (Micro Processor Unit) 70a, a controller 70r, a display 70d, and a communication device 70c. In the pipe inspection system 3 according to this embodiment, the autonomous vehicle 60 runs autonomously, but may also run for inspection under human control. In that case, the controller 70r is used. The control device 70 may be a mobile terminal itself, or may be configured to include a fixed station and a mobile terminal.

制御装置70の処理フローは実施形態1の図11と同じである。処理を開始したら(ステップS400)、終了判定を行う(ステップS402)。終了の判定は、人による終了指示や、プログラムによる終了であってもよい。 The processing flow of the control device 70 is the same as that shown in FIG. 11 in the first embodiment. When the processing starts (step S400), an end determination is made (step S402). The end determination may be based on an end instruction from a person or end determined by a program.

終了する場合(ステップS402のY分岐)は、データをバックアップして、終了する(ステップS404)。処理を継続する場合(ステップS402のN分岐)は、処理を次のフローに移す。 If the process is to end (Y branch at step S402), the data is backed up and the process ends (step S404). If the process is to continue (N branch at step S402), the process proceeds to the next flow.

次のフローでは、検査予定時刻確認が行われる(ステップS406)。パイプ検査システム3は検査のスケジュールが予め決められる。例えば、毎日全てのパイプについて検査を行う、1日おきに全てのパイプについて検査を行う、敷地内の全パイプについて3日で検査を行うといった検査のスケジュールである。 In the next flow, the scheduled inspection time is confirmed (step S406). The inspection schedule for the pipe inspection system 3 is determined in advance. For example, the inspection schedule may be to inspect all pipes every day, to inspect all pipes every other day, or to inspect all pipes on the site in three days.

また、複数の自動走行車60を用いて、敷地内を区分けし、それぞれの区を別々の自動走行車60で検査を行ってもよい。その場合、制御装置70には、各自動走行車60への充電開始時刻と、出発時刻、戻り予定時刻といった、検査に伴う時刻が入力されている。 In addition, multiple autonomous vehicles 60 may be used to divide the site into sections, and each section may be inspected by a different autonomous vehicle 60. In this case, the control device 70 is input with times associated with the inspection, such as the charging start time for each autonomous vehicle 60, the departure time, and the scheduled return time.

したがって、予定された時刻が来るまでは、制御装置70は待ち状態になっている。予定された時刻になったら(ステップS406のY分岐)、検査場所が屋外の場合は、天候をチェックする(ステップS408)。雨天の場合は、検査できないからである。したがって、予定時刻になっても、雨が降っている場合(ステップS408のN分岐)は、検査の延期を決定し(ステップS410)、ステップS402に処理を戻す。検査場所が屋内の場合は、天候をチェックする(ステップS408)をスキップすればよい。 Therefore, the control device 70 is in a waiting state until the scheduled time arrives. When the scheduled time arrives (Y branch of step S406), if the inspection location is outdoors, the weather is checked (step S408). This is because the inspection cannot be performed if it is raining. Therefore, if it is raining even when the scheduled time arrives (N branch of step S408), it is decided to postpone the inspection (step S410), and the process returns to step S402. If the inspection location is indoors, checking the weather (step S408) can be skipped.

雨が降っていない場合(ステップS408のY分岐)は、自動走行車60に出発指示を出す(ステップS412)。これによって、自動走行車60は、検査のための走行を開始する。自動走行車60を出発させたら、戻るまで待ち状態となる(ステップS414)。 If it is not raining (Y branch in step S408), a departure command is issued to the autonomous vehicle 60 (step S412). This causes the autonomous vehicle 60 to start traveling for the inspection. After the autonomous vehicle 60 departs, it enters a waiting state until it returns (step S414).

自動走行車60の戻り後(ステップS414のY分岐)は、リアルタイムに検査情報を取得していない場合は、自動走行車60から検査データを回収する(ステップS416)。そして、制御装置70は、自動走行車60が観察した輝点55Fの位置および画像データを所定のフォーマットに編集し出力し、処理をS402に戻す。 After the autonomous vehicle 60 returns (Y branch in step S414), if the inspection information has not been acquired in real time, the inspection data is collected from the autonomous vehicle 60 (step S416). The control device 70 then edits the position and image data of the bright spot 55F observed by the autonomous vehicle 60 into a specified format, outputs the data, and returns the process to S402.

なお、実際に液漏れが発生しているか否か、修理の要否に関しては、人がその位置まで移動して肉眼で確認するのがよい。液漏れ箇所の特定と、その修理は、熟練を要するからである。しかし、初期の液漏れ箇所を広大な工場敷地内に配置されたパイプの液漏れを人手によって検査するのは、大変な時間を必要とするのに対して、本実施形態に係るパイプ検査システムにおいては、屋内外とも自動走行車60による自動検査が可能であるので、配管のメンテナンスに好適に寄与する。 In addition, to check whether a leak has actually occurred and whether repairs are necessary, it is best for a person to go to the location and check with the naked eye, as identifying the location of the leak and repairing it requires skill. However, manually inspecting pipes located within a vast factory site for initial leak locations takes a lot of time, whereas the pipe inspection system according to this embodiment allows automatic inspection both indoors and outdoors using an autonomous vehicle 60, which contributes ideally to piping maintenance.

(実施形態4)
本実施形態のパイプ検査システム4では、システムを構成する要素は、実施形態3の図15に示したものと比べ、ライトがなくカメラとして赤外線カメラを搭載する。
(Embodiment 4)
In the pipe inspection system 4 of the present embodiment, the system components are different from those shown in FIG. 15 of the third embodiment in that there is no light and an infrared camera is installed as the camera.

図17を参照して、本実施形態のパイプ検査システム4は、自動走行車90が、赤外線カメラ91で被検査パイプ50の下面を撮影しておく。自動走行車90が撮影した画像に基づいて液漏れの判断を行う。より具体的には、前回の検査時に自動走行車90が撮影した赤外線画像に基づいて液漏れの有無について判断する。自動走行車90の制御部に前回の検査時に撮影した赤外線画像を記憶している場合や、自動走行車90と制御装置92間で通信可能な場合には、検査中に液漏れの判断を行え、液漏れの位置も記録できる。なお、図17において、実施形態3(図15)と同じ要素には同じ符号をつけた。説明は実施形態3の場合と同様であるので、省略する場合もある。 Referring to FIG. 17, in the pipe inspection system 4 of this embodiment, the autonomous vehicle 90 photographs the underside of the inspected pipe 50 with an infrared camera 91. The autonomous vehicle 90 judges whether there is a leak based on the image photographed. More specifically, the autonomous vehicle 90 judges whether there is a leak based on the infrared image photographed during the previous inspection. If the control unit of the autonomous vehicle 90 stores the infrared image photographed during the previous inspection, or if communication is possible between the autonomous vehicle 90 and the control device 92, the autonomous vehicle 90 can judge whether there is a leak during the inspection and can also record the location of the leak. In FIG. 17, the same elements as those in the third embodiment (FIG. 15) are denoted with the same reference numerals. The explanation is the same as that in the third embodiment, and may be omitted.

次にパイプ検査システム4の制御装置92の処理について説明する。制御装置92はMPU(Micro Processor Unit)92a、コントローラー92r、表示器92d、通信機92cが備えられる。制御装置92の処理は、図11に示した実施形態1の制御装置30の処理とほとんど同じである。 Next, the processing of the control device 92 of the pipe inspection system 4 will be described. The control device 92 is equipped with an MPU (Micro Processor Unit) 92a, a controller 92r, a display 92d, and a communication device 92c. The processing of the control device 92 is almost the same as the processing of the control device 30 of the first embodiment shown in FIG. 11.

具体的には、図14の逸脱範囲Roがあった場合(ステップS602のY分岐)と同じ処理を行う。すなわち、自動走行車90の赤外線カメラ91が撮影した赤外線画像IRの画像の内、周囲と異なる温度範囲TRが、前回の走行の際に取得した赤外線画像IRk-1の周囲と異なる温度範囲TRk-1より大きくなっているかを比較する(ステップ608)。 Specifically, the same process as when there is a deviation range Ro in Fig. 14 (Y branch in step S602) is performed. That is, a comparison is made to see whether a temperature range TR k different from the surroundings in an infrared image IR k captured by the infrared camera 91 of the autonomous vehicle 90 is larger than a temperature range TR k-1 different from the surroundings in an infrared image IR k-1 acquired during the previous drive (step 608).

液漏れが発生した箇所は周囲と温度分布が異なるため、赤外線カメラを使うと発見できる場合が多い。しかし、他の理由で温度範囲が低い場合もあり得る。そこで、前回測定した赤外線画像IRk-1と今回の赤外線画像IRに映っている、周囲と温度分布が異なっている部分TR同士を比較することで、液漏れが生じているか否かを判断する趣旨である。 Since the location where the liquid leakage has occurred has a different temperature distribution from the surroundings, it can often be found by using an infrared camera. However, the temperature range may be low for other reasons. Therefore, the purpose of this method is to determine whether or not a liquid leakage has occurred by comparing the parts TR that have a different temperature distribution from the surroundings, which are shown in the previously measured infrared image IR k-1 and the current infrared image IR k .

周囲と異なる温度範囲TRがTRk-1よりも大きくなっていたら(ステップS608のY分岐)、液漏れが生じている可能性が高いと判断される(ステップS612)。一方、周囲と異なる温度範囲TRがTRk-1と同じか小さくなっていれば(ステップS608のN分岐)、液漏れは発生していないと判断できる(ステップS610)。そしてこれらの結果を出力(ステップS614)しこのルーチンを抜ける(ステップS616)。 If the temperature range TR k different from the surroundings is larger than TR k-1 (Y branch in step S608), it is determined that there is a high possibility that a liquid leak has occurred (step S612). On the other hand, if the temperature range TR k different from the surroundings is equal to or smaller than TR k-1 (N branch in step S608), it can be determined that a liquid leak has not occurred (step S610). These results are then output (step S614) and the routine ends (step S616).

以上のように自動走行車90は実施形態3のライト61を搭載せずに赤外線カメラ91のみを搭載し、撮影した赤外線画像から液漏れの有無を判断することができる。 As described above, the self-driving vehicle 90 is equipped with only an infrared camera 91, without the light 61 of embodiment 3, and can determine whether or not there is a leak from the captured infrared image.

本発明に係るパイプ検査システムは、工場内に敷設されたパイプの液漏れ自動検査に好適に利用することができる。 The pipe inspection system of the present invention can be ideally used for automatically inspecting pipes installed in a factory for leaks.

1 パイプ検査システム
2 パイプ検査システム
3 パイプ検査システム
4 パイプ検査システム
10 第1の飛行体
12 ライト
12Lr 赤外光
12ax 照射軸
22ax 光軸
12L 照射光
14 前方ライト
16 前方カメラ
18 側面カメラ
20 第2の飛行体
22 カメラ
30 制御装置
32 制御装置
30r コントローラー
30d 表示器
30c 通信機
40 基地
50 被検査パイプ
50b パイプ本体
50f 結合フランジ
55 液滴
55F 輝点
DL 所定距離
Ro 逸脱範囲
IR赤外線画像
TR周囲と異なる温度範囲
60 自動走行車
61 ライト
62 カメラ
63 車両本体
64 台座
70 制御装置
80 基地
90 自動走行車
91 赤外線カメラ
92 制御装置
1 Pipe inspection system 2 Pipe inspection system 3 Pipe inspection system 4 Pipe inspection system 10 First flying object 12 Light 12Lr Infrared light 12ax Irradiation axis 22ax Optical axis 12L Irradiation light 14 Forward light 16 Forward camera 18 Side camera 20 Second flying object 22 Camera 30 Control device 32 Control device 30r Controller 30d Display 30c Communication device 40 Base 50 Inspected pipe 50b Pipe body 50f Joint flange 55 Droplet 55F Bright spot DL Predetermined distance Ro Deviation range IR k Infrared image TR k Temperature range different from the surroundings 60 Autonomous vehicle 61 Light 62 Camera 63 Vehicle body 64 Base 70 Control device 80 Base 90 Autonomous vehicle 91 Infrared camera 92 Control device

Claims (5)

パイプの液体漏れを検査するパイプ検査システムであって、
ライトとカメラを搭載した移動体と、
前記移動体と通信する制御装置を有し、
前記移動体は、設定された経路に沿って移動し、
被検査パイプに前記ライトにより光を照射し、前記カメラにより、パイプの下面に輝点を観察した際に、前記観察した位置を記録することを特徴とするパイプ検査システム。
1. A pipe inspection system for inspecting a pipe for liquid leaks, comprising:
A mobile object equipped with a light and a camera,
a control device in communication with the moving object;
The moving object moves along a set route,
A pipe inspection system characterized in that the light is applied to a pipe to be inspected, and when a bright spot is observed on the underside of the pipe by the camera, the observed position is recorded.
前記移動体は、
ライトを搭載する第1の飛行体と
カメラを搭載する第2の飛行体で構成され、
前記第1の飛行体と、前記第2の飛行体と通信する制御装置を有し、
前記第1の飛行体と、前記第2の飛行体は、被検査パイプに沿って飛行し、
前記第1の飛行体は、前記被検査パイプに前記ライトにより光を照射し、
前記第2の飛行体は、前記カメラによりパイプの下面に輝点を観察した際に、前記観察した位置を記録することを特徴とする請求項1に記載されたパイプ検査システム。
The moving body is
It is composed of a first flying vehicle carrying a light and a second flying vehicle carrying a camera.
a controller in communication with the first air vehicle and the second air vehicle;
The first flying body and the second flying body fly along a pipe to be inspected,
The first flying object irradiates the inspected pipe with light from the light,
2. The pipe inspection system according to claim 1, wherein the second flying object records the observed position when a bright spot is observed on the underside of the pipe by the camera.
前記第1の飛行体と、
前記第2の飛行体は、前記被検査パイプを挟んで反対側を飛行することを特徴とする請求項2に記載されたパイプ検査システム。
The first flying vehicle; and
3. The pipe inspection system according to claim 2, wherein the second flying object flies on the opposite side of the pipe to be inspected.
前記ライトは、特定波長の光を発光し、
前記カメラは、前記特定波長の光を通過させるフィルタを有していることを特徴とする請求項1から3の何れか一の請求項に記載されたパイプ検査システム。
The light emits light of a specific wavelength,
4. The pipe inspection system according to claim 1, wherein the camera has a filter that passes light of the specific wavelength.
前記特定波長は赤外領域の波長であり、
前記第1の飛行体には、前記ライトの照射範囲を撮影する赤外線カメラを搭載したことを特徴とする請求項2または3を引用する請求項4に記載されたパイプ検査システム。
The specific wavelength is a wavelength in the infrared region,
The pipe inspection system according to claim 4, which cites claim 2 or 3, characterized in that the first flying object is equipped with an infrared camera that photographs the range illuminated by the light.
JP2021064876A 2021-04-06 2021-04-06 Pipe Inspection System Active JP7634185B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2021064876A JP7634185B2 (en) 2021-04-06 2021-04-06 Pipe Inspection System

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2021064876A JP7634185B2 (en) 2021-04-06 2021-04-06 Pipe Inspection System

Publications (2)

Publication Number Publication Date
JP2022160242A JP2022160242A (en) 2022-10-19
JP7634185B2 true JP7634185B2 (en) 2025-02-21

Family

ID=83657641

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021064876A Active JP7634185B2 (en) 2021-04-06 2021-04-06 Pipe Inspection System

Country Status (1)

Country Link
JP (1) JP7634185B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2024149102A (en) * 2023-04-07 2024-10-18 横浜ゴム株式会社 Marine hose monitoring system and method
CN118705554A (en) * 2024-08-30 2024-09-27 清河电子科技(山东)有限责任公司 Mobile liquid leakage detection device, method, terminal and storage medium

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104279425A (en) 2014-09-05 2015-01-14 河南汉威电子股份有限公司 Pipeline-leakage detecting system and method on basis of infrared imaging and unmanned aircraft
JP2017026599A (en) 2015-07-22 2017-02-02 パナソニックIpマネジメント株式会社 Hydrogen gas inspection method and hydrogen gas inspection apparatus
WO2017022556A1 (en) 2015-08-04 2017-02-09 コニカミノルタ株式会社 Gas detection device and gas detection method
WO2018008675A1 (en) 2016-07-07 2018-01-11 日本電気株式会社 Gas detection system
CN107575750A (en) 2017-10-27 2018-01-12 华润电力技术研究院有限公司 A kind of pipeline leakage detection method and pipeline leakage testing device
CN207364667U (en) 2017-02-10 2018-05-15 邢致恺 A kind of unmanned plane pipeline inspection system
US10113956B1 (en) 2017-08-15 2018-10-30 Aurora Innovative Technology LLC Remote gas leakage detection systems using mid-infrared laser
US20190003918A1 (en) 2017-06-30 2019-01-03 Aurora Innovative Technology LLC Multi-laser gas leakage detector
JP2019117177A (en) 2017-12-27 2019-07-18 三菱重工業株式会社 System and method for detecting leakage
JP2019184462A (en) 2018-04-12 2019-10-24 日立グローバルライフソリューションズ株式会社 Water leakage inspection system and water leakage inspection method
US20190339159A1 (en) 2018-05-03 2019-11-07 Quantum IR Technologies, LLC Infrared imaging systems and methods for oil leak detection
CN111237645A (en) 2020-01-20 2020-06-05 广州燃气集团有限公司 Gas pipeline leakage detecting system
CN111721808A (en) 2020-05-16 2020-09-29 北京城建中南土木工程集团有限公司 Underground pipe network leakage position determination method and system
CN211821762U (en) 2020-03-05 2020-10-30 上海汉洁环境工程有限公司 Pipeline leakage detection device based on unmanned aerial vehicle
JP2020180960A (en) 2019-04-25 2020-11-05 パナソニックIpマネジメント株式会社 Inspection system and unmanned flight vehicle
CN212115052U (en) 2020-05-08 2020-12-08 北京华夏诚智安全环境技术有限公司 Intelligent inspection equipment for chemical enterprises
WO2021043449A1 (en) 2019-09-05 2021-03-11 E.On Sverige Ab Leakage detection in a distribution system for distributing a fluid

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01121732A (en) * 1987-11-06 1989-05-15 Toshiba Corp Monitoring device for liquid leakage
JP2874121B2 (en) * 1992-08-07 1999-03-24 株式会社クボタ Product inspection method for pipes
JPH07280696A (en) * 1994-04-13 1995-10-27 Kubota Corp Liquid leak monitor
JPH08178198A (en) * 1994-12-28 1996-07-12 Tokyo Gas Co Ltd Wide area monitoring device
US5742053A (en) * 1996-11-29 1998-04-21 Rekunyk; Horace Infrared gas detection method and apparatus
JPH11337437A (en) * 1998-05-22 1999-12-10 Nkk Corp Tank inspection method and device

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104279425A (en) 2014-09-05 2015-01-14 河南汉威电子股份有限公司 Pipeline-leakage detecting system and method on basis of infrared imaging and unmanned aircraft
JP2017026599A (en) 2015-07-22 2017-02-02 パナソニックIpマネジメント株式会社 Hydrogen gas inspection method and hydrogen gas inspection apparatus
WO2017022556A1 (en) 2015-08-04 2017-02-09 コニカミノルタ株式会社 Gas detection device and gas detection method
WO2018008675A1 (en) 2016-07-07 2018-01-11 日本電気株式会社 Gas detection system
CN207364667U (en) 2017-02-10 2018-05-15 邢致恺 A kind of unmanned plane pipeline inspection system
US20190003918A1 (en) 2017-06-30 2019-01-03 Aurora Innovative Technology LLC Multi-laser gas leakage detector
US10113956B1 (en) 2017-08-15 2018-10-30 Aurora Innovative Technology LLC Remote gas leakage detection systems using mid-infrared laser
CN107575750A (en) 2017-10-27 2018-01-12 华润电力技术研究院有限公司 A kind of pipeline leakage detection method and pipeline leakage testing device
JP2019117177A (en) 2017-12-27 2019-07-18 三菱重工業株式会社 System and method for detecting leakage
JP2019184462A (en) 2018-04-12 2019-10-24 日立グローバルライフソリューションズ株式会社 Water leakage inspection system and water leakage inspection method
US20190339159A1 (en) 2018-05-03 2019-11-07 Quantum IR Technologies, LLC Infrared imaging systems and methods for oil leak detection
JP2020180960A (en) 2019-04-25 2020-11-05 パナソニックIpマネジメント株式会社 Inspection system and unmanned flight vehicle
WO2021043449A1 (en) 2019-09-05 2021-03-11 E.On Sverige Ab Leakage detection in a distribution system for distributing a fluid
CN111237645A (en) 2020-01-20 2020-06-05 广州燃气集团有限公司 Gas pipeline leakage detecting system
CN211821762U (en) 2020-03-05 2020-10-30 上海汉洁环境工程有限公司 Pipeline leakage detection device based on unmanned aerial vehicle
CN212115052U (en) 2020-05-08 2020-12-08 北京华夏诚智安全环境技术有限公司 Intelligent inspection equipment for chemical enterprises
CN111721808A (en) 2020-05-16 2020-09-29 北京城建中南土木工程集团有限公司 Underground pipe network leakage position determination method and system

Also Published As

Publication number Publication date
JP2022160242A (en) 2022-10-19

Similar Documents

Publication Publication Date Title
CN110418957B (en) Method and device for monitoring the condition of a facility having an operating means
WO2023061049A1 (en) Network-provisioning vehicle-mounted intelligent inspection robot system and methods based on same
CN110346807B (en) Tunnel data collection equipment and method
CN112230680B (en) Unmanned aerial vehicle power line inspection control method
JP7634185B2 (en) Pipe Inspection System
US20180273173A1 (en) Autonomous inspection of elongated structures using unmanned aerial vehicles
CN109885098B (en) Method for planning inspection route of bridge side fence
JP6039050B1 (en) Inspection method for structures using drone
CN114115361A (en) Unmanned aerial vehicle inspection system based on photovoltaic power station and inspection method thereof
CN112729405A (en) Suspension type tunnel inspection device, system and method
JP2019052954A (en) Inspection system, inspection method, server device, and program
CN107328783A (en) A kind of bridge intelligent checking system based on unmanned plane
JP2021056106A (en) Pipe inspection system
CN109901623B (en) Method for planning inspection route of pier body of bridge
JP2015034428A (en) System and method for checking state of damage to bridge, and aerial movement apparatus
CN109990777A (en) A kind of bridge bottom surface inspection flight course planning method
CN108765620A (en) A kind of networking electric power network circuit automatic detecting method
CN112437118A (en) Road street lamp inspection system based on unmanned aerial vehicle
CN120840900A (en) UAV inspection device and inspection method
CN116591005A (en) An intelligent detection and repair device for asphalt pavement apparent disease
CN206847600U (en) A kind of tunnel structure detecting system based on High Performance Unmanned Aerial Vehicle
CN118464934A (en) Automatic detection method and device for vehicle chassis
KR102556878B1 (en) Concrete facility maintenance system that performs condition evaluation using drones based on autonomous flight in shaded areas
CN107449786B (en) Device for finely observing surface of object
CN116593660A (en) Water quality monitoring method and system for sewage discharge at railway engineering construction site

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20240319

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20241016

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241022

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20241105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20250107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250108

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250128

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250128

R150 Certificate of patent or registration of utility model

Ref document number: 7634185

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150