JP7637030B2 - Cloud layer measuring device and cloud layer measuring method - Google Patents
Cloud layer measuring device and cloud layer measuring method Download PDFInfo
- Publication number
- JP7637030B2 JP7637030B2 JP2021165196A JP2021165196A JP7637030B2 JP 7637030 B2 JP7637030 B2 JP 7637030B2 JP 2021165196 A JP2021165196 A JP 2021165196A JP 2021165196 A JP2021165196 A JP 2021165196A JP 7637030 B2 JP7637030 B2 JP 7637030B2
- Authority
- JP
- Japan
- Prior art keywords
- cloud
- shape
- relative
- map
- height
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02A—TECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
- Y02A90/00—Technologies having an indirect contribution to adaptation to climate change
- Y02A90/10—Information and communication technologies [ICT] supporting adaptation to climate change, e.g. for weather forecasting or climate simulation
Landscapes
- Investigating Or Analysing Materials By Optical Means (AREA)
Description
本発明は、雲形雲層計測装置及び雲形雲層計測方法に関する。 The present invention relates to a cloud layer measurement device and a cloud layer measurement method.
従来、航空気象観測では、どのような雲がどの高度に存在するかが重要な観測項目である。具体的には、同じ高度帯に存在する雲のまとまりについて、その雲形と雲底高度をまとめた情報を雲層情報として提供することが行われている。このような情報は、従来は観測員の目視観測により記録されるものであり、自動化することで人件費を削減することができるほか、多くの経験を要する観測員の習熟支援に貢献できる。 Traditionally, an important observation item in aviation weather observations is what type of clouds exist at what altitude. Specifically, for groups of clouds that exist in the same altitude band, information summarizing the cloud shape and cloud base altitude is provided as cloud layer information. Such information has traditionally been recorded by observers through visual observation, but automating this process can reduce labor costs and contribute to helping observers who require a lot of experience become accustomed to the process.
このため、可視光画像に対する画像認識によって雲形を推定するモデルが作成されている。
また、雲高を計測するため、特開2004-170350号公報(特許文献1)に記載の技術がある。この公報には、「任意の地点から所定の視野角を有する受光手段によって、観測対象からの光を受け、所定の演算手段によって観測対象の温度情報を算出することを特徴とする。特に、受光手段が赤外線放射温度計であって、8~13μmを主たる透過帯とする光学フィルタを有する場合には、空気中のH2OやCO2の影響を大幅に低減し精度の高い観測が可能となる。また、こうした温度情報に基づいて雲底の高度を演算し、霜降り予測や降雨予測に応用することも可能である。」という記載がある。
For this reason, models have been developed that estimate cloud shapes through image recognition of visible light images.
Furthermore, there is a technology for measuring cloud height described in JP 2004-170350 A (Patent Document 1). This publication states that "light from an observation target is received by a light receiving means having a predetermined viewing angle from an arbitrary point, and temperature information of the observation target is calculated by a predetermined calculation means. In particular, when the light receiving means is an infrared radiation thermometer and has an optical filter with a main transmission band of 8 to 13 μm, the influence of H 2 O and CO 2 in the air is significantly reduced, enabling highly accurate observation. In addition, the altitude of the cloud base can be calculated based on such temperature information, and this can be applied to frost prediction and rainfall prediction."
しかしながら、可視光画像に対する画像認識により雲形マップを作成しても、雲高の情報を得ることができない。例えば雲層が2層形成されており、いずれも同じ雲形の場合、雲形マップはすべての領域が同一となる。一方で、赤外線カメラからは雲の相対的な雲高が取得できるものの、雲のテクスチャなどの画像特徴量が失われるため雲形の認識が困難である。
そこで、本発明では、雲形と雲高に関する情報を総合的に提供することを目的とする。
However, even if a cloud shape map is created by image recognition of visible light images, it is not possible to obtain information on cloud height. For example, if two cloud layers are formed and both have the same cloud shape, all areas of the cloud shape map will be the same. On the other hand, although an infrared camera can obtain the relative cloud height of clouds, image features such as the cloud texture are lost, making it difficult to recognize the cloud shape.
Therefore, an object of the present invention is to provide comprehensive information regarding cloud shape and cloud height.
上記目的を達成するために、代表的な本発明の雲形雲層計測装置の一つは、画像内における雲の位置及び雲形を示す雲形マップと画像内における雲の位置及び相対雲高を示す相対雲高マップとを比較し、該比較の結果に基づいて前記雲形マップと前記相対雲高マップの位置関係を同定する画像内位置同定部と、前記位置関係を用いて前記雲形マップに示された雲形を前記相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報を出力する雲層推定部と、を備えたことを特徴とする。
また、代表的な本発明の雲形雲層計測方法の一つは、装置が、画像内における雲の位置及び雲形を示す雲形マップと画像内における雲の位置及び相対雲高を示す相対雲高マップとを比較し、該比較の結果に基づいて前記雲形マップと前記相対雲高マップの位置関係を同定する画像内位置同定ステップと、前記位置関係を用いて前記雲形マップに示された雲形を前記相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報を出力する雲層推定ステップと、を含むことを特徴とする。
In order to achieve the above-mentioned object, one of the representative cloud shape and cloud layer measurement devices of the present invention is characterized by comprising an in-image position identification unit that compares a cloud shape map indicating the position and cloud shape of clouds in an image with a relative cloud height map indicating the position and relative cloud height of clouds in an image, and identifies the positional relationship between the cloud shape map and the relative cloud height map based on the result of the comparison, and a cloud layer estimation unit that uses the positional relationship to separate the cloud shapes shown in the cloud shape map by the relative cloud height, and outputs cloud shape and cloud layer information that corresponds to the cloud shape and relative cloud height.
Furthermore, one of the representative cloud shape and cloud layer measurement methods of the present invention is characterized in that it includes an in-image position identification step in which an apparatus compares a cloud shape map indicating the position and cloud shape of clouds in an image with a relative cloud height map indicating the position and relative cloud height of clouds in an image, and identifies the positional relationship between the cloud shape map and the relative cloud height map based on the result of the comparison, and a cloud layer estimation step in which an apparatus uses the positional relationship to separate the cloud shapes shown in the cloud shape map by the relative cloud height, and outputs cloud shape and cloud layer information that corresponds to the cloud shape and the relative cloud height.
本発明によれば、雲形と雲高に関する情報を総合的に提供できる。上記した以外の課題、構成及び効果は以下の実施の形態の説明により明らかにされる。 The present invention can provide comprehensive information on cloud shape and cloud height. Problems, configurations, and advantages other than those described above will become clear from the description of the embodiments below.
以下、実施例を図面を用いて説明する。 The following describes the embodiment with reference to the drawings.
図1は、実施例に係る雲形雲層計測装置の機能構成図である。
図1に示した雲形雲層計測装置10は、可視光カメラ11と赤外線カメラ12とを備える。また、雲形雲層計測装置10は、可視光画像受付部21、赤外線画像受付部22、雲形推定部23、雲底温度算出部24、画像内位置同定部25及び雲層推定部26の機能部を有する。
FIG. 1 is a functional configuration diagram of a cloud layer measuring device according to an embodiment.
The cloud
可視光カメラ11と赤外線カメラ12は、空の画像を撮像する撮像装置であり、撮像範囲の少なくとも一部が重複する。
可視光画像受付部21は、可視光カメラ11が撮像した可視光画像を取得し、雲形推定部23に出力する。
赤外線画像受付部22は、赤外線カメラ12が撮像した赤外線画像を取得し、雲底温度算出部24に出力する。
The
The visible light
The infrared
雲形推定部23は、例えば機械学習により予め作成した雲形認識モデル31を用い、可視光画像内における雲の雲形を推定し、雲の位置及び雲形を示す雲形マップ32を生成する。ここで、雲形とは、雲をその形状により分類したものである。例えば、十種雲形と呼ばれる分類では、雲の形状は「巻雲、巻積雲、巻層雲、高積雲、高層雲、乱層雲、層積雲、層雲、積雲、積乱雲」のいずれかの雲形に分類される。
The cloud
雲底温度算出部24は、赤外線画像内における雲の位置及び相対雲高を示す相対雲高マップ33を生成する。雲底温度は、雲の高度に対応することが知られている。大気の状態等に影響を受けるため、雲底温度から絶対的な高度を求めることは困難であるが、複数の雲層が存在する場合に雲層間の相対高度は特定可能である。
そこで、雲底温度算出部24は、赤外線画像から雲底の温度を計測して、赤外線画像内の雲の相対的な雲高を算出し、相対雲高マップ33を出力する。
The cloud base
Therefore, the cloud base
画像内位置同定部25は、雲形マップ32と相対雲高マップ33とを比較し、該比較の結果に基づいて雲形マップ32と相対雲高マップ33の位置関係を同定する。
例えば、山の稜線や建造物等が、雲形マップ32と相対雲高マップ33に共通して含まれるならば、これらの物体を基準物体として用い、雲形マップ32と相対雲高マップ33の位置関係を同定することができる。
しかしながら、空を撮像した画像を処理対象とする関係上、雲形マップ32と相対雲高マップ33に基準物体の像が含まれることは必ずしも期待できない。
画像内位置同定部25は、基準物体に依存することなく、雲形マップ32と相対雲高マップ33の位置関係を同定することができる。
The intra-image
For example, if mountain ridges, buildings, etc. are included in common in the
However, since the images to be processed are images of the sky, it cannot necessarily be expected that the
The intra-image
具体的には、画像内位置同定部25は、雲が占める領域に基づく位置関係の同定を行う。一例として、画像内位置同定部25は、雲形マップ32における雲の境界線と相対雲高マップ33における雲の境界線とを比較して、雲の境界線の一致度が閾値を超えるよう位置合わせを行う。
Specifically, the in-image
ここで、例えば異なる雲高に同一の雲形が存在する場合、相対雲高マップ33の境界は雲高の境界に沿って生成されるが、雲形マップ32の境界線は雲形に沿って生成される。このため、相対雲高マップ33には境界線が存在するが、雲形マップ32には対応する境界線が存在しない状態が発生する可能性があり、このような状態では境界線の比較が適正に行えない。
そこで、画像内位置同定部25は、相対雲高マップ33に示された異なる雲高を結合するマージ処理を行って、マージにより得られた雲の境界線を雲形マップ32の境界線と比較する。
雲形と雲高については、「一つの雲高には一つの雲形しか出現しない」、「同一の雲形は複数の雲高に出現しうる」という前提を置くことができる。画像内位置同定部25は、これらの前提を制約条件として、雲高の組合せパターンを求め、それぞれのパターンの境界線を雲形マップ32の境界線と比較することで、一致度が閾値を超える組合せを探索する。
Here, for example, when the same cloud shape exists at different cloud heights, the boundaries of the relative
Therefore, the intra-image
Regarding cloud shape and cloud height, it is possible to make the assumptions that "only one cloud shape appears at one cloud height" and "the same cloud shape can appear at multiple cloud heights." The intra-image
また、雲形によっては赤外放射の強度が不足し、赤外線画像に写らない場合がある。このような場合には、雲形マップ32には境界線が存在するが、相対雲高マップ33には対応する境界線が存在しない状態が発生する可能性があり、このような状態では境界線の比較が適正に行えない。
そこで、画像内位置同定部25は、雲形マップ32に示された雲形のうち、所定の種別の雲形を除外して、相対雲高マップ33と比較する。
In addition, depending on the cloud shape, the intensity of infrared radiation may be insufficient and the cloud may not appear in the infrared image. In such a case, a boundary line may exist in the
Therefore, the in-image
雲層推定部26は、画像内位置同定部25によってされた前記位置関係を用いて雲形マップ32に示された雲形を相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報34を出力する。
すなわち、雲形雲層計測装置10の出力である雲形・雲層情報34には、何層の雲層が存在するか、各層の雲形、各層の高さの相対関係が示されることになる。
The cloud
That is, the cloud shape/
図2は、実施例に係る雲形雲層計測装置のハードウェア構成図である。図2に示したように、雲形雲層計測装置10は、既に説明した可視光カメラ11及び赤外線カメラ12に加え、表示部13、入力部14、CPU(Central Processing Unit)15、主記憶装置16及び補助記憶装置17を備える。
Figure 2 is a hardware configuration diagram of the cloud layer measurement device according to the embodiment. As shown in Figure 2, the cloud
表示部13は、例えば液晶ディスプレイであり、雲形雲層計測装置10の操作者に対する各種情報の表示出力に用いられる。雲形・雲層情報34の出力についても、表示部13による表示により出力可能である。
入力部14は、例えばキーボードなどであり、操作者からの操作入力を受け付ける。
The
The
CPU15は、各種のプログラムやデータを主記憶装置16に展開し、プログラムを順次実行することで、各種機能を実現することができる。
主記憶装置16は、例えばRAM(Random Access Memory)である。
具体的には、CPU15は、雲形雲層計測プログラムを主記憶装置16に展開して実行することで、可視光画像受付部21、赤外線画像受付部22、雲形推定部23、雲底温度算出部24、画像内位置同定部25及び雲層推定部26の機能を実現する。
The
The
Specifically, the
補助記憶装置17は、例えばハードディスクドライブなどであり、各種データを記憶する。
具体的には、補助記憶装置17は、雲形認識モデル31、雲形マップ32、相対雲高マップ33及び雲形・雲層情報34などを記憶する。
The
Specifically, the
図3は、雲の境界線に基づく位置同定の説明図である。同図では、同じ空を撮像して作成した雲形マップ32と相対雲高マップ33を示している。
雲形マップ32には、雲形T1、雲形T2、雲形T3が含まれている。一方、相対雲高マップ33には、雲高H1、雲高H2、雲高H3が示されている。
3 is an explanatory diagram of position identification based on cloud boundaries, showing a
The
雲高H2と雲高H3の雲は、同一の雲形T2である。そのため、相対雲高マップにおける雲高H2と雲高H3の境界線は、雲形マップには存在しない。
そこで、雲形雲層計測装置10は、雲高の組合せパターンを探索し、雲高をマージすることで相対雲高マップ33aを生成する。組合せパターンの探索については後述することとし、図3では、雲高H2と雲高H3をマージした相対雲高マップ33aを示す。
Clouds with cloud heights H2 and H3 are of the same cloud shape T2. Therefore, the boundary between cloud heights H2 and H3 in the relative cloud height map does not exist in the cloud shape map.
Therefore, the cloud-shaped cloud
雲形マップ32の雲形T3は、例えばガス状の層雲であり、赤外放射の強度不足により、相対雲高マップ33には含まれていない。相対雲高マップ33に写ることが期待できない雲は、雲形により判別可能である。
そこで、雲形雲層計測装置10は、予め所定の種別の雲形を除外対象として設定しておき、雲形マップ32から除外対象の種別の雲形を除外して、相対雲高マップ33aを生成する。図3では、雲形T3を除外した雲形マップ32aを示す。
Cloud type T3 in the
Therefore, the cloud-shaped cloud
雲形雲層計測装置10は、雲高のマージを行った相対雲高マップ33aにおける雲の境界線と、所定の雲形を除外した雲形マップ32aにおける雲の境界線とを比較し、一致度が閾値を超えるよう位置合わせを行う。
The cloud shape and cloud
雲形雲層計測装置10は、基準物体に基づく位置関係の同定、雲の境界線に基づく位置関係の同定、雲高のマージ、所定の種別の雲形の除外を適宜組み合わせて用いることができる。これらの位置関係の同定方法は、いずれを優先して使用するかについて順位を設定してもよい。
The cloud
図4は、優先順位に沿った位置関係の同定処理を示すフローチャートである。まず、雲形雲層計測装置10の画像内位置同定部25は、建造物や山の稜線を基準物体として位置同定する(ステップS101)。基準物体による位置同定が行えたならば、そのまま処理を終了することができる。
Figure 4 is a flowchart showing the process of identifying positional relationships according to priority order. First, the image
基準物体による位置同定が行えなければ、画像内位置同定部25は、雲形マップ32と相対雲高マップ33から境界線を抽出して比較し、位置同定を行う(ステップS102)。雲高のマージや所定雲形の除外を行うことなく、境界線による位置同定が行えた場合、すなわち、境界線の一致度が閾値を超えた場合、そのまま処理を終了することができる。
If position identification using a reference object is not possible, the in-image
ステップS102で境界線の一致度が閾値を超えなければ、画像内位置同定部25は、雲高をマージして境界線を比較し、位置同定を行う(ステップS103)。その結果、境界線の一致度が閾値を超えた場合、そのまま処理を終了することができる。
If the degree of coincidence of the boundary lines does not exceed the threshold in step S102, the in-image
雲高のマージを行っても境界線の一致度が閾値を超えなければ、画像内位置同定部25は、所定の種別の雲高を除外して境界線を比較し、位置同定を行う(ステップS104)。
If the degree of coincidence of the boundary lines does not exceed the threshold even after merging the cloud heights, the intra-image
図4では、雲形雲層計測装置10は、基準物体による位置同定を優先している。これは、基準物体が存在するならば、高い精度で確実に位置同定が可能だからである。
基準物体による位置同定ができない場合に、雲形雲層計測装置10は、境界線による位置同定を採用する。そして、一致度が閾値を超えなければ、雲高マージ、雲形除外の順に採用する。雲形除外の優先度を下げるのは、所定の種別の雲形であっても赤外線画像に写っている場合があり、雲形の除外が一致度の低下を招く可能性があるためである。
なお、図4に示した優先順位はあくまで一例であり、位置関係の同定方法をどのように選択するかは任意に定めることができる。
In Fig. 4, the cloud
When position identification using a reference object is not possible, the cloud type cloud
It should be noted that the priority order shown in FIG. 4 is merely an example, and the method for identifying the positional relationship can be selected arbitrarily.
図5は、雲高のマージの処理手順を示すフローチャートである。画像内位置同定部25は、まず、雲形マップ32、相対雲高マップ33を取得する(ステップS201)。次に、画像内位置同定部25は、両マップから境界線を抽出する(ステップS202)。
Figure 5 is a flowchart showing the processing procedure for merging cloud heights. The in-image
画像内位置同定部25は、抽出した境界線の一致度を計算し(ステップS203)、一致度が閾値を超えるか否かを判定する(ステップS204)。
The image
ステップS204で一致度が閾値を超えなければ(ステップS204;No)、画像内位置同定部25は、相対雲高マップ33の雲高の組み合わせを選択し、マージする(ステップS205)。その後、ステップS202に戻ることで、雲高をマージした相対雲高マップ33aと雲形マップ32から境界線を抽出する。
If the degree of coincidence does not exceed the threshold in step S204 (step S204; No), the image
一致度が閾値を超えず、ステップS205に移行する度に、画像内位置同定部25は、異なる組合せを選択する。
そして、一致度が閾値を超えたならば(ステップS205;Yes)、画像内位置同定部25は、両マップの重ね合わせ位置を決定し(ステップS206)、処理を終了する。
Each time the degree of coincidence does not exceed the threshold and the process proceeds to step S205, the intra-image
If the degree of coincidence exceeds the threshold value (step S205; Yes), the intra-image
雲層推定部26は、画像内位置同定部25が決定した重ね合わせ位置で雲形マップ32と相対雲高マップ33とを重ね合わせ、雲形マップ32に示された雲形を相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報34を出力する。
重ね合わせに用いる相対雲高マップ33は、雲高マージを行う前の相対雲高マップ33である。また、雲形を分離する雲形マップ32は、所定の種別の雲形を除外する前の雲形マップ32である。したがって、雲高を対応付けられていない雲層が、雲形・雲層情報34に含まれる場合がある。
一例として、図3の雲形マップ32及び相対雲高マップ33から得られる雲形・雲層情報34は、次の通りである。
第1層:雲形T1,相対高度H1
第2層:雲形T2,相対高度H2
第3層:雲形T2,相対高度H3
第4層:雲形T3,相対高度不明
(相対高度は、H1<H2<H3)
The cloud
The relative
As an example, the cloud shape/
First layer: Cloud type T1, relative height H1
Second layer: Cloud type T2, relative height H2
3rd layer: Cloud shape T2, relative height H3
4th layer: Cloud type T3, relative altitude unknown (relative altitude is H1<H2<H3)
これまでの説明では、雲形マップ32と相対雲高マップ33における雲の境界線を比較することで、雲が占める領域に基づく位置関係の同定を行う場合を例示したが、本発明はこれに限定されるものではない。他の例として、雲形マップ32における雲に外接する矩形と、相対雲高マップ33における雲に外接する矩形とを比較することでも、雲が占める領域に基づく位置関係の同定が可能である。
In the explanation so far, a case has been given in which the positional relationship based on the area occupied by the cloud is identified by comparing the cloud boundary lines in the
図6は、雲の外接矩形に基づく位置同定の説明図である。まず、雲形雲層計測装置10は、図3と同様に、雲形除去と雲高マージを行い、雲形マップ32aと相対雲高マップ33aを生成する。
Figure 6 is an explanatory diagram of position identification based on the circumscribing rectangle of a cloud. First, the cloud shape and cloud
その後、雲形雲層計測装置10は、雲形マップ32aにおける雲に外接する矩形と、相対雲高マップ33aにおける雲に外接する矩形とをそれぞれ検出し、矩形領域として設定する。
図6では、矩形領域を設定した雲形マップ32bと、矩形領域を設定した相対雲高マップ33bを示している。
雲形マップ32bには、矩形領域A1~A3が設定され、相対雲高マップ33bには、矩形領域B1~B3が設定されている。
Then, the cloud shape cloud
FIG. 6 shows a cloud shape map 32b in which a rectangular region is set, and a relative cloud height map 33b in which a rectangular region is set.
Rectangular regions A1 to A3 are set on the cloud shape map 32b, and rectangular regions B1 to B3 are set on the relative cloud height map 33b.
雲形雲層計測装置10は、矩形領域A1~A3と矩形領域B1~B3を比較し、一致度が閾値を超えるよう位置合わせを行う。
このように矩形領域を比較することで、境界線を比較するよりも処理負荷を軽減することができる。なお、矩形領域を用いる場合には、雲高マージにおける組合せの探索も矩形領域の比較により行えばよい。
The cloud
By comparing rectangular regions in this way, the processing load can be reduced compared to comparing boundary lines. When rectangular regions are used, the search for combinations in cloud height merging can also be performed by comparing rectangular regions.
次に、相対雲高マップ33の作成について説明する。
雲底温度算出部24は、同一温度帯の領域をグルーピングすることで同一雲高の領域を決定する。
赤外線カメラ12の温度分解能が高く、同一の雲層内であっても温度が一定でない場合、温度のヒストグラムを作成して出現したピークの数からグルーピングする際のグループ数を決定する。その後に一般的なクラスタリングを実施してもいい。クラスタリングはグループ数を自動決定する手法でも良い。あるいは、各雲層で最頻の温度からの差異の許容値を手動で決定しても良い。
Next, the creation of the relative
The cloud base
If the
図7は、温度ヒストグラムからの雲層推定の説明図である。図7では、ピクセル数を温度ごとに集計して温度ヒストグラムを作成している。図7の温度ヒストグラムは、3つのピークを有しており、3つのピークに対応する3つの雲層L1~L3が存在すると推定可能である。 Figure 7 is an explanatory diagram of estimating cloud layers from a temperature histogram. In Figure 7, the number of pixels is tallied for each temperature to create a temperature histogram. The temperature histogram in Figure 7 has three peaks, and it can be estimated that there are three cloud layers L1 to L3 corresponding to the three peaks.
上述してきたように、開示の雲形雲層計測装置10は、画像内における雲の位置及び雲形を示す雲形マップ32と画像内における雲の位置及び相対雲高を示す相対雲高マップ33とを比較し、該比較の結果に基づいて前記雲形マップ32と前記相対雲高マップ33の位置関係を同定する画像内位置同定部25と、前記位置関係を用いて前記雲形マップ32に示された雲形を前記相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報34を出力する雲層推定部26と、を備えたことを特徴とする。
かかる構成及び動作により、雲形雲層計測装置10は、雲形と雲高に関する情報を総合的に提供できる。
As described above, the disclosed cloud shape and cloud
With such a configuration and operation, the cloud shape and cloud
また、開示の雲形雲層計測装置10は、予め作成した雲形認識モデル31により可視光画像内の雲の雲形を推定して前記雲形マップ32を出力する雲形推定部23と、赤外線カメラ12により撮像された赤外線画像の出力から雲底の温度を計測し相対的な雲高を算出して前記相対雲高マップ33を出力する雲底温度算出部24と、をさらに備える。
このため、雲形認識モデル31から求められる雲形と、正外線画像から得られる雲梯の温度を利用し、雲形と相対雲高を対応付けて出力できる。
In addition, the disclosed cloud shape cloud
Therefore, by utilizing the cloud shape obtained from the cloud
また、開示の雲形雲層計測装置10では、前記画像内位置同定部25は、前記雲形マップ32における雲の境界線と前記相対雲高マップ33における雲の境界線とを比較して前記位置関係を同定する。
このため、基準となる物体の有無に依存することなく、雲形マップ32と相対雲高マップ33の位置関係を同定することができる。
In addition, in the disclosed cloud shape cloud
Therefore, the positional relationship between the
また、開示の雲形雲層計測装置10では、前記画像内位置同定部25は、前記相対雲高マップ33に示された異なる雲高の雲を結合して、前記雲形マップと比較する。
このため、雲高の情報を持たない雲形マップ32との比較を実現することができる。
In addition, in the disclosed cloud shape
This makes it possible to realize a comparison with the
また、開示の雲形雲層計測装置10は、前記画像内位置同定部25は、前記雲形マップ32に示された雲形のうち、所定の種別の雲形を除外して、前記相対雲高マップ33と比較する。
このため、赤外線画像に写らない雲形が含まれる場合にも、雲形マップ32と相対雲高マップ33との比較を行うことができる。
In addition, in the disclosed cloud shape cloud
Therefore, even when a cloud shape that is not captured in the infrared image is included, the
また、開示の雲形雲層計測装置10では、前記画像内位置同定部25は、前記雲形マップ32と前記相対雲高マップ33に共通して含まれる物体を基準物体として用いて前記位置関係を同定する。
このため、基準となる物体が存在する場合には、簡易且つ高精度に位置合わせを行うことができる。
In addition, in the disclosed cloud shape cloud
Therefore, when a reference object is present, alignment can be performed easily and with high accuracy.
また、開示の雲形雲層計測装置10では、前記画像内位置同定部25は、前記雲形マップ32における雲に外接する矩形と、前記相対雲高マップ33における雲に外接する矩形とを比較して前記位置関係を同定する。
このため、処理負荷を抑制しつつ、基準となる物体の有無に依存することなく、雲形マップ32と相対雲高マップ33の位置関係を同定することができる。
In addition, in the disclosed cloud-shaped cloud
Therefore, the positional relationship between the
また、開示の雲形雲層計測装置10では、前記画像内位置同定部25は、前記雲形マップ32と前記相対雲高マップ33に共通して含まれる物体による位置関係の同定、前記雲が占める領域に基づく位置関係の同定、前記相対雲高の異なる雲を結合して行う位置関係の同定、所定の種別の雲形を除外して行う位置関係の同定の順に優先的に位置関係の同定方法を選択する。
このように優先順位を設けることで、状況に応じて適応的な同定方法の選択が可能である。
In addition, in the disclosed cloud-shaped cloud
By setting priorities in this way, it is possible to select an identification method that is appropriate for the situation.
なお、本発明は上記の実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、かかる構成の削除に限らず、構成の置き換えや追加も可能である。 The present invention is not limited to the above-mentioned embodiment, but includes various modified examples. For example, the above-mentioned embodiment has been described in detail to clearly explain the present invention, and is not necessarily limited to having all of the configurations described. Furthermore, it is possible to replace or add configurations, rather than deleting such configurations.
10:雲形雲層計測装置、11:可視光カメラ、12:赤外線カメラ、13:表示部、14:入力部、15:CPU、16:主記憶装置、17:補助記憶装置、21:可視光画像受付部、22:赤外線画像受付部、23:雲形推定部、24:雲底温度算出部、25:画像内位置同定部、26:雲層推定部、31:雲形認識モデル、32:雲形マップ、32a:雲形マップ、32b:雲形マップ、33:相対雲高マップ、33:雲形マップ、33a:相対雲高マップ、33a:雲形マップ、33b:相対雲高マップ、34:雲形・雲層情報 10: Cloud shape and cloud layer measurement device, 11: Visible light camera, 12: Infrared camera, 13: Display unit, 14: Input unit, 15: CPU, 16: Main memory device, 17: Auxiliary memory device, 21: Visible light image reception unit, 22: Infrared image reception unit, 23: Cloud shape estimation unit, 24: Cloud base temperature calculation unit, 25: Image position identification unit, 26: Cloud layer estimation unit, 31: Cloud shape recognition model, 32: Cloud shape map, 32a: Cloud shape map, 32b: Cloud shape map, 33: Relative cloud height map, 33: Cloud shape map, 33a: Relative cloud height map, 33a: Cloud shape map, 33b: Relative cloud height map, 34: Cloud shape and cloud layer information
Claims (9)
前記位置関係を用いて前記雲形マップに示された雲形を前記相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報を出力する雲層推定部と、
を備えたことを特徴とする雲形雲層計測装置。 An image position identification unit that compares a cloud shape map showing the position and shape of clouds in an image with a relative cloud height map showing the position and relative cloud height of clouds in an image, and identifies the positional relationship between the cloud shape map and the relative cloud height map based on the result of the comparison;
A cloud layer estimation unit that separates the cloud shapes shown in the cloud shape map by the relative cloud height using the positional relationship and outputs cloud shape and cloud layer information in which the cloud shapes and the relative cloud heights are associated with each other;
A cloud layer measuring device comprising:
予め作成した雲形認識モデルにより可視光画像内の雲の雲形を推定して前記雲形マップを出力する雲形推定部と、
赤外線カメラにより撮像された赤外線画像の出力から雲底の温度を計測し相対的な雲高を算出して前記相対雲高マップを出力する雲底温度算出部と、
をさらに備えたことを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
A cloud shape estimation unit that estimates the cloud shape of a cloud in a visible light image using a cloud shape recognition model created in advance and outputs the cloud shape map;
a cloud base temperature calculation unit that measures a cloud base temperature from an output of an infrared image captured by an infrared camera, calculates a relative cloud height, and outputs the relative cloud height map;
The cloud layer measuring device further comprises:
前記画像内位置同定部は、前記雲形マップにおける雲の境界線と前記相対雲高マップにおける雲の境界線とを比較して前記位置関係を同定することを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
The cloud shape layer measurement device is characterized in that the in-image position identification unit identifies the positional relationship by comparing the cloud boundary lines in the cloud shape map with the cloud boundary lines in the relative cloud height map.
前記画像内位置同定部は、前記相対雲高マップに示された異なる雲高の雲を結合して、前記雲形マップと比較することを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
The cloud layer measurement device is characterized in that the image position identification unit combines clouds of different cloud heights shown in the relative cloud height map and compares them with the cloud shape map.
前記画像内位置同定部は、前記雲形マップに示された雲形のうち、所定の種別の雲形を除外して、前記相対雲高マップと比較することを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
The cloud shape and cloud layer measurement device is characterized in that the image position identification unit excludes a predetermined type of cloud shape from the cloud shapes shown in the cloud shape map and compares it with the relative cloud height map.
前記画像内位置同定部は、前記雲形マップと前記相対雲高マップに共通して含まれる物体を基準物体として用いて前記位置関係を同定することを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
The cloud shape layer measurement device is characterized in that the in-image position identification unit identifies the positional relationship using an object that is commonly included in the cloud shape map and the relative cloud height map as a reference object.
前記画像内位置同定部は、前記雲形マップにおける雲に外接する矩形と、前記相対雲高マップにおける雲に外接する矩形とを比較して前記位置関係を同定することを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
The cloud shape cloud layer measurement device is characterized in that the in-image position identification unit identifies the positional relationship by comparing a rectangle circumscribing the cloud in the cloud shape map with a rectangle circumscribing the cloud in the relative cloud height map.
前記画像内位置同定部は、前記雲形マップと前記相対雲高マップに共通して含まれる物体による位置関係の同定、前記雲が占める領域に基づく位置関係の同定、前記相対雲高の異なる雲を結合して行う位置関係の同定、所定の種別の雲形を除外して行う位置関係の同定の順に優先的に位置関係の同定方法を選択することを特徴とする雲形雲層計測装置。 The cloud layer measuring device according to claim 1,
The cloud shape cloud layer measurement device is characterized in that the in-image position identification unit selects a positional relationship identification method in the following order of priority: identification of positional relationships based on objects commonly included in the cloud shape map and the relative cloud height map, identification of positional relationships based on the area occupied by the clouds, identification of positional relationships by combining clouds with different relative cloud heights, and identification of positional relationships by excluding a specified type of cloud shape.
画像内における雲の位置及び雲形を示す雲形マップと画像内における雲の位置及び相対雲高を示す相対雲高マップとを比較し、該比較の結果に基づいて前記雲形マップと前記相対雲高マップの位置関係を同定する画像内位置同定ステップと、
前記位置関係を用いて前記雲形マップに示された雲形を前記相対雲高により分離し、雲形と相対雲高とを対応付けた雲形・雲層情報を出力する雲層推定ステップと、
を含むことを特徴とする雲形雲層計測方法。
The device,
An in-image position identification step of comparing a cloud shape map showing the position and shape of clouds in the image with a relative cloud height map showing the position and relative cloud height of clouds in the image, and identifying the positional relationship between the cloud shape map and the relative cloud height map based on the result of the comparison;
A cloud layer estimation step of separating the cloud shapes shown in the cloud shape map by the relative cloud height using the positional relationship and outputting cloud shape and cloud layer information in which the cloud shapes and the relative cloud heights are associated with each other;
A method for measuring a cloud layer comprising:
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021165196A JP7637030B2 (en) | 2021-10-07 | 2021-10-07 | Cloud layer measuring device and cloud layer measuring method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021165196A JP7637030B2 (en) | 2021-10-07 | 2021-10-07 | Cloud layer measuring device and cloud layer measuring method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023056092A JP2023056092A (en) | 2023-04-19 |
| JP7637030B2 true JP7637030B2 (en) | 2025-02-27 |
Family
ID=86004531
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021165196A Active JP7637030B2 (en) | 2021-10-07 | 2021-10-07 | Cloud layer measuring device and cloud layer measuring method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7637030B2 (en) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116610186B (en) * | 2023-05-11 | 2026-02-06 | 福建万芯科技有限公司 | New energy photovoltaic power generation and energy storage method and related equipment |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004170350A (en) | 2002-11-22 | 2004-06-17 | Horiba Ltd | Observation device and observation method for cloud or the like |
| JP2004309309A (en) | 2003-04-07 | 2004-11-04 | Meteorological Agency | Cloud cover determining device |
| CN201628546U (en) | 2009-04-29 | 2010-11-10 | 中国气象局气象探测中心 | Cloud Height Automatic Observation Device |
| JP2013068429A (en) | 2011-09-20 | 2013-04-18 | Kansai Electric Power Co Inc:The | Photovoltaic power generation area output estimation apparatus, photovoltaic power generation area output estimation system and photovoltaic power generation area output estimation method |
| JP2014048131A (en) | 2012-08-30 | 2014-03-17 | Toshiba Corp | Image processing device, method, and program |
| JP2017532579A (en) | 2014-09-26 | 2017-11-02 | レユニワット | Detection apparatus and method for identifying and monitoring clouds in an empty observation region |
| US20190331831A1 (en) | 2018-04-26 | 2019-10-31 | Jiangsu Meteorological Observatory | Sea fog monitoring method based on multi-source satellite remote sensing data |
| WO2019244510A1 (en) | 2018-06-19 | 2019-12-26 | 古野電気株式会社 | Cloud observation device, cloud observation system, cloud observation method, and program |
| JP6762643B1 (en) | 2018-10-15 | 2020-09-30 | 国立研究開発法人宇宙航空研究開発機構 | Optical ground station operation management system, optical operation planning device, optical ground station operation management method and program |
| JP2021009075A (en) | 2019-07-01 | 2021-01-28 | 一般財団法人電力中央研究所 | Solar radiation prediction device, solar radiation prediction method and solar radiation prediction program |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FI852343A7 (en) * | 1984-12-27 | 1986-06-28 | Impulsphysik Gmbh | Cloud altimeter. |
-
2021
- 2021-10-07 JP JP2021165196A patent/JP7637030B2/en active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004170350A (en) | 2002-11-22 | 2004-06-17 | Horiba Ltd | Observation device and observation method for cloud or the like |
| JP2004309309A (en) | 2003-04-07 | 2004-11-04 | Meteorological Agency | Cloud cover determining device |
| CN201628546U (en) | 2009-04-29 | 2010-11-10 | 中国气象局气象探测中心 | Cloud Height Automatic Observation Device |
| JP2013068429A (en) | 2011-09-20 | 2013-04-18 | Kansai Electric Power Co Inc:The | Photovoltaic power generation area output estimation apparatus, photovoltaic power generation area output estimation system and photovoltaic power generation area output estimation method |
| JP2014048131A (en) | 2012-08-30 | 2014-03-17 | Toshiba Corp | Image processing device, method, and program |
| JP2017532579A (en) | 2014-09-26 | 2017-11-02 | レユニワット | Detection apparatus and method for identifying and monitoring clouds in an empty observation region |
| US20190331831A1 (en) | 2018-04-26 | 2019-10-31 | Jiangsu Meteorological Observatory | Sea fog monitoring method based on multi-source satellite remote sensing data |
| WO2019244510A1 (en) | 2018-06-19 | 2019-12-26 | 古野電気株式会社 | Cloud observation device, cloud observation system, cloud observation method, and program |
| JP6762643B1 (en) | 2018-10-15 | 2020-09-30 | 国立研究開発法人宇宙航空研究開発機構 | Optical ground station operation management system, optical operation planning device, optical ground station operation management method and program |
| JP2021009075A (en) | 2019-07-01 | 2021-01-28 | 一般財団法人電力中央研究所 | Solar radiation prediction device, solar radiation prediction method and solar radiation prediction program |
Non-Patent Citations (1)
| Title |
|---|
| 森川 優 他,全天球画像のデータ収集と雲形と状態判定,第32回人工知能学会全国大会論文集,2018年06月05日,1~4頁 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023056092A (en) | 2023-04-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11935288B2 (en) | Systems and methods for generating of 3D information on a user display from processing of sensor data for objects, components or features of interest in a scene and user navigation thereon | |
| JP6510247B2 (en) | Survey data processing apparatus, survey data processing method and program | |
| US9965701B2 (en) | Image processing apparatus and method | |
| US10878556B2 (en) | Interactive semi-automated borescope video analysis and damage assessment system and method of use | |
| US20140212028A1 (en) | Statistical point pattern matching technique | |
| US20160283774A1 (en) | Cloud feature detection | |
| US20160133008A1 (en) | Crack data collection method and crack data collection program | |
| JP6702097B2 (en) | Image processing program, image processing method, and image processing apparatus | |
| JP6464938B2 (en) | Image processing apparatus, image processing method, and image processing program | |
| JP6947927B2 (en) | Cloud observation equipment, cloud observation system, cloud observation method, and program | |
| CN111126183A (en) | Method for detecting damage of building after earthquake based on near-ground image data | |
| EP3239931A1 (en) | Image processing apparatus and image processing method | |
| CN108648194A (en) | Based on the segmentation of CAD model Three-dimensional target recognition and pose measuring method and device | |
| US10762372B2 (en) | Image processing apparatus and control method therefor | |
| JP7188798B2 (en) | Coordinate calculation device, coordinate calculation method, and program | |
| CN114529543B (en) | Installation and detection method and device for outer peripheral screw gasket of aero-engine | |
| JP7637030B2 (en) | Cloud layer measuring device and cloud layer measuring method | |
| EP3048558A1 (en) | Object detecting method and object detecting apparatus | |
| CN116051915B (en) | Dynamic scene RGB-D SLAM method based on clustering and geometric residual error | |
| Bağcı et al. | Building height prediction with instance segmentation | |
| CN117765526A (en) | Airport aircraft detection method based on digital model | |
| KR20210041146A (en) | Tracking management System based on photodata for construction field | |
| KR101787868B1 (en) | Apparatus and method for providing road weather information | |
| KR20150060032A (en) | System and method for motion detecting | |
| Takahashi et al. | Image blur detection method based on gradient information in directional statistics |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240620 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250110 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250128 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250214 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7637030 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |