JP7614080B2 - Danger situation reporting system - Google Patents
Danger situation reporting system Download PDFInfo
- Publication number
- JP7614080B2 JP7614080B2 JP2021203957A JP2021203957A JP7614080B2 JP 7614080 B2 JP7614080 B2 JP 7614080B2 JP 2021203957 A JP2021203957 A JP 2021203957A JP 2021203957 A JP2021203957 A JP 2021203957A JP 7614080 B2 JP7614080 B2 JP 7614080B2
- Authority
- JP
- Japan
- Prior art keywords
- dangerous situation
- report
- control
- machine
- signal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013480 data collection Methods 0.000 claims description 35
- 238000010801 machine learning Methods 0.000 claims description 24
- 101100494448 Caenorhabditis elegans cab-1 gene Proteins 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 238000000034 method Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 239000003638 chemical reducing agent Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000007274 generation of a signal involved in cell-cell signaling Effects 0.000 description 1
- 230000004313 glare Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000001932 seasonal effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Landscapes
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Control And Safety Of Cranes (AREA)
Description
本発明の実施形態は、クレーン等の荷役機械の運転時の危険状況レポートシステムに関する。 An embodiment of the present invention relates to a system for reporting dangerous situations during the operation of loading and unloading machines such as cranes.
荷役機械産業においては、荷役機械の運転手は、目標物を取るために巻上、横行または走行といった動作をさせ、スプレッダやトング、バケツ等のつかみ機構を持つ機器の位置合わせを行う。目標物をつかんだ後は、それを目標の位置へ置くために再度、巻上、横行または走行といった動作を行う。 In the cargo handling machinery industry, the operator of the cargo handling machinery performs operations such as hoisting, traversing or running to pick up the target object, and aligns the equipment with a gripping mechanism such as spreaders, tongs or buckets. After gripping the target object, the operator performs operations such as hoisting, traversing or running again to place it in the target position.
このような荷役機械は、制御装置や駆動装置を含む制御システムによりその動作を制御される。制御システムを構成する制御装置は、運転手が操作する運転操作用品からの操作にともなう電気信号を取り込んで、取り込んだ電気信号にもとづいて、駆動装置を制御するための電気信号を生成して駆動装置を駆動し、荷役機械を制御する。 The operation of such cargo handling machines is controlled by a control system that includes a control device and a drive device. The control device, which is part of the control system, receives electrical signals from the driving equipment operated by the driver, and generates electrical signals to control the drive device based on the received electrical signals, thereby driving the drive device and controlling the cargo handling machine.
荷役機械の操業状態は、制御装置に接続されたモニタリング装置に表示されていたり、データ収集装置に保存されていたりして、その荷役機械の運転手や荷役機械のメンテナンス等を行う技術員等は、荷役機械の操業状態の確認を行うことができる。データ収集装置は、制御装置が送受信する電気信号の他に、撮影装置を接続して操業の際の周囲状況を画像データとして取得し、取得した画像データを保存することができる場合もある。 The operating status of the loading and unloading machine is displayed on a monitoring device connected to the control device or stored in a data collection device, so that the operator of the loading and unloading machine or a technician who performs maintenance on the loading and unloading machine can check the operating status of the loading and unloading machine. In addition to the electrical signals sent and received by the control device, the data collection device may also be connected to a photographing device to capture image data of the surrounding conditions during operation and store the captured image data.
荷役機械の運転室とスプレッダ等の駆動部分は、離れた場所に設置されていることが多く、運転手は周囲状況に注意して操作しても、搬送している目標物や運転室と駆動部の配置から運転手からの死角が発生する場合がある。そのような場合には、目標物を荷役機械や船等の周囲の構造物に衝突させそうになったり、実際に衝突させて事故が発生したりする危険状況が生じることがある。このような危険状況を、「ヒヤリハット」と呼ぶことがある。 The cab of a loading and unloading machine and the drive parts such as the spreader are often located in separate locations, and even if the driver operates the machine while paying careful attention to his or her surroundings, blind spots may occur due to the object being transported and the location of the cab and drive parts. In such cases, dangerous situations may arise where the object is about to collide with the loading and unloading machine, ship, or other surrounding structures, or where an actual collision occurs, causing an accident. Such dangerous situations are sometimes called "near misses."
「ヒヤリハット」が生じた場合には、運転手は、事故後や日々の日報等で報告することになる。日報等の作成は、手作業で行われ、紙ベースで保存されることが多く、事故等との関係で対象の「ヒヤリハット」の状況を探し出すことが困難である。そのため、事故の原因分析・解明や報告書作成に非常に長い時間を要する場合がある。また、データ収集装置のデータを元に対象の操業状態を確認したりして、事故が起きないよう対策を取る必要があるが、膨大な量のデータから対象の操業データを特定することには、多くの時間を要する。 When a near miss occurs, the driver must report it after the accident or in a daily report. Daily reports are often created manually and stored on paper, making it difficult to identify the circumstances of the near miss in relation to the accident. This can mean that it can take a very long time to analyze and clarify the cause of an accident and to prepare a report. In addition, it is necessary to take measures to prevent accidents from occurring by checking the target operating status based on data from data collection devices, but it takes a lot of time to identify the target operating data from a huge amount of data.
本発明の実施形態は、危険状況が発生したときの制御信号および周囲の状況の動画データにもとづいて危険状況レポートを生成し、保存し、出力可能にする危険状況レポートシステムを提供することを目的とする。 The object of an embodiment of the present invention is to provide a dangerous situation reporting system that can generate, save, and output a dangerous situation report based on a control signal when a dangerous situation occurs and video data of the surrounding situation.
本発明の実施形態は、荷役機械の運転手によって操作される運転操作用品および前記荷役機械の動作部を駆動する電動機を駆動する駆動装置の間で複数の制御信号を送受信して前記駆動装置を制御するとともに、あらかじめ設定された条件にもとづいて、前記荷役機械の運転時に発生した危険状況の発生のタイミングを表すトリガ信号を生成する制御装置と、前記荷役機械の運転時における所望の視野範囲の動画データを取得するカメラと、前記複数の制御信号のうちあらかじめ設定された1つ以上の制御信号を収集し、前記動画データを前記1つ以上の制御信号に時刻同期して収集するとともに、前記トリガ信号の生成時刻の前後の期間を含む所定期間の前記1つ以上の制御信号および前記動画データを記憶するデータ収集装置と、前記データ収集装置に記憶された前記1つ以上の制御信号および前記動画データにもとづいて、発生した前記危険状況を報告するための所定の報告書形式の危険状況レポートを生成し、保存し、出力可能とするレポート作成装置と、を備える。前記レポート作成装置は、発生した前記危険状況に関するコメントを前記危険状況レポートに入力可能とする。
According to an embodiment of the present invention, there is provided a control device for controlling a driving device by transmitting and receiving a plurality of control signals between a driving device operated by a driver of a loading machine and a driving device that drives an electric motor that drives an operating unit of the loading machine, and for generating a trigger signal representing the timing of occurrence of a dangerous situation occurring during operation of the loading machine based on a preset condition , a camera for acquiring video data of a desired field of view during operation of the loading machine, a data collection device for collecting one or more control signals that are preset among the plurality of control signals, collecting the video data in time synchronization with the one or more control signals , and storing the one or more control signals and the video data for a predetermined period including a period before and after the generation of the trigger signal , and a report creation device for creating, storing, and outputting a dangerous situation report in a predetermined report format for reporting the dangerous situation that has occurred based on the one or more control signals and the video data stored in the data collection device . The report creation device allows a comment regarding the dangerous situation that has occurred to be input into the dangerous situation report .
本実施形態では、危険状況が発生したときの制御信号および周囲の状況の動画データにもとづいて危険状況レポートを生成し、保存し、出力可能にする危険状況レポートシステムが実現される。 In this embodiment, a dangerous situation reporting system is realized that can generate, save, and output a dangerous situation report based on a control signal when a dangerous situation occurs and video data of the surrounding situation.
以下、図面を参照しつつ、本発明の実施形態について説明する。
なお、図面は模式的または概念的なものであり、各部分の厚みと幅との関係、部分間の大きさの比率などは、必ずしも現実のものと同一とは限らない。また、同じ部分を表す場合であっても、図面により互いの寸法や比率が異なって表される場合もある。
なお、本願明細書と各図において、既出の図に関して前述したものと同様の要素には、同一の符号を付して詳細な説明を適宜省略する。
Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
The drawings are schematic or conceptual, and the relationship between the thickness and width of each part, the size ratio between parts, etc. are not necessarily the same as in reality. Even when the same part is shown, the dimensions and ratios of each part may be different depending on the drawing.
In this specification and each drawing, elements similar to those described above with reference to the previous drawings are given the same reference numerals and detailed description thereof will be omitted as appropriate.
(第1の実施形態)
図1は、本実施形態に係る危険状況レポートシステムを例示する模式的なブロック図である。
本実施形態および後述する他の実施形態では、運転室1、電気室2、脚部3および機械室4を含む荷役機械の電気制御システムに適用する危険状況レポートシステムについて、説明する。荷役機械は、たとえばクレーンであり、たとえばガントリークレーン等である。危険状況レポートシステムが適用される荷役機械の構成に応じて、運転室1、電気室2、脚部3および機械室4の構成が変わり得るが、これらの構成が相違した場合であっても、以下説明する具体例にもとづいて容易に適用することが可能である。
(First embodiment)
FIG. 1 is a schematic block diagram illustrating a dangerous situation reporting system according to the present embodiment.
In this embodiment and other embodiments described later, a dangerous situation reporting system is described which is applied to an electrical control system of a cargo handling machine including a
図1に示すように、本実施形態の危険状況レポートシステム100は、制御装置20と、データ収集装置30と、カメラ40と、レポート作成装置80と、を備える。この例では、制御装置20、データ収集装置30およびレポート作成装置80は、電気室2内に設けられている。カメラ40は、運転室1、電気室2、脚部3および機械室4のそれぞれに設けられている。
As shown in FIG. 1, the hazard
運転室1は、荷役機械を運転する運転手が搭乗する場所である。運転室1には、運転操作用品10および押ボタン70が設けられている。運転操作用品10は、運転手が操作する用品であり、たとえば始動スイッチや操作レバー等である。たとえば、コンテナの高さや位置等を表示する表示装置やメータ等も運転操作用品10として運転室1に配置されている。
The
押ボタン70は、運転操作用品10を介して、制御装置20に接続されている。運転手は、危険状況が生じたと判断したときに、押ボタン70を押す。押ボタン70は、運転室1内に設けられており、手で押すボタンであってもよいし、足で踏むフットスイッチ等であってもよい。押ボタン70は、運転室1内に設けられて、運転手が操作する場合に限らず、この例のように、電気室2内に設けてもよいし、荷役機械の外部に設けてもよい。たとえば、押ボタン70を押したときの電気信号を無線通信によって送信し、制御装置20によって受信できるようにすることで、荷役機械の外部にいる監督者が荷役機械の運転状態を監視して、押ボタン70を操作するようにしてもよい。
The
カメラ40は、運転室1内部を撮影するように設けられている。カメラ40は、たとえば、運転席に着席した運転手を視野に含むように、設けられている。このようなカメラ40の配置によって、危険状態が生じたときの運転手の動作を撮影して記録することができる。運転室1内のカメラ40は、1台に限らず、2台以上設けてもよい。
The
カメラ40は、運転室1内だけでなく、所望の場所に設けることができる。この例では、カメラ40は、脚部3および機械室4にも設けられている。この例では、電気室2には、カメラ40は設けられていないが、必要に応じて設けてもよい。各場所に配置されるカメラ40は、1台に限らず、監視すべき対象を視野に入れるように、複数台配置してもよい。
The
運転操作用品10は、制御装置20に接続されており、カメラ40は、データ収集装置30に接続されている。制御装置20は、運転操作用品10や押ボタン70から発せられる制御信号を受信する。データ収集装置30は、カメラ40に接続されており、カメラ40によって撮影された動画データを収集する。
The
この例では、制御装置20、データ収集装置30およびレポート作成装置80は、電気室2に設けられている。制御装置20、データ収集装置30およびレポート作成装置80は、すべて、あるいはその一部は、電気室2に限らず、他の場所、たとえば機械室4等に設けられてもよい。
In this example, the
脚部3は、荷役機械がガントリークレーン等の場合に設けられる。ガントリークレーンは、たとえば、船積み等する港湾の岸壁に設置される。岸壁に沿ってレールが敷設され、ガントリークレーンは、レールに沿って移動することができる。脚部3には、レール上を走行するための車輪が配置されており、車輪を駆動する電動機(図示せず)およびその電動機を駆動する駆動装置60が設けられている。
The
機械室4は、荷役機械がガントリークレーン等の場合には、機械室4にスプレッダ位置の横行や昇降等の駆動のための電動機や減速機等が設けられている。この例では、機械室4にこれらの電動機を駆動するための駆動装置50も設けられている。
When the loading and unloading machine is a gantry crane or the like, the
脚部3および機械室4の駆動装置50,60は、制御装置20に接続されている。制御装置20は、あらかじめ設定された制御プログラムおよび運転操作用品10からの電気信号にもとづいて動作する。制御装置20は、駆動装置50,60が生成した電気信号を受信して、受信した電気信号にもとづいて、コンテナの位置等の情報を表示するための電気信号を生成して、運転操作用品10に送信する。制御装置20と運転操作用品10との間で送受信される電気信号、制御装置20と押ボタン70との間で送受信される電気信号、制御装置20と駆動装置50,60との間で送受信される電気信号は、その一部またはすべてが電気信号に限らず、光信号等であってもよい。以下では制御装置20が他の要素と送受信する信号を制御信号というものとする。なお、押ボタン70が押され、押ボタン70が押されたことを表すために制御装置20が生成する制御信号を、他の制御信号と区別する場合には、トリガ信号と呼ぶものとする。
The
データ収集装置30は、制御装置20から1つ以上の制御信号を収集する。データ収集装置30がどのような制御信号を収集するかは、あらかじめ設定されている。また、データ収集装置30は、カメラ40が取得した映像データを収集する。カメラ40が複数台設置されている場合には、データ収集装置30は、それぞれのカメラ40を識別する信号とともに、カメラ40からの映像データを動画データとして収集する。
The
制御装置20は、押ボタン70が押されたことによりトリガ信号を生成すると、トリガ信号の前後の期間を含めた期間の制御信号をデータ収集装置30に記憶させる。データ収集装置30は、記憶する制御信号に時刻同期させて、カメラ40の映像データを動画データとして記憶する。トリガ信号の前後の期間は、あらかじめ設定されている。前後の期間は同じ長さであってもよいし、異なる長さであってもよい。トリガ信号の前後の期間は、収集し記憶する制御信号に共通であってもよいし、制御信号ごとに異なるように設定されてもよい。
When the
たとえば、データ収集装置30は、図示しないが、記憶装置を有しており、制御装置20から、あらかじめ設定された制御信号を受信して受信した制御信号を記憶装置に記憶する。データ収集装置30は、制御装置20によってトリガ信号が生成されたことを検出すると、たとえば、トリガ信号の前後の期間を含む期間の制御信号を記憶装置の他の領域に記憶する。データ収集装置30は、トリガ信号の前後の期間を含む期間の動画データを制御信号に時刻同期するようにして、記憶装置に保存する。
For example, the
押ボタン70が複数設けられている場合には、押ボタン70の設置箇所ごとに識別できる信号がトリガ信号に付与される。データ収集装置30は、識別されたトリガ信号ごとに制御信号および制御信号に時刻同期された動画データを記憶装置に保存する。
When
なお、上述の場合には、データ収集装置30は、制御信号および動画データをすべての期間について記憶装置に記憶するが、記憶装置の記憶容量が小さい場合には、トリガ信号の前後の期間を含む期間のみを記憶するようにしてもよい。
In the above case, the
レポート作成装置80は、データ収集装置30に接続されている。レポート作成装置80は、たとえば、あらかじめ設定されたタイミングで、データ収集装置30が収集した制御信号および動画データを取得する。あらかじめ設定された時間は、たとえば、1日の作業が終了する終業時刻にもとづいて定められ、レポート作成装置80は、毎日の危険状況を報告書形式にして出力する。レポート作成装置80が生成するレポートは、たとえば、押ボタン70が押された時刻の前後の期間を含む期間ごとに生成される。押ボタン70が複数設けられている場合には、押ボタン70の設置箇所ごとにレポートが生成される。
The
レポート作成装置80の操作者、たとえば、その日の運転手は、生成されたレポートに対して、レポート作成装置80に接続された入力装置を介して、手動で対策や注意事項等のコメントを入力することができる。
The operator of the
たとえば、レポート作成装置80によって生成され出力されたレポートは、定期的に、あるいは必要に応じて、たとえばデータセンターに設置されたサーバに送信され、荷役機械の運転手や、管理者、電気制御システムの保守点検者等で共有される。
For example, the reports generated and output by the
レポート作成装置80は、あらかじめ設定された分類基準にしたがって、レポートを生成することが可能である。分類基準は、たとえば荷役機械の動作ごとに設定される。具体的には、分類の1つは、コンテナの昇降動作の有無である。分類の他の1つは、コンテナの横行動作の有無である。コンテナの昇降動作を、上昇動作と下降動作に分けてもよい。また、上述の動作において、さらに細分化した分類基準を設けてもよい。たとえば、コンテナの昇降動作時の上昇速度の範囲や下降速度の範囲、コンテナの横行速度の範囲を細分類の基準としてもよい。また、制御装置20は、コンテナの位置や高さの情報も得ることができるので、分類基準として、コンテナの高さの範囲や、コンテナの横行の位置範囲を設けるようにしてもよい。
The
これらの分類基準は、制御装置20が送受信する制御信号の種別や、制御信号による速度基準のデータ等を適切に選択し、場合によっては、複数の制御信号が有するデータを演算することによって把握されるデータにもとづいて判定されることができる。
These classification criteria can be determined by appropriately selecting the type of control signal sent and received by the
分類基準は、荷役機械の動作に関連する項目に限らず、たとえば、早朝、昼間、夕方等の時刻範囲における作業であるかや、作業時の天候、何月の作業であるか等、としてもよい。 Classification criteria are not limited to items related to the operation of loading and unloading machinery, but may also be, for example, whether the work was done in the early morning, midday, evening, etc., the weather at the time of the work, the month in which the work was done, etc.
本実施形態の危険状況レポートシステム100の一連の動作をフローチャートを用いて説明する。
図2および図3は、本実施形態の危険状況レポートシステムの動作を説明するためのフローチャートの例である。
図2に示すように、ステップS1において、運転手等が押ボタン70を押すと、押ボタン70は、押ボタン70が押されたことを表す制御信号を制御装置20に送信する。
A series of operations of the dangerous
2 and 3 are examples of flowcharts for explaining the operation of the dangerous situation reporting system of this embodiment.
As shown in FIG. 2, in step S1, when the driver or the like presses the
ステップS2において、制御装置20は、押ボタン70が押されて生成された制御信号を受信したタイミングでトリガ信号を生成し、トリガ信号の前後の期間を含む期間の制御信号をデータ収集装置30に記憶させる。データ収集装置30は、記憶させる制御信号に時刻同期して、制御信号とともに動画データを記憶する。
In step S2, the
ステップS3において、レポート作成装置80は、記憶した制御信号および動画データを所定の形式に変換して、危険状況レポートとして生成し、出力可能とする。
In step S3, the
ステップS4において、レポート作成装置80は、生成した危険状況レポートを自己の記憶装置やサーバ等に保存する。
In step S4, the
図3に示すように、ステップS5において、レポート作成装置80は、生成した危険状況レポートをあらかじめ設定された分類基準にしたがって分類する。
As shown in FIG. 3, in step S5, the
ステップS6において、レポート作成装置80は、分類基準ごとに危険状況レポートを出力可能にする。
In step S6, the
本実施形態の危険状況レポートシステム100の効果について説明する。
本実施形態の危険状況レポートシステム100では、押ボタン70を押したことによって生成されたトリガ信号にもとづいて、収集する制御信号および動画データの期間を設定することができる。そのため、必要なデータをわずかな記憶容量で記憶することができる。
The effects of the dangerous
In the dangerous
記憶された制御信号および動画データは、レポート作成装置80によって、所定の形式で危険状況レポートを生成して、出力することができる。そのため、危険状況ごとの情報の共有をはかることに役立てることができる。
The stored control signals and video data can be used by the
記憶した制御信号および動画データには、記憶した単位ごとに危険状況に関するコメント等を手動で入力することができる。そのため、実際のデータとの関連でより有効な対策等をたてるのに役立てることができる。 Comments about dangerous situations can be manually entered for each unit of stored control signals and video data. This can be useful in coming up with more effective countermeasures in relation to actual data.
本実施形態の危険状況レポートシステム100では、荷役機械の動作状態や、作業時の自然条件(天候や季節等)が考慮された分類にしたがって、危険状況がレポートとして出力される。そのため、危険状況の解析が困難であった条件等を考慮して、問題を把握することが可能になる。
In this embodiment, the dangerous
レポートには、動画データが含まれるので、危険状況発生の回避手法等、運転手の熟練度によっては、参考となる行動を確認することができるので、技術・技能承継にも役立てることができる。 The report includes video data, so depending on the driver's level of skill, it is possible to check useful actions, such as methods for avoiding dangerous situations, which can also be useful for transferring skills and techniques.
押ボタン70を運転手だけでなく、外部の監督者等にも携帯させることによって、運転手の目の届かない箇所での危険状況発生の原因を追及することにも役立てることができる。
By having the
(第2の実施形態)
図4は、本実施形態に係る危険状況レポートシステムを例示する模式的なブロック図である。
図4に示すように、本実施形態の危険状況レポートシステム200は、制御装置220と、データ収集装置30と、カメラ40と、レポート作成装置80と、を備える。
本実施形態では、制御装置220は、所定の条件を満たしたときにトリガ信号として機器故障信号225を生成する。データ収集装置30は、機器故障信号225にもとづいて、制御信号および動画データを保存する。本実施形態の危険状況レポートシステム200では、制御装置220の構成が機器故障信号225を生成する点で、第1の実施形態の場合と相違し、他の点では、第1の実施形態の場合と同じである。同一の構成要素には、同一の符号を付して、詳細な説明を適宜省略する。
Second Embodiment
FIG. 4 is a schematic block diagram illustrating a dangerous situation reporting system according to the present embodiment.
As shown in FIG. 4 , the dangerous
In this embodiment, the
制御装置220は、機器故障信号225を生成する機能を有する。機器故障信号225は、制御装置220が運転操作用品10や駆動装置50,60から受信する制御信号により生成される。機器故障信号225は、たとえば、1つの制御信号があらかじめ設定されたしきい値を超えたり、下回ったりしたときに生成される。機器故障信号225は、1つの制御信号から生成される場合に限らず、複数の制御信号を所定の演算を行った結果にもとづいて生成されるようにしてもよい。
The
制御装置220は、機器故障信号225が生成された時刻の前後の期間を含む期間の制御信号および動画データをデータ収集装置30に記憶させる。
The
図5は、本実施形態の危険状況レポートシステムの動作を説明するためのフローチャートの例である。
図5に示すように、ステップS21において、制御装置220は、あらかじめ設定された制御信号が所定の条件を満たすことを検出し、機器故障信号225を生成する。
FIG. 5 is an example of a flowchart for explaining the operation of the dangerous situation reporting system of this embodiment.
As shown in FIG. 5, in step S21, the
ステップS22において、データ収集装置30は、機器故障信号225を生成した時刻の前後の期間を含む期間の制御信号および動画データを保存する。
In step S22, the
ステップS23において、レポート作成装置80は、所定の形式で危険状況レポートを生成し、出力を可能にする。
In step S23, the
ステップS24において、レポート作成装置80は、たとえば、あらかじめ設定された分類基準にしたがって、危険状況レポートを保存する。
In step S24, the
本実施形態の危険状況レポートシステム200の効果について説明する。
本実施形態の危険状況レポートシステム200は、制御装置220が生成した機器故障信号225にもとづいて、所定の制御信号および動画データを保存する。そのため、運転手の操作のような人間の五感による判断とは独立して、より客観的な故障や危険の状況を検出することができる。
The effects of the dangerous
The dangerous
なお、本実施形態の制御装置220では、第1の実施形態の場合の押ボタン70を設置して、押ボタン70によるトリガ信号の生成を、機器故障信号225によるトリガと併用してももちろんよい。また、特定の機器故障信号と押ボタン70によるトリガ信号との演算によって新たな機器故障信号を生成するようにしてもよい。
In addition, in the
(第3の実施形態)
図6は、本実施形態に係る危険状況レポートシステムを例示する模式的なブロック図である。
図6に示すように、本実施形態の危険状況レポートシステム300は、制御装置20と、データ収集装置30と、カメラ40と、レポート作成装置80と、機械学習装置385と、危険状況ランプ390と、を備える。
本実施形態の危険状況レポートシステム300では、機械学習装置385および危険状況ランプ390をさらに備える点で第1の実施形態の場合と相違し、他の点では、第1の実施形態の場合と同じである。同一の構成要素には同一の符号を付して詳細な説明を適宜省略する。
Third Embodiment
FIG. 6 is a schematic block diagram illustrating a dangerous situation reporting system according to the present embodiment.
As shown in FIG. 6 , the dangerous
The dangerous
機械学習装置385は、レポート作成装置80から危険状況レポートを取得する。機械学習装置385は、取得した危険状況レポートを入力し、危険状況となる制御信号を特定し、危険状況と判定されたときの条件を特定する。機械学習装置385は、たとえば、危険状況と判定されたときの条件にもとづいて、特定した制御信号に適切なレベルのしきい値を設定する。機械学習装置385は、特定した制御信号およびそのしきい値を制御装置20に送信し、制御装置20は、受信した制御信号およびしきい値を設定する。
The
危険状況判定のための制御信号が特定され、そのしきい値が設定された制御装置20は、制御信号がしきい値を超過した場合に警告信号を生成し、この例のように、警告信号によって危険状態ランプを点灯させるようにしてもよい。
The control signal for determining a dangerous situation is identified, and the
より具体的には、機械学習装置385は、危険状況レポートから、たとえば、吊荷荷重が一定値を超えるものと搬送した場合を危険状況と判定し、対応する制御信号(たとえば、駆動装置が生成するトルク信号等)を特定して、適切なしきい値を設定する。たとえば、横行速度が一定値を超えた場合を危険状況と判定し、対応する制御信号(たとえば、制御装置20が出力する速度基準等)を特定して、適切なしきい値を設定する。たとえば、コンテナの振れ角の検出値が一定値を超えた場合に危険状況と判定し、対応する制御信号(たとえば、コンテナ位置検出用レーザ検出器の出力信号等)を特定し、適切なしきい値を設定する。
More specifically, the
機械学習モデルに学習させるパラメータは、巻上位置、巻上速度、横行位置、横行速度、走行位置、走行速度、荷役荷重、各吊具のつかみ状態、搬送前の荷役物位置、搬送後の荷役物位置、荷役機械外の障害物の状態、月および時刻等とすることができる。 The parameters that the machine learning model is trained on can be the hoisting position, hoisting speed, traverse position, traverse speed, traveling position, traveling speed, cargo load, gripping state of each hoisting device, cargo position before transport, cargo position after transport, state of obstacles outside the cargo handling machine, month, time, etc.
上述の適切なしきい値を設定する際に、機械学習装置385が有する機械学習モデルは、たとえば、危険状況レポートにおいて、運転手等により入力されたコメント等の内容を参酌することによって、危険状況のレベルを複数段階設定するようにしてもよい。
When setting the appropriate threshold value described above, the machine learning model possessed by the
また、危険状況レポートに制御信号や動画データのほか、日時(年月日)やその日時における気象条件等も関連付けて置くことによって、機械学習モデルに季節的な日照条件(作業時のまぶしさ、暗さ)等も考慮した危険状況の判定基準とすることができる。 In addition, by associating the dangerous situation report with control signals, video data, and also the date and time (year, month, and day) and weather conditions at that date and time, the machine learning model can use seasonal lighting conditions (glare and darkness when working) as a criterion for determining dangerous situations.
機械学習モデルには、危険状況レポートにおいて分類基準とした荷役機械の動作、つまり、運転パターンごとに、危険状況を設定し、しきい値を設定するようにしてもよい。 The machine learning model may be configured to set dangerous situations and threshold values for each operation pattern of the loading and unloading machinery that is used as a classification criterion in the dangerous situation report, i.e., for each operating pattern.
機械学習装置385によって学習させるデータは、1台の荷役機械から収集されるデータに限らず、複数台の荷役機械の情報を通信ネットワークを介して収集し、より広範かつ大量のデータを収集するようにしてもよい。機械学習装置385は、収集されたデータにもとづいて、学習モデルに深層学習させるようにしてもよい。深層学習によれば、動画データも教師あり学習として利用し、より有効な危険状況判定モデルとすることができる。
The data learned by the
制御装置20は、機械学習装置385によって設定された危険状況判定条件で危険状況と判定されると、危険状況を表す信号を生成し、その信号の生成時刻の前後の期間を含む期間の制御信号および動画データをデータ収集装置30に記憶させる。
When the
本実施形態の危険状況レポートシステム300は、上述の第1の実施形態および第2の実施形態の場合と組み合わせて適用することができる。
The danger
本実施形態の危険状況レポートシステム300の一連の動作をフローチャートを用いて説明する。
図7および図8は、本実施形態の危険状況レポートシステムの動作を説明するためのフローチャートの例である。
図7に示すように、ステップS31において、機械学習装置385は、危険状況判定条件を制御装置20に設定する。
A series of operations of the dangerous
7 and 8 are examples of flowcharts for explaining the operation of the dangerous situation reporting system of this embodiment.
As shown in FIG. 7 , in step S31, the
ステップS32において、制御装置20は、危険状況判定条件の超過を検出すると、ステップS33において、警告信号を生成して運転操作用品10に出力する。
In step S32, when the
ステップS33において、運転操作用品10は、警告信号にもとづいて危険状況ランプ390を点灯させる。
In step S33, the driving
図8に示すように、ステップS31で危険状況判定条件が設定された制御装置20は、ステップS32において、制御装置20は、危険状況判定条件の超過を検出すると、トリガ信号を生成し、ステップS35において、トリガ信号が生成された時刻の前後の期間を含む期間の制御信号および動画データをデータ収集装置30に保存させる。
As shown in FIG. 8, in step S31, the
ステップS36において、レポート作成装置80は、危険状況レポートを生成し、出力可能にする。
In step S36, the
ステップS37において、レポート作成装置80は、生成したレポートをたとえば危険状況判定条件ごとに保存する。
In step S37, the
本実施形態の危険状況レポートシステム300の効果について説明する。
本実施形態の危険状況レポートシステム300は、機械学習装置385を備えている。機械学習装置385は、レポート作成装置80から危険状況レポートを取得して、機械学習モデルに危険状況レポートを入力して、危険状況判定条件を生成して出力する。危険条件判定条件は、制御装置20のための新たな危険状況判定に用いられる。そのため、あらかじめ設定されたトリガ信号の生成条件をさらに高度化し、適切な条件とすることができる。
The effects of the dangerous
The dangerous
本実施形態では、機械学習装置385が設定した危険状況を示す制御信号やそのデータにもとづいて、制御装置20の危険状況判定条件とする。そのため、制御装置20は、このような危険状況判定条件にもとづいて警告信号を生成することができ、運転手により安全な行動をうながすことが可能になり、危険状況が実際の事故に発展することを予防することができる。
In this embodiment, the
以上説明した実施形態によれば、危険状況が発生したときの制御信号や周囲の状況の動画データにもとづいて危険状況レポートを自動的に生成し、出力する危険状況レポートシステムを実現することができる。 According to the embodiment described above, it is possible to realize a danger situation report system that automatically generates and outputs a danger situation report based on a control signal when a danger situation occurs and video data of the surrounding situation.
以上、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他のさまざまな形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明およびその等価物の範囲に含まれる。また、前述の各実施形態は、相互に組み合わせて実施することができる。 Although several embodiments of the present invention have been described above, these embodiments are presented as examples and are not intended to limit the scope of the invention. These novel embodiments can be implemented in various other forms, and various omissions, substitutions, and modifications can be made without departing from the gist of the invention. These embodiments and their variations are included within the scope and gist of the invention, as well as within the scope of the invention and its equivalents described in the claims. In addition, the above-mentioned embodiments can be implemented in combination with each other.
1 運転室、2 電気室、3 脚部、4 機械室、10 運転操作用品、20,220 制御装置、30 データ収集装置、40 カメラ、50,60 駆動装置、70 押ボタン、100,200,300 危険状況レポートシステム、225 機器故障信号、385 機械学習装置、390 危険状況ランプ 1 Cab, 2 Electrical room, 3 Legs, 4 Machine room, 10 Driving equipment, 20, 220 Control device, 30 Data collection device, 40 Camera, 50, 60 Drive device, 70 Push button, 100, 200, 300 Danger situation report system, 225 Equipment failure signal, 385 Machine learning device, 390 Danger situation lamp
Claims (5)
前記荷役機械の運転時における所望の視野範囲の動画データを取得するカメラと、
前記複数の制御信号のうちあらかじめ設定された1つ以上の制御信号を収集し、前記動画データを前記1つ以上の制御信号に時刻同期して収集するとともに、前記トリガ信号の生成時刻の前後の期間を含む所定期間の前記1つ以上の制御信号および前記動画データを記憶するデータ収集装置と、
前記データ収集装置に記憶された前記1つ以上の制御信号および前記動画データにもとづいて、発生した前記危険状況を報告するための所定の報告書形式の危険状況レポートを生成し、保存し、出力可能とするレポート作成装置と、
を備え、
前記レポート作成装置は、発生した前記危険状況に関するコメントを前記危険状況レポートに入力可能とする危険状況レポートシステム。 a control device that controls a driving device by transmitting and receiving a plurality of control signals between a driving operation tool operated by a driver of the cargo handling machine and a driving device that drives an electric motor that drives an operating unit of the cargo handling machine, and that generates a trigger signal that indicates the timing of occurrence of a dangerous situation that occurs during operation of the cargo handling machine based on a preset condition ;
a camera for acquiring video data of a desired field of view during operation of the cargo handling machine;
a data collection device that collects one or more preset control signals from among the plurality of control signals, collects the video data in time synchronization with the one or more control signals , and stores the one or more control signals and the video data for a predetermined period including a period before and after the generation of the trigger signal ;
a report creation device that creates, stores, and outputs a dangerous situation report in a predetermined report format for reporting the dangerous situation that has occurred based on the one or more control signals and the video data stored in the data collection device ;
Equipped with
The report creation device is a dangerous situation report system that enables comments regarding the dangerous situation that has occurred to be input into the dangerous situation report .
前記制御装置は、前記複数の押ボタンのいずれが押されたかを識別して識別された複数の前記トリガ信号を生成し、
前記レポート作成装置は、前記識別された複数の前記トリガ信号ごとに前記危険状況レポートを生成し、保存し、出力可能とする請求項1記載の危険状況レポートシステム。 A plurality of push buttons are further provided at a plurality of locations to be monitored of the cargo handling machine,
The control device identifies which of the plurality of push buttons has been pressed and generates the identified plurality of trigger signals;
2. The dangerous situation reporting system according to claim 1, wherein the report generating device generates, stores, and outputs the dangerous situation report for each of the identified plurality of trigger signals.
前記複数の分類基準は、前記荷役機械の動作、前記荷役機械の運転日時、および前記荷役機械の搬送物の位置にもとづいて設定された請求項1~3のいずれか1つに記載の危険状況レポートシステム。 the report creation device is capable of creating, storing, and outputting the risk situation report for each of a plurality of preset classification criteria;
A dangerous situation reporting system as described in any one of claims 1 to 3, wherein the multiple classification criteria are set based on the operation of the loading machine, the operation date and time of the loading machine, and the position of the cargo being transported by the loading machine.
前記制御装置は、前記機械学習装置が出力した前記危険状況判定条件を設定して、前記危険状況判定条件を満たしたときに警告信号を生成する請求項1~4のいずれか1つに記載の危険状況レポートシステム。 a machine learning device having a machine learning model that receives the dangerous situation report generated by the report creation device and outputs a dangerous situation determination condition for determining a new dangerous situation,
The control device sets the dangerous situation determination condition output by the machine learning device, and generates a warning signal when the dangerous situation determination condition is satisfied. A dangerous situation reporting system according to any one of claims 1 to 4.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021203957A JP7614080B2 (en) | 2021-12-16 | 2021-12-16 | Danger situation reporting system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2021203957A JP7614080B2 (en) | 2021-12-16 | 2021-12-16 | Danger situation reporting system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2023089455A JP2023089455A (en) | 2023-06-28 |
| JP7614080B2 true JP7614080B2 (en) | 2025-01-15 |
Family
ID=86936491
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2021203957A Active JP7614080B2 (en) | 2021-12-16 | 2021-12-16 | Danger situation reporting system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7614080B2 (en) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008293184A (en) | 2007-05-23 | 2008-12-04 | Kayaba Ind Co Ltd | Operation management device |
| JP2018065680A (en) | 2016-10-21 | 2018-04-26 | 株式会社タダノ | Crane truck |
| JP2018144938A (en) | 2017-03-06 | 2018-09-20 | 住友重機械工業株式会社 | Lifting magnet machine |
| JP2021109732A (en) | 2020-01-09 | 2021-08-02 | 東芝三菱電機産業システム株式会社 | Crane operation recording device |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH11116185A (en) * | 1997-10-14 | 1999-04-27 | Kobe Steel Ltd | Working condition recording device for construction machine |
-
2021
- 2021-12-16 JP JP2021203957A patent/JP7614080B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2008293184A (en) | 2007-05-23 | 2008-12-04 | Kayaba Ind Co Ltd | Operation management device |
| JP2018065680A (en) | 2016-10-21 | 2018-04-26 | 株式会社タダノ | Crane truck |
| JP2018144938A (en) | 2017-03-06 | 2018-09-20 | 住友重機械工業株式会社 | Lifting magnet machine |
| JP2021109732A (en) | 2020-01-09 | 2021-08-02 | 東芝三菱電機産業システム株式会社 | Crane operation recording device |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2023089455A (en) | 2023-06-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR20220042425A (en) | Management method and system for at least one of a crane and a construction site | |
| US12319541B2 (en) | Image analytics for elevator maintenance | |
| US12304780B2 (en) | Information processing apparatus for cranes | |
| KR102357499B1 (en) | Tower crane autonomous operation system and autonomous operation method thereof | |
| CN102815612B (en) | The method of crane safety and hoisting crane and crane controller is monitored during setting up procedure | |
| KR102211479B1 (en) | Stacker Crane Remote Monitoring Control System | |
| KR102278248B1 (en) | AI based dangerous situation detection system for mobile crane and work of ground work place yard using analyzing accident cause big data of mobile crane and work of ground work place yard | |
| JP7761726B2 (en) | Crane work management system and management device | |
| JP7220014B2 (en) | Crane operation record device | |
| JP2015034076A (en) | Elevator system, elevator control device and elevator control method for the same | |
| CN102616657B (en) | Method for automatically lifting lorry billet to load/unload by slab yard crane | |
| CN102295236B (en) | Double gantry crane lifting device | |
| JP7440009B2 (en) | Crane monitoring device and method and overhead crane | |
| CN206476611U (en) | Automatic checkout equipment for state in automatic detection elevator hoistways | |
| JP7614080B2 (en) | Danger situation reporting system | |
| JP2020007134A (en) | Hanging load monitoring system for crane | |
| JP6624522B2 (en) | Remote monitoring system for lifting equipment | |
| JP7486890B2 (en) | Waste crane operation system and waste treatment facility using the same | |
| JP4808940B2 (en) | Automatic crane control device for waste disposal plant | |
| KR100276276B1 (en) | Unmanned automated warehouse systems | |
| US20250145422A1 (en) | Overhead crane monitoring system | |
| CN112850493A (en) | Hoisting and carrying system | |
| JP7632987B2 (en) | Cargo handling vehicle and control method thereof | |
| KR102703394B1 (en) | Monitoring System for Port Container Cranes | |
| JP6720759B2 (en) | Continuous belt conveyor monitoring system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240129 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240910 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240917 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20241113 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20241225 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20241226 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7614080 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |