JP7718792B2 - Cargo handling system, cargo handling management program, and cargo handling management method - Google Patents
Cargo handling system, cargo handling management program, and cargo handling management methodInfo
- Publication number
- JP7718792B2 JP7718792B2 JP2023117263A JP2023117263A JP7718792B2 JP 7718792 B2 JP7718792 B2 JP 7718792B2 JP 2023117263 A JP2023117263 A JP 2023117263A JP 2023117263 A JP2023117263 A JP 2023117263A JP 7718792 B2 JP7718792 B2 JP 7718792B2
- Authority
- JP
- Japan
- Prior art keywords
- loading
- cargo
- image
- cargo handling
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Forklifts And Lifting Vehicles (AREA)
Description
本発明は、フォークリフトを利用する荷役システム、当該システムに用いられる荷役管理プログラムおよび荷役管理方法に関する。 The present invention relates to a cargo handling system that uses forklifts, and a cargo handling management program and cargo handling management method used in the system.
青果物は、収穫されて荷箱に入れられトラックによって搬送された後、フォークリフトによって選別機まで搬送される。従来、果実の大きさ、重量、糖度などを各種センサや画像処理技術を用いて測定し選別する選別機が知られている。例えば、特許文献1には、近赤外線を含む光を照射して、その反射光を撮像し、生成した画像に基づいて、可視光下では検出することのできない果実の傷を検出することが開示されている。 Fruit and vegetables are harvested, placed in boxes, and transported by truck, and then transported to a sorting machine by forklift. Conventionally, sorting machines are known that measure and sort fruit size, weight, sugar content, etc. using various sensors and image processing technology. For example, Patent Document 1 discloses a method of irradiating fruit with light containing near-infrared rays, capturing an image of the reflected light, and using the generated image to detect blemishes on the fruit that cannot be detected under visible light.
ところで、荷箱ごとに青果物の状態が異なることがあり、ある荷箱の青果物は、傷が多いことや、劣化が進行していることがある。このような荷箱内の青果物は、優先的に選別機にかけられ出荷されることが好ましいが、上述のセンサや画像処理技術を用いないと、傷や劣化がわからないことが多い。その結果、より早く出荷すべき青果物の出荷が遅れることがあった。 However, the condition of the fruits and vegetables can vary from box to box, and some fruits and vegetables in certain boxes may have many scratches or be in a state of advanced deterioration. It is preferable for such fruits and vegetables in such boxes to be prioritized and then sorted by a sorting machine before being shipped, but without the use of the sensors and image processing technology described above, scratches and deterioration often cannot be detected. As a result, the shipment of fruits and vegetables that should be shipped earlier can be delayed.
そこで、本発明が解決しようとする課題は、フォークリフトによって荷役される前に、青果物を荷箱ごとに予備的に選別することができる荷役システムを提供することにある。 The problem that this invention aims to solve is to provide a loading and unloading system that can preliminarily sort fruits and vegetables into containers before they are unloaded by a forklift.
上記課題を解決するために、本発明に係る荷役システムは、
所定のエリアに載置された複数の荷箱と、当該複数の荷箱を荷役するフォークリフトとを備えた荷役システムであって、
赤外線カメラを有し、荷役前に予め赤外線カメラによって荷箱を撮影し荷画像を生成する無人飛行体と、
荷画像に基づいて、荷箱の荷置場所および荷役順序またはそのいずれかを決定する荷役決定部と、を備える。
In order to solve the above problems, the cargo handling system according to the present invention comprises:
A cargo handling system including a plurality of containers placed in a predetermined area and a forklift for handling the containers,
an unmanned aerial vehicle having an infrared camera, which takes an image of a cargo box with the infrared camera before cargo handling to generate a cargo image;
and a cargo handling determination unit that determines the cargo placement location and/or cargo handling order of the cargo boxes based on the cargo image.
上記荷役システムは、好ましくは、
荷役決定部が、荷画像を解析してスコアを出力するスコア出力部を有し、スコア出力部によって出力されたスコアに基づいて、荷置場所および荷役順序またはそのいずれかを決定する。
The cargo handling system preferably comprises:
The cargo handling determination unit has a score output unit that analyzes the cargo image and outputs a score, and determines a cargo placement location and/or a cargo handling order based on the score output by the score output unit.
上記荷役システムは、例えば、
荷箱の内容物が青果物であって、
スコア出力部は、荷画像を解析して青果物の傷の度合いをスコアによって出力する。
The cargo handling system includes, for example:
The contents of the container are fruits and vegetables,
The score output unit analyzes the images of the fruits and vegetables and outputs the degree of damage to the fruits and vegetables as a score.
上記荷役システムは、例えば、
荷箱の内容物が青果物であって、
スコア出力部は、荷画像を解析して内部品質の度合いをスコアによって出力する。
The cargo handling system includes, for example:
The contents of the container are fruits and vegetables,
The score output unit analyzes the package image and outputs the degree of internal quality as a score.
上記荷役システムは、例えば、
荷箱の表面には荷箱の内容物に係る識別子が表示されるとともに、当該識別子が近赤外線によって透過可能な荷崩れ防止材によって覆われており、
赤外線カメラは、荷崩れ防止材を透過して識別子を撮像し、
荷役決定部は、識別子が有する情報に基づいて、荷箱の荷置場所および荷役順序またはそのいずれかを決定する。
The cargo handling system includes, for example:
An identifier relating to the contents of the packing box is displayed on the surface of the packing box, and the identifier is covered with a material that is permeable to near-infrared rays to prevent the packing box from shifting.
The infrared camera captures the identifier through the cargo protection material,
The loading/unloading determination unit determines the loading location and/or loading order of the boxes based on the information contained in the identifiers.
上記荷役システムは、好ましくは、
報知部をさらに備え、
報知部は、荷役決定部によって決定された荷置場所および荷役順序またはそのいずれかをフォークリフトの運転者に報知する。
The cargo handling system preferably comprises:
Further provided with a notification unit,
The notification unit notifies the operator of the forklift of the loading location and/or loading order determined by the loading/unloading determination unit.
上記課題を解決するために、本発明に係る荷役管理プログラムは、
所定の場所に載置された荷箱を荷役するフォークリフトと、
赤外線カメラを有し、荷役前に予め赤外線カメラによって荷箱の内容物を撮影し荷画像を生成する無人飛行体と、
演算装置と記憶装置とを有するコンピュータと、を備えた荷役システムに利用される荷役管理プログラムであって、
荷役管理プログラムは、コンピュータに、
荷画像を解析してスコアを出力するスコア出力部と、
スコア出力部によって出力されたスコアに基づいて、荷箱の荷置場所および荷役順序またはそのいずれかを決定する荷役決定部と、して動作させる。
In order to solve the above problems, the cargo handling management program according to the present invention comprises:
a forklift that loads and unloads boxes placed in a predetermined location;
an unmanned aerial vehicle having an infrared camera, which takes an image of the contents of a cargo box with the infrared camera before cargo handling to generate a cargo image;
A cargo handling management program used in a cargo handling system including a computer having an arithmetic unit and a storage unit,
The cargo handling management program is installed on the computer.
a score output unit that analyzes the package image and outputs a score;
The score output unit is operated as a loading/unloading determination unit that determines the loading location and/or loading order of the packing boxes based on the scores output by the score output unit.
上記課題を解決するために、本発明に係る荷役管理方法は、
所定のエリアに載置された荷箱と、当該荷箱を荷役するフォークリフトと、赤外線カメラを有する無人飛行体と、荷役決定部と、を備えた荷役システムに利用される荷役管理方法であって、
荷役前に予め赤外線カメラによって、荷箱を撮影し荷画像を生成することと、
荷役決定部によって、荷画像に基づき、荷箱の荷置場所および荷役順序またはそのいずれかを決定することと、を含む。
In order to solve the above problems, the cargo handling management method according to the present invention comprises:
A cargo handling management method used in a cargo handling system including a cargo box placed in a predetermined area, a forklift that handles the cargo box, an unmanned aerial vehicle having an infrared camera, and a cargo handling determination unit,
Taking an image of the cargo box with an infrared camera before handling and generating a cargo image;
The loading and unloading process includes determining, by a loading and unloading determination unit, the loading and unloading locations and/or the loading and unloading order of the boxes based on the load image.
本発明に係る荷役システムは、フォークリフトによって荷役される前に、青果物を荷箱ごとに予備的に選別することができる。 The loading and unloading system of the present invention can preliminarily sort fruits and vegetables into containers before they are unloaded by a forklift.
<第1実施形態>
まず、図1~図6を参照しつつ、本発明に係る荷役システム、荷役管理プログラムおよび荷役管理方法の第1実施形態について説明する。図1は、本発明の第1実施形態に係る荷役システムSの概略正面図であり、図2は、荷役システムSの概略平面図である。図3は、荷役システムSのブロック図である。図2に示すように、本実施形態に係る施設内には、第1エリアE1、第2エリアE2および第3エリアE3が設定されている。
First Embodiment
First, a first embodiment of a cargo handling system, cargo handling management program, and cargo handling management method according to the present invention will be described with reference to Figures 1 to 6. Figure 1 is a schematic front view of a cargo handling system S according to the first embodiment of the present invention, and Figure 2 is a schematic plan view of the cargo handling system S. Figure 3 is a block diagram of the cargo handling system S. As shown in Figure 2, a first area E1, a second area E2, and a third area E3 are set within a facility according to this embodiment.
図1および図2に示すように、荷役システムSは、トラックTと、無人飛行体1と、フォークリフト2と、管理装置3と、を備えている。本実施形態では、本発明の「所定のエリア」をトラックTの荷台とし、荷役システムSが荷役管理する複数の荷箱Bは、トラックTによって運送された複数の荷箱Bとしている。ただし、これらは単なる一例であって、本発明に係る「所定のエリア」および荷役システムSが管理する荷箱Bは、特に限定されない。例えば、荷役システムSは、トラックTによって搬送された後、特定の待機場所に待機された荷箱Bを対象としてもよい。 As shown in Figures 1 and 2, the cargo handling system S comprises a truck T, an unmanned aerial vehicle 1, a forklift 2, and a management device 3. In this embodiment, the "predetermined area" of the present invention is the loading platform of the truck T, and the multiple cargo boxes B managed by the cargo handling system S are multiple cargo boxes B transported by the truck T. However, these are merely examples, and the "predetermined area" of the present invention and the cargo boxes B managed by the cargo handling system S are not particularly limited. For example, the cargo handling system S may target cargo boxes B that have been transported by the truck T and are waiting in a specific waiting area.
また、荷役システムSは、無人飛行体1およびフォークリフト2の数を特に限定されない。本実施形態の荷箱Bの内容物は、りんごであるが単なる一例であって、赤外線カメラ15によって傷Dや内部品質をスコア化できれば特に限定されない。 Furthermore, the cargo handling system S is not particularly limited in the number of unmanned aerial vehicles 1 and forklifts 2. The contents of the cargo box B in this embodiment are apples, but this is just one example, and there is no particular limit as long as the infrared camera 15 can be used to score scratches D and internal quality.
<無人飛行体>
無人飛行体1は、いわゆるドローンと称される飛行体であって、本体10(図4参照)と、本体10の四方にそれぞれ配置された4つのプロペラ11(図4参照)と、プロペラ11を回転させる動力部12(図3参照)と、を有する。無人飛行体1は、プロペラ11によって飛行およびホバリング可能に構成されている。また、無人飛行体1は、管理装置3と通信可能に構成されている。
<Unmanned Aerial Vehicles>
The unmanned aerial vehicle 1 is a so-called drone and has a main body 10 (see FIG. 4), four propellers 11 (see FIG. 4) arranged on each of the four sides of the main body 10, and a power unit 12 (see FIG. 3) that rotates the propellers 11. The unmanned aerial vehicle 1 is configured to be able to fly and hover using the propellers 11. The unmanned aerial vehicle 1 is also configured to be able to communicate with a management device 3.
図3に示すように、無人飛行体1は、さらに、飛行位置検出部13と、荷位置検出部14と、赤外線カメラ15と、飛行体制御部16と、を有する。 As shown in Figure 3, the unmanned aerial vehicle 1 further has a flight position detection unit 13, a cargo position detection unit 14, an infrared camera 15, and an aerial vehicle control unit 16.
飛行位置検出部13は、GPSセンサ、超音波センサなどの公知のセンサを有し、これらセンサによって、無人飛行体1の位置を検出する。 The flight position detection unit 13 has known sensors such as a GPS sensor and an ultrasonic sensor, and uses these sensors to detect the position of the unmanned aerial vehicle 1.
荷位置検出部14は、カメラと解析部とを有する。カメラは、トラックTの荷台を撮影して荷台画像を生成し、解析部は、生成された荷台画像を解析して荷箱Bの位置を検出する。なお、荷位置検出部14の構成はこれに限定されず、例えば、荷位置検出部14は、2次元LiDARまたは3次元LiDARによって構成され、これにより荷箱Bの位置を検出してもよい。 The cargo position detection unit 14 has a camera and an analysis unit. The camera takes an image of the cargo bed of the truck T to generate a cargo bed image, and the analysis unit analyzes the generated cargo bed image to detect the position of the cargo box B. Note that the configuration of the cargo position detection unit 14 is not limited to this; for example, the cargo position detection unit 14 may be configured with two-dimensional LiDAR or three-dimensional LiDAR, which may be used to detect the position of the cargo box B.
赤外線カメラ15は、本体10の下部に設けられている(図4参照)。赤外線カメラ15は、近赤外線をセンシング可能であって、図4に示すように、荷位置検出部14によって検出された荷箱Bの位置を撮像して荷画像を生成する。赤外線カメラ15は、可視光も撮像可能な多波長分光カメラによって構成されていてもよい。この場合、赤外線カメラ15は、荷位置検出部14のカメラとして機能してもよい。 The infrared camera 15 is located at the bottom of the main body 10 (see Figure 4). The infrared camera 15 is capable of sensing near-infrared light, and as shown in Figure 4, captures the position of the cargo box B detected by the cargo position detection unit 14 to generate a cargo image. The infrared camera 15 may be configured as a multi-wavelength spectroscopic camera that is also capable of capturing visible light. In this case, the infrared camera 15 may function as the camera for the cargo position detection unit 14.
図4に示すように、荷箱Bの上部のすべてまたは少なくとも一部は、開放されており、赤外線カメラ15によって内容物を撮像可能に構成されている。または、荷箱Bの少なくとも一部が近赤外線を透過可能に構成されており、それによって荷箱Bの内容物が、近赤外線によって撮像可能に構成されていてもよい。 As shown in Figure 4, all or at least a portion of the top of the shipping box B is open, allowing the contents to be imaged by the infrared camera 15. Alternatively, at least a portion of the shipping box B may be configured to be transparent to near-infrared light, thereby allowing the contents of the shipping box B to be imaged using near-infrared light.
図5Aは可視光下の青果物Fの図を示し、図5Bは近赤外線カメラによって生成された荷画像の一部を示している。図5Aに示すように青果物Fの可視光では見えない傷Dが、図5Bに示すように荷画像では表示されている。 Figure 5A shows a view of fruit or vegetable F under visible light, and Figure 5B shows a portion of a package image generated by a near-infrared camera. As shown in Figure 5A, flaws D on fruit or vegetable F that are not visible under visible light are visible in the package image as shown in Figure 5B.
無人飛行体1は、LEDなどで構成され近赤外線を照射する近赤外線照射部をさらに有してもよい。この場合、近赤外線照射部は、荷位置検出部14によって検出された荷箱Bの位置に近赤外線を照射する。そして、赤外線カメラ15は、荷箱Bの内容物に反射された近赤外線をスキャンして荷画像を生成する。 The unmanned aerial vehicle 1 may further include a near-infrared irradiation unit that is composed of an LED or the like and emits near-infrared light. In this case, the near-infrared irradiation unit irradiates near-infrared light at the position of the cargo box B detected by the cargo position detection unit 14. The infrared camera 15 then scans the near-infrared light reflected by the contents of the cargo box B to generate a cargo image.
なお、近赤外線は、当然のことながら対象物の表面からのみ反射されるものではなく、対象物を一定範囲まで透過して反射される。したがって、近赤外線の照射量や照射角度を調整することにより、赤外線カメラ15は、青果物Fの傷Dや内部品質(甘さ、酸っぱさ、デンプン量、変色、空洞など)を測定可能な範囲で内容物を撮像することができる。 Naturally, near-infrared light is not only reflected from the surface of an object, but also penetrates and reflects through the object to a certain extent. Therefore, by adjusting the amount and angle of near-infrared light irradiation, the infrared camera 15 can capture images of the contents of fruit or vegetable F within a range that allows for measurement of blemishes D and internal quality (sweetness, sourness, starch content, discoloration, cavities, etc.).
飛行体制御部16は、後で説明する管理装置3の飛行指令に基づいて、動力部12を制御して無人飛行体1を荷台の上方まで移動させ、次いで荷位置検出部14を制御して荷箱Bの位置を検出するとともに、赤外線カメラ15を制御して各荷箱Bに対応する荷画像を生成させる。生成された荷画像は、対応する荷箱Bの位置情報とともに管理装置3に送信される。 Based on flight commands from the management device 3, which will be explained later, the aircraft control unit 16 controls the power unit 12 to move the unmanned aircraft 1 to above the loading platform, then controls the cargo position detection unit 14 to detect the position of the cargo boxes B, and controls the infrared camera 15 to generate cargo images corresponding to each cargo box B. The generated cargo images are sent to the management device 3 along with the position information of the corresponding cargo box B.
<フォークリフト>
図1および図2に示すように、フォークリフト2は、本実施形態では、自律して走行および荷役作業を行う無人フォークリフトによって構成されている。フォークリフト2は、車輪と、車体と、フォークと、昇降装置20(図3参照)とを有する。フォークリフト2は、昇降装置20によってフォークを昇降可能に構成されており、フォークによって荷箱Bをすくい上げたり下ろしたりする。また、フォークリフト2は、管理装置3と通信可能に構成されている。
<Forklift>
As shown in Figures 1 and 2, in this embodiment, the forklift 2 is an unmanned forklift that travels and performs loading and unloading operations autonomously. The forklift 2 has wheels, a vehicle body, forks, and a lifting device 20 (see Figure 3). The forklift 2 is configured so that the forks can be raised and lowered by the lifting device 20, and the forks lift and lower cargo boxes B. The forklift 2 is also configured so that it can communicate with the management device 3.
図3に示すように、フォークリフト2は、さらに、車位置検出部21と、駆動部22と、車両制御部23とを有する。 As shown in FIG. 3, the forklift 2 further includes a vehicle position detection unit 21, a drive unit 22, and a vehicle control unit 23.
車位置検出部21は、GPSセンサ、レーザセンサといった公知のセンサによって、フォークリフト2の位置を検出する。駆動部22は、車輪を駆動させたり、方向転換させたりする。 The vehicle position detection unit 21 detects the position of the forklift 2 using known sensors such as a GPS sensor or laser sensor. The drive unit 22 drives the wheels and changes direction.
車両制御部23は、管理装置3の荷役指令に基づいて、駆動部22を制御して車輪を駆動させ指令された位置にフォークリフト2を移動させる。また、車両制御部23は、フォークリフト2が指令された位置に到着すると、昇降装置20を制御して荷箱Bを上げ下ろしさせる。 Based on the cargo handling command from the management device 3, the vehicle control unit 23 controls the drive unit 22 to drive the wheels and move the forklift 2 to the commanded position. Furthermore, when the forklift 2 arrives at the commanded position, the vehicle control unit 23 controls the lifting device 20 to raise and lower the cargo box B.
<管理装置>
管理装置3は、コンピュータを有し、コンピュータは、記憶装置と、演算装置とを有する。記憶装置には、本発明の荷役管理プログラムが記憶されている。荷役管理プログラムは、コンピュータを後で説明する飛行体指令部31と、スコア出力部32と、荷役決定部33と、荷役指令部34として動作させる。
<Management device>
The management device 3 includes a computer, which includes a storage device and an arithmetic unit. The storage device stores a cargo handling management program of the present invention. The cargo handling management program causes the computer to operate as an aircraft command unit 31, a score output unit 32, a cargo handling determination unit 33, and a cargo handling command unit 34, all of which will be described later.
図3に示すように、管理装置3は、機能的構成として、記憶部30と、飛行体指令部31と、スコア出力部32と、荷役決定部33と、荷役指令部34と、を有する。 As shown in FIG. 3, the management device 3 has, as its functional configuration, a memory unit 30, an aircraft command unit 31, a score output unit 32, a cargo handling determination unit 33, and a cargo handling command unit 34.
記憶部30は、所定のトラックエリアTEに停車したトラックTの荷台の位置を記憶している。また、記憶部30は、第1、第2および第3エリアE1、E2、E3の位置も記憶している。 The memory unit 30 stores the position of the bed of a truck T parked in a specified truck area TE. The memory unit 30 also stores the positions of the first, second, and third areas E1, E2, and E3.
飛行体指令部31は、トラックTがトラックエリアTEに到着すると、無人飛行体1がトラックTの荷台まで飛行するように、荷台の位置を含む飛行指令を無人飛行体1に送信する。 When truck T arrives at truck area TE, the aircraft command unit 31 sends a flight command to unmanned aerial vehicle 1, including the location of the loading platform, so that unmanned aerial vehicle 1 flies to the loading platform of truck T.
スコア出力部32は、無人飛行体1から受信した各荷画像を解析して、スコアを出力する。本実施形態では、スコア出力部32は、青果物Fの傷Dの度合いをスコアによって出力する。 The score output unit 32 analyzes each package image received from the unmanned aerial vehicle 1 and outputs a score. In this embodiment, the score output unit 32 outputs the degree of damage D to the fruit or vegetable F as a score.
スコア出力部32は、ディープラーニングによる学習済みモデルであって、大量の荷画像を入力データとし、各荷画像に対応するスコアを出力データとする教師データによって予め教師あり学習されている。そして、スコア出力部32は、荷画像を入力されると、青果物Fの傷Dの度合いをスコアによって出力するよう構成されている。これにより、スコア出力部32は、各荷箱B内の青果物Fの傷Dの度合いに対応するスコアを出力する。本実施形態では、スコアは、0~1.0の間となっており、スコア出力部32は、傷Dの度合いが高ければ高いほど高いスコアを出力する。傷Dの度合いとは、傷Dの深さ、大きさ、1つの荷箱B当たりの傷Dの多さのすべてまたはそのいずれかを基準にしてもよい。 The score output unit 32 is a trained model using deep learning, and has been trained in advance using training data in which a large number of package images are used as input data and a score corresponding to each package image is used as output data. When package images are input, the score output unit 32 is configured to output the degree of damage D on the fruits and vegetables F as a score. As a result, the score output unit 32 outputs a score corresponding to the degree of damage D on the fruits and vegetables F in each package box B. In this embodiment, the score is between 0 and 1.0, and the higher the degree of damage D, the higher the score output unit 32 outputs. The degree of damage D may be based on all or any of the depth, size, and number of damage D per package box B.
荷役決定部33は、スコア出力部32によって出力されたスコアに基づいて、複数の荷箱Bの荷置場所および荷役順序またはそのいずれかを決定する。本実施形態では、荷役決定部33は、荷置場所および荷役順序をスコアに基づいて決定する。荷置場所について、荷役決定部33は、スコアが0~0.4未満の荷箱Bの荷置場所を第1エリアE1とし、スコアが0.4~0.8未満の荷箱Bの荷置場所を第2エリアE2とし、スコアが0.8~1.0の荷箱Bの荷置場所を第3エリアE3としている。荷役順序について、荷役決定部33は、スコアが高い順に早く荷役を行うよう複数の荷箱Bの荷役順序を決定する。 The loading and unloading determination unit 33 determines the loading location and/or loading order of multiple shipping boxes B based on the scores output by the score output unit 32. In this embodiment, the loading and unloading determination unit 33 determines the loading location and loading order based on the scores. Regarding the loading location, the loading and unloading determination unit 33 designates the loading location of shipping boxes B with a score of 0 to less than 0.4 as the first area E1, the loading location of shipping boxes B with a score of 0.4 to less than 0.8 as the second area E2, and the loading location of shipping boxes B with a score of 0.8 to 1.0 as the third area E3. Regarding the loading order, the loading and unloading determination unit 33 determines the loading order of multiple shipping boxes B so that loading is performed earliest in descending order of the scores.
荷役指令部34は、複数の荷箱Bに関する荷役順序と、各荷箱Bの位置と、各荷箱Bに対応する荷置場所とを含む荷役指令をフォークリフト2に送信する。 The loading command unit 34 transmits loading commands to the forklift 2, including the loading order for multiple boxes B, the location of each box B, and the storage location corresponding to each box B.
<荷役システムの動作>
次に、図6のフロー図を参照して、第1実施形態に係る荷役システムSの動作をあらためて説明する。
<Load handling system operation>
Next, the operation of the cargo handling system S according to the first embodiment will be explained again with reference to the flow chart of FIG.
(1)まず、管理装置3は、複数の荷箱Bが載置されたトラックTが到着すると(図6のS1参照)、無人飛行体1に飛行指令を送信する(図6のS2参照)。 (1) First, when a truck T carrying multiple shipping boxes B arrives (see S1 in Figure 6), the management device 3 sends a flight command to the unmanned aerial vehicle 1 (see S2 in Figure 6).
(2)無人飛行体1は、飛行指令に従って荷台の位置まで移動し(図6のS3参照)、荷箱Bの位置を検出するとともに(図6のS4参照)、荷箱Bを撮像して荷画像を生成する(図6のS5参照)。生成された荷画像および対応する荷箱Bの位置は、管理装置3に送信される(図6のS6参照)。 (2) The unmanned aerial vehicle 1 moves to the location of the loading platform in accordance with the flight command (see S3 in Figure 6), detects the location of the loading box B (see S4 in Figure 6), and captures an image of the loading box B to generate a loading image (see S5 in Figure 6). The generated loading image and the location of the corresponding loading box B are sent to the management device 3 (see S6 in Figure 6).
(3)管理装置3は、受信した荷画像に基づいて各荷箱Bに対応するスコアを出力し(図6のS7参照)、スコアに基づいて各荷箱Bの荷置場所および荷置順序を決定する(図6のS8参照)。 (3) The management device 3 outputs a score corresponding to each shipping box B based on the received shipping image (see S7 in Figure 6), and determines the placement location and placement order for each shipping box B based on the score (see S8 in Figure 6).
(4)次いで、管理装置3は、複数の荷箱Bに関する荷役順序と、各荷箱Bの位置と、各荷箱Bに対応する荷置場所とを含む荷役指令をフォークリフト2に送信する(図6のS9参照)。 (4) Next, the management device 3 sends a loading command to the forklift 2, which command includes the loading order for the multiple boxes B, the location of each box B, and the storage location corresponding to each box B (see S9 in Figure 6).
(5)フォークリフト2は、受信した荷役指令に従って、荷役作業を実行する(図6のS10参照)。 (5) The forklift 2 performs the loading and unloading operation in accordance with the received loading and unloading command (see S10 in Figure 6).
上述したように、第1実施形態に係る荷役システムSは、荷役作業前に予め無人飛行体1によって各荷箱Bを撮像し、管理装置3によって青果物Fを荷箱Bごとに予備的に選別することができる。これにより、荷役システムSは、優先すべき荷箱Bの青果物Fから順に選別機に投入することができるので、早く出荷すべき青果物Fの出荷が遅れることを防止することができる。 As described above, the cargo handling system S according to the first embodiment uses the unmanned aerial vehicle 1 to capture images of each container B beforehand prior to cargo handling operations, and the management device 3 can preliminarily sort the fruits and vegetables F for each container B. This allows the cargo handling system S to feed the fruits and vegetables F from the container B that should be prioritized into the sorter in order, thereby preventing delays in the shipment of fruits and vegetables F that should be shipped first.
<第2実施形態>
次に、図7~図11を参照しつつ、本発明に係る荷役システムに係る第2実施形態について説明する。なお、第1実施形態と同様の構成については、その説明を省略することがある。
Second Embodiment
Next, a second embodiment of the cargo handling system according to the present invention will be described with reference to Figures 7 to 11. Note that the description of the same configuration as in the first embodiment may be omitted.
図7は、本実施形態に係る荷役システムSの概略正面図である。図7に示すように、荷役システムSは、トラックTと、無人飛行体1と、フォークリフト2と、管理装置3と、を備えている。トラックTの荷台には、複数の荷箱Bが載置されている。 Figure 7 is a schematic front view of the cargo handling system S according to this embodiment. As shown in Figure 7, the cargo handling system S includes a truck T, an unmanned aerial vehicle 1, a forklift 2, and a management device 3. Multiple cargo boxes B are placed on the loading platform of the truck T.
荷箱Bは、4つを一組として、荷崩れ防止材Pによって水平方向に周囲を囲まれており、これにより、搬送中の荷崩れを防止されている。荷崩れ防止材Pは、近赤外線によって透過可能な素材によって構成されている。複数の荷箱Bには、後で説明する識別子Cが印字もしくは貼付されている。この識別子Cは、荷崩れ防止材Pによって覆われており、荷崩れ防止材Pが取り除かれない限り、可視光下では認識することができないよう構成されている。また、この識別子Cは、近赤外線が透過できない素材によって構成されている。 Packing boxes B, grouped into four, are surrounded horizontally by anti-shift material P, which prevents the boxes from shifting during transport. The anti-shift material P is made of a material that is transparent to near-infrared rays. Identifiers C, which will be explained later, are printed or affixed to multiple packing boxes B. These identifiers C are covered by the anti-shift material P and are configured so that they cannot be recognized under visible light unless the anti-shift material P is removed. Furthermore, these identifiers C are made of a material that is opaque to near-infrared rays.
図7および図8に示すように、無人飛行体1およびフォークリフト2は、第1実施形態と同様の構成を有している。 As shown in Figures 7 and 8, the unmanned aerial vehicle 1 and forklift 2 have the same configuration as in the first embodiment.
図9に示すように、赤外線カメラ15は、荷崩れ防止材Pを含む1組の荷箱Bを撮像して荷画像を生成する。生成された荷画像は、第1実施形態と同様に、対応する荷箱Bの位置情報とともに管理装置3に送信される。 As shown in FIG. 9, the infrared camera 15 captures an image of a set of cargo boxes B containing cargo collapse prevention material P and generates a cargo image. As in the first embodiment, the generated cargo image is sent to the management device 3 along with the position information of the corresponding cargo boxes B.
図10は、赤外線カメラ15によって生成された荷画像を示している。図10に示すように、荷崩れ防止材Pは近赤外線を透過し識別子Cは近赤外線を透過しないので、荷崩れ防止材Pによって覆われていた識別子Cは、荷崩れ防止材Pが取り除かれなくても、荷画像において認識可能になっている。識別子Cは、1次元コード、2次元コードなどの公知のコードによって構成されており、荷箱Bの内容物に係る情報を有している。 Figure 10 shows a package image generated by the infrared camera 15. As shown in Figure 10, the anti-shift material P transmits near-infrared light, but the identifier C does not. Therefore, the identifier C, which was covered by the anti-shift material P, can be recognized in the package image even if the anti-shift material P is not removed. The identifier C is composed of a known code such as a one-dimensional code or a two-dimensional code, and contains information related to the contents of the package B.
<管理装置>
管理装置3は、第1実施形態と同様のハードウェア構成であって、コンピュータを有する。記憶装置には、第2実施形態に係る荷役管理プログラムが記憶されている。荷役管理プログラムは、コンピュータを後で説明する飛行体指令部31と、荷役決定部33と、荷役指令部34と、識別子読取部35として動作させる。
<Management device>
The management device 3 has the same hardware configuration as in the first embodiment and includes a computer. A cargo handling management program according to the second embodiment is stored in the storage device. The cargo handling management program causes the computer to operate as an aircraft command unit 31, a cargo handling determination unit 33, a cargo handling command unit 34, and an identifier reading unit 35, all of which will be described later.
図8に示すように、管理装置3は、機能的構成として、記憶部30と、飛行体指令部31と、荷役決定部33と、荷役指令部34と、識別子読取部35と、を有する。 As shown in FIG. 8, the management device 3 has, as its functional configuration, a memory unit 30, an aircraft command unit 31, a cargo handling determination unit 33, a cargo handling command unit 34, and an identifier reading unit 35.
記憶部30は、第1実施形態と同様に、所定のトラックエリアTEに停車したトラックTの荷台の位置を記憶している。記憶部30は、さらに、荷箱Bの内容物に関する情報と、識別子Cの情報とを紐づけて予め記憶している。荷箱Bの内容物に関する情報とは、例えば、荷箱Bの内容物の種類、この内容物の消費期限、荷置場所などであって、特に限定されない。 As in the first embodiment, the memory unit 30 stores the position of the bed of a truck T parked in a specified truck area TE. The memory unit 30 also stores information about the contents of the shipping box B in advance, linking it with information about the identifier C. Information about the contents of the shipping box B includes, for example, but is not limited to, the type of contents in the shipping box B, the expiration date of the contents, and the storage location.
飛行体指令部31は、第1実施形態と同様に、トラックTがトラックエリアTEに到着すると、無人飛行体1がトラックTの荷台まで飛行するように、荷台の位置を含む飛行指令を無人飛行体1に送信する。 As in the first embodiment, when truck T arrives at truck area TE, the aircraft command unit 31 transmits a flight command, including the position of the loading platform, to unmanned aircraft 1 so that unmanned aircraft 1 flies to the loading platform of truck T.
識別子読取部35は、荷画像を参照して、荷画像に含まれる識別子Cを認識するとともに識別子Cの情報を読み取り、識別子Cの情報を取得する。識別子読取部35は、取得した情報を荷役決定部33に送信する。 The identifier reading unit 35 references the load image, recognizes the identifier C contained in the load image, reads the information of the identifier C, and acquires the information of the identifier C. The identifier reading unit 35 transmits the acquired information to the load handling determination unit 33.
荷役決定部33は、識別子読取部35から受信した識別子Cの情報に対応する荷箱Bの内容に関する情報を記憶部30から受信し当該情報に基づいて、対応する荷箱Bの荷置場所および荷置順序を決定する。 The loading/unloading determination unit 33 receives information from the memory unit 30 regarding the contents of the container B corresponding to the information on the identifier C received from the identifier reading unit 35, and determines the loading location and loading order for the corresponding container B based on that information.
荷役指令部34は、第1実施形態と同様に、複数の荷箱Bに関する荷役順序と、各荷箱Bの位置と、各荷箱Bに対応する荷置場所とを含む荷役指令をフォークリフト2に送信する。 As in the first embodiment, the loading and unloading command unit 34 transmits loading and unloading commands to the forklift 2, including the loading order for multiple boxes B, the position of each box B, and the storage location corresponding to each box B.
フォークリフト2は、第1実施形態と同様に、受信した荷役指令に基づいて、荷役作業を実行する。 As in the first embodiment, the forklift 2 performs loading and unloading operations based on the received loading and unloading command.
<荷役システムの動作>
次に、図11のフロー図を参照して、第2実施形態に係る荷役システムSの動作をあらためて説明する。
<Load handling system operation>
Next, the operation of the cargo handling system S according to the second embodiment will be described again with reference to the flow chart of FIG.
(1)まず、管理装置3は、複数の荷箱Bが載置されたトラックTが到着すると(図11のS1参照)、無人飛行体1に飛行指令を送信する(図11のS2参照)。 (1) First, when a truck T carrying multiple shipping boxes B arrives (see S1 in Figure 11), the management device 3 sends a flight command to the unmanned aerial vehicle 1 (see S2 in Figure 11).
(2)無人飛行体1は、飛行指令に従って荷台の位置まで移動し(図11のS3参照)、荷箱Bの位置を検出するとともに(図11のS4参照)、荷箱Bを撮像して荷画像を生成する(図11のS5参照)。生成された荷画像および対応する荷箱Bの位置は、管理装置3に送信される(図11のS6参照)。 (2) The unmanned aerial vehicle 1 moves to the location of the loading platform in accordance with the flight command (see S3 in Figure 11), detects the location of the loading box B (see S4 in Figure 11), and captures an image of the loading box B to generate a loading image (see S5 in Figure 11). The generated loading image and the location of the corresponding loading box B are sent to the management device 3 (see S6 in Figure 11).
(3)管理装置3は、受信した荷画像に基づいて各荷箱Bに対応する識別子Cの情報を取得し(図11のS7参照)、識別子Cの情報に対応する荷箱Bの内容物の情報に基づいて各荷箱Bの荷置場所および荷置順序を決定する(図11のS8参照)。 (3) The management device 3 obtains the identifier C information corresponding to each shipping box B based on the received package image (see S7 in Figure 11), and determines the placement location and placement order for each shipping box B based on the information about the contents of the shipping box B corresponding to the identifier C information (see S8 in Figure 11).
(4)次いで、管理装置3は、複数の荷箱Bに関する荷役順序と、各荷箱Bの位置と、各荷箱Bに対応する荷置場所とを含む荷役指令をフォークリフト2に送信する(図11のS9参照)。 (4) Next, the management device 3 sends a loading command to the forklift 2, which command includes the loading order for the multiple boxes B, the location of each box B, and the storage location corresponding to each box B (see S9 in Figure 11).
(5)フォークリフト2は、受信した荷役指令に従って、荷役作業を実行する(図11のS10参照)。 (5) The forklift 2 performs the loading and unloading operation in accordance with the received loading and unloading command (see S10 in Figure 11).
上述したように、第2実施形態に係る荷役システムSは、荷役作業前に予め無人飛行体1によって各荷箱Bを撮像し、管理装置3によって識別子Cの情報を取得して各荷箱Bの荷置場所および荷置順序を決定することができる。しかも、荷役システムSは、荷崩れ防止材Pによって覆われた識別子Cを赤外線カメラ15によって撮像することにより、荷崩れ防止材Pを荷箱Bから取り外すことなく識別子Cの情報を取得することができる。したがって、例えば、故意に識別子Cの情報を隠すことがあるときでも、本実施形態に係る荷役システムSは、識別子Cを隠しつつ識別子Cの情報を取得することができる。 As described above, the cargo handling system S according to the second embodiment uses the unmanned aerial vehicle 1 to capture images of each cargo box B beforehand prior to cargo handling operations, and the management device 3 acquires identifier C information to determine the location and order in which each cargo box B will be placed. Furthermore, the cargo handling system S can acquire identifier C information without removing the anti-shift material P from the cargo box B by capturing an image of the identifier C covered by the anti-shift material P using the infrared camera 15. Therefore, even if the identifier C information is intentionally hidden, for example, the cargo handling system S according to this embodiment can acquire identifier C information while hiding the identifier C.
以上、本発明の上記実施形態に係る荷役システムS、荷役管理プログラムおよび荷役管理方法について説明してきたが、本発明に係る荷役システム、荷役管理プログラムおよび荷役管理方法は、上記実施形態に限定されるものではない。例えば、本発明に係る荷役システム、荷役管理プログラムおよび荷役管理方法は、以下の変形例によって実施されてもよいし、以下の変形例を適宜組み合わせて実施されてもよい。 The cargo handling system S, cargo handling management program, and cargo handling management method according to the above embodiment of the present invention have been described above, but the cargo handling system, cargo handling management program, and cargo handling management method according to the present invention are not limited to the above embodiment. For example, the cargo handling system, cargo handling management program, and cargo handling management method according to the present invention may be implemented using the following modifications, or may be implemented by appropriately combining the following modifications.
<変形例>
・赤外線照射部は、トラックTのウイングの内側に配置されていてもよい。この場合、赤外線照射部は、トラックTのウイングが開くと、下方の荷箱Bに向かって近赤外線を照射するよう構成される。また、この場合、無人飛行体1は、赤外線照射部を有しなくてもよい。
<Modification>
The infrared irradiation unit may be disposed inside the wing of the truck T. In this case, the infrared irradiation unit is configured to irradiate near-infrared rays toward the cargo box B below when the wing of the truck T is opened. In this case, the unmanned aerial vehicle 1 does not need to have an infrared irradiation unit.
・フォークリフト2は、有人のフォークリフト2でもよい。この場合、無人飛行体1またはフォークリフト2は、報知装置をさらに有し、報知装置によって、各荷箱Bの荷置場所および荷置順序をフォークリフト2の運転者に報知してもよい。報知装置は、例えば、無人飛行体1に設けられたスピーカや、フォークリフト2に設けられたモニタなどでもよく、特に限定されない。 - The forklift 2 may be a manned forklift 2. In this case, the unmanned aerial vehicle 1 or the forklift 2 may further have an alarm device that notifies the driver of the forklift 2 of the loading location and loading order of each box B. The alarm device may be, for example, a speaker provided on the unmanned aerial vehicle 1 or a monitor provided on the forklift 2, and is not particularly limited.
・無人飛行体1の待機位置は、特に限定されない。例えば、無人飛行体1は、トラックT内で待機しており、トラックTがトラックエリアTEに到着すると、飛行し、荷箱Bを撮像するよう構成されてもよい。 - The waiting position of the unmanned aerial vehicle 1 is not particularly limited. For example, the unmanned aerial vehicle 1 may be configured to wait inside the truck T, and when the truck T arrives at the truck area TE, fly over and take an image of the shipping box B.
・太陽光によって赤外線による適切な荷画像の生成が妨げられることを防止するために、例えば、ウイング車のウイングによって太陽光を遮るよう構成してもよい。この場合、ウイング車のウイングの角度は、調整可能に構成されてもよい。または、無人飛行体1は、ウイング車の内部に進入した後、ウイングが閉じられ、ウイング車に閉じ込められた状態で各荷箱Bの位置を検出し、各荷箱Bを撮像するよう構成されてもよい。 - To prevent sunlight from interfering with the generation of appropriate infrared cargo images, the wings of the winged vehicle may be configured to block sunlight, for example. In this case, the angle of the wings of the winged vehicle may be configured to be adjustable. Alternatively, the unmanned aerial vehicle 1 may be configured to detect the position of each cargo box B and capture an image of each cargo box B after entering the interior of the winged vehicle and closing the wings while confined within the winged vehicle.
スコア出力部32は、青果物Fの傷Dの度合いを内部品質(甘さ、酸っぱさ、デンプン量、変色、空洞など)に基づいて、スコアによって出力するよう構成されてもよい。この場合、スコア出力部32は、さらに、複数の荷画像を入力データとし、各荷画像に対応する内部品質に関するスコアを出力データとする教師データによって予め教師あり学習されていてもよい。そして、スコア出力部32は、荷画像を入力されると、青果物Fの内部品質をスコアによって出力する。これにより、スコア出力部32は、各荷箱B内の青果物Fの内部品質に対応するスコアを出力する。そして、この場合、荷役決定部33は、青果物Fの内部品質に対応するスコアに基づいて、複数の荷箱Bの荷役順序および各荷置場所を決定する。 The score output unit 32 may be configured to output the degree of damage D of the fruit or vegetable F as a score based on its internal quality (sweetness, sourness, starch content, discoloration, hollowness, etc.). In this case, the score output unit 32 may further be configured to perform supervised learning in advance using training data in which multiple load images are input data and scores related to the internal quality corresponding to each load image are output data. When a load image is input, the score output unit 32 outputs the internal quality of the fruit or vegetable F as a score. As a result, the score output unit 32 outputs a score corresponding to the internal quality of the fruit or vegetable F in each load box B. In this case, the load handling determination unit 33 determines the load handling order and storage location of the multiple load boxes B based on the scores corresponding to the internal quality of the fruit or vegetable F.
・赤外線カメラ15が内容物を撮像する角度は、第1実施形態および第2実施形態においても特に限定されない。 - The angle at which the infrared camera 15 captures the contents is not particularly limited in the first and second embodiments.
B 荷箱
C 識別子
E1 第1エリア
E2 第2エリア
E3 第3エリア
D 傷
F 青果物
P 荷崩れ防止材
S 荷役システム
T トラック
TE トラックエリア
1 無人飛行体
10 本体
11 プロペラ
12 動力部
13 飛行位置検出部
14 荷位置検出部
15 赤外線カメラ
16 飛行体制御部
2 フォークリフト
20 昇降装置
21 車位置検出部
22 駆動部
23 車両制御部
3 管理装置
30 記憶部
31 飛行体指令部
32 スコア出力部
33 荷役決定部
34 荷役指令部
35 識別子読取部
B Cargo box C Identifier E1 First area E2 Second area E3 Third area D Damage F Fruits and vegetables P Cargo collapse prevention material S Cargo handling system T Truck TE Truck area 1 Unmanned aerial vehicle 10 Main body 11 Propeller 12 Power unit 13 Flight position detection unit 14 Cargo position detection unit 15 Infrared camera 16 Aerial vehicle control unit 2 Forklift 20 Lifting device 21 Vehicle position detection unit 22 Drive unit 23 Vehicle control unit 3 Management device 30 Memory unit 31 Aerial vehicle command unit 32 Score output unit 33 Cargo handling determination unit 34 Cargo handling command unit 35 Identifier reading unit
Claims (7)
赤外線カメラを有し、荷役前に予め前記赤外線カメラによって前記荷箱を撮影し荷画像を生成する無人飛行体と、
前記荷画像に基づいて、前記荷箱の荷置場所および荷役順序またはそのいずれかを決定する荷役決定部と、を備え、
前記荷役決定部は、前記荷画像を解析してスコアを出力するスコア出力部を有し、前記スコア出力部によって出力されたスコアに基づいて、前記荷置場所および前記荷役順序またはそのいずれかを決定する荷役システム。 A cargo handling system including a plurality of containers placed in a predetermined area and a forklift for handling the containers,
an unmanned aerial vehicle having an infrared camera, which takes an image of the cargo box with the infrared camera before cargo handling to generate a cargo image;
a loading/unloading determination unit that determines a loading location and/or a loading order of the packing boxes based on the packing image,
The loading and unloading determination unit has a score output unit that analyzes the loading image and outputs a score, and the loading and unloading system determines the loading location and/or the loading and unloading order based on the score output by the score output unit.
前記スコア出力部は、前記荷画像を解析して前記青果物の傷の度合いをスコアによって出力する請求項1に記載の荷役システム。 The contents of the packing box are fruits and vegetables,
The cargo handling system according to claim 1 , wherein the score output unit analyzes the cargo image and outputs a score indicating the degree of damage to the fruit or vegetable.
前記スコア出力部は、前記荷画像を解析して内部品質の度合いをスコアによって出力する請求項1に記載の荷役システム。 The contents of the packing box are fruits and vegetables,
The cargo handling system according to claim 1 , wherein the score output unit analyzes the cargo image and outputs the degree of internal quality as a score.
赤外線カメラを有し、荷役前に予め前記赤外線カメラによって前記荷箱を撮影し荷画像を生成する無人飛行体と、
前記荷画像に基づいて、前記荷箱の荷置場所および荷役順序またはそのいずれかを決定する荷役決定部と、を備え、
前記荷箱の表面には前記荷箱の内容物に係る識別子が表示されるとともに、当該識別子が近赤外線によって透過可能な荷崩れ防止材によって覆われており、
前記赤外線カメラは、荷崩れ防止材を透過して前記識別子を撮像し、
前記荷役決定部は、前記識別子が有する情報に基づいて、前記荷箱の前記荷置場所および前記荷役順序またはそのいずれかを決定する荷役システム。 A cargo handling system including a plurality of containers placed in a predetermined area and a forklift for handling the containers,
an unmanned aerial vehicle having an infrared camera, which takes an image of the cargo box with the infrared camera before cargo handling to generate a cargo image;
a loading/unloading determination unit that determines a loading location and/or a loading order of the packing boxes based on the packing image,
An identifier relating to the contents of the packing box is displayed on the surface of the packing box, and the identifier is covered with a cargo collapse prevention material that is permeable to near-infrared rays,
The infrared camera captures an image of the identifier through the load-preventing material,
The loading/unloading determination unit is a loading /unloading system that determines the loading location and/or the loading order of the packing boxes based on the information contained in the identifier.
赤外線カメラを有し、荷役前に予め前記赤外線カメラによって前記荷箱を撮影し荷画像を生成する無人飛行体と、
前記荷画像に基づいて、前記荷箱の荷置場所および荷役順序またはそのいずれかを決定する荷役決定部と、
報知部と、を備え、
前記報知部は、前記荷役決定部によって決定された前記荷置場所および前記荷役順序またはそのいずれかを前記フォークリフトの運転者に報知する荷役システム。 A cargo handling system including a plurality of containers placed in a predetermined area and a forklift for handling the containers,
an unmanned aerial vehicle having an infrared camera, which takes an image of the cargo box with the infrared camera before cargo handling to generate a cargo image;
a loading/unloading determination unit that determines a loading location and/or a loading order of the packing boxes based on the packing image;
a notification unit,
The notification unit notifies the operator of the forklift of the loading location and/or the loading order determined by the loading determination unit.
赤外線カメラを有し、荷役前に予め前記赤外線カメラによって前記荷箱の内容物を撮影し荷画像を生成する無人飛行体と、
演算装置と記憶装置とを有するコンピュータと、を備えた荷役システムに利用される荷役管理プログラムであって、
前記荷役管理プログラムは、前記コンピュータに、
前記荷画像を解析してスコアを出力するスコア出力部と、
前記スコア出力部によって出力されたスコアに基づいて、前記荷箱の荷置場所および荷役順序またはそのいずれかを決定する荷役決定部と、して動作させる荷役管理プログラム。 a forklift that loads and unloads boxes placed in a predetermined location;
an unmanned aerial vehicle having an infrared camera, which takes an image of the contents of the packing box with the infrared camera before loading and unloading and generates a packing image;
A cargo handling management program used in a cargo handling system including a computer having an arithmetic unit and a storage unit,
The cargo handling management program is installed on the computer.
a score output unit that analyzes the package image and outputs a score;
A cargo handling management program that operates as a cargo handling determination unit that determines the loading location and/or loading order of the packing boxes based on the scores output by the score output unit.
荷役前に予め前記赤外線カメラによって、前記荷箱を撮影し荷画像を生成することと、
前記スコア出力部によって、前記荷画像を解析してスコアを出力することと、
前記荷役決定部によって、前記スコア出力部によって出力された前記スコアに基づいて、前記荷箱の荷置場所および荷役順序またはそのいずれかを決定することと、を含む荷役管理方法。 A cargo handling management method used in a cargo handling system including a cargo box placed in a predetermined area, a forklift that handles the cargo box, an unmanned aerial vehicle having an infrared camera, and a cargo handling determination unit having a score output unit ,
Taking an image of the packing box with the infrared camera before handling and generating a packing image;
The score output unit analyzes the package image and outputs a score;
and determining, by the loading decision unit , the loading location and/or the loading order of the packing boxes based on the scores output by the score output unit .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2023117263A JP7718792B2 (en) | 2023-07-19 | 2023-07-19 | Cargo handling system, cargo handling management program, and cargo handling management method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2023117263A JP7718792B2 (en) | 2023-07-19 | 2023-07-19 | Cargo handling system, cargo handling management program, and cargo handling management method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2025014582A JP2025014582A (en) | 2025-01-30 |
| JP7718792B2 true JP7718792B2 (en) | 2025-08-05 |
Family
ID=94376453
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2023117263A Active JP7718792B2 (en) | 2023-07-19 | 2023-07-19 | Cargo handling system, cargo handling management program, and cargo handling management method |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7718792B2 (en) |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017036102A (en) | 2015-08-06 | 2017-02-16 | 株式会社豊田自動織機 | Forklift work assisting system |
| US10336543B1 (en) | 2016-01-21 | 2019-07-02 | Wing Aviation Llc | Selective encoding of packages |
| JP2021508605A (en) | 2019-01-14 | 2021-03-11 | 株式会社Mujin | Robot system with adjustment mechanism and how to operate the robot system |
| JP2021073925A (en) | 2019-11-11 | 2021-05-20 | 直政 鈴木 | Management and checking method on growth of field crop |
| JP2021144380A (en) | 2020-03-11 | 2021-09-24 | 株式会社エヌ・ティ・ティ・データ | Learning data collector, learning data collection system, and learning data collection method |
| JP2022009289A (en) | 2018-09-11 | 2022-01-14 | 株式会社東芝 | Unloading device and detecting method of cargo |
| CN218825299U (en) | 2022-12-30 | 2023-04-07 | 比亚迪股份有限公司 | Forklift Control System |
| JP2023098264A (en) | 2021-12-28 | 2023-07-10 | 三菱ロジスネクスト株式会社 | Mobile object control method, mobile object and program |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01130770A (en) * | 1987-11-17 | 1989-05-23 | Yanmar Agricult Equip Co Ltd | Apparatus for sorting vegetables and fruits |
| JP3660707B2 (en) * | 1995-02-17 | 2005-06-15 | 株式会社マキ製作所 | Method and apparatus for sorting fruits and vegetables |
| JP3087820B2 (en) * | 1995-11-09 | 2000-09-11 | バンドー化学株式会社 | Fruit selection belt |
-
2023
- 2023-07-19 JP JP2023117263A patent/JP7718792B2/en active Active
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2017036102A (en) | 2015-08-06 | 2017-02-16 | 株式会社豊田自動織機 | Forklift work assisting system |
| US10336543B1 (en) | 2016-01-21 | 2019-07-02 | Wing Aviation Llc | Selective encoding of packages |
| JP2022009289A (en) | 2018-09-11 | 2022-01-14 | 株式会社東芝 | Unloading device and detecting method of cargo |
| JP2021508605A (en) | 2019-01-14 | 2021-03-11 | 株式会社Mujin | Robot system with adjustment mechanism and how to operate the robot system |
| JP2021073925A (en) | 2019-11-11 | 2021-05-20 | 直政 鈴木 | Management and checking method on growth of field crop |
| JP2021144380A (en) | 2020-03-11 | 2021-09-24 | 株式会社エヌ・ティ・ティ・データ | Learning data collector, learning data collection system, and learning data collection method |
| JP2023098264A (en) | 2021-12-28 | 2023-07-10 | 三菱ロジスネクスト株式会社 | Mobile object control method, mobile object and program |
| CN218825299U (en) | 2022-12-30 | 2023-04-07 | 比亚迪股份有限公司 | Forklift Control System |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2025014582A (en) | 2025-01-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10662007B2 (en) | 3D-2D vision system for robotic carton unloading | |
| US20180111765A1 (en) | Conveyor Screening During Robotic Article Unloading | |
| US10597235B2 (en) | Carton unloader tool for jam recovery | |
| US12138790B2 (en) | Systems and methods for SKU induction, decanting and automated-eligibility estimation | |
| US9457474B1 (en) | Opening packages at high speeds using robots | |
| EP2537397B1 (en) | Adaptive modular cargo screening | |
| CN111196479B (en) | Carton Unloader Tool for Jam Recovery | |
| CN113287129A (en) | Systems and methods for separating objects using vacuum rolls with one or more object handling systems | |
| US20180297786A1 (en) | Carton unloader tool for jam recovery | |
| CN110997530B (en) | Carton unloading tool for jam recovery | |
| CN117769648B (en) | Packaged goods inspection system and method thereof | |
| US11550301B2 (en) | System and method for adjusting the opening of containers to avoid damage to contents | |
| CN110244376A (en) | Method and apparatus for check cargo | |
| JP7718792B2 (en) | Cargo handling system, cargo handling management program, and cargo handling management method | |
| US20240359927A1 (en) | Mobile logistics robot | |
| CN110239794A (en) | Packing method, device, system and storage medium | |
| US20230211382A1 (en) | Platform detection | |
| CN120752650A (en) | Load carrier control device, method of operation and use thereof | |
| JP7747425B2 (en) | Load management system and load management program | |
| JPH09255158A (en) | Article disposition recognizing device | |
| JP2005185993A (en) | Tracking information processor | |
| JP6973525B2 (en) | Controls, control methods, and programs | |
| JP2018114468A (en) | Produce storage system | |
| JP7342207B1 (en) | Packaging inspection device and packaging inspection method | |
| JP7386143B2 (en) | Information acquisition system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20240717 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20250523 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20250604 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20250617 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20250723 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20250723 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7718792 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |