JP6597702B2 - Setup assist system - Google Patents
Setup assist system Download PDFInfo
- Publication number
- JP6597702B2 JP6597702B2 JP2017084347A JP2017084347A JP6597702B2 JP 6597702 B2 JP6597702 B2 JP 6597702B2 JP 2017084347 A JP2017084347 A JP 2017084347A JP 2017084347 A JP2017084347 A JP 2017084347A JP 6597702 B2 JP6597702 B2 JP 6597702B2
- Authority
- JP
- Japan
- Prior art keywords
- line
- unit
- setup
- image
- worker
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Position Input By Displaying (AREA)
- User Interface Of Digital Computer (AREA)
Description
本発明は、会場の設営をアシストする設営アシストシステムに関する。 The present invention relates to a setup assist system that assists in setting up a venue.
野外でスポーツやイベントを行う際の会場の設営は労力の掛る作業であり、作業の軽減化や効率化のための技術が求められている。そこで、従来技術として、ライン引きを行う自走式のラインカーが提案されている(例えば、特許文献1、2参照)。
Setting up a venue for outdoor sports and events is a labor-intensive work, and technology for reducing work and improving efficiency is required. Thus, as a conventional technique, a self-propelled line car that performs line drawing has been proposed (for example, see
しかしながら、従来技術では、会場の設営を行う作業者は、自動で行われるライン引きを見守ることしかできず、作業者が行う作業について効率的にアシストすることができないという問題点があった。 However, the conventional technique has a problem that the operator who operates the venue can only watch the line drawing performed automatically, and cannot efficiently assist the work performed by the operator.
本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、ライン引きを行う作業者を効率的にアシストすることができる設営アシストシステムを提供することにある。 This invention is made | formed in view of this point, The place made into the objective is to provide the setup assistance system which can assist the operator who performs line drawing efficiently.
本発明の画像形成装置の管理システムは、会場にラインを設営する作業者を、前記作業者の前方視界を撮像する視界撮像部と、前記作業者の前方視界に重畳されて表示される画像表示部とを備えたメガネ型端末を用いてアシストする設営アシストシステムであって、既知長の基体部を有し、前記会場の複数の既知点にそれぞれ設置された複数の基準ポールと、前記会場の実測データに前記基準ポール及び前記ラインの位置がレイアウトされた設営データを記憶する設営データ記憶部と、前記視界撮像部によって撮像された視界画像内の前記基準ポールを検出する基準ポール検出部と、前記基準ポール検出部によって複数の前記基準ポールが検出されると、視界画像内の前記基準ポールの大きさ及び位置に基づいて、前記実測データ内における前記メガネ型端末の現在位置及び姿勢を現在位置情報として特定する現在位置特定部と、前記視界画像を解析することで前記会場に引かれている設営済みラインを特定する設営検証部と、前記現在位置情報及び前記設営データに基づいて、前記ラインの設営位置を案内する案内ラインを拡張現実画像として描画して前記画像表示部に表示させる設営画像描画部と、を具備し、前記設営画像描画部は、前記設営済みライン上の前記案内ラインと、前記ラインが引かれていない箇所の前記案内ラインとを区別して描画することを特微とする。
さらに、本発明の設営アシストシステムにおいて、前記設営検証部は、前記設営済みラインと、前記設営データとを比較し、正しく前記設営済みラインが引かれているか否かを判断し、前記設営画像描画部は、正しく引かれていない前記設営済みライン上の前記案内ラインを他の箇所と区別して描画しても良い。
さらに、本発明の設営アシストシステムにおいて、前記ラインの設営を担当する作業者が前記ラインを分割したラインパーツ毎に設定された計画データを記憶する計画データ記憶部と、前記作業者の選択を受け付ける操作部と、を具備し、前記設営画像描画部は、前記案内ラインにおいて、選択された作業者が設営を担当するラインパーツを他の作業者の担当分と区別して描画しても良い。
さらに、本発明の設営アシストシステムにおいて、前記設営済みラインのライン長を前記ラインパーツ毎に算出し、前記作業者毎の進捗率を算出する進捗管理部を具備し、前記設営画像描画部は、選択された作業者の進捗率を通知する進捗画面を生成して前記拡張現実画像内に配置させても良い。
An image forming apparatus management system according to the present invention includes a field imaging unit that images a worker who sets up a line in a venue and images the worker's forward field of view, and an image display that is superimposed on the worker's forward field of view. A system assisting system using a glasses-type terminal comprising a plurality of reference poles each having a base portion of a known length and installed at a plurality of known points of the venue, A setup data storage unit that stores setup data in which the positions of the reference pole and the line are laid out in actual measurement data; a reference pole detection unit that detects the reference pole in the field-of-view image captured by the field-of-view imaging unit; When a plurality of the reference poles are detected by the reference pole detection unit, based on the size and position of the reference pole in the view field image, A current position specifying unit for specifying the current position and orientation of the glasses-type terminal as current position information, a setting verification unit for specifying a set line drawn to the venue by analyzing the view image, and the current A setting image drawing unit that draws a guide line for guiding the setting position of the line as an augmented reality image based on the position information and the setting data and displays it on the image display unit, and the setting image drawing unit Is characterized by distinguishing and drawing the guide line on the installed line and the guide line where the line is not drawn.
Further, in the configuration assist system of the present invention, the configuration verification unit compares the configured line with the configuration data, determines whether the configured line is correctly drawn, and draws the configuration image drawing. The part may draw the guide line on the installed line that is not drawn correctly, separately from other parts.
Furthermore, in the setup assist system of the present invention, a worker in charge of the setup of the line receives a plan data storage unit that stores plan data set for each line part obtained by dividing the line, and accepts the selection of the worker. An operation unit, and the setup image drawing unit may draw the line parts that the selected worker is in charge of setting in the guide line separately from the parts of other workers.
Furthermore, in the installation assist system of the present invention, a line length of the installed line is calculated for each line part, and a progress management unit that calculates a progress rate for each worker is provided. A progress screen notifying the progress rate of the selected worker may be generated and arranged in the augmented reality image.
本発明によれば、作業者の視界に会場に設営すべきラインの拡張現実画像を重畳させて表示することができるため、作業者は拡張現実画像を見ながらライン引きを行うことができ、会場の設営を行う作業者を効率的にアシストすることができるという効果を奏する。 According to the present invention, since the augmented reality image of the line to be set up in the venue can be displayed superimposed on the worker's field of view, the operator can draw the line while viewing the augmented reality image. It is possible to efficiently assist the worker who performs the setup of
次に、本発明の実施の形態を、図面を参照して具体的に説明する。 Next, embodiments of the present invention will be specifically described with reference to the drawings.
本実施の形態の設営アシストシステムは、スポーツやイベントを行う際の会場の設営をアシストするシステムであり、図1を参照すると、会場Gに設置する基準ポール1a〜1dと、設営プラン管理装置2と、メガネ型端末3と、を備えている。
The configuration assist system according to the present embodiment is a system that assists in setting up a venue when performing sports or events. Referring to FIG. 1,
基準ポール1a〜1dは、図2に示すように、円柱状の基体部11と、中心軸が垂直になるように基体部11を支持する足部12とを備えている。基体部11には、基体部11の基体長(長さ)を明確にするための計測基準部13と、基準ポール1a〜1dを区別して識別するための識別部14とが形成されている。本実施の形態において、計測基準部13は、基体部11の両端にそれぞれ表記された帯状のマーク(印)で構成し、識別部14は、計測基準部13に挟まれた領域に表記された、基準ポール1a〜1dで異なるパターン(模様)で構成した。なお、識別部14として、基準ポール1a〜1dで異なる色を用いるようにしても良い。この場合、基準ポール1a〜1d自体の色や計測基準部13の色によって、基準ポール1a〜1dを区別して識別することができる。
As shown in FIG. 2, the
設営プラン管理装置2は、プログラム制御で動作するパーソナルコンピューターである。設営プラン管理装置2は、図3を参照すると、液晶ディスプレイ等の本体表示部21と、キーボード、マウス、タッチパネル等の本体入力部22と、半導体メモリ等の本体記憶部23と、本体通信部24と、本体制御部25と、を備えている。
The installation
本体記憶部23には、基準データ4、実測データ5及びラインデータ6が記憶されていると共に、設営プラン管理装置2によって生成された設営データ7及び計画データ8が記憶される。
The main
基準データ4は、基準ポール1a〜1dを識別し、基準ポール1a〜1dとの距離を認識するためのデータである。基準データ4は、識別部14と照合する照合データと、基体部11の基体長Xと、足部12の足長Yとを有し、照合データ、基体長X及び足長Yが、基準ポール1a〜1d毎に設定されている。なお、本実施の形態では、全ての基準ポール1a〜1dにおいて、基体長X及び足長Yを同一の設定としたが、基準ポール1a〜1d毎に、基体長X及び足長Yを変えても良い。
The
実測データ5は、設営を行う会場の地形データと、磁針方位情報とからなる。
The
ラインデータ6は、サッカー場、Nメートルトラック(直線、楕円状)、野球場、ラグビー場、テニスコート等のライン(白線)の形状及び寸法(ライン長、ライン幅)からなる。なお、各ラインの寸法は、各競技の規則に基づいて許容範囲が設定されている。
The
本体制御部25は、本体表示部21、本体入力部22、本体記憶部23及び本体通信部24にそれぞれ接続され、設営プラン管理装置2全体の動作制御を実行する。本体制御部25は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等を備えたマイクロコンピュータ等の情報処理部である。ROMには設営プラン管理装置2の動作制御を行うための制御プログラムが記憶されている。本体制御部25のCPUは、ROMに記憶されている制御プログラムを読み出し、制御プログラムをRAMに展開させることで、装置全体の制御を行う。また、本体制御部25は、設営データ生成部251及び計画データ生成部252としてそれぞれ機能する。
The main
設営データ生成部251は、図4に示すように、会場Gの実測データ5に、基準ポール1a〜1dと、ラインとの位置がレイアウトされた設営データ7を生成する。設営データ生成部251は、本体表示部21に会場設営プラン作成画面として会場Gの実測データ5を表示させ、基準ポール1a〜1dと、ラインとの配置を受け付ける。なお、図4に示す設営データ7では、会場Gの実測データ5に、基準ポール1a〜1dが配置されていると共に、サッカー場のラインが配置されている。
As shown in FIG. 4, the setup
設営データ生成部251は、本体入力部22からの操作によって、図形の種類や寸法(ライン長、ライン幅)を指定したラインの入力及び配置や、ラインデータ6の選択及び配置を受け付け、ラインを2次元データとして会場Gに配置させる。なお、設営データ生成部251は、ラインデータ6の選択を受け付けた場合、設定されている許容範囲内でサイズの変更を受け付ける。これにより、各競技のラインを会場Gの形に合わせて調整することができる。
The operation
また、設営データ生成部251は、会場Gに配置させるラインを、複数のラインパーツに分割して生成する。ラインパーツは、ラインデータ6に予め設定しておくようにしても良く、本体入力部22からの操作によって、設営データ生成部251が設定を受け付けるようにしても良い。図4に示すサッカー場のラインの場合、例えば、複数のラインパーツとして、ゴールラインA、B、タッチラインA、B、ハーフウェーライン、センターサークル、センターマーク、コーナーアークA〜D、ゴールエリアA、B、ペナルティマークA、B、ペナルティーエリアA、B、ペナルティアークA、Bがそれぞれ生成される。
In addition, the setup
計画データ生成部252は、図5に示すような、ラインパーツ毎に、ライン長、設営を担当する作業者及び設営順番が設定された計画データ8を生成する。計画データ生成部252は、各ラインパーツのライン長、作業者及び設営順番を受け付ける。なお、計画データ生成部252は、各作業者の作業開始位置をそれぞれ受け付けることで、各作業者が最短距離でライン引きの作業を完了させることができる設営順番を自動生成するようにしても良い。
The plan
本体通信部24は、無線LAN等の無線通信によって、メガネ型端末3と各種データを送受信する機能を有する。本体通信部24は、本体記憶部23に記憶されている基準データ4と、設営データ生成部251によって生成された設営データ7と、計画データ生成部252によって生成された計画データ8とをメガネ型端末3に送信する。なお、設営データ7及び計画データ8について、本体通信部24は、メガネ型端末3と同期させる。
The main
メガネ型端末3は、設営作業を行う作業者が頭部に装着するメガネ型のウェアラブル端末である。メガネ型端末3は、図3に示すように、視界撮像部31と、AR画像表示部32と、端末通信部33と、端末記憶部34と、操作部35と、端末制御部36と、加速度センサー37と、電子コンパス38とを備えている。
The glasses-
視界撮像部31は、図1に示すように、メガネ型端末3の前方側に向けて配置されたCCDカメラやCMOSカメラ等の固体撮像素子で構成されたカメラであり、作業者の前方視界を撮像する。以下、視界撮像部31によって撮像された画像を視界画像と称す。
As shown in FIG. 1, the field-of-
AR画像表示部32は、メガネ型端末3を作業者が装着すると、図1に示すような、作業者の眼球の直前に位置するハーフミラーを表示画面として有している。AR画像表示部32に投影された画像は、作業者の前方視界に重畳されて表示される。
When the worker wears the glasses-
端末通信部33は、無線LAN等の無線通信によって、設営プラン管理装置2と各種データを送受信する機能を有する。端末記憶部34は、半導体メモリ等の記憶手段である。端末通信部33は、設営プラン管理装置2から受信した基準データ4、設営データ7及び計画データ8を端末記憶部34に記憶させる。
The
操作部35は、AR画像表示部32と共にユーザーインターフェースを構成し、作業者による各種操作を受け付ける。
The
端末制御部36は、視界撮像部31、AR画像表示部32、端末通信部33、端末記憶部34、操作部35、加速度センサー37及び電子コンパス38にそれぞれ接続され、メガネ型端末3全体の動作制御を実行する。端末制御部36は、CPU(Central Processing Unit)、ROM(Read Only Memory)、RAM(Random Access Memory)等を備えたマイクロコンピュータ等の情報処理部である。ROMにはメガネ型端末3の動作制御を行うための制御プログラムが記憶されている。端末制御部36のCPUは、ROMに記憶されている制御プログラムを読み出し、制御プログラムをRAMに展開させることで、端末全体の制御を行う。また、端末制御部36は、基準ポール検出部361、現在位置特定部362、設営検証部363、進捗管理部364及び設営画像描画部365としてそれぞれ機能する。
The
基準ポール検出部361は、視界撮像部31によって撮像された視界画像から基準ポール1a〜1dを検出する。基準ポール検出部361は、基準データ4の照合データを用いることで、基準ポール1a〜1dを区別して検出する。
The reference
現在位置特定部362は、基準ポール検出部361によって2本以上の基準ポール1a〜1dが検出されると、検出された基準ポール1a〜1dを用いて、実測データ5内におけるメガネ型端末3の現在位置と、姿勢(メガネ型端末3が向いている方角及び傾き)とを現在位置情報として特定する。
When the reference
また、加速度センサー37及び電子コンパス38は、所定位置からの移動距離と移動方向とを検出する移動検出部として機能する。現在位置特定部362は、加速度センサー37の出力と、電子コンパス38の出力とに基づいて、検出された基準ポール1a〜1dを用いて特定した現在位置からの移動距離と移動方向とを検出し、現在位置を追従する現在位置追従機能を備えている。これにより、基準ポール1a〜1dが見えない場合も現在位置情報を追従して推定することができ、次に基準ポール1a〜1dが見えるようになった時に、基準ポール1a〜1dを用いて正確な現在位置情報を特定し直すことができる。なお、移動検出部としてGPS(Global Positioning System)等の測位システムを備え、現在位置特定部362は、測位システムの出力によって、現在位置情報を追従して推定するようにしても良い。
The
設営検証部363は、視界撮像部31によって撮像した視界画像を解析することで会場Gに引かれている設営済みラインを特定し、特定した設営済みラインの配置を進捗管理部364及び設営画像描画部365に通知する。
The
また、設営検証部363は、設営済みラインと、設営データ7とを比較し、正しい寸法、濃度及び配置で設営済みラインが引かれているか否かを判断する。そして、設営検証部363は、正しい寸法、濃度もしくは配置で引かれていない設営済みライン(以下、エラーラインと称す)の配置を進捗管理部364及び設営画像描画部365に通知する。
In addition, the
進捗管理部364は、設営検証部363によって特定された設営済みラインのライン長をラインパーツ毎に算出する。そして、進捗管理部364は、計画データ8に基づいて、作業者毎の進捗率を算出し、算出した作業者毎の進捗率を設営画像描画部365に通知する。
The
設営画像描画部365は、現在位置特定部362によって特定もしくは推定された現在位置情報と、設営データ7とに基づいて、ラインの設営位置を案内する案内ラインを拡張現実画像(AR:Augmented Reality画像)として描画し、AR画像表示部32に表示させる。なお、設営画像描画部365は、操作部35による作業者の選択を受け付け、AR画像として描画する案内ラインにおいて、選択された作業者が設営を担当するラインパーツを線幅、線種、色、濃淡、点滅等によって他の作業者の担当分と区別して描画する。
Based on the current position information specified or estimated by the current
また、設営画像描画部365は、AR画像において、設営検証部363によって特定された設営済みライン上の案内ラインと、まだラインが引かれていない箇所の案内ラインとを線幅、線種、色、濃淡、点滅等によって区別して描画する。さらに、設営画像描画部365は、AR画像において、エラーライン上の案内ラインを他の箇所と線幅、線種、色、濃淡、点滅等によって区別して描画する。
In addition, the setup
また、設営画像描画部365は、図6に示すような、選択された作業者の進捗状況を通知する進捗画面40を生成し、生成した進捗画面40をAR画像内に配置させる。進捗画面40は、設営するラインの全体像に、全作業者のそれぞれ位置と、選択された作業者が設営を担当するラインパーツと、他の作業者が設営を担当するラインパーツとが反映されていると共に、選択された作業者の進捗率が進捗バーとして表示される。また、進捗画面40には、計画データ8の順番に基づき、次のラインパーツへの移動を示す情報が矢印等で表示される。図6に示す進捗画面40は、A氏の進捗画面40であり、A氏が設営を担当するラインパーツ(設営済みライン上の案内ラインが実線、ラインが引かれていない箇所の案内ラインが点線)が太く強調表示されていると共に、B氏の担当分の案内ラインが一点鎖線で、C氏の担当分の案内ラインが点線でそれぞれ表示されている。
Further, the setup
次に、本実施の形態の設営アシストシステムによる設営アシスト動作について図4乃至8を参照して詳細に説明する。なお、図4に示す設営データ7と、図5に示す計画データ8とが設営プラン管理装置2によって作成されているものとして以下説明する。
Next, the setup assist operation by the setup assist system of the present embodiment will be described in detail with reference to FIGS. In the following description, it is assumed that the
まず、設営データ7における基準ポール1a〜1dのそれぞれ配置位置に、実際の基準ポール1a〜1dを会場Gにそれぞれ設置する。基準ポール1a〜1dのそれぞれ設置位置は、実測データ5内の既知点として機能する。基準ポール1a〜1dは、基体部11の中心軸が垂直になるように設置する。これにより、基準ポール1a〜1dをどの方向から見ても条件が同じになる。なお、基体部11の中心軸をできるだけ正確に垂直に設置した方が好ましいが、厳密な垂直でなくても一定の効果が得られることは言うまでもない。
First, the
次に、作業者は、メガネ型端末3を装着し、4本の基準ポール1a〜1dの内の少なくとも2本を視界に捉える。これにより、視界撮像部31によって、図7に示すように、4本の基準ポール1a〜1dの内の少なくとも2本が含まれる視界画像が撮像される。以下、図7に示すように、基準ポール1bと、基準ポール1dとが視界画像に含まれた例について説明する。
Next, the worker wears the glasses-
視界画像内の基準ポール1bと、基準ポール1dとは、基準ポール検出部361によって検出される。基準ポール検出部361は、視界画像において、基準データ4の照合データと一致する識別部14を検索することで、基準ポール1bと、基準ポール1dとを区別して検出する。
The
現在位置特定部362は、基準ポール検出部361によって2本の基準ポール1bと、基準ポール1dとが検出されると、検出された基準ポール1bと、基準ポール1dとを用いて、実測データ5内におけるメガネ型端末3の現在位置及び姿勢を現在位置情報として特定する。
When the two
現在位置特定部362は、視界画像内の基準ポール1bの基体長Xbと、基準データ4の基準ポール1bの基体長Xとに基づいて、基準ポール1bとの距離Lbを算出すると共に、視界画像内の基準ポール1dの基体長Xdと、基準データ4の基準ポール1dの基体長Xとに基づいて、基準ポール1dとの距離Ldを算出する。これにより、図8に示すように、会場G(実測データ5)内におけるメガネ型端末3の現在位置が特定される。
The current
また、現在位置特定部362は、基準ポール1bもしくは基準ポール1dの視界画像内の左右方向の位置に基づいて、メガネ型端末3が向いている方角を特定する。さらに、現在位置特定部362は、基準ポール1bもしくは基準ポール1dの視界画像内の上下方向の位置に基づいて、メガネ型端末3が向いている傾きを特定する。なお、現在位置特定部362は、加速度センサー37及び電子コンパス38の出力によって、メガネ型端末3が向いている姿勢を特定するようにしても良い。
In addition, the current
視界画像に4本の基準ポール1a〜1dの内の少なくとも2本が含まれている間、現在位置特定部362による現在位置情報の特定は、作業員の移動や視線の変化に応じて随時行われる。そして、視界画像に含まれる基準ポール1a〜1dが2本未満になると、また、現在位置特定部362は、加速度センサー37の出力と、電子コンパス38の出力とに基づいて、現在位置情報を追従して推定する。
While at least two of the four
設営画像描画部365は、現在位置特定部362によって特定もしくは推定された現在位置情報と、設営データ7とに基づいて、案内ラインをAR画像として描画し、図9に示すように、AR画像表示部32に表示させる。図9に示すAR画像例は、A氏用のAR画像であり、A氏が設営を担当するラインパーツ(ラインが引かれていない箇所の案内ラインが点線)が太く強調表示されていると共に、B氏担当分の設置済みライン上の案内ラインが細い実線で、エラーライン上の案内ラインが細い一点鎖線でそれぞれ表示されている。なお、設置済みラインは視界画像に存在しているため、AR画像において該当箇所の案内ラインを省略しても良い。また、AR画像において設置済みライン上に案内ラインを表示させる場合には、視界画像の設置済みラインとは異なる色で表示させると良い。
The setup
ライン引きを行う場合、AR画像表示部32には作業者の視界に重畳して案内ラインがAR画像として表示される。従って、作業者はAR画像に合わせてラインカーでラインを引くことができる。なお、ラインカーは通常前押しで使用されるが、その場合、振り返ると引いた白線と白線のAR画像が重なって見えるので、正しく引けたかどうか確認できる。
When line drawing is performed, a guide line is displayed as an AR image on the AR
また、AR画像において、図9に示すように、正しい寸法、濃度もしくは配置で引かれていないエラーライン上の案内ラインが他の箇所と区別して描画されている。従って、会場Gを見渡すだけで、補修する必要がある箇所を簡単に把握することができる。例えば、競技と競技の間といった限られた短時間でライン補修を完了しなければならない場合、全てのラインを引き直す必要はなく、補修する必要がある部分と、補修する必要が無い部分を明確にAR画像表示部32上に表示することにより、より効率化を図ることができる。
In the AR image, as shown in FIG. 9, guide lines on the error line that are not drawn with the correct size, density, or arrangement are drawn separately from other portions. Therefore, just looking over the venue G, it is possible to easily grasp the place that needs to be repaired. For example, if line repairs must be completed in a limited amount of time, such as between competitions, it is not necessary to redraw all the lines. Clearly identify the parts that need to be repaired and the parts that do not need to be repaired. By displaying on the AR
なお、本実施の形態では、4本の基準ポール1a〜1dを設置するように構成したが、上述のように、基準ポールは2本以上であれば良く、会場Gに設置する基準ポールの本数は会場Gに応じて適宜設定すると良い。
In the present embodiment, the four
本実施の形態では、基準ポール1a〜1dのそれぞれ設置位置を、実測データ5内の既知点としている。従って、基準ポール1a〜1dを設営データ7の通りに正確に設置しなければならない。しかし、基準ポール1a〜1dの設置位置をそれぞれ正確に測定することは手間のかかる作業となる。
In the present embodiment, the installation positions of the
そこで、現在位置情報に基づいて実測データ5の輪郭、すなわち会場Gの輪郭をAR画像として描画する機能を設営画像描画部365に備えることで、設置位置を正確に測定することなく、基準ポール1a〜1dを設営データ7の通りに正確に設置することが可能になる。以下に、その手順を示す。
Therefore, the setup
まず、作業者は、基準ポール1a〜1dの内の2本、例えば、基準ポール1a、1bを設営データ7の設定位置に目測でそれぞれ設置する。次に、作業者は、メガネ型端末3を装着し、2本の基準ポール1a、1bを視界に捉える。これにより、現在位置特定部362は、基準ポール1a、1bが正確に設置されているとした仮の現在位置情報を特定する。
First, the operator visually installs two of the
次に、設営画像描画部365は、仮の現在位置情報に基づいて実測データ5の輪郭を描画してAR画像表示部32に表示させる。
Next, the setup
これにより、作業者は、会場Gの輪郭のAR画像と、実際の会場Gの輪郭とのズレを認識することができる。そして、両者が一致するように、基準ポール1a、1bの設置位置を調整することで、基準ポール1a、1bは設営データ7の通りに正確に設置される。
Thereby, the operator can recognize the deviation between the AR image of the outline of the hall G and the actual outline of the hall G. Then, the
他の2本の基準ポール1c、1dについては、基準ポール1a、1bを用いることで正確な現在地情報が特定されるため、設営画像描画部365によって描画させた基準ポール1c、1dのAR画像を用いて設置することができる。
For the other two
さらに、本実施の形態では、メガネ型端末3に端末記憶部34と、基準ポール検出部361、現在位置特定部362、設営検証部363、進捗管理部364及び設営画像描画部365とを設けた例について説明したが、これらの構成の全部もしくは一部を、メガネ型端末3と通信可能な設営プラン管理装置2やネットワーク上の設けるようにしても良い。
Further, in the present embodiment, the eyeglass-
以上説明したように、本実施の形態によれば、会場Gにラインを設営する作業者を、作業者の前方視界を撮像する視界撮像部31と、作業者の前方視界に重畳されて表示されるAR画像表示部32とを備えたメガネ型端末3を用いてアシストする設営アシストシステムであって、既知長の基体部11を有し、会場Gの複数の既知点にそれぞれ設置された複数の基準ポール1a〜1dと、会場Gの実測データ5に基準ポール1a〜1d及びラインの位置がレイアウトされた設営データ7を記憶する端末記憶部34と、視界撮像部31によって撮像された視界画像内の基準ポール1a〜1dを検出する基準ポール検出部361と、基準ポール検出部361によって複数の基準ポール1a〜1d内の2本以上が検出されると、視界画像内の基準ポール1a〜1dの大きさ及び位置に基づいて、実測データ5内におけるメガネ型端末3の現在位置及び姿勢を現在位置情報として特定する現在位置特定部362と、視界画像を解析することで会場Gに引かれている設営済みラインを特定する設営検証部363と、現在位置情報及び設営データ7に基づいて、ラインの設営位置を案内する案内ラインをAR画像として描画してAR画像表示部32に表示させる設営画像描画部365と、を具備し、設営画像描画部365は、設営済みライン上の案内ラインと、ラインが引かれていない箇所の案内ラインとを区別して描画する。
この構成により、作業者の視界にこれから設営すべきラインの拡張現実画像を重畳させて表示することができるため、作業者は拡張現実画像を見ながらライン引きを行うことができ、会場の設営を行う作業者を効率的にアシストすることができる。
As described above, according to the present embodiment, a worker who sets up a line in the venue G is displayed superimposed on the field-of-
With this configuration, it is possible to superimpose and display the augmented reality image of the line to be set up in the field of view of the worker, so that the worker can draw the line while looking at the augmented reality image, and set up the venue. The operator who performs can be assisted efficiently.
さらに、本実施の形態によれば、設営検証部363は、設営済みラインと、設営データ7とを比較し、正しくラインが引かれているか否かを判断し、設営画像描画部365は、正しく引かれていない設営済みライン上の案内ラインを他の箇所と区別して描画する。
この構成により、会場Gを見渡すだけで、補修する必要がある箇所を簡単に把握することができ、より効率化を図ることができる。
Further, according to the present embodiment, the
With this configuration, simply looking over the venue G, it is possible to easily grasp the places that need to be repaired, and to improve efficiency.
さらに、本実施の形態によれば、前記ラインの設営を担当する作業者が前記ラインを分割したラインパーツ毎に設定された計画データ8を記憶する端末記憶部34と、作業者の選択を受け付ける操作部35と、を具備し、設営画像描画部365は、案内ラインにおいて、選択された作業者が設営を担当するラインパーツを他の作業者の担当分と区別して描画する。
この構成により、選択された作業者の担当分を簡単に把握することができる。
Furthermore, according to the present embodiment, the operator who is in charge of setting up the line stores the
With this configuration, it is possible to easily grasp the portion in charge of the selected worker.
さらに、本実施の形態によれば、設営済みラインのライン長をラインパーツ毎に算出し、作業者毎の進捗率を算出する進捗管理部364を具備し、設営画像描画部365は、選択された作業者の進捗率を通知する進捗画面40を生成してAR画像内に配置させる。
この構成により、選択された作業者の進捗状況を簡単に把握することができる。
Furthermore, according to the present embodiment, the
With this configuration, it is possible to easily grasp the progress status of the selected worker.
なお、本発明が上記各実施の形態に限定されず、本発明の技術思想の範囲内において、各実施の形態は適宜変更され得ることは明らかである。 Note that the present invention is not limited to the above-described embodiments, and it is obvious that the embodiments can be appropriately changed within the scope of the technical idea of the present invention.
1a〜1d 基準ポール
2 設営プラン管理装置
3 メガネ型端末
4 基準データ
5 実測データ
6 ラインデータ
7 設営データ
8 計画データ
11 基体部
12 足部
13 計測基準部
14 識別部
21 本体表示部
22 本体入力部
23 本体記憶部
24 本体通信部
25 本体制御部
31 視界撮像部
32 AR画像表示部
33 端末通信部
34 端末記憶部
35 操作部
36 端末制御部
37 加速度センサー
38 電子コンパス
40 進捗画面
251 設営データ生成部
252 計画データ生成部
361 基準ポール検出部
362 現在位置特定部
363 設営検証部
364 進捗管理部
365 設営画像描画部
1a to
Claims (4)
既知長の基体部を有し、前記会場の複数の既知点にそれぞれ設置された複数の基準ポールと、
前記会場の実測データに前記基準ポール及び前記ラインの位置がレイアウトされた設営データを記憶する設営データ記憶部と、
前記視界撮像部によって撮像された視界画像内の前記基準ポールを検出する基準ポール検出部と、
前記基準ポール検出部によって複数の前記基準ポールが検出されると、視界画像内の前記基準ポールの大きさ及び位置に基づいて、前記実測データ内における前記メガネ型端末の現在位置及び姿勢を現在位置情報として特定する現在位置特定部と、
前記視界画像を解析することで前記会場に引かれている設営済みラインを特定する設営検証部と、
前記現在位置情報及び前記設営データに基づいて、前記ラインの設営位置を案内する案内ラインを拡張現実画像として描画して前記画像表示部に表示させる設営画像描画部と、を具備し、
前記設営画像描画部は、前記設営済みライン上の前記案内ラインと、前記ラインが引かれていない箇所の前記案内ラインとを区別して描画することを特微とする設営アシストシステム。 Using a glasses-type terminal provided with a field imaging unit that captures a worker's front view and an image display unit that is displayed superimposed on the worker's front view. A configuration assist system that assists,
A plurality of reference poles each having a known-length base portion and installed at a plurality of known points in the venue,
A setup data storage unit for storing setup data in which the positions of the reference pole and the line are laid out in the actual measurement data of the venue;
A reference pole detection unit that detects the reference pole in the field-of-view image captured by the field-of-view imaging unit;
When a plurality of the reference poles are detected by the reference pole detection unit, the current position and posture of the glasses-type terminal in the actual measurement data are determined based on the size and position of the reference pole in the field-of-view image. A current position specifying part specified as information,
An operation verification unit that identifies an installed line drawn to the venue by analyzing the view image;
A setup image drawing unit that draws a guide line for guiding the setup position of the line based on the current position information and the setup data as an augmented reality image and displays it on the image display unit;
The installation image drawing unit is characterized in that it draws the guide line on the installed line separately from the guide line at a location where the line is not drawn.
前記設営画像描画部は、正しく引かれていない前記設営済みライン上の前記案内ラインを他の箇所と区別して描画することを特微とする請求項1記載の設営アシストシステム。 The setup verification unit compares the setup line with the setup data, determines whether the setup line is correctly drawn,
2. The installation assist system according to claim 1, wherein the installation image drawing unit draws the guide line on the installed line that has not been drawn correctly in distinction from other parts.
前記作業者の選択を受け付ける操作部と、を具備し、
前記設営画像描画部は、前記案内ラインにおいて、選択された作業者が設営を担当するラインパーツを他の作業者の担当分と区別して描画することを特微とする請求項1又は2記載の設営アシストシステム。 A plan data storage unit for storing plan data set for each line part obtained by dividing the line by an operator in charge of setting up the line;
An operation unit that accepts the selection of the worker,
3. The construction image drawing unit according to claim 1, wherein in the guide line, the selected worker draws a line part for which the selected worker is responsible for the setup separately from a part assigned to the other worker. Setup assist system.
前記設営画像描画部は、選択された作業者の進捗率を通知する進捗画面を生成して前記拡張現実画像内に配置させることを特微とする請求項3記載の設営アシストシステム。 A line length of the installed line is calculated for each line part, and a progress management unit that calculates a progress rate for each worker is provided.
4. The setup assist system according to claim 3, wherein the setup image drawing unit generates a progress screen for notifying the progress rate of the selected worker and arranges it in the augmented reality image.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017084347A JP6597702B2 (en) | 2017-04-21 | 2017-04-21 | Setup assist system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2017084347A JP6597702B2 (en) | 2017-04-21 | 2017-04-21 | Setup assist system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2018181237A JP2018181237A (en) | 2018-11-15 |
| JP6597702B2 true JP6597702B2 (en) | 2019-10-30 |
Family
ID=64276899
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017084347A Expired - Fee Related JP6597702B2 (en) | 2017-04-21 | 2017-04-21 | Setup assist system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6597702B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111896034A (en) * | 2020-08-06 | 2020-11-06 | 深圳市兆威机电股份有限公司 | In-place detection method, device, controller and storage medium |
| JP7682390B1 (en) * | 2023-10-12 | 2025-05-23 | 三菱電機株式会社 | Work support device, work support method, and work support system |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002136636A (en) * | 2000-10-30 | 2002-05-14 | Bunsaku Kamatsuka | Line drawing device |
| JP2008243166A (en) * | 2007-03-28 | 2008-10-09 | Age System Kk | Autonomous line car |
| JP4963094B2 (en) * | 2007-09-11 | 2012-06-27 | 独立行政法人産業技術総合研究所 | Work support device |
| EP2433716A1 (en) * | 2010-09-22 | 2012-03-28 | Hexagon Technology Center GmbH | Surface spraying device with a nozzle control mechanism and a corresponding method |
| JP5423716B2 (en) * | 2011-03-30 | 2014-02-19 | ブラザー工業株式会社 | Head mounted display |
| JP5192598B1 (en) * | 2012-07-03 | 2013-05-08 | 貴章 春日 | Work system with self-propelled device |
| JP2016138908A (en) * | 2015-01-26 | 2016-08-04 | セイコーエプソン株式会社 | Display system, portable display device, display control device, and display method |
-
2017
- 2017-04-21 JP JP2017084347A patent/JP6597702B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2018181237A (en) | 2018-11-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6016268B2 (en) | Field work support device, method and program | |
| US10074179B2 (en) | Image measurement device | |
| US7974462B2 (en) | Image capture environment calibration method and information processing apparatus | |
| JP6646511B2 (en) | Skill transfer system and method | |
| JP5762892B2 (en) | Information display system, information display method, and information display program | |
| US8509490B2 (en) | Trajectory processing apparatus and method | |
| US10638115B2 (en) | Calibration device | |
| JP2017059062A (en) | Information processing apparatus, information processing method, and program | |
| JPWO2014002725A1 (en) | Three-dimensional measurement method, apparatus and system, and image processing apparatus | |
| JP6395010B2 (en) | Information provision system for billing location evaluation | |
| WO2007111241A1 (en) | Road video image analyzing device and road video image analyzing method | |
| JP2020098451A (en) | Information projection system, control device, and information projection method | |
| JP5052254B2 (en) | Three-dimensional measurement system and three-dimensional measurement method | |
| JP6597702B2 (en) | Setup assist system | |
| JP6512793B2 (en) | Imaging device, surveillance camera system, control method and program for imaging device | |
| JP2019066196A (en) | Tilt measuring device and tilt measuring method | |
| JP2009140402A (en) | INFORMATION DISPLAY DEVICE, INFORMATION DISPLAY METHOD, INFORMATION DISPLAY PROGRAM, AND RECORDING MEDIUM CONTAINING INFORMATION DISPLAY PROGRAM | |
| JP2019065467A (en) | Pile position inspection device and pile position inspection method | |
| US20180040138A1 (en) | Camera-based method for measuring distance to object (options) | |
| US7409152B2 (en) | Three-dimensional image processing apparatus, optical axis adjusting method, and optical axis adjustment supporting method | |
| JP2019096062A (en) | Object tracking device, object tracking method, and object tracking program | |
| JP2006267879A (en) | Image processing method, image processing apparatus, marker | |
| JP2018106358A (en) | Setup assisting system | |
| JP2017147689A (en) | Video editing apparatus, video editing method, and video editing computer program | |
| JP2019066292A (en) | Video display system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190128 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190822 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190903 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190916 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6597702 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |