JP6655944B2 - Information processing system, terminal device, server, information processing method and program - Google Patents
Information processing system, terminal device, server, information processing method and program Download PDFInfo
- Publication number
- JP6655944B2 JP6655944B2 JP2015210792A JP2015210792A JP6655944B2 JP 6655944 B2 JP6655944 B2 JP 6655944B2 JP 2015210792 A JP2015210792 A JP 2015210792A JP 2015210792 A JP2015210792 A JP 2015210792A JP 6655944 B2 JP6655944 B2 JP 6655944B2
- Authority
- JP
- Japan
- Prior art keywords
- inspection result
- data
- terminal device
- inspection
- pointed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
本発明は、情報処理システム、端末装置、サーバ、情報処理方法及びプログラムに関する。 The present invention relates to an information processing system, a terminal device, a server, an information processing method, and a program.
従来、マンション等の建造物を建造する場合、完成物の引き渡しに先立って、仕上げ検査あるいは配筋検査等の各種検査が行われている。
これらの検査においては、例えば仕上げ検査の場合、検査員が現場で視認したクロス浮き等の指摘箇所(検査結果)を、建造物の間取り図を印刷した用紙に記入している。そして、指摘箇所を施工した業者に修理を依頼する場合、検査結果を記入した間取り図の用紙をコピーし、その業者に関連する箇所にマーカーを付す等して指摘箇所を知らせている。
ところが、このような建造物の検査のための作業は、検査員が手書きで用紙に指摘箇所を記入したり、特定の業者に関連する指摘箇所を識別するためにマーカーを付したりする等、手間を要するものである。
そこで、特許文献1に記載の技術においては、建造物の検査に携帯端末等の情報処理装置を用いることで、作業効率の向上を図っている。
2. Description of the Related Art Conventionally, when constructing a building such as an apartment, various inspections such as a finishing inspection and a bar arrangement inspection are performed prior to delivery of a completed product.
In these inspections, for example, in the case of a finishing inspection, a point (inspection result) pointed out by a inspector, such as a cross floating, visually recognized on the spot is written on a sheet on which a floor plan of a building is printed. When requesting repair from a contractor who has constructed the indicated location, a copy of the floor plan sheet in which the inspection results are entered is made, and a marker is attached to a location related to the contractor to notify the indicated location.
However, such inspections for buildings are often performed by inspectors by hand-writing the indicated points on a form or attaching markers to identify the indicated points related to a specific contractor. It takes time and effort.
Therefore, in the technology described in
しかしながら、特許文献1に記載された技術においては、検査員が行っていた作業の一部に情報処理装置を用いているものの、検査に関連する作業を十分には支援できず、全体として建造物の検査を効率的に行うことができるものではなかった。
However, in the technology described in
本発明は、建造物の検査をより効率的に行うことを目的とする。 An object of the present invention is to inspect buildings more efficiently.
上記目的を達成するため、本発明の一態様の情報処理システムは、
建造物の検査に用いられる携帯型の端末装置と、前記端末装置と通信可能に構成されたサーバとを含む情報処理システムであって、
前記端末装置は、
検査員が発話した音声の音声認識を行うことにより、前記建造物の検査結果を入力するためのフォーマットに検査結果データを入力する検査結果入力手段と、
前記検査結果データを前記サーバに送信する検査結果送信手段と、を備え、
前記サーバは、
前記検査結果データに基づいて、前記検査結果への対応作業のための所定のフォーマットを有する帳票データを作成する帳票データ作成手段を備えることを特徴とする。
In order to achieve the above object, an information processing system according to one embodiment of the present invention includes:
An information processing system including a portable terminal device used for inspection of a building and a server configured to be able to communicate with the terminal device,
The terminal device,
Inspection result input means for inputting inspection result data in a format for inputting the inspection result of the building by performing voice recognition of the voice spoken by the inspector,
Test result transmitting means for transmitting the test result data to the server,
The server is
Form data creating means for creating form data having a predetermined format for work corresponding to the inspection result based on the inspection result data is provided.
本発明によれば、建造物の検査をより効率的に行うことができる。 ADVANTAGE OF THE INVENTION According to this invention, an inspection of a building can be performed more efficiently.
以下、本発明の実施形態について、図面を用いて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[構成]
[システム構成]
図1は、本発明に係る情報処理システム1のシステム構成を示す図である。
図1に示すように、本発明に係る情報処理システム1は、携帯端末10と、サーバ20と、PC(Personal Computer)30とを含んで構成され、携帯端末10、サーバ20及びPC30は、ネットワーク40を介して互いに通信可能に構成されている。
本発明に係る情報処理システム1は、マンション等の建造物における各種検査を行うために用いられるものであり、携帯端末10に表示された検査対象の図面を含む検査結果入力フォーマットに対して、携帯端末10のユーザ(検査員)が検査の現場において、指摘箇所をタップして検査結果を音声で入力する。すると、入力された音声が音声認識によりテキストデータ化され、検査対象の図面におけるタップされた位置と対応付けて、音声認識されたテキストデータが記憶される。このようにして、検査対象の検査が完了すると、検査対象に関する検査結果が入力された検査結果入力フォーマットがサーバ20に送信され、PC30による操作に応じて、検査対象に関する検査結果が、業者毎等に分類されて、所定の提供先に提供される。
これにより、検査員が手書きで用紙に検査結果を記入する場合に比べ、検査結果を入力する手間が軽減されると共に、入力された検査結果を分類する処理等を簡単に行うことができる。
したがって、本発明に係る情報処理システム1によれば、建造物の検査をより効率的に行うことが可能となる。
[Constitution]
[System configuration]
FIG. 1 is a diagram showing a system configuration of an
As shown in FIG. 1, an
The
Accordingly, compared to a case where the inspector manually writes the inspection result on the sheet, the labor for inputting the inspection result is reduced, and the process of classifying the input inspection result can be easily performed.
Therefore, according to the
[ハードウェア構成]
次に、情報処理システム1を構成する各装置のハードウェア構成を説明する。
図2は、携帯端末10のハードウェア構成を示す模式図である。
携帯端末10は、スマートフォンあるいはタブレット端末等の携帯型の情報処理装置によって構成される。
図2に示すように、携帯端末10は、CPU(Central Processing Unit)111と、ROM(Read Only Memory)112と、RAM(Random Access Memory)113と、バス114と、タッチ操作入力部115と、出力部116と、音声入力部117と、撮像部118と、センサ部119と、記憶部120と、通信部121と、ドライブ122と、を備えている。
[Hardware configuration]
Next, the hardware configuration of each device constituting the
FIG. 2 is a schematic diagram illustrating a hardware configuration of the
The
As shown in FIG. 2, the
CPU111は、ROM112に記録されているプログラム、または、記憶部120からRAM113にロードされたプログラムに従って各種の処理(携帯端末10の機能を実現するための処理)を実行する。
RAM113には、CPU111が各種の処理を実行する上において必要なデータ等も適宜記憶される。
The
The
CPU111、ROM112及びRAM113は、バス114を介して相互に接続されている。バス114には、タッチ操作入力部115、出力部116、音声入力部117、撮像部118、センサ部119、記憶部120、通信部121及びドライブ122が接続されている。
The
タッチ操作入力部115は、例えば出力部116の表示領域に積層される静電容量式または抵抗膜式の位置入力センサにより構成され、タッチ操作がなされた位置の座標を検出する。ここで、タッチ操作とは、タッチ操作入力部115に対する物体(ユーザの指やタッチペン等)の接触または近接の操作をいう。
出力部116は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
即ち、本実施形態では、タッチ操作入力部115と出力部116のディスプレイとにより、タッチパネルが構成されている。
The touch
The
That is, in the present embodiment, a touch panel is configured by the touch
音声入力部117は、例えばマイクロフォンにより構成され、入力された音声をアナログ電気信号に変換する。音声入力部117を構成するマイクロフォンとしては、携帯端末10の内蔵マイクロフォンとすることや、ノイズの多い状況においても特定の発話者の音声をより高音質で集音できる身体装着型のマイクロフォンとすること等が可能である。
なお、音声のアナログ信号は、A/D(Analog/Digital)変換処理が施されて、音声データを表すデジタル信号に変換される。このA/D変換処理の実行主体は、特に限定されず、CPU111であってもよいし、図示しない専用のハードウェアであってもよいが、本実施形態では説明の便宜上、音声入力部117であるものとする。
即ち、本実施形態では、音声入力部117は、入力された音声に基づく音声データをCPU111等に出力する。
The
The audio analog signal is subjected to A / D (Analog / Digital) conversion processing, and is converted into a digital signal representing audio data. The subject of execution of the A / D conversion process is not particularly limited, and may be the
That is, in the present embodiment, the
撮像部118は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズ等で構成される。なお、フォーカスレンズの他、焦点距離を一定の範囲で自在に変化させるズームレンズを光学レンズ部に備えることとしてもよい。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
Although not shown, the
The optical lens unit includes a lens that condenses light, such as a focus lens, for photographing a subject. Note that, in addition to the focus lens, a zoom lens that freely changes the focal length within a certain range may be provided in the optical lens unit.
The optical lens unit is also provided with a peripheral circuit for adjusting setting parameters such as focus, exposure, white balance, and the like, as necessary.
イメージセンサは、光電変換素子や、AFE(Analog Front End)等から構成される。
光電変換素子は、例えばCMOS(Complementary Metal Oxide Semiconductor)型の光電変換素子等から構成される。本実施形態においては撮像素子には、Bayer配列の色フィルタが装着されている。撮像素子は、一定時間毎に、その間に入射されて蓄積された被写体像の光信号を光電変換(撮像)して、その結果得られるアナログの電気信号をAFEに順次供給する。
AFEは、このアナログの電気信号に対して、A/D変換処理等の各種信号処理を実行する。各種信号処理によって、デジタル信号が生成され、撮像部118の出力信号として出力される。撮像部118の出力信号によって示される画像のデータを、以下、適宜「撮像画像データ」と呼ぶ。撮像画像データは、CPU111の指示に従って、RAM113あるいは記憶部120に記憶される。
The image sensor includes a photoelectric conversion element, an AFE (Analog Front End), and the like.
The photoelectric conversion element includes, for example, a CMOS (Complementary Metal Oxide Semiconductor) type photoelectric conversion element or the like. In the present embodiment, a color filter having a Bayer array is mounted on the image sensor. The imaging device photoelectrically converts (images) the optical signal of the subject image that has been incident and accumulated during the period, and sequentially supplies an analog electric signal obtained as a result to the AFE.
The AFE executes various signal processing such as A / D conversion processing on the analog electric signal. A digital signal is generated by various signal processing, and is output as an output signal of the
センサ部119は、携帯端末10における3軸方向の加速度を検出する3軸加速度センサ、携帯端末10における3軸方向の角速度を検出するジャイロセンサ、携帯端末10の位置を検出する位置センサ(例えばGPS受信機)あるいは地磁気を検出する地磁気センサ等の各種センサを備えている。センサ部119の検出信号は、CPU111等に出力される。
記憶部120は、DRAM(Dynamic Random Access Memory)等の記憶装置で構成され、各種データを記憶する。
通信部121は、ネットワークを介して他の装置との間で行う通信を制御する。
ドライブ122には、必要に応じて、リムーバブルメディア131が適宜装着される。ドライブ122によってリムーバブルメディア131から読み出されたプログラムは、必要に応じて記憶部120にインストールされる。また、リムーバブルメディア131は、記憶部120に記憶されている各種データも、記憶部120と同様に記憶することができる。
The
The
The
The
図3は、サーバ20及びPC30を構成するコンピュータ200のハードウェア構成を示す模式図である。
サーバ20は、サーバコンピュータによって構成され、PC30は、汎用のPCによって構成される。サーバ20及びPC30のハードウェア構成は、ほぼ同様のコンピュータ200によって構成されるため、以下、これらの構成をまとめて説明する。
図3に示すように、サーバ20及びPC30を構成するコンピュータ200は、CPU211と、ROM212と、RAM213と、バス214と、入力部215と、出力部216と、記憶部217と、通信部218と、ドライブ219と、を備えている。なお、サーバ20の構成を特に表す場合、コンピュータ200の各符号末尾に「A」の文字を付し、PC30の構成を特に表す場合、コンピュータ200の各符号末尾に「B」の文字を付して区別するものとする。
FIG. 3 is a schematic diagram illustrating a hardware configuration of the
The
As shown in FIG. 3, the
CPU211は、ROM212に記録されているプログラム、または、記憶部217からRAM213にロードされたプログラムに従って各種の処理(サーバ20またはPC30の機能を実現するための処理)を実行する。
RAM213には、CPU211が各種の処理を実行する上において必要なデータ等も適宜記憶される。
The
The
CPU211、ROM212及びRAM213は、バス214を介して相互に接続されている。バス214には、入力部215、出力部216、記憶部217、通信部218及びドライブ219が接続されている。
The
入力部215は、各種釦等で構成され、指示操作に応じて各種情報を入力する。
出力部216は、ディスプレイやスピーカ等で構成され、画像や音声を出力する。
記憶部217は、ハードディスクあるいはDRAM等で構成され、各サーバで管理される各種データを記憶する。
通信部218は、ネットワークを介して他の装置との間で行う通信を制御する。
The
The
The
The
ドライブ219には、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリ等よりなる、リムーバブルメディア231が適宜装着される。ドライブ219によってリムーバブルメディア231から読み出されたプログラムは、必要に応じて記憶部217にインストールされる。
In the
[機能的構成]
次に、情報処理システム1において実現される主な機能構成について説明する。
図4は、情報処理システム1において実現される主な機能構成を示すブロック図である。
図4に示すように、情報処理システム1は、携帯端末10のCPU111において、検査対象データ取得部151と、検査対象表示部152と、音声認識部153と、検査結果データ入力部154と、画像取得部155と、検査結果データ送信部156とが機能する。
また、携帯端末10の記憶部120には、検査対象データ記憶部171と、関連業者データ記憶部172と、作業別辞書データ記憶部173と、検査結果データ記憶部174とが形成される。
[Functional configuration]
Next, a main functional configuration realized in the
FIG. 4 is a block diagram illustrating a main functional configuration realized in the
As shown in FIG. 4, in the
In addition, the
検査対象データ記憶部171には、検査対象となる建造物に関するデータ(検査対象データ)が記憶されている。例えば、検査対象データ記憶部171には、検査対象となる建造物の検査結果入力フォーマットが、その建造物の住所や名称等と対応付けて記憶されている。
関連業者データ記憶部172には、検査対象となる建造物に関連する業者を示すデータが記憶されている。例えば、関連業者データ記憶部172には、検査対象となる建造物の建造に関わった建築業者、内装業者あるいは設備業者等の名称、連絡先及び担当者名等が記憶されている。
The inspection target data storage unit 171 stores data (inspection target data) relating to a building to be inspected. For example, the inspection target data storage unit 171 stores an inspection result input format of a building to be inspected in association with an address, a name, and the like of the building.
The related company
作業別辞書データ記憶部173には、建造物の検査に関連する用語の音声認識用データが格納された辞書データが記憶されている。具体的には、作業別辞書データ記憶部173には、仕上げ検査、配筋検査、コンクリート出来形検査、コンクリート構造物補修工事検査あるいは下地検査等の作業別(即ち、建造物の検査の種類別)に、その作業で使用される可能性のある用語の音声認識用データ(言語モデルのデータ)が格納された作業別辞書データが記憶されている。
検査結果データ記憶部174には、検査対象となった建造物の検査結果のデータが記憶されている。具体的には、検査結果データ記憶部174には、検査対象となった建造物の検査結果入力フォーマットに、検査員によって検査結果が入力された後のデータ(検査結果データ)が建造物の住所や名称等と対応付けて記憶されている。
The work-specific dictionary
The inspection result
検査対象データ取得部151は、サーバ20に対して、検査対象となる建造物に関するデータを要求し、サーバ20から送信される検査対象データ(検査結果入力フォーマット)を取得する。検査対象データ取得部151によって取得された検査対象データは、建造物の住所や名称等と対応付けて検査対象データ記憶部171に記憶される。このとき、検査対象データ取得部151は、検査対象となる建造物に関連する業者(関連業者)を示すデータを併せてサーバ20から取得する。検査対象データ取得部151によって取得された関連業者を示すデータは、関連業者データ記憶部172に記憶される。なお、本実施形態において、検査対象データ取得部151は、1日あるいは午前(または午後)等の時間の区分毎に、検査対象となる1または複数の物件に関する検査対象データを取得する。
検査対象表示部152は、検査員による建造物の検査が行われる際に、検査結果入力フォーマットを表示し、検査結果の入力が可能な状態とする。
The inspection target
The inspection
音声認識部153は、携帯端末10において音声認識を行うため(即ち、スタンドアローン用)の音声認識機能であり、マイクを介して入力された検査員の音声を認識する。このとき、音声認識部153は、一般の音声認識アルゴリズムによる音声認識に加え、作業別辞書データ記憶部173を参照して、建造物の検査の種類に応じた辞書データを用いることにより、検査員の音声を認識する。これにより、その建造物の検査において使用される用語がより適切にテキストデータに変換される。
また、音声認識部153は、関連業者データ記憶部172を参照して、音声によって検査員が入力した業者を特定する。これにより、その建造物の建造に関わった業者を簡単に特定することができる。
例えば、検査員が内装の仕上げ検査の際に「クロス浮き、補修、A工務店連絡」と指摘内容を発音した場合、音声認識部153は、作業別辞書データ記憶部173に記憶されている内装の仕上げ検査用の辞書データを参照して「クロス浮き」、「補修」及び「A工務店」という音声をテキストデータに変換し、関連業者データ記憶部172に記憶されている「A工務店」の名称を参照して、A工務店に関する情報を特定する。即ち、関連業者データ記憶部172において「A工務店」が特定されると、A工務店の連絡先を特定することができる。
The voice recognition unit 153 is a voice recognition function for performing voice recognition in the portable terminal 10 (that is, for a stand-alone), and recognizes a voice of an inspector input through a microphone. At this time, the voice recognition unit 153 refers to the work-specific dictionary
Further, the voice recognition unit 153 refers to the related vendor
For example, when the inspector pronounces the content of the comment “Cross float, repair, contact A construction company” at the time of finishing inspection of the interior, the voice recognition unit 153 outputs the interior stored in the work-specific dictionary
検査結果データ入力部154は、検査対象表示部152によって表示された検査結果入力フォーマットにおいて、間取り図のタップによる指摘箇所の位置のデータと、音声認識の結果による指摘内容のテキストデータとを対応付けて、検査結果入力フォーマットに入力する。このとき、検査結果データ入力部154は、指摘箇所に通し番号を付与し、間取り図の周囲(例えば間取り図の左右)に形成されている指摘箇所の番号の表示領域(番号表示領域)において、タップされた間取り図の位置に最も近い領域に指摘箇所の番号を表示する。なお、タップされた間取り図の位置に最も近い領域に、他の指摘箇所の番号が既に表示されている場合、検査結果データ入力部154は、その隣接位置にその指摘箇所の番号を表示する。さらに、番号表示領域が既に入力された指摘箇所の番号で占有されている場合、検査結果データ入力部154は、検査結果入力フォーマットのページングを行い、次ページ以降の番号表示領域に指摘箇所の番号を表示する。
そして、検査結果データ入力部154は、検査結果が入力された検査結果入力フォーマット(検査結果データ)を検査結果データ記憶部174に記憶する。
The inspection result
Then, the inspection result
画像取得部155は、音声あるいはボタンの操作等による検査員の指示に応じて、指摘箇所の撮像画像データを取得する。画像取得部155によって取得された撮像画像データは、検査結果入力フォーマットに入力された指摘箇所と対応付けて、検査結果データ記憶部174に記憶される。
検査結果データ送信部156は、検査結果データ記憶部174に記憶された検査結果データと、検査結果データの検査結果入力フォーマットの指摘箇所と対応付けられた撮像画像データとをサーバ20に送信する。
The
The inspection result
また、情報処理システム1は、サーバ20のCPU211Aにおいて、検査対象データ提供部251と、音声認識部252と、検査対象データ受信部253と、検査結果データ受信部254と、検査結果データ翻訳部255と、帳票データ作成部256と、帳票データ提供部257と、画像解析部258とが機能する。
また、サーバ20の記憶部217Aには、検査対象データベース271と、関連業者データベース272と、検査結果データベース273と、翻訳辞書データベース274と、ディクテーション用辞書データベース275とが形成される。
Further, in the
In the
検査対象データベース271には、情報処理システム1において検査対象となる種々の建造物に関するデータ(検査対象データ)が記憶されている。
関連業者データベース272には、情報処理システム1において検査対象となる種々の建造物に関連する業者を示すデータが記憶されている。
The
The
検査結果データベース273には、携帯端末10から送信された各種建造物の検査結果データが記憶されている。
翻訳辞書データベース274には、検査結果データの言語を他の言語に翻訳するための各種辞書データが記憶されている。例えば、検査員が日本語で入力した検査結果データが、日本語と中国語とを相互に翻訳するための辞書データを参照して、中国語で表記された検査結果データに翻訳される。
ディクテーション用辞書データベース275には、検査員が発話した内容をテキスト化するための音声認識用データが格納された辞書データが記憶されている。例えば、ディクテーション用辞書データベース275には、検査員が指摘事項として発話する可能性のある音声、検査員が画像に対する注釈として発話する可能性のある音声、その他、一般的な内容(自由文)として発話される可能性のある音声について、音声認識用データが格納されている。また、ディクテーション用辞書データベース275には、携帯端末10に提供される各種作業別辞書データが記憶されている。
The
The
The
検査対象データ提供部251は、携帯端末10から検査対象となる建造物に関するデータを要求された場合に、その建造物に関する検査対象データを検査対象データベース271から読み出して、携帯端末10に送信する。本実施形態において、携帯端末10に検査対象データを提供した場合、検査対象データ提供部251は、その検査対象データを他の携帯端末10に提供しないよう検査対象データにロックをかける。これにより、同一の検査対象について、重複して検査が行われることを防ぐことができる。なお、検査対象データにかけられたロックは、検査結果データ受信部254が検査結果データを受信することにより解除される。
音声認識部252は、携帯端末10がサーバ20によって音声認識を行うため(即ち、オンライン用)の音声認識機能であり、携帯端末10から送信された音声データに基づいて、音声認識を行う。そして、音声認識部252は、音声認識の結果であるテキストデータを携帯端末10に送信する。
検査対象データ受信部253は、PC30から送信された検査対象となる建造物の検査対象データを受信し、検査対象データベース271に記憶する。
When the mobile terminal 10 requests data on a building to be inspected, the inspection target
The
The inspection target
検査結果データ受信部254は、携帯端末10から送信された検査結果データを受信し、検査結果データベース273に記憶する。また、検査結果データ受信部254は、検査結果データを受信することに対応して、検査対象データ提供部251によって検査対象データにかけられたロックを解除する。
検査結果データ翻訳部255は、PC30から検査結果データの翻訳が要求された場合に、翻訳辞書データベース274を参照し、翻訳対象の検査結果データを、要求された言語に翻訳する。
The test result
When the translation of the inspection result data is requested from the
帳票データ作成部256は、PC30から検査結果を所定形式の帳票データとして取得する要求が行われた場合に、検査結果データベース273から対象となる検査結果データを読み出し、所定のフォーマット変換を行うことにより、帳票データを作成する。このとき、帳票データ作成部256は、PC30からの指示に応じて、検査結果データを業者毎あるいは検査対象となった建造物毎等の分類条件によって分類し、分類後の検査結果データを基に帳票データを作成する。また、帳票データ作成部256は、PC30から検査結果データの修正内容を受信した場合、その修正内容を検査結果データに反映させ、検査結果データベース273に記憶された検査結果データを更新する。また、帳票データ作成部256は、検査結果データ翻訳部255によって検査結果データが所定の言語に翻訳された場合、翻訳後の言語で表された帳票データを作成する。
さらに、帳票データ作成部256は、検査結果入力フォーマットのページングが行われている検査結果データの帳票データを作成する場合、帳票データを検査結果入力フォーマットに対応してページングし、番号表示領域における指摘箇所の番号及びその番号に対応する指摘内容を複数のページにわたって表示する帳票データを作成する。
なお、本実施形態において、検査結果データについて、分類条件が設定され、指摘箇所の一部(特定の業者に関連する指摘箇所のみ等)を表す帳票データを作成する場合、帳票データ作成部256は、検査結果データ入力部154によって付与された指摘箇所の通し番号を維持すると共に、帳票データにおいて表示される指摘箇所を対象として、番号表示領域における表示位置を再設定する。
即ち、検査結果データが分類条件によって分類された場合であっても、検査結果データにおける指摘箇所の通し番号が変化しないため、検査員、管理者あるいは関連業者等の関係者が指摘箇所を把握する際に、指摘箇所間の混同が生じる事態を防ぐことができる。また、帳票データにおいて表示される指摘箇所を対象として、番号表示領域における表示位置が再設定されるため、指摘事項をより視認しやすい形態で帳票データを作成することができる。
The form
Further, when creating the form data of the inspection result data in which the paging of the inspection result input format is performed, the form
In the present embodiment, when classification conditions are set for the inspection result data and form data representing a part of the pointed out point (only the pointed out point related to a specific contractor or the like) is created, the form
In other words, even when the inspection result data is classified according to the classification condition, the serial number of the point indicated in the inspection result data does not change. In addition, it is possible to prevent confusion between the indicated points. In addition, since the display position in the number display area is reset for the pointed position displayed in the form data, the form data can be created in a form in which the pointed matter can be more easily visually recognized.
帳票データ提供部257は、帳票データ作成部256によって作成された帳票データをPC30に送信する。
画像解析部258は、検査員によって撮影された指摘箇所の撮像画像データを対象として画像解析を行い、指摘箇所にキズ等の瑕疵があるか否かを判定する。なお、画像解析部258は、例えば、撮像画像データに対して、ガンマ補正やエッジ抽出等の画像処理を行い、キズの輪郭を強調することで、指摘箇所にキズがあるか否かを判定したり、フィルタ処理によってテクスチャが変化している部分を検出することで、クロス浮きがあるか否かを判定したりすることができる。
The form
The
また、情報処理システム1は、PC30のCPU211Bにおいて、管理画面表示部351と、検査結果データ修正部352と、検査対象データ入力部353と、帳票データ取得部354とが機能する。
In the
管理画面表示部351は、サーバ20に蓄積された検査結果データの確認及び整理を行うための管理画面を表示する。管理画面を介して、管理者が検査結果データを確認し、必要に応じて検査結果データを修正した上、検査結果データの提供先に応じた分類等の処理を行うことにより、サーバ20によって帳票データが作成される。
検査結果データ修正部352は、検査結果データに入力されている指摘事項について、検査結果の管理を行う権限を有する管理者による修正を受け付ける。例えば、検査員によってクロスの「キズ」の存在が指摘され、「補修」による対応が指摘されていた箇所を、管理者が「補修」ではなく「張り替え」による対応に修正したりする。そして、検査結果データ修正部352は、入力された検査結果データの修正内容をサーバ20に送信する。
The management
The inspection result
検査対象データ入力部353は、検査対象となる建造物の検査対象データの入力を受け付ける。例えば、検査対象データ入力部353は、検査対象となる建造物の間取り図のデータ(CADデータあるいは画像データ)や、建造物の住所や名称、検査の種類等の文字データの入力を受け付ける。また、検査対象データ入力部353は、検査対象となる建造物に関連する業者(関連業者)を示すデータの入力を受け付ける。そして、検査対象データ入力部353は、入力された間取り図のデータ及び文字データによって構成される検査対象データ(検査結果入力フォーマット)及び関連業者を示すデータをサーバ20に送信する。
帳票データ取得部354は、検査対象となった建造物の検査結果データを、サーバ20から所定形式の帳票データとして取得する。例えば、帳票データ取得部354は、検査結果データを業者毎あるいは検査対象となった建造物毎等の分類条件によって分類することをサーバに要求し、検査結果データが分類された帳票データをサーバ20から取得する。
The inspection target
The form
以上のような機能構成により、情報処理システム1を利用することで、検査対象となる建造物の検査結果を容易にデータとして入力することができると共に、検査結果データを目的に応じた適切な形態の帳票データとして容易に出力することができる。
図5は、情報処理システム1が利用される場合の手順を示す模式図である。
情報処理システム1を利用して建造物の検査が行われる場合、図5(A)に示すように、携帯端末10において、情報処理システム1を利用するためのログイン処理が行われる。
そして、ログインが完了すると、図5(B)に示すように、携帯端末10に記憶されている検査対象の選択(即ち、検査対象データの選択)を行うための選択画面が表示される。
With the above-described functional configuration, by using the
FIG. 5 is a schematic diagram illustrating a procedure when the
When a building is inspected using the
When the login is completed, as shown in FIG. 5B, a selection screen for selecting an inspection target stored in the mobile terminal 10 (that is, selecting inspection target data) is displayed.
図5(B)に示す選択画面において、いずれかの検査対象が選択され、検査の開始が指示された場合、図5(C)に示すように、検査対象となる建造物の検査結果入力フォーマットが表示される。図5(C)に示す例では、検査対象となる建造物の間取り図が表示されている。
そして、検査員が、検査対象となる建造物において指摘箇所として入力すべき部分を発見した場合、間取り図において指摘箇所に対応する位置をタップし、指摘内容を入力する。このとき、図5(D)に示すように、指摘箇所についての指摘内容を検査員が音声で入力することにより、指摘内容がテキストデータとされ、検査結果データとして記憶される。図5(D)に示す例では、検査対象「XXXマンション ○○○号室」について、検査員が、「指摘番号“1”、室名“リビングダイニング”、部位“床”、指摘内容“フローリング キズ”・・・」と音声で入力した結果が示されている。また、図5(D)に示すように、指摘箇所の画像を撮影するためのボタンアイコン(写真撮影ボタン)が表示され、検査員は、指摘箇所の内容の入力と共に、指摘箇所の画像を撮影することができる。なお、指摘箇所の画像の撮影は、音声による指示によって行うことも可能である。
When one of the inspection targets is selected on the selection screen shown in FIG. 5 (B) and the start of the inspection is instructed, as shown in FIG. 5 (C), the inspection result input format of the building to be inspected Is displayed. In the example shown in FIG. 5C, a floor plan of a building to be inspected is displayed.
When the inspector finds a part to be input as a pointed point in a building to be inspected, the inspector taps a position corresponding to the pointed point in the floor plan and inputs the pointed content. At this time, as shown in FIG. 5 (D), when the inspector inputs the pointed content of the pointed portion by voice, the pointed content is converted into text data and stored as inspection result data. In the example shown in FIG. 5 (D), for the inspection target “XXX Mansion XXX Room”, the inspector specifies “pointed number“ 1 ”, room name“ living dining ”, part“ floor ”, pointed out content“ flooring scratches ”. The result of inputting "..." by voice is shown. In addition, as shown in FIG. 5D, a button icon (photographing button) for photographing the image of the pointed portion is displayed, and the inspector captures the image of the pointed point while inputting the contents of the pointed portion. can do. It should be noted that the image of the pointed portion can be captured by voice instructions.
図5(C)及び図5(D)に示すように、間取り図における指摘箇所の位置と、その指摘箇所の指摘内容が入力されると、図5(E)に示すように、間取り図の周囲に形成された番号表示領域に、指摘箇所を示す通し番号が表示される。また、図5(F)に示すように、図5(E)に示す各指摘箇所の指摘内容を示す一覧のデータが生成される。なお、図5(F)においては、入力された検査結果データを一部省略して示している。本実施形態において、検査結果入力フォーマットは、図5(E)に示す間取り図と、図5(F)に示す指摘内容の一覧とを別の画面で切り換えて表示する形式となっている。
即ち、検査対象となる建造物の指摘箇所が入力され、検査が完了すると、間取り図の周囲に形成された番号表示領域に、引き出し線によって各指摘箇所を示す通し番号が表示されると共に、通し番号と対応付けられた指摘内容の一覧が検査結果データとして記憶される。
As shown in FIGS. 5 (C) and 5 (D), when the position of the pointed out point in the floor plan and the contents of the pointed out point are input, as shown in FIG. A serial number indicating the pointed point is displayed in a number display area formed around the area. Further, as shown in FIG. 5 (F), data of a list indicating the content of the indication of each indication location shown in FIG. 5 (E) is generated. In FIG. 5F, the input inspection result data is partially omitted. In the present embodiment, the inspection result input format is a format in which the floor plan shown in FIG. 5E and the list of indication contents shown in FIG.
That is, when the pointed out point of the building to be inspected is input and the inspection is completed, a serial number indicating each pointed out point is displayed by a leader line in a number display area formed around the floor plan, and the serial number is displayed. A list of the associated pointing contents is stored as inspection result data.
この検査結果データは、サーバ20に送信されて、検査結果データベース273に記憶される。そして、PC30からの要求に応じて、指定された分類条件の下、図5(G)に示すように、帳票データが作成される。図5(G)に示す帳票データの例では、帳票の左側に間取り図及び番号表示領域からなる図面の表示領域が形成され、帳票の右側に指摘箇所の番号、場所の名称(部屋のタイプ等)、部位(壁や床等)、指摘内容(フローリングのキズ等)、検査日、検査員、写真の有無等のテキストデータを表示する文字の表示領域が形成されている。なお、図5(G)においては、入力された検査結果データを一部省略して示している。
This inspection result data is transmitted to the
[動作]
次に、情報処理システム1の動作を説明する。
[検査支援処理]
初めに、情報処理システム1の携帯端末10が実行する検査支援処理について説明する。
図6は、情報処理システム1の携帯端末10が実行する検査支援処理の流れを示すフローチャートである。
検査支援処理は、携帯端末10を用いて、検査対象となる建造物の各種検査を行う場合に、音声認識による検査結果の入力を受け付け、検査結果データを生成してサーバ20に送信する処理である。
なお、検査支援処理は、携帯端末10において、検査支援処理の実行を指示する操作が行われることに対応して開始される。
[motion]
Next, the operation of the
[Inspection support processing]
First, the inspection support processing executed by the
FIG. 6 is a flowchart illustrating a flow of the inspection support processing executed by the
The inspection support process is a process of receiving an input of an inspection result by voice recognition, generating inspection result data, and transmitting it to the
Note that the inspection support process is started in response to an operation of instructing the
検査支援処理が開始されると、ステップS1において、検査対象データ取得部151は、サーバ20に対して、検査対象となる建造物に関するデータを要求し、サーバ20から送信される検査対象データ(検査結果入力フォーマット)を取得する。
ステップS2において、検査対象表示部152は、検査結果入力フォーマットを表示し、検査結果の入力が可能な状態とする。
When the inspection support processing is started, in step S1, the inspection target
In step S2, the inspection
ステップS3において、検査結果データ入力部154は、検査対象表示部152によって表示された検査結果入力フォーマットにおいて、間取り図のタップによる指摘箇所の位置のデータと、音声認識の結果による指摘内容のテキストデータとを対応付けると共に、指摘箇所の通し番号を付与し、検査結果入力フォーマットに入力する。このとき、指摘箇所に関連する画像が撮影された場合、その撮像画像データが指摘箇所と対応付けられる。
In step S3, in the test result input format displayed by the test
ステップS4において、検査結果データ送信部156は、検査結果データと、検査結果データの指摘箇所と対応付けられた撮像画像データとをサーバ20に送信する。
ステップS4の後、検査支援処理は終了する。
In step S <b> 4, the inspection result
After step S4, the inspection support processing ends.
[帳票データ作成処理]
次に、情報処理システム1のサーバ20が実行する帳票データ作成処理について説明する。
図7は、情報処理システム1のサーバ20が実行する帳票データ作成処理の流れを示すフローチャートである。
帳票データ作成処理は、検査対象データを所定の分類条件によって分類し、分類後の検査結果データを基に帳票データを作成する処理である。
なお、帳票データ作成処理は、サーバ20において、PC30から検査結果を所定形式の帳票データとして取得する要求が行われた場合に開始される。
[Form data creation process]
Next, the form data creation processing executed by the
FIG. 7 is a flowchart illustrating a flow of the form data creation process executed by the
The form data creation process is a process of classifying inspection target data according to predetermined classification conditions and creating form data based on the classified inspection result data.
The form data creation process is started when the
ステップS11において、PC30からの要求に応じて、検査結果データベース273から対象となる検査結果データを読み出し、PC30に送信する。
ステップS12において、帳票データ作成部256は、PC30から検査結果データの修正内容を受信したか否かの判定を行う。
PC30から検査結果データの修正内容を受信した場合、ステップS12においてYESと判定されて、処理はステップS13に移行する。
一方、PC30から検査結果データの修正内容を受信していない場合、ステップS12においてNOと判定されて、処理はステップS14に移行する。
In step S11, in response to a request from the
In step S12, the form
When the correction content of the inspection result data is received from the
On the other hand, if the correction content of the inspection result data has not been received from the
ステップS13において、帳票データ作成部256は、PC30から受信した修正内容を検査結果データに反映させ、検査結果データベース273に記憶された検査結果データを更新する。
ステップS14において、帳票データ作成部256は、PC30から検査結果データの分類条件を受信する。
In step S13, the form
In step S14, the form
ステップS15において、帳票データ作成部256は、PC30から受信した検査結果の分類条件によって検査結果データを分類し、分類後の検査結果データを基に帳票データを作成する。
ステップS16において、帳票データ提供部257は、作成された帳票データをPC30に送信する。PC30に送信された帳票データは、PC30から所定の宛先(関連業者等)に送信され、補修あるいは張り替え等の対応作業が行われる。
ステップS16の後、帳票データ作成処理は終了する。
In step S15, the form
In step S16, the form
After step S16, the form data creation process ends.
[検査結果データ翻訳処理]
次に、情報処理システム1のサーバ20が実行する検査結果データ翻訳処理について説明する。
図8は、情報処理システム1のサーバ20が実行する検査結果データ翻訳処理の流れを示すフローチャートである。
検査結果データ翻訳処理は、PC30からの要求に応じて、翻訳対象の検査結果データを要求された言語に翻訳する処理である。
なお、検査結果データ翻訳処理は、サーバ20において、PC30から検査結果データの翻訳が要求された場合に開始される。
[Inspection result data translation processing]
Next, the inspection result data translation processing executed by the
FIG. 8 is a flowchart illustrating the flow of the inspection result data translation process executed by the
The inspection result data translation process is a process of translating inspection result data to be translated into a requested language in response to a request from the
The inspection result data translation process is started when the
ステップS21において、検査結果データ翻訳部255は、翻訳対象となる検査結果データ及び翻訳する言語の指定をPC30から受信する。
ステップS22において、検査結果データ翻訳部255は、翻訳辞書データベース274の辞書データを参照し、翻訳対象の検査結果データを指定された言語に翻訳する。
In step S21, the inspection result
In step S22, the test result
ステップS23において、帳票データ作成部256は、検査結果データ翻訳部255によって翻訳された検査結果データを基に、翻訳後の言語で表された帳票データ(あるいは他の形式のデータ等)を作成する。
ステップS23の後、検査結果データ翻訳処理は終了する。
In step S23, the form
After step S23, the inspection result data translation processing ends.
このような処理により、情報処理システム1によれば、検査対象となる建造物の検査結果を容易にデータとして入力することができると共に、検査結果データを目的に応じた適切な形態の帳票データとして容易に出力することができる。
したがって、建造物の検査をより効率的に行うことが可能となる。
また、検査結果データを他の言語に翻訳できるため、検査員と検査結果の利用者とが異なる言語の使用者であることが許容され、情報処理システム1を利用して建造物の検査を行う機会を増加させることができる。
According to such processing, according to the
Therefore, the inspection of the building can be performed more efficiently.
In addition, since the inspection result data can be translated into another language, the inspector and the user of the inspection result are allowed to be users of different languages, and the building is inspected using the
[変形例1]
上述の実施形態において、音声認識によって検査結果データの入力が行われる際に、音声あるいは入力されたIDにより検査結果データを入力した検査員を識別し、検査結果データと対応付けてサーバ20に記憶することができる。
そして、サーバ20において、検査員の検査結果データを統計処理することにより、指摘箇所の漏れや指摘の誤り等の傾向を検査員毎に解析し、解析した傾向をその検査員に通知することができる。
この場合、サーバ20のCPU211Aにおいて、検査結果データを統計・解析処理する検査結果データ統計解析部が形成される。
また、検査結果データ統計解析部によって、検査結果データを統計処理することにより、指摘箇所が発生する頻度や内容等の傾向を関連業者毎に解析し、解析した傾向をその関連業者に通知することができる。あるいは、検査結果データ統計解析部によって、検査結果データを統計処理することにより、指摘箇所が発生する頻度が高い建造物の部位やその内容等の傾向を解析し、解析した傾向を関連業者や検査員に通知することができる。
さらに、サーバ20において、検査員の傾向や関連業者の傾向を基に、注意すべき検査内容を検査対象データに付加し、検査員が建造物の検査を行う場合に、注意すべき検査内容を検査員に通知することとしてもよい。
これにより、検査員や関連業者の特性に対応して、より適切な検査や施工等が行われるよう支援することができる。
[Modification 1]
In the above-described embodiment, when the test result data is input by voice recognition, the inspector who has input the test result data is identified by voice or the input ID and stored in the
The
In this case, in the
In addition, by statistically processing the test result data by the test result data statistical analysis unit, trends such as the frequency and content of the indicated points are analyzed for each related company, and the analyzed trends are notified to the related company. Can be. Alternatively, by statistically processing the inspection result data by the inspection result data statistical analysis section, the tendency of the site of the building where the indicated location frequently occurs and the content thereof is analyzed, and the analyzed tendency is checked by the related contractor or inspection. Members can be notified.
Further, in the
Thus, it is possible to assist in performing more appropriate inspection, construction, and the like in accordance with the characteristics of the inspector and the related company.
[変形例2]
上述の実施形態において、検査員が検査を行う際に、携帯端末10におけるセンサ部119の各種センサの検出結果を取得し、入力された検査結果データ(各指摘箇所)と対応付けて、各種センサの検出結果を記憶することができる。
例えば、検査結果データが入力された際の携帯端末10の位置データ(GPS受信機の検出結果)、方位データ(地磁気センサの検出結果)及び仰俯角データ(ジャイロセンサ及び加速度センサの検出結果)を検査結果データと対応付けて記憶することができる。
そして、検査員あるいは関連業者が指摘箇所の補修結果の確認や補修作業等を行うために現場を訪れた際に、携帯端末10によって、指摘箇所に対応付けられている各種センサの検出結果を参照し、携帯端末10の位置、向いている方位及び仰俯角を指摘箇所が指摘されたときと同様となるよう案内することができる。例えば、撮像部118においてライブビュー画像を表示させながら、指摘箇所の方向を矢印で示したり、指摘箇所の部分の画像にマーカーを表示したり、あるいは、音声を出力したり、文字データを表示したりすることにより、指摘箇所を案内することが可能である。
この場合、携帯端末10のCPU111において、検査結果データに基づいて指摘箇所を案内する指摘箇所案内部が形成される。
これにより、検査員あるいは関連業者が指摘箇所をより容易に特定できるよう支援することができる。
[Modification 2]
In the above-described embodiment, when the inspector performs the inspection, the detection results of the various sensors of the
For example, the position data (detection result of the GPS receiver), the azimuth data (detection result of the geomagnetic sensor), and the elevation angle data (the detection result of the gyro sensor and the acceleration sensor) of the
Then, when the inspector or the related company visits the site to check the repair result of the indicated portion or perform repair work, the
In this case, the
As a result, it is possible to assist the inspector or the related trader to more easily specify the pointed point.
[変形例3]
本実施形態における建造物の検査に関する作業の一部を、ロボットを利用して行うことができる。
例えば、画像を撮影する機能及び移動する機能を備えたロボットを携帯端末10として利用して、検査対象となる建造物の各部を撮影し、キズやクロス浮き等の指摘事項の有無を画像の解析結果から判定することができる。この場合、キズやクロス浮き等の指摘事項が発見された際のロボットの位置、撮像部が向いている方位及び仰俯角を変形例2のように取得し、検査結果データと対応付けて記憶することができる。また、このように各種センサの検出結果を検査結果データと対応付けることにより、変形例2のように携帯端末10としてのロボットを指摘箇所に案内(誘導)し、補修結果を確認すること等ができる。
これにより、高所や化学物質等に汚染された場所等の検査及び補修確認等を無人で行うことが可能となる。
[Modification 3]
Part of the work related to the inspection of the building in the present embodiment can be performed using a robot.
For example, a robot having an image capturing function and a moving function is used as the
As a result, it is possible to perform inspection and repair confirmation of altitudes, places contaminated with chemical substances, and the like without any person.
以上のように構成される情報処理システム1は、建造物の検査に用いられる携帯端末10と、携帯端末10と通信可能に構成されたサーバ20とを含む。また、情報処理システム1は、携帯端末10に、検査結果データ入力部154と、検査結果データ送信部156とを備え、サーバ20に、帳票データ作成部256を備える。
検査結果データ入力部154は、検査員が発話した音声の音声認識を行うことにより、指摘箇所を含む建造物の検査結果を入力するためのフォーマットに検査結果データを入力する。
検査結果データ送信部156は、検査結果データをサーバ20に送信する。
帳票データ作成部256は、検査結果データに基づいて、検査結果への対応作業のための所定のフォーマットを有する帳票データを作成する。
これにより、情報処理システム1においては、検査対象となる建造物の検査結果を容易にデータとして入力することができると共に、検査結果データを目的に応じた適切な形態の帳票データとして容易に出力することができる。
したがって、建造物の検査をより効率的に行うことが可能となる。
The
The inspection result
The inspection result
The form
Thereby, in the
Therefore, the inspection of the building can be performed more efficiently.
検査結果データ入力部154は、建造物の検査の種類に対応する作業別辞書に基づいて、音声認識を行う。
これにより、その建造物の検査において使用される用語をより適切にテキストデータに変換することができる。
The inspection result
Thereby, the terms used in the inspection of the building can be more appropriately converted into text data.
帳票データ作成部256は、予め指定されたデータの分類条件に応じて検査結果データを分類して、帳票データを作成する。
これにより、検査結果データを目的に応じた適切な形態の帳票データとして容易に出力することができる。
The form
As a result, the inspection result data can be easily output as form data in a form appropriate for the purpose.
帳票データ作成部256は、指摘箇所が設定された間取り図と、間取り図の周囲の少なくとも一部に指摘箇所を示す番号を表示する番号表示領域と、指摘箇所の内容を表示する指摘内容表示領域と、を有するフォーマットの前記帳票データを作成する。
これにより、検査対象となる建造物の検査結果をわかりやすい形態で提示することができる。
The form
Thereby, the inspection result of the building to be inspected can be presented in an easily understandable form.
帳票データ作成部256は、予め指定されたデータの分類条件に応じて検査結果データを分類して、検査結果データにおける指摘箇所の一部を含む帳票データを作成する場合に、指摘箇所を示す番号を維持して、当該帳票データに表示する。
これにより、検査結果データが分類条件によって分類された場合であっても、検査結果データにおける指摘箇所の番号が変化しないため、関係者が指摘箇所を把握する際に、指摘箇所間の混同が生じる事態を防ぐことができる。
The form
As a result, even when the inspection result data is classified according to the classification condition, the number of the indicated point in the inspection result data does not change, and confusion between the indicated points occurs when related parties grasp the indicated point. The situation can be prevented.
サーバ20は、検査結果データベース273と、検査結果データ統計解析部(CPU211A)とを備える。
検査結果データベース273は、携帯端末10から送信された検査結果データを蓄積して記憶する。
検査結果データ統計解析部は、検査結果データベース273に記憶された検査結果データを統計処理することにより、検査結果データの指摘内容に関する傾向を解析する。
これにより、検査員や関連業者の特性に対応して、より適切な検査や施工等が行われるよう支援することができる。
The
The
The test result data statistical analysis unit statistically processes the test result data stored in the
Thus, it is possible to assist in performing more appropriate inspection, construction, and the like in accordance with the characteristics of the inspector and the related company.
サーバ20は、検査結果データ翻訳部255を備える。
検査結果データ翻訳部255は、検査結果データに用いられた言語とは異なる言語で表された帳票データを作成するための翻訳機能を実現する。
これにより、検査員と検査結果の利用者とが異なる言語の使用者であることが許容され、情報処理システム1を利用して建造物の検査を行う機会を増加させることができる。
The
The inspection result
This allows the inspector and the user of the inspection result to be users of different languages, and can increase the opportunity to inspect the building using the
携帯端末10は、センサ部119と、指摘箇所案内部(CPU111)とを備える。
センサ部119は、携帯端末10の位置及び向きを検出する。
指摘箇所案内部は、過去に指摘された指摘箇所の案内を行う。
検査結果データ入力部154は、検査結果における指摘箇所が入力された際のセンサの検出結果を検査結果データと対応付ける。
検査結果データ送信部156は、センサ部119の検出結果及び検査結果データをサーバ20に送信する。
指摘箇所案内部は、サーバ20から取得した検査結果データに対応付けられているセンサ部119の検出結果に基づいて、携帯端末10の位置及び向きに関する情報を提供することにより、検査結果データにおける指摘箇所の案内を行う。
これにより、検査員あるいは関連業者が指摘箇所をより容易に特定できるよう支援することができる。
The
The
The pointed out point guidance unit guides the pointed out point pointed out in the past.
The inspection result
The inspection result
The pointed location guidance unit provides information on the position and orientation of the
As a result, it is possible to assist the inspector or the related trader to more easily specify the pointed point.
なお、本発明は、上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
例えば、上述の実施形態においては、情報処理システム1がマンション等の建造物の検査に用いられるものとして説明したが、これに限られない。
即ち、本発明は、船舶や橋等、建造後に検査が行われる対象一般に用いることが可能である。
また、上述の実施形態においては、検査結果データ翻訳部255が、要求された言語に検査結果データを翻訳し、帳票データ作成部256が、翻訳された検査結果データを基に、翻訳後の言語で表された帳票データを作成するものとして説明したが、これに限られない。
即ち、サーバ20において、要求された言語で表された帳票データを出力することができれば、帳票データ作成部256によって翻訳前の言語で作成された帳票データを翻訳することとしてもよい。
It should be noted that the present invention is not limited to the above-described embodiment, but includes modifications and improvements as long as the object of the present invention can be achieved.
For example, in the above-described embodiment, the
That is, the present invention can be used for general objects to be inspected after construction, such as ships and bridges.
In the above-described embodiment, the inspection result
That is, if the
また、上述の実施形態において、各サーバの構成は一例として示したものであり、情報処理システム1全体として、上記各サーバの機能が備えられていれば、複数のサーバの機能を統合したり、1つのサーバの機能を分割したりすることができる。
In the above-described embodiment, the configuration of each server is shown as an example. If the functions of each server are provided as the
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
換言すると、図4の機能的構成は例示に過ぎず、特に限定されない。即ち、上述した一連の処理を全体として実行できる機能が情報処理システム1に備えられていれば足り、この機能を実現するためにどのような機能ブロックを用いるのかは特に図4の例に限定されない。
The series of processes described above can be executed by hardware or can be executed by software.
In other words, the functional configuration of FIG. 4 is merely an example and is not particularly limited. That is, it is sufficient that the
また、情報処理システム1に備えられる機能は、システムの構築目的に応じて種々変更することが可能である。例えば、図4の機能的構成のうち、画像取得部155、音声認識部252、検査対象データ受信部253、検査結果データ翻訳部255、画像解析部258、翻訳辞書データベース274及びディクテーション用辞書データベース275の機能は、情報処理システム1に必ずしも備える必要はなく、情報処理システム1の構築目的に応じて、適宜選択して備えることが可能である。
また、1つの機能ブロックは、ハードウェア単体で構成してもよいし、ソフトウェア単体で構成してもよいし、それらの組み合わせで構成してもよい。
Further, the functions provided in the
In addition, one functional block may be configured by hardware alone, may be configured by software alone, or may be configured by a combination thereof.
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。
コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
When a series of processing is executed by software, a program constituting the software is installed in a computer or the like from a network or a recording medium.
The computer may be a computer embedded in dedicated hardware. Further, the computer may be a computer that can execute various functions by installing various programs, for example, a general-purpose personal computer.
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図2のリムーバブルメディア231により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディア231は、例えば、磁気ディスク(フロッピディスクを含む)、光ディスク、または光磁気ディスク等により構成される。光ディスクは、例えば、CD−ROM(Compact Disk−Read Only Memory),DVD(Digital Versatile Disk)等により構成される。光磁気ディスクは、MD(Mini−Disk)等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図2のROM212や、図2の記憶部217に含まれるDRAM等で構成される。
The recording medium including such a program is constituted not only by the
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
また、本明細書において、システムの用語は、複数の装置や複数の手段等より構成される全体的な装置を意味するものとする。
In this specification, the steps of describing a program recorded on a recording medium may be performed in chronological order according to the order, or in parallel or individually, even if not necessarily performed in chronological order. This also includes the processing to be executed.
Further, in the present specification, the term system refers to an entire apparatus including a plurality of devices and a plurality of means.
1・・・情報処理システム,10・・・携帯端末,20・・・サーバ,30・・・PC,40・・・ネットワーク,200・・・コンピュータ,111、211・・・CPU,112、212・・・ROM,113、213・・・RAM,114、214・・・バス,115・・・タッチ操作入力部,215・・・入力部,116、216・・・出力部,117・・・音声入力部,118・・・撮像部,119・・・センサ部,120、217・・・記憶部、121、218・・・通信部、122、219・・・ドライブ,131、231・・・リムーバブルメディア,151・・・検査対象データ取得部,152・・・検査対象表示部,153・・・音声認識部,154・・・検査結果データ入力部,155・・・画像取得部,156・・・検査結果データ送信部,171・・・検査対象データ記憶部、172・・・関連業者データ記憶部,173・・・作業別辞書データ記憶部,174・・・、検査結果データ記憶部,251・・・検査対象データ提供部,252・・・音声認識部,253・・・検査対象データ受信部,254・・・検査結果データ受信部,255・・・検査結果データ翻訳部,256・・・帳票データ作成部,257・・・帳票データ提供部,258・・・画像解析部,271・・・検査対象データベース,272・・・関連業者データベース,273・・・検査結果データベース,274・・・翻訳辞書データベース,275・・・ディクテーション用辞書データベース,351・・・管理画面表示部,352・・・検査結果データ修正部,353・・・検査対象データ入力部,354・・・帳票データ取得部
DESCRIPTION OF
Claims (15)
前記端末装置は、
当該端末装置の位置及び向きを検出するためのセンサと、
検査員による指摘箇所を含む前記建造物の検査結果を入力するためのフォーマットに検査結果データを入力する検査結果入力手段と、
前記検査結果データを前記サーバに送信する検査結果送信手段と、
過去に指摘された前記指摘箇所の案内を行う案内手段と、を備え、
前記サーバは、
前記検査結果データに基づいて、前記検査結果への対応作業のための所定のフォーマットを有する帳票データを作成する帳票データ作成手段を備え、
前記端末装置において、前記センサは、前記指摘箇所が入力された際の前記端末装置の位置及び向きを検出し、前記案内手段は、前記検査結果における指摘箇所が入力された際の前記センサの検出結果に基づいて、当該端末装置の位置及び向きに関する情報を提供することにより、前記検査結果データにおける指摘箇所の案内を行うことを特徴とする情報処理システム。 An information processing system including a portable terminal device used for inspection of a building and a server configured to be able to communicate with the terminal device,
The terminal device,
A sensor for detecting the position and orientation of the terminal device,
Inspection result input means for inputting inspection result data in a format for inputting inspection results of the building including a point indicated by an inspector,
Inspection result transmitting means for transmitting the inspection result data to the server,
Guidance means for guiding the pointed out point pointed out in the past,
The server is
Form data creating means for creating form data having a predetermined format for work corresponding to the inspection result based on the inspection result data,
In the terminal device, the sensor detects a position and an orientation of the terminal device when the indicated portion is input, and the guide unit detects the sensor when the indicated portion in the inspection result is input. An information processing system, which provides information on the position and orientation of the terminal device based on the result, thereby guiding a pointed out point in the inspection result data.
前記端末装置から送信された前記検査結果データを蓄積して記憶する検査結果データベースと、
前記検査結果データベースに記憶された前記検査結果データを統計処理することにより、前記検査結果データの指摘内容に関する傾向を解析する統計解析手段と、
を備えることを特徴とする請求項1から5のいずれか1項に記載の情報処理システム。 The server is
An inspection result database that accumulates and stores the inspection result data transmitted from the terminal device;
Statistical analysis means for statistically processing the test result data stored in the test result database to analyze a tendency regarding the indicated content of the test result data,
The information processing system according to any one of claims 1 to 5, further comprising:
前記検査結果データに用いられた言語とは異なる言語で表された前記帳票データを作成するための翻訳手段を備えることを特徴とする請求項1から6のいずれか1項に記載の情報処理システム。 The server is
The information processing system according to claim 1, further comprising a translation unit configured to create the form data expressed in a language different from a language used for the inspection result data. .
前記検査結果送信手段は、前記センサの検出結果及び前記検査結果データを前記サーバに送信し、
前記案内手段は、前記サーバから取得した前記検査結果データに対応付けられている前記センサの検出結果に基づいて、当該端末装置の位置及び向きに関する情報を提供することにより、前記検査結果データにおける指摘箇所の案内を行うことを特徴とする請求項1から7のいずれか1項に記載の情報処理システム。 The inspection result input unit associates a detection result of the sensor when an indicated part in the inspection result is input with inspection result data,
The inspection result transmitting means transmits the detection result of the sensor and the inspection result data to the server,
The guidance unit provides information on the position and orientation of the terminal device based on a detection result of the sensor associated with the test result data obtained from the server, thereby indicating the point in the test result data. The information processing system according to any one of claims 1 to 7, wherein guidance of a location is performed.
前記指摘箇所の撮像画像データを対象として画像解析を行い、当該指摘箇所における瑕疵を判定する画像解析手段を備えることを特徴とする請求項1から8のいずれか1項に記載の情報処理システム。 The terminal device,
The information processing system according to any one of claims 1 to 8, further comprising: an image analysis unit that performs image analysis on the captured image data of the pointed location and determines a defect at the pointed location.
当該端末装置の位置及び向きを検出するためのセンサと、
検査員による指摘箇所を含む前記建造物の検査結果を入力するためのフォーマットに検査結果データを入力する検査結果入力手段と、
前記検査結果データを前記サーバに送信する検査結果送信手段と、
過去に指摘された前記指摘箇所の案内を行う案内手段と、を備え、
前記センサは、前記指摘箇所が入力された際の前記端末装置の位置及び向きを検出し、
前記案内手段は、前記検査結果における指摘箇所が入力された際の前記センサの検出結果に基づいて、当該端末装置の位置及び向きに関する情報を提供することにより、前記検査結果データにおける指摘箇所の案内を行うことを特徴とする端末装置。 A portable terminal device configured to be able to communicate with a server that creates report data having a predetermined format for a work corresponding to the inspection result of the building, and used for inspection of the building,
A sensor for detecting the position and orientation of the terminal device,
Inspection result input means for inputting inspection result data in a format for inputting inspection results of the building including a point indicated by an inspector,
Inspection result transmitting means for transmitting the inspection result data to the server,
Guidance means for guiding the pointed out point pointed out in the past,
The sensor detects the position and orientation of the terminal device when the pointed point is input,
The guidance unit provides information on the position and orientation of the terminal device based on the detection result of the sensor when the pointed point in the inspection result is input, thereby guiding the pointed point in the inspection result data. Terminal device.
当該端末装置の位置及び向きを検出するためのセンサと、
指摘箇所を含む前記建造物の検査結果と、前記検査結果における指摘箇所が入力された際に、前記建造物の検査に用いられた端末装置が備えるセンサによって検出された位置及び向きの検出結果とに基づいて、自端末装置の位置及び向きに関する情報を提供することにより、前記検査結果における指摘箇所の案内を行う案内手段を備えることを特徴とする端末装置。 A portable terminal device used for work corresponding to an inspection result of a building,
A sensor for detecting the position and orientation of the terminal device,
Inspection result of the building including the pointed point, and when the pointed point in the inspection result is input, the detection result of the position and orientation detected by the sensor provided in the terminal device used for inspection of the building and A terminal device for providing information on the position and orientation of the terminal device based on the information, thereby guiding a pointed out point in the inspection result.
前記端末装置が、検査員による指摘箇所を含む前記建造物の検査結果を入力するためのフォーマットに検査結果データを入力する検査結果入力ステップと、
前記端末装置が、前記検査結果データを前記サーバに送信する検査結果送信ステップと、
前記端末装置が、過去に指摘された前記指摘箇所の案内を行う案内ステップと、
前記サーバが、前記検査結果データに基づいて、前記検査結果への対応作業のための所定のフォーマットを有する帳票データを作成する帳票データ作成ステップと、を含み、
前記検査結果入力ステップにおいて、前記端末装置は、センサによって、前記指摘箇所が入力された際の前記端末装置の位置及び向きを検出し、
前記案内ステップにおいて、前記端末装置は、前記検査結果における指摘箇所が入力された際の前記センサの検出結果に基づいて、当該端末装置の位置及び向きに関する情報を提供することにより、前記検査結果データにおける指摘箇所の案内を行うことを特徴とする情報処理方法。 An information processing method in an information processing system including a portable terminal device used for inspection of a building and a server configured to be able to communicate with the terminal device,
An inspection result input step of inputting inspection result data in a format for inputting an inspection result of the building including a point pointed out by an inspector,
An inspection result transmitting step in which the terminal device transmits the inspection result data to the server,
A guidance step in which the terminal device guides the pointed-out point pointed out in the past,
The server, based on the inspection result data, form data creation step of creating form data having a predetermined format for the work corresponding to the inspection result,
In the test result input step, the terminal device detects, by a sensor, the position and orientation of the terminal device when the indicated point is input,
In the guiding step, the terminal device provides information on a position and an orientation of the terminal device based on a detection result of the sensor when a pointed part in the test result is input, so that the test result data An information processing method characterized by providing guidance of a pointed out point in (1).
センサによって当該端末装置の位置及び向きを検出する検出機能と、
検査員による指摘箇所を含む前記建造物の検査結果を入力するためのフォーマットに検査結果データを入力する検査結果入力機能と、
前記検査結果データを前記サーバに送信する検査結果送信機能と、
過去に指摘された前記指摘箇所の案内を行う案内機能と、を実現させ、
前記検出機能は、前記センサによって前記指摘箇所が入力された際の前記端末装置の位置及び向きを検出し、
前記案内機能は、前記検査結果における指摘箇所が入力された際の前記センサの検出結果に基づいて、当該端末装置の位置及び向きに関する情報を提供することにより、前記検査結果データにおける指摘箇所の案内を行うことを特徴とするプログラム。 A computer that is configured to be able to communicate with a server that creates report data having a predetermined format for work corresponding to the inspection result of the building, and that constitutes a portable terminal device used for the inspection of the building,
A detection function of detecting the position and orientation of the terminal device by a sensor,
An inspection result input function of inputting inspection result data in a format for inputting an inspection result of the building including a point indicated by an inspector,
An inspection result transmission function of transmitting the inspection result data to the server,
And a guidance function for guiding the pointed out point pointed out in the past,
The detection function detects a position and an orientation of the terminal device when the indicated point is input by the sensor,
The guidance function provides information on the position and orientation of the terminal device based on the detection result of the sensor when the pointed point in the inspection result is input, thereby guiding the pointed point in the inspection result data. A program characterized by performing:
指摘箇所を含む前記建造物の検査結果と、前記検査結果における指摘箇所が入力された際に、前記建造物の検査に用いられた端末装置が備えるセンサによって検出された位置及び向きの検出結果とに基づいて、自端末装置の位置及び向きに関する情報を提供することにより、前記検査結果における指摘箇所の案内を行う案内機能を実現させることを特徴とするプログラム。 A computer that controls a terminal device including a sensor for detecting a position and an orientation of the terminal device, which is a portable terminal device used for work corresponding to an inspection result of a building,
Inspection result of the building including the pointed point, and when the pointed point in the inspection result is input, the detection result of the position and orientation detected by the sensor provided in the terminal device used for inspection of the building and A program for realizing a guidance function for guiding a pointed out point in the inspection result by providing information on the position and orientation of the terminal device based on the information.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015210792A JP6655944B2 (en) | 2015-10-27 | 2015-10-27 | Information processing system, terminal device, server, information processing method and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2015210792A JP6655944B2 (en) | 2015-10-27 | 2015-10-27 | Information processing system, terminal device, server, information processing method and program |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017084050A JP2017084050A (en) | 2017-05-18 |
| JP6655944B2 true JP6655944B2 (en) | 2020-03-04 |
Family
ID=58714311
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2015210792A Active JP6655944B2 (en) | 2015-10-27 | 2015-10-27 | Information processing system, terminal device, server, information processing method and program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP6655944B2 (en) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2019032608A (en) * | 2017-08-04 | 2019-02-28 | 株式会社Lixil鈴木シャッター | Inspection information management apparatus, inspection information management system, and inspection information management program |
| JP7188684B2 (en) * | 2018-03-30 | 2022-12-13 | 株式会社穴吹カレッジサービス | Inspection indication information sharing system |
| JP7285108B2 (en) * | 2019-03-28 | 2023-06-01 | 株式会社フジタ | automatic patrol system |
| JP6601992B1 (en) * | 2019-04-25 | 2019-11-06 | Omリサーチ&コンサルティング株式会社 | Information processing device |
| JP7373450B2 (en) * | 2020-04-02 | 2023-11-02 | 大成建設株式会社 | Form creation system for construction sites |
| CN112530398A (en) * | 2020-11-14 | 2021-03-19 | 国网河南省电力公司检修公司 | Portable human-computer interaction operation and maintenance device based on voice conversion function |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001083992A (en) * | 1999-09-09 | 2001-03-30 | Hitachi Building Systems Co Ltd | Maintenance work support device |
| JP4252196B2 (en) * | 2000-07-07 | 2009-04-08 | 旭化成ホームズ株式会社 | Construction inspection system, construction inspection information display device, and construction inspection method for buildings |
| JP4300053B2 (en) * | 2003-04-23 | 2009-07-22 | 西松建設株式会社 | Building inspection support device |
| JP2005190463A (en) * | 2004-06-29 | 2005-07-14 | Yukiyoshi Nakamura | Display system of completion inspection of various building structure via network |
| JP2008257653A (en) * | 2007-04-09 | 2008-10-23 | Hito Express Kk | Message report program, maintenance service person support system using the same |
| JP2011128699A (en) * | 2009-12-15 | 2011-06-30 | Fujifilm Corp | Inspection information system, method and program for outputting notification information |
| JP4562799B2 (en) * | 2009-12-25 | 2010-10-13 | 征喜 中村 | Field condition inspection system, portable information terminal / printing device used therefor, and printing device |
| JP2012021323A (en) * | 2010-07-14 | 2012-02-02 | Takenaka Komuten Co Ltd | Inspection support system and program |
| JP2012123533A (en) * | 2010-12-07 | 2012-06-28 | Fujifilm Corp | Inspection support system, method, and portable terminal |
| JP2015011519A (en) * | 2013-06-28 | 2015-01-19 | 株式会社フジタ | Portable terminal, inspection result input method and inspection result input program and inspection result display system |
-
2015
- 2015-10-27 JP JP2015210792A patent/JP6655944B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2017084050A (en) | 2017-05-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP6655944B2 (en) | Information processing system, terminal device, server, information processing method and program | |
| JP6635049B2 (en) | Information processing apparatus, information processing method and program | |
| JP7210908B2 (en) | Information processing device, information processing method and program | |
| JP2015225467A (en) | Inspection support device, inspection support method, inspection support program | |
| KR102141116B1 (en) | Interface device and method supporting speech dialogue survice | |
| JPWO2018034057A1 (en) | Defect inspection apparatus, defect inspection method, and program | |
| CN102365645A (en) | Organizing digital images by correlating faces | |
| JP2017102085A (en) | Information processing apparatus, information processing method, and program | |
| JPWO2018158812A1 (en) | Inspection support device, inspection support method and program | |
| CN108028881A (en) | Camera auxiliary system, device and method and camera shooting terminal | |
| US20200018926A1 (en) | Information processing apparatus, information processing method, and program | |
| CN113298760A (en) | Quality detection method, device and system based on deep learning | |
| US11037352B2 (en) | Information processing apparatus, system of assessing structural object, method of assessing structural object and storage medium | |
| JP2013196594A (en) | Information processing apparatus, operation authorization program, and projection system | |
| JP5718264B2 (en) | Map survey device, map survey method, and map survey program | |
| US20220292549A1 (en) | Systems and methods for computer-aided appraisal | |
| JP6479881B2 (en) | Inspection support device, inspection support method, and program | |
| JP2008217545A (en) | Console information acquisition system, console information acquisition method, and console information acquisition program | |
| CN106796692A (en) | Technical support is provided a user with via wearable computing devices | |
| JP7401241B2 (en) | Inspection support system | |
| JP2018169788A5 (en) | Management system, action recognition device, and management method | |
| JP2016156877A (en) | Information processing device, information processing method, and program | |
| JP2015069305A (en) | Information sharing system | |
| JPWO2018158818A1 (en) | Inspection support device, inspection support method and program | |
| JP7247466B2 (en) | Information processing system and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170220 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20170222 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20180309 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180327 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20180509 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180718 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181218 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190214 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20190723 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191021 |
|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20191021 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20191023 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191209 |
|
| A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20191226 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200121 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200204 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6655944 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |