Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7108566B2 - デジタルエビデンス管理方法およびデジタルエビデンス管理システム - Google Patents
[go: Go Back, main page]

JP7108566B2 - デジタルエビデンス管理方法およびデジタルエビデンス管理システム - Google Patents

デジタルエビデンス管理方法およびデジタルエビデンス管理システム Download PDF

Info

Publication number
JP7108566B2
JP7108566B2 JP2019048874A JP2019048874A JP7108566B2 JP 7108566 B2 JP7108566 B2 JP 7108566B2 JP 2019048874 A JP2019048874 A JP 2019048874A JP 2019048874 A JP2019048874 A JP 2019048874A JP 7108566 B2 JP7108566 B2 JP 7108566B2
Authority
JP
Japan
Prior art keywords
video data
work
digital evidence
data
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2019048874A
Other languages
English (en)
Other versions
JP2020150509A (ja
Inventor
直一 根本
洋登 永吉
卓馬 寺田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2019048874A priority Critical patent/JP7108566B2/ja
Priority to PCT/JP2019/034822 priority patent/WO2020188854A1/ja
Priority to US17/277,405 priority patent/US11457192B2/en
Priority to EP19920063.5A priority patent/EP3941035A4/en
Publication of JP2020150509A publication Critical patent/JP2020150509A/ja
Application granted granted Critical
Publication of JP7108566B2 publication Critical patent/JP7108566B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/18Legal services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/08Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/018Certifying business or products
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/04Manufacturing
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • G06Q50/26Government or public services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Economics (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • General Health & Medical Sciences (AREA)
  • Quality & Reliability (AREA)
  • Educational Administration (AREA)
  • Operations Research (AREA)
  • Game Theory and Decision Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Technology Law (AREA)
  • General Factory Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Studio Devices (AREA)

Description

本発明は、デジタルエビデンス管理方法およびデジタルエビデンス管理方法に関する。
IoT(Internet Of Things)の普及に伴って多種多量のデータが流通し、これらデータを利用して多くの企業がサービスを行いつつある。こうしたIoTの普及は、サプライチェーンを構成する、原料の調達から製造、流通といった各プロセス内にも浸透している。
このうち製造プロセスでは、様々なIoT化された機器が導入されることで、製造に伴う各種情報が取得可能となる。また、こうして得られる情報の活用に伴い、例えば当該製造プロセスにおける生産効率の向上といった効果が期待される。
ところで、現在におけるサプライチェーンは、一国に留まらず、グローバルな環境下で構成されることも多い。例えば、製造対象の携帯電話を構成する複数の部品それぞれは、様々な国々の工場にて、それぞれ原材料から製造される。また、それらの部品が或る国の流通事業者によって携帯電話製造事業者へ運ばれ、様々な工程を経て最終製品たる携帯電話が製造される。
上述のように、現在のサプライチェーンを構成する各事業者は、様々な国で事業活動を行う者である。そのため、国を跨がった複雑な環境下で製品製造がなされていることになる。
一方、昨今では、米国や欧州等を代表とした各国で、サプライチェーン全体に及ぶサイバーセキュリティ対策が模索されている。
上記で述べたグローバルな環境で構築されているサプライチェーン(グローバルサプライチェーン)にて製造された製品が、例えば重要インフラや防衛といった分野で使用されるケースは少なくない。そうしたケースにて、当該サプライチェーン内の特定プロセスで問題が発覚した場合、国を跨がった大きな影響の波及が懸念されている。
そのため、米国や欧州では、サプライチェーンに含まれるサプライヤーに対して、所定のセキュリティ要件を満たすサイバーセキュリティ対策の導入を求めている。その対策の一つとしては、グローバルサプライチェーンの各プロセスにおいて、対象製品やサービス等が所定の要件を満たした形で生成されたことを認証するための仕組みが必要となってくる。
例えば、製造プロセスにおけるIoT機器から得たデータ(ログ)を基に、製造品質の保証や、対象機器やサービス等が要件を満たしたか否かの判定等を行う仕組みが該当する。
ところが、製造プロセスはIoT機器だけで工程が進められている訳ではなく、人手に頼る工程も多い。こうした人手に頼る工程は、いわゆるオペレーション不適格が発生し、その結果、対象製品の品質が保証出来ずに大規模リコールにつながるケースも生じている。
そこで、人手に頼る製造プロセスでのオペレーションの適格性を、システムとして担保するには、様々なセンサ等を駆使して人の動きを認識し、その適格性を判断することが考
えられる。なお、センサにより得られるデータは、総称としてデジタルエビデンスと呼称する。
上述のデジタルエビデンスの1つとして、カメラによってオペレーションを撮影して得た映像データが存在する。このような映像データの処理に関する従来技術としては、例えば、所定の注視対象を捉えており、その注視箇所及び視点位置の平均が断続的に変わる一人称映像を、区間に分ける映像管理装置であって、前記一人称映像の各フレームより局所特徴量を検出し、前記所定の注視対象を所定配置で撮影した登録画像より抽出された局所特徴量と比較することで、当該各フレームにおける注視及び視点に関する測定量を算出する検出部と、前記算出された注視及び視点に関する測定量に基づいてクラスタリングを行い、各フレームに当該クラスタリング結果に応じたインデックスを付与することで、前記一人称映像を、当該各インデックスに応じた区間へと分けるインデックス付与部と、を備えることを特徴とする映像管理装置(特許文献1参照)などが提案されている。
また、画像データベースと通信網によって接続された映像変換装置であって、入力された映像を所定の分割方法により映像区間に分割する区間分割部と、各映像区間を有限個のカテゴリに分類する区間分類部と、前記カテゴリごとに定められた代表フレーム生成ルールに基づいて、各映像区間内の代表フレームを一つ以上生成する代表フレーム生成部と、前記画像データベースに蓄積された画像と、前記代表フレームとの類似度に基づいて、前記代表フレームに類似した前記画像データベース内の画像を代替フレームとして選定する代替フレーム選定部と、前記各映像区間に対して、カテゴリごとに定められた補完ルールと、前記代替フレームとに基づいて、代替フレーム以外の画像フレームを補完する補完情報を生成する補完情報生成部と、前記代替フレームの画像参照値、前記画像フレームの補完情報、当該映像区間のカテゴリ、および、その再生時刻を記載した文書データを生成し、出力する文書データ出力部とを備えることを特徴とする映像変換装置(特許文献2参照)なども提案されている。
特開2015-64751号公報 特開2011-243156号公報
ところが、上述の映像データはデータサイズが大容量で、その保存コストが過大となりやすい。例えば、24時間365日稼働する生産ラインに関する映像データは、得られるデータ量も膨大となる。よって、そのまま保存するとすれば保存コストも時間経過とともに増大する。
また、そうした映像データは、一時的に保存するだけでなく、生産した製品のライフサイクルに見合った期間(例えば自動車ならば10年間)保存し続ける必要がある。さらに、必要な時(例:監査時や問題発生時)に検索可能である必要もある。そうした条件が重なれば、保存コストは益々増大しやすい。そこで、映像データを扱うにあたって、そのデータ量を如何に削減するか、が重要な問題となってくる。
従来技術(特許文献2)においては、映像データを復元可能な文書データへ変換することで映像データ容量を削減する手法が公開されている。また、特許文献1においては、機器のメンテナンス作業等の映像データを基に、各フレームのキーとなるポイントを検出して、その局所特徴量からインデックス付けし、インデックスに従った区間に分ける手法が公開されている。
こうした従来技術によればデータ削減の効果は期待できる。しかしながら、製造現場におけるオペレーションの意味(該当作業の意味、重要な確認ポイントなど)と連動させた区切りにて映像データの容量削減を効率的に行うことができないという問題がある。ひいては、必要な時に必要な情報を特定できる形で、効率的にデジタルエビデンスを管理するといった観点では、効果が期待できない。
そこで本発明の目的は、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、適宜にデータ量削減を図る技術を提供することにある。
上記課題を解決する本発明のデジタルエビデンス管理方法は、情報処理システムが、所定の工程にて稼働する機器のログデータ、および当該工程を撮影した映像データを保持して、前記映像データのうち、前記ログデータが存在する時間帯に関する区間映像データを特定する処理と、前記区間映像データに所定のデータ低減処理を適用する処理と、前記区間映像データに対する前記データ低減処理を経た前記映像データを、前記工程に関するデジタルエビデンスとして記憶装置に格納する処理と、を実行することを特徴とする。
また、本発明のデジタルエビデンス管理システムは、所定の工程にて稼働する機器のログデータ、および当該工程を撮影した映像データを保持する記憶装置と、前記映像データのうち、前記ログデータが存在する時間帯に関する区間映像データを特定する処理と、前記区間映像データに所定のデータ低減処理を適用する処理と、前記区間映像データに対する前記データ低減処理を経た前記映像データを、前記工程に関するデジタルエビデンスとして記憶装置に格納する処理とを実行する演算装置と、を含むことを特徴とする。
本発明によれば、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、適宜にデータ量削減を図ることができる。
本実施形態における現場のデータ管理者と監査者が管理システムを操作する際の関係性の例を示す図である。 本実施形態の管理システムを含むネットワーク構成例を示す図である。 本実施形態における管理システムのハードウェア構成例を示す図である。 本実施形態における管理システムの構成例を示す図である。 本実施形態における製造現場サーバの構成例を示す図である。 本実施形態における作業マニュアルの構成例を示す図である。 本実施形態における機器ログの構成例を示す図である。 本実施形態におけるオリジナル映像データ管理テーブルの構成例を示す図である。 本実施形態におけるエビデンス映像データ管理テーブルの構成例を示す図である。 本実施形態におけるエビデンス業務管理テーブルの構成例を示す図である。 本実施形態における作業外映像データ取り扱いルールテーブルの構成例を示す図である。 本実施形態における作業部映像データ取り扱いレベルテーブルの構成例を示す図である。 本実施形態におけるエビデンス管理方法のフロー例1を示す図である。 本実施形態におけるエビデンス管理方法のフロー例2を示す図である。 本実施形態におけるエビデンス管理方法のフロー例3を示す図である。 本実施形態におけるエビデンス管理方法のフロー例4を示す図である。 本実施形態における映像分割の概念例を示す図である。 本実施形態における映像データと機器ログの重複概念の例を示す図である。 本実施形態における区間映像データおよび残区間映像データの概念例を示す図である。 本実施形態におけるエビデンス管理方法のフロー例5を示す図である。 本実施形態におけるエビデンス管理方法のフロー例6を示す図である。
---ネットワーク構成---
以下に本発明の実施形態について図面を用いて詳細に説明する。図1は、本実施形態における現場のデータ管理者と監査者が管理システムを操作する際の関係性の例を示す図であり、また図2Aは、本実施形態のエビデンス管理システムを含むネットワーク構成例を示す図である。
図1で例示する関係性は、例えばサプライチェーンにおける製品製造の各プロセスで生成されるログデータや映像データが、エビデンス管理システム(以下、管理システム1)に登録され、それらデータを監査者等が閲覧する状況を想定したものとなっている。本実施形態では、上述のログデータや映像データを、製造現場で得たデータ、すなわち現場データと称する。
なお、上述のログデータや映像データは、各プロセスにおける各工程に備わるIoT機器やカメラ等が、当該工程の各作業に関して観測したものとなる。
また、図1では、説明の都合上、サプライチェーンにおける或る1プロセスのみ抽出し、上述の関係性を例示している。サプライチェーンでは、複数のプロセスが繋がっており、図1に示した現場データを生成する工程が複数存在しうる。
また、1つのプロセス内においても、現場データ管理者が複数存在する場合もありうる。例えば、あるサプライチェーンにおいて、第一の製造工程と第二の製造工程とが存在し、それぞれに現場データ管理者が存在する場合である。以降、1つのプロセスに、1つの製造工程があり、そこを管理する現場データ管理者が一人存在する想定で説明を行う。
なお、現場データ管理者は、サプライチェーンにおける製品製造の現場において、上述の現場データを管理する責任者である。
こうした現場データ管理者は、図2に示す製造現場サーバ2を介し、上述の現場データをネットワーク4経由で管理システム1へ送信する。勿論、製造現場サーバ2が、IoT機器やカメラから現場データを取得し、これをネットワーク4を介して管理システム1に自動配信する形態も採用可能である。なお、現場データ管理者は、製造現場サーバ2を介して管理システム1に登録された現場データに対し、所定の管理用の操作を行う。
一方、監査者は、例えばサプライチェーンで製造された製品について、製造プロセスで規定通りに製造されたか否か監査する人物である。この監査者は、データ参照用サーバ3を用い、ネットワーク4を介して管理システム1へアクセスし、デジタルエビデンスを参照する。
一方、管理システム1は、データ参照用サーバ3からのアクセスに伴い、所定の要求(
監査に必要なデジタルエビデンスの指定)に応じて、当該デジタルエビデンスを応答することとなる。
なお、製造工程には、複数の設備すなわちIoT機器やカメラが存在しうる。そのため、図2に示した製造現場サーバ2も、設備毎に存在する場合もあり得る。また、これら複数の設備の情報を統合して管理する形態もあり得る。
---ハードウェア構成---
また、上述の管理システム1のハードウェア構成を図2に示す。本実施形態における管理システム1は、記憶装置101、メモリ103、演算装置104、入力装置105、表示装置106、および通信装置107、を備える。管理システム1は、具体的には一般的なサーバやPC等で構成されている。
このうち記憶装置101は、SSD(Solid State Drive)やハードディスクドライブなど適宜な不揮発性記憶素子で構成される。
また、メモリ103は、RAMなど揮発性記憶素子で構成される。
また、演算装置104は、記憶装置101に保持されるプログラム102をメモリ103に読み出すなどして実行し装置自体の統括制御を行なうとともに各種判定、演算及び制御処理を行なうCPUである。
また、入力装置105は、ユーザからのキー入力や音声入力を受け付けるキーボードやマウス、マイクといった装置である。
また、表示装置106は、演算装置104による処理結果の表示を行うディスプレイ等の装置である。
また、通信装置107は、ネットワーク4と接続して、製造現場サーバ2やデータ参照用サーバ3といった他装置との通信処理を担うネットワークインターフェイスカードを想定できる。
なお、上述の管理システム1が具備する機能群やデータ群、管理テーブルの一例を図3に示す。機能群は、プログラム102を演算装置104が実行することで実装される。また、データ群、管理テーブルらは、記憶装置101に保持されているものとする。
本実施形態の管理システム1は、管理機能301と、作業マニュアルテキスト抽出機能302を具備する。
このうち管理機能301は、データベース308で保持するオリジナル映像データ309を対象として、エビデンス映像データ310を生成する機能である。この機能の詳細はフロー等に基づき後述する。
一方、作業マニュアルテキスト抽出機能302は、データベース308で保持する作業マニュアル311(作業規定の情報)に記載されている注意事項や指示内容を単語単位で抽出する機能である。
作業マニュアル311は、各社異なるフォーマットや仕様で記載されていることが多く、人手で注意事項や指示内容を抽出し、その結果を管理システム1へ投入する形態であってもよい。文章から単語を抽出する機能は、一般に普及しているオープンソースソフトウェア(OSS)の機能を利用してもよい。
なお、上述のデータベース308には、上述のオリジナル映像データ309(現場データ)やエビデンス映像データ310、作業マニュアル311の他にも、機器ログ312を保持する。この機器ログ312は、本発明における機器のログデータに該当する。こうし
たデータ類は、データベース308で保持する構成を想定したが、所定のファイルシステム上でファイルとして管理する形態であってもよい。
また、本実施形態では、オリジナル映像データ309が、製造現場サーバ2から管理システム1へ送信される形態を想定しているが、製造現場サーバ2で保持され、必要に応じて管理システム1がアクセスし利用する形態であってもよい。これはエビデンス映像データ310や作業マニュアル311、機器ログ312についても同様である。この場合、製造現場サーバ2が一時的に現場データを管理システム1へ送信し、管理システム1上での処理終了後に結果を受信するという形態もありうる。
また管理システム1は、作業外映像データ取り扱いルール303、作業部映像データ取り扱いレベル定義304、オリジナル映像データ管理テーブル305、およびエビデンス業務管理テーブル306を保持する。
このうち作業外映像データ取扱いルールテーブル303(具体的には図10参照。詳細後述)、は、オリジナル映像データ309の中で、ある業務の映像データに関し、映像データの総データ量削減のために、当該映像データ(区間映像データ)をどのように取り扱うのか規定したテーブルである。本実施形態では、業務種別をベースとして映像データの取り扱いを規定した例を想定しているが(図10)、時刻ベースで業務の区切りを付けて、その取扱いを管理する形態であってもよい。
一方、作業部映像データ取り扱いレベル定義テーブル304(具体的には図11参照。詳細後述)は、上述の作業外映像データ取扱いルール303に基づいて総データ量を削減した映像データ(残区間映像データ)を対象として、さらにデータ削減を行うため、業務単位に映像データを取り扱うレベルを定義したテーブルである。
管理システム1は、このレベルに応じて、例えば映像データのテキスト化を行う。テキスト化を行う際、本実施形態では管理者(現場データ管理者)が作業マニュアルテキスト抽出機能302によって抽出された単語を選択して該当テキストの生成を行う形態を想定する。他方、こうした単語の抽出処理に基づくテキスト生成をシステム化し、映像データから例えば単語や文章に自動置換する形態も想定できる。
また、データ削減の手段としては、テキスト化だけではなく、OSS等で公開されている映像編集ソフトウエアを用いて、映像のフレームレートを下げる処理や、映像フレームの解像度を小さくする処理、キャンバスサイズの縮小、およびキャンバス中の特定部位(画角)のみ抽出、といったものも想定されうる。
図4は、本実施形態における製造現場サーバ2が保持する機能やデータの一例を示す図である。本実施形態の製造現場サーバ2は、現場データ管理機能41を具備する。また、製造現場サーバ2は、データベース42において現場データ43と作業マニュアル44を保持する。こうした製造現場サーバ2は、一般的なサーバやPC構成され、そのハードウェア構成は図2Bで示した管理システム1と基本的に同様である。
製造現場サーバ2が具備する現場データ管理機能41は、データベース42で保持する現場データ43を管理システム1へ登録する機能である。上述したように、現場データ43や作業マニュアル44を製造現場サーバ2側で管理する場合、現場データ管理機能41がそれらの管理処理を担う。
ここで、現場データ43は、例えばサプライチェーンにおける製造プロセスの製造工程で生成されるデータである。例えば、生産ラインに設置されているIoT機器が出力する
データであり、または製造工程において人が作業したその一連のオペレーション(作業や項目で示される一連の動作単位)をカメラ等によって撮影した映像データ等である。
ただし本実施形態では、現場データ43として、製造工程に設置されるIoT機器から出力される機器ログと、カメラによって撮影された映像データを想定し説明を行うものとする。また、図4で示した製造現場サーバ2は、現場データ管理機能41とデータベース42が共に存在する例を示しているが、NAS(Network Attached Storage)等にデータベース42が配置され、現場データ管理機能41と異なる構成を取り、ネットワーク等を通じてデータベース42上の現場データ43や作業マニュアル44にアクセスする形態であってもよい。
なお、データ参照用サーバ3は、製造現場サーバ2と同様に、一般的なサーバやPC構成されるもので、そのシステム構成等については省略する。
---データ構成等---
図5は、本実施形態における作業マニュアル311の構成例を示す図である。作業マニュアル311は、製造工程における各作業に関する注意事項や指示内容が記述されたファイルである。
そのデータ構成は、図5で示すように、例えば、業務グループおよび業務IDをキーとして、工程ID、作業ID、作業手順、および注意事項、の各値が対応付けられたレコードの集合体となっている。これらの中に、画像や映像等の情報を含む場合も有りうる。
また図6は、本実施形態における機器ログ312の構成例を示す図である。本実施形態の機器ログ312は、各製造工程における例えばIoT機器が観測したデータをログとして蓄積したものである。
そのデータ構成は、図6で示すように、例えば、業務グループおよび業務IDをキーとして、工程ID、当該工程に対応した製造現場に設置されたIoT機器の機器ID、当該IoT機器が設置されている場所、当該IoT機器から得たログデータ、および当該ログデータの取得日時、の各値が対応付けられたレコードの集合体となっている。
また図7は、本実施形態のオリジナル映像データ管理テーブル305の構成例を示す図である。オリジナル映像データ管理テーブル305は、オリジナル映像データ309に関する情報が格納されている。このうちオリジナル映像データID欄51には、オリジナル映像データ309を識別するための識別子が登録される。
また、ファイルパス欄52には、管理システム1においてオリジナル映像データ309が保存されたファイルパスが登録される。データベース308にオリジナル映像データ309が格納される場合には、データベース308へのアクセスパスが登録される。
また、ファイル形式欄53には、オリジナル映像データ309のファイル形式が登録される。例えば、Mpeg規格の圧縮形式名として「mp4」等が登録される。
また、撮影場所欄54には、オリジナル映像データ309が撮影された場所の識別子が登録される。また、開始時間欄55と終了時間欄56には、オリジナル映像データ309が撮影された開始時刻と終了時刻が登録される。
また図8は、本実施形態のエビデンス映像データ管理テーブル306の構成例を示す図である。エビデンス映像データ管理テーブル306は、オリジナル映像データ309を元にして管理機能301が生成したエビデンス映像データ310を管理するための情報が登
録されている。
このうちエビデンス映像データID欄61には、エビデンス映像データ310を識別するための識別子が登録される。
また、オリジナル映像データID欄62には、エビデンス映像データ310の生成元のオリジナル映像データ310を識別するための識別子が登録される。
また、ファイルパス欄63には、管理システム1においてエビデンス映像データ310が保存されたファイルパスが登録される。データベース308に格納される場合には、データベース308へのアクセスパスが登録される。
また、ファイル形式欄64には、エビデンス映像データ310のエビデンス映像データ310のファイル形式が登録される。
また、開始時間欄65と終了時間欄66は、エビデンス映像データ310が撮影された開始時刻と終了時刻が登録される。この開始時間と終了時間は、オリジナル映像データID欄62に登録される識別子のオリジナル映像データ309の開始時間と終了時間の間の時刻になる。
また図9は、本実施形態のエビデンス業務管理テーブル307の構成例を示す図である。エビデンス業務管理テーブル307は、上述のエビデンス映像データ管理テーブル306で管理するエビデンス映像データ310の業務に関する情報が登録されている。
このうち業務ID欄701と業務グループ欄702は、当該エビデンス映像データ310の撮影対象となった製造プロセスの製造工程において、当該エビデンス映像データ310が撮影された業務を識別するための識別子と業務グループ識別子が登録される。
また、エビデンス映像データID欄703には、上述のエビデンス映像データ管理テーブル306に登録された当該エビデンス映像データ310のエビデンス映像データID61の識別子が登録される。
また、Man欄704、Machine欄705、Method欄706、Material(input)欄707、およびMaterial(output)欄708は、当該製造プロセスの製造工程において、当該エビデンス映像データ310が撮影された業務に従事していた人の情報(例えば従事者の氏名)、機器情報、手順情報、材料情報(機器への入力と、機器の出力)が登録される。
また、作業場所709欄には、当該製造プロセスの製造工程における作業実施場所の識別子が登録される。
また、業務開始時刻欄710と業務終了時刻欄711には、エビデンス映像データ310が撮影された開始時刻と終了時刻が登録される。
図9に示したエビデンス業務管理テーブル307の例では、人「Man_A」が機器「compressor」で作業「compress」を行い、その時の材料(入力)が「MI_1」で材料(出力)が「MO_1」であることを示している。
図8のエビデンス映像データ管理テーブル306と図9のエビデンス業務管理テーブル307とは、セットで取り扱うこととなり、エビデンス映像データ管理テーブル306のテーブル登録情報の詳細な業務内容がエビデンス業務管理テーブル307に登録される内容となる。
なお、上述のMaterial(input)欄707やMaterial(output)欄708には、上記の他、例えば製品の製造ロット番号等が含む形態であってもよ
い。また、図9の例では、製造プロセスの或る工程における業務の例を示している。例えば、当該工程において人が介在していない(人の作業がない)場合、Man欄704等の登録内容がない、といった登録形態もありうる。
続いて図10は、本実施形態の作業外映像データ取り扱いルールテーブル303の構成例を示す図である。作業外映像データ取り扱いルールテーブル303は、オリジナル映像データ309の中で、ある業務の映像データ(区間映像データ)に関し、オリジナル映像データ309の総データ量削減のために、当該映像データをどのように取り扱うのか規定したテーブルである。
このうち業務グループ欄81と業務ID欄82には、当該映像データ(区間映像データ)が撮影された業務を識別するための業務グループ識別子と識別子が登録される。
また、取り扱いルール欄83には、当該識別子で識別される業務を撮影したオリジナル映像データ309(区間映像データ)に対するアクションが登録される。例えば、図10に示したアクションはdeleteであり、当該業務グループの業務IDで示されるオリジナル映像データ309(区間映像データ)は削除対象であることを示している。
このように、オリジナル映像データ309を業務毎に削除等のアクションを実行していくことで、エビデンスとして残していくエビデンス映像データ310のデータ容量を削減していくことができる。
本実施形態では、当該業務グループ81、業務ID82で示される映像データすなわち区間映像データについて、削除処理が登録されている。しかしながら、こうした削除処理以外にも、例えば映像のフレームレートを下げる処理、映像フレームの解像度を小さくする処理、キャンバスサイズの縮小、およびキャンバス中の特定部位(画角)のみ抽出、といった処理も想定される。また、当該データを別ファイルとして保存したり、別サーバへ保存するといった実施形態もありうる。
また図11は、作業部映像データ取り扱いレベルテーブル304の構成例を示す図である。作業部映像データ取り扱いレベルテーブル304は、上述の作業外映像データ取扱いルール303に基づいて区間映像データを削除するなどしてデータ量を削減したオリジナル映像データ309を対象として、さらにデータ削減を行うため、業務単位に映像データを取り扱うレベルを定義したテーブルである。
このうち業務グループ欄91と業務ID欄92には、当該映像データが撮影された業務を識別するための業務グループ識別子と識別子が登録される。
また、取り扱いレベル欄93と取り扱い内容欄94には、当該識別子で識別される業務を撮影したエビデンス映像データ310に対する扱いレベルと、そのアクション内容が登録される。例えば、図11には取り扱うレベル「low」で取り扱い内容が「documentation」が示されている。
これは、当該業務グループの業務IDで示されるエビデンス映像データ310は、重要度すなわち取り扱いレベルが低く、テキスト置換を行うことを示している。このように、映像データを業務毎にレベル分けして、テキスト置換といったアクションを実行することによって、映像データのデータ容量を削減することができる。
本実施例では、当該業務グループ91、業務ID92で示される映像データについて、テキスト化が登録されている。テキスト化の処理以外にも、例えば映像のフレームレートを下げる処理、映像フレームの解像度を小さくする処理、キャンバスサイズの縮小、およ
びキャンバス中の特定部位(画角)のみ抽出、といった処理も想定される。また、当該データを別ファイルとして保存したり、別サーバへ保存するといった実施形態もありうる。
なお、本実施形態における映像データのテキスト化の処理は、例えば製造工程における作業員(人)が製造部品の或る特定範囲に対する作業の映像データに関して、「範囲X-Yを対象にZ作業実施」といったテキストを、作業マニュアル311に基づき生成する処理である。このように、作業マニュアル311の記載に基づき明確に作業内容を特定出来る場合、テキスト化処理は有用である。
しかし、作業マニュアル311で明確な規定が無い、作業員のノウハウに基づいた作業(例えば製造部品に対してある塗料を均一に適量塗布)の映像データに関してテキスト化を行うとしても、十分な精度は期待できない。このような場合、テキスト化ではなく、映像データ自体を残しつつ、フレームレートを下げる、解像度を小さくする、といったデータ低減処理が有用である。
---フロー例---
以下、本実施形態におけるデジタルエビデンス管理方法の実際手順について図に基づき説明する。以下で説明するデジタルエビデンス管理方法に対応する各種動作は、管理システム1がメモリ等に読み出して実行するプログラムによって実現される。そして、このプログラムは、以下に説明される各種の動作を行うためのコードから構成されている。
図12から図18のフロー例1~6を用いて、管理システム1や製造現場サーバ2が連携して動作することによって、オリジナル映像データ309や作業マニュアル311を基にして、エビデンス映像データ310を生成していく処理フローを説明する。
<オリジナル映像データの送信>
図12は、本実施形態における製造現場サーバ2が現場データ43を管理システム1へ登録する処理フローの一例である。この場合、製造現場サーバ2が、現場データ管理者からの指示に応じ又は予め定めた処理契機の到来に応じ、現場データ43および作業マニュアル44を管理システム1へ送信し(ステップS101)、処理を終了する。この現場データ43には、機器ログと映像データが含まれている。
<オリジナル映像データの保存>
図13は、本実施形態の管理システム1が製造現場サーバ2から現場データ43を受信し、これを保存する処理フローの一例である。
この場合、管理システム1は、上述の製造現場サーバ2から現場データ43と作業マニュアル44を受信する(ステップS111)。
また、管理システム1は、S111で受信した現場データ43のうち映像データを、データベース308のオリジナル映像データ309に、また、機器ログをデータベース308の機器ログ312に格納する(ステップS112)。
また、このステップS112における管理システム1は、製造現場サーバ2から得た作業マニュアル44を、データベース308の作業マニュアル311として格納するものとする。
また、管理システム1は、上述のオリジナル映像データ309に関する情報として、オリジナル映像データ管理テーブル305のオリジナル映像データ欄51、ファイルパス欄52、ファイル形式欄53、開始時間欄55、および終了時間56に、対応する情報を登録し(ステップS113)、処理を終了する。ここで登録される情報は、管理システム1が、当該オリジナル映像データ309のプロパティ情報等を元にしたものである。
<オリジナル映像データ管理テーブルへの情報登録>
続いて図14は、本実施形態の管理システム1が、上述のS111、S112のステップで得たオリジナル映像データオリジナル映像データ309への関連情報を登録する処理フローの一例である。
この場合まず、管理システム1は、処理対象となるオリジナル映像データ309を、例えばユーザ指示に応じて又は日付順などの所定ルールに応じて選択する(ステップS121)。
次に、管理システム1は、S121で選択したオリジナル映像データ309について、オリジナル映像データ管理テーブル305にて既に登録されている情報を表示する(ステップS122)。この情報は、上述のS113で登録されたものを想定できる。
そして、管理システム1は、S122で情報を表示したオリジナル映像データ309に関して、未登録情報、例えば撮影場所欄54の入力を例えば情報現場データ管理者から受け付け、これをもってオリジナル映像データ管理テーブル305における情報を更新する(ステップS123)。この撮影場所に関する情報は、映像データのプロパティ情報に含まれる場合もあり得るが、その場合は不要なフローである。
<データ量削減>
図15は、本実施形態の管理システム1が、オリジナル映像データ309を基に、そのデータ量を適宜に削減したエビデンス映像データ310を生成する処理フローの一例である。
この場合まず、管理システム1は、オリジナル映像データ管理テーブル305のレコードが示すオリジナル映像データ309と機器ログ312のレコードとについて、時間を基準とした突合せを行い、同時間帯に関するレコード同士すなわちオリジナル映像データ309と機器ログ312とを互いに対応付けてメモリ103に記録する(ステップS131)。
ここでの突合せに際しては、オリジナル映像データ管理テーブル305における1つのレコード(例:テーブル中のレコードのうち未処理のもので、オリジナル映像データIDの昇順/降順)の撮影場所欄54の値と、機器ログ312におけるレコードのうち場所欄44の値が一致するものとの間の突合せになる。
また、突合せることで同時間帯のものと判定するための情報は、オリジナル映像データ管理テーブル305の該当レコードにおける開始時間欄55および終了時間56の各値が示す時間帯と、機器ログ312における該当レコードの取得日時46の値が示す時間帯が該当する。
ここまでの処理で、同じ場所すなわち工程、作業に関して同時間帯に得られた、オリジナル映像データと機器ログとの対応関係が特定できた。
続いて管理システム1は、S131で機器ログ312と対応付けたオリジナル映像データ309を、作業マニュアル311に沿って分割する(ステップS132)。
なお、本ステップは、現場データ管理者が製造現場サーバ2経由で管理システム1の管理機能301と連携して処理を行う状況を想定する。その具体な処理内容は、図17と図18に基づき以下に説明する。
図17は、映像データのデータ量削減処理の中で、現場データ管理者が作業マニュアル
311に沿った映像データの分割指示を行う際のフロー例である。
まず製造現場サーバ2は、現場データ管理者から、対象とするオリジナル映像データ309の選択操作を受け付ける(ステップS141)。この際、製造現場サーバ2は、管理システム1から、オリジナル映像データ管理テーブル305が保持するオリジナル映像データ309のリストを取得し、これを選択可能に表示するものとする。或いは、S132の処理対象となったオリジナル映像データ309の情報を、管理システム1から得て表示させ、現場データ管理者による確認を受けることを選択操作としてもよい。
続いて、製造現場サーバ2は、上述のステップS141で現場データ管理者が選択した映像データの関連情報や映像自体を表示する(ステップS142)。ここでは、オリジナル映像データ管理テーブル305における該当オリジナル映像データ309の情報や映像が表示される。
そして、製造現場サーバ2は、S142で情報を表示したオリジナル映像データ309に対して、業務や工程、作業ごとに区分する範囲である開始時間と終了時間の各指定を、現場データ管理者から受け付け、これらと当該オリジナル映像データ309のIDを管理システム1に送信する(ステップS143)。この場合の現場データ管理者は、作業マニュアル311における各業務の工程、作業に関する情報を閲覧し、該当内容を人が行っていることをもって、当該時間帯の映像を該当業務の該当工程、該当作業の映像データと特定する。
ここで送信した情報は、上述のS132での分割により得られるオリジナル映像データ309の一部、すなわち業務や工程、作業ごとの映像データを規定するものとなる。
なお、当該作業の妥当性(作業マニュアル311が規定する作業手順34および注意事項35を遵守しているか否か)についても現場データ管理者から指定を受けるとしてよい。
また、製造現場サーバ2は、上述の管理システム1から、S143での送信に伴う所定の応答(例:受け付けた旨の返信メッセージ)を受信し(ステップS144)、処理を終了する。
本フローでは、ステップS143において、時間を基準とした指定方法を述べているが、他の基準に沿った指定方法であってもよい。また、ステップS143におけるオリジナル映像データ309の分割においては、例えば業務や工程、作業毎に区切った教師映像データ(作業マニュアル311で規定された作業手順、注意事項を遵守した作業を人が行っている映像に対応するもの)と、該当業務や工程、作業に関するオリジナル映像データ309とを比較(ベクトル比較等)することによって、その差分が一定範囲以内であれば当該業務と判定するといった方法を用いることを本実施例では想定している。
続いて図18は、本実施形態の管理システム1が、図17の分割指示を受信し、その受信内容に沿ってオリジナル映像データ309の分割処理を実行するフロー例である。
この場合、管理システム1は、製造現場サーバ2から、上述の業務、工程、および作業に対応した映像データを規定する分割時間(開始時刻と終了時刻)と識別子(オリジナル映像データID)を受信する(ステップS151)。
また、管理システム1は、上述のステップS151で受信した分割時間等に基づき、対象となるオリジナル映像データ309を、上述の作業等に応じた映像データとして分割す
る(ステップS152)。この処理により、オリジナル映像データ309は、時間軸上で、例えば各作業(例:作業A~作業E)の映像データに区分された形となる(図16A参照)。
なお、ステップS152の分割処理は、OSSで提供されている分割アプリの利用を想定しているが、独自の手法を用いた分割処理であっても構わない。
また、管理システム1は、ステップS152の分割処理を経たオリジナル映像データ309(各作業ごとの映像データで区分されたもの)をエビデンス映像データ310として保存する(ステップS153)。
最後に、管理システム1は、処理結果(例:○○業務の○工程における作業A~Fに関する各映像でオリジナル映像データ309を区間しました、といったメッセージ)を製造現場サーバ2へ応答し(ステップS154)、処理を終了する。
ここで、図15のフローの説明に戻る。続いて管理システム1は、オリジナル映像データ309が、業務処理単位(例:作業))で時間を軸に分割された結果(図16A)を受け、ステップS131で突合せた結果およびステップS132の分割結果を用いて、分割後のオリジナル映像データ309と機器ログ312との間での時間軸を基とした重複確認を行う(ステップS133)。
図16Bの例では、時間T0~T2に作業A、時間T2~T4に作業B、時間T4~T7に作業C、時間T7~T9に作業D、時間T9~T11に作業E、の各映像データでオリジナル映像データ309が区分されている。一方、こうした時間軸T0~T11の間には、機器ログ312として、L1~L6が得られていたとする。
なお、機器ログL1は時間T0に関して得られている。また、機器ログL2は時間T1に関して得られている。また、機器ログL3は時間T5に関して得られている。また、機器ログL4は時間T6に関して得られている。また、機器ログL5は時間T10に関して得られている。また、機器ログL6は時間T11に関して得られている。
よって管理システム1は、上述のような時間軸を基準に、機器ログ312とオリジナル映像データ309の各区分の映像データとの重複有無を判定することとなる。ここでの重複とは、同じ時間帯についてのデータであることを意味する。本実施例における重複関係では、当該時間帯にオリジナル映像データと機器ログが存在する場合に、同義のデータと捉え、例えばオリジナル映像データから読み取れる状況が機器ログから読み取れる状況と一致することを想定する。そのため、重複にある当該時間帯において、オリジナル映像データと機器ログが存在する場合、機器ログのみを保持して、オリジナル映像データを削除するといった処理が行うことが可能であると考える。
図16Bに示す状況であれば、時間帯T0~T2の作業Aの映像データは機器ログL1、L2と重複関係、時間帯T2~T4の作業Bの映像データは機器ログとの重複無し、時間帯T4~T7の作業Cの映像データは機器ログL3、L4と重複関係、時間帯T7~T9の作業Dは機器ログとの重複無し、時間帯T9~T11の作業Eの映像データは機器ログL5、6と重複関係、であることが判明する。
上述の重複確認の結果、重複関係が特定された場合(S134:Y)、管理システム1は、機器ログ312と重複関係にある、該当作業の映像データ部分を対象に、作業外映像データ取扱いルールテーブル303で当該業務グループおよび業務ID(対応する機器ログ312から値を得られる)の映像データに関して規定した取扱いルール83の値に従って、削除等の処理を実行する(ステップS135)。
この場合、管理システム1は、ここでの処理を経たオリジナル映像データ309、すなわち該当作業の映像データについて削除等がなされたオリジナル映像データ309(残区間映像データで構成)を、エビデンス映像データ310としてデータベース308に保存し、処理をステップS136へ遷移させる。
一方、上述の重複確認の結果、重複関係が特定されなかった場合(S134:N)、または、ステップS135の処理が終了後、管理システム1は、対象データに対し、作業部映像データ取扱いレベルテーブル304に登録される当該対象データの業務種別(業務IDと業務グループ)が一致する列の取扱いレベル93と取扱い内容94の処理内容にそってテキスト化やフレームレート低減等の処理を実行し(ステップS136)、この処理結果をエビデンス映像データ310として保存して処理を終了する。
なお、上述の対象データとは、S135の実行を経てエビデンス映像データ310が存在する場合は、当該エビデンス映像データ310が該当する。一方、そうしたエビデンス映像データ310が存在しない場合は、S133までに処理対象としていたオリジナル映像データ309が該当する。
また、上述のステップS136では、処理結果をエビデンス映像データ310として保存するが、ステップS135やステップS136において、分割した映像データをルールに則って処理(例えば削除やテキスト化等)した場合、エビデンス映像管理テーブル306の当該行は、ファイル形式64をtextや、削除済(例えば「-」表記)といった登録の変更を行う。
こうした図15のフローの実行によって、例えばサプライチェーンにおける製造プロセスの1工程で取得した映像データが、マニュアル等に沿って手順毎に分割される。そして、分割された映像データのうち、同時間帯の機器ログ312が存在する、すなわち時間軸上で機器ログ312との重複関係があるものに対して所定ルールに沿った処理(例えば削除等)をして、第一段階の映像データ総量(サイズ)の削減(縮小)を実現する。
また、第一段階の処理結果で得られた個々の映像データ(分割により区分された映像データのうち削除等の処理を経て残った残区間映像データそれぞれ)を対象に、例えばテキスト化を行うといったことによって、第二段階の映像データ総量(サイズ)の削減(縮小)が実現できる。
これによって、元々大きなデータサイズであったオリジナル映像データ309を、適宜なデータサイズとした状態で、例えばサプライチェーンの製造プロセスにおける信頼性を保証(作業手順書やマニュアルに沿った製造が確かに行われた)する目的に利用することができる。
なお、上述の第一段階や第二段階の処理(ステップS135やステップS136)で利用する所定のルール(作業外映像データ取り扱いルール303や、作業部映像データ取扱レベル定義304)は、事前に現場データ管理者が登録する形態も想定できるが、実際の映像データを現場データ管理者が確認しながら第一段階や第二段階の処理を実行する形態も採用しうる。他に、現場データ管理者以外の第三者が、所定のルールを指定する場合もありうる。
また、本実施形態では、第一段階や第二段階の処理(ステップS135やステップS136)は、第三者機関等の認証を得た上で実行されるものと捉える。そのため、当該処理の実行によって、映像データ自体の信頼性を損ねることはなく、図15の処理フロー実行
後でも、監査等の目的に映像データは利用可能な状態である。
本実施形態において、図15の処理フローは、管理システム1上で実行する想定である。しかしながら、対象となる映像データや機器ログ等が管理システム1上ではなく、製造現場サーバ2に存在する場合もありうる。その場合、図15等の処理フローは、製造現場サーバ2で実行されるといった形態も採用できる。その場合、処理結果は製造現場サーバ2又は管理システム1上のどちらからで保存されるといった形態も想定しうる。
なお、本実施形態の管理システム1では、図3で例示したように、映像データを作業マニュアルに沿ってテキスト化する形態を想定した構成を採用している。しかし、図15の処理フローにおいて、テキスト化以外の処理(例えば、映像データのフレームレートを低減するケースや、映像フレームの解像度を小さくするケースなど)を行う場合、管理システム1において当該処理を担う機能が含まれてもよい。
例えば、本実施例で記載したステップS136で実行される、映像データのテキスト置換(テキスト化)の処理は、管理システム1に具備される作業マニュアルテキスト抽出機能302が抽出した単語単位のワードを基に、現場データ管理者へ提示する。この提示によって、現場データ管理者は、ワードの選択や、ワードの修正等の処理を実施し、その結果をテキスト変換処理の結果として利用する。
以上のフローにより、オリジナル映像データ309は、業務内容にそって映像が分割され、その内容(業務や工程、作業)で指定されたルールに則り削除やテキスト化等の処理がなされる。
このことで、データサイズがオリジナル映像データ309よりも大幅に低減されたエビデンス映像データ310が保存される。オリジナル映像データ309からどの程度のデータ量が削減されるかは、作業外映像データ取扱いルール303や作業部映像データ取扱いレベル304での規定次第である。
なお、エビデンス映像データ310は、業務毎に区別されて保存される。また、製造ロット番号等を含めることによって、製品毎に区別することも可能である。これにより、監査時に業務毎や製品毎にエビデンスを収集することが容易になる。
以上、本発明を実施するための最良の形態などについて具体的に説明したが、本発明はこれに限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能である。
こうした本実施形態によれば、サプライチェーンの各プロセスにおいて、人手が介在したプロセスの各工程をカメラ等で撮影した映像データを、現場の意味と連動させて区切って保持・活用できる。また、映像データのうち、監査等の利用目的に不要なデータの削除や削減を行える。また、映像データを、作業マニュアルや作業標準書記載の注意事項や指示内容に置換、すなわちテキスト化することで、削除対象以外の映像データのデータ容量を効果的に削減することが可能である。
すなわち、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、適宜にデータ量削減を図ることが可能となる。
本明細書の記載により、少なくとも次のことが明らかにされる。すなわち、本実施形態のデジタルエビデンス管理方法において、前記情報処理システムが、前記区間映像データに対する前記データ低減処理として、当該区間映像データの削除、フレームレートの低減
、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用する、としてもよい。
これによれば、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、さらに適宜にデータ量削減を図ることが可能となる。
また、本実施形態のデジタルエビデンス管理方法において、前記情報処理システムが、前記映像データのうち前記区間映像データを除く残区間映像データに対し、所定のデータ低減処理を適用して前記デジタルエビデンスを生成し記憶装置に格納する、としてもよい。
これによれば、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、より一層、適宜にデータ量削減を図ることが可能となる。
また、本実施形態のデジタルエビデンス管理方法において、前記情報処理システムが、前記残区間映像データに対する前記データ低減処理として、所定時間帯分のみ抽出、テキスト化、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用する、としてもよい。
これによれば、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、さらに適宜にデータ量削減を図ることが可能となる。
また、本実施形態のデジタルエビデンス管理方法において、前記情報処理システムが、前記工程における作業規定の情報を記憶装置でさらに保持し、前記テキスト化の処理として、前記残区間映像データに対応した作業に関する、前記作業規定の情報から作業特徴の記述を抽出し、前記抽出した記述をデジタルエビデンスとして生成する、としてもよい。
これによれば、映像データのテキスト化を効率的なものとし、ひいては、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、さらに適宜にデータ量削減を図ることが可能となる。
また、本実施形態のデジタルエビデンス管理方法において、前記情報処理システムが、前記工程における作業規定の情報を記憶装置でさらに保持し、前記映像データを、前記作業規定の情報が示す、前記工程における作業単位ごとに分割して保持し、前記作業単位ごとに、前記区間映像データの特定、前記データ低減処理の適用、および前記デジタルエビデンスの格納、の各処理を実行する、としてもよい。
これによれば、デジタルエビデンスを作業単位で生成し管理可能となり、ひいては、製造現場から得られるデジタルエビデンスとしての映像データについて、所定の利用目的に対応可能な形態を踏まえつつ、さらに適宜にデータ量削減を図ることが可能となる。
また、本実施形態のデジタルエビデンス管理方法において、前記情報処理システムが、前記デジタルエビデンスの格納に際し、当該デジタルエビデンスの生成に参照した前記作業規定の情報が示す、工程、作業、および作業対象の製品、の少なくともいずれかの情報を当該デジタルエビデンスに紐付けて格納し、所定端末からデジタルエビデンスの検索要求を受けた場合、当該検索要求が示す、検索対象の工程、作業、および製品の少なくともいずれかの項目に基づき、前記デジタルエビデンスを記憶装置にて検索し、前記端末に検
索結果であるデジタルエビデンスを返信する、としてもよい。
これによれば、デジタルエビデンスの検索要求に対して的確に応答可能である。
また、本実施形態のデジタルエビデンス管理システムにおいて、前記演算装置は、前記区間映像データに対する前記データ低減処理として、当該区間映像データの削除、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用するものである、としてもよい。
また、本実施形態のデジタルエビデンス管理システムにおいて、前記演算装置は、前記映像データのうち前記区間映像データを除く残区間映像データに対し、所定のデータ低減処理を適用して前記デジタルエビデンスを生成し記憶装置に格納するものである、としてもよい。
また、本実施形態のデジタルエビデンス管理システムにおいて、前記演算装置は、前記残区間映像データに対する前記データ低減処理として、所定時間帯分のみ抽出、テキスト化、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用するものである、としてもよい。
また、本実施形態のデジタルエビデンス管理システムにおいて、前記記憶装置は、前記工程における作業規定の情報を記憶装置でさらに保持し、前記演算装置は、前記テキスト化の処理として、前記残区間映像データに対応した作業に関する、前記作業規定の情報から作業特徴の記述を抽出し、前記抽出した記述をデジタルエビデンスとして生成するものである、としてもよい。
また、本実施形態のデジタルエビデンス管理システムにおいて、前記記憶装置は、前記工程における作業規定の情報を記憶装置でさらに保持し、前記演算装置は、前記映像データを、前記作業規定の情報が示す、前記工程における作業単位ごとに分割して保持し、前記作業単位ごとに、前記区間映像データの特定、前記データ低減処理の適用、および前記デジタルエビデンスの格納、の各処理を実行するものである、としてもよい。
また、本実施形態のデジタルエビデンス管理システムにおいて、前記演算装置は、前記デジタルエビデンスの格納に際し、当該デジタルエビデンスの生成に参照した前記作業規定の情報が示す、工程、作業、および作業対象の製品、の少なくともいずれかの情報を当該デジタルエビデンスに紐付けて格納し、所定端末からデジタルエビデンスの検索要求を受けた場合、当該検索要求が示す、検索対象の工程、作業、および製品の少なくともいずれかの項目に基づき、前記デジタルエビデンスを記憶装置にて検索し、前記端末に検索結果であるデジタルエビデンスを返信するものである、としてもよい。
1 デジタルエビデンス管理システム
2 製造現場サーバ
3 データ参照用サーバ
4 ネットワーク
41 現場データ管理機能
42 データベース
43 現場データ
44 作業マニュアル
101 記憶装置
102 プログラム
103 メモリ
104 CPU(演算装置)
105 入力装置
106 表示装置
107 通信装置
301 管理機能
302 作業マニュアルテキスト抽出機能
303 作業外映像データ取り扱いルールテーブル
304 作業部映像データ取り扱いレベル定義テーブル
305 オリジナル映像データ管理テーブル
306 エビデンス映像データ管理テーブル
307 エビデンス業務管理テーブル
308 データベース
309 オリジナル映像データ
310 エビデンス映像データ
311 作業マニュアル
312 機器ログ

Claims (14)

  1. 情報処理システムが、
    所定の工程にて稼働する機器のログデータ、および当該工程を撮影した映像データを保持して、
    前記映像データのうち、前記ログデータが存在する時間帯に関する区間映像データを特定する処理と、前記区間映像データに所定のデータ低減処理を適用する処理と、前記区間映像データに対する前記データ低減処理を経た前記映像データを、前記工程に関するデジタルエビデンスとして記憶装置に格納する処理と、
    を実行することを特徴とするデジタルエビデンス管理方法。
  2. 前記情報処理システムが、
    前記区間映像データに対する前記データ低減処理として、当該区間映像データの削除、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用する、
    ことを特徴とする請求項1に記載のデジタルエビデンス管理方法。
  3. 前記情報処理システムが、
    前記映像データのうち前記区間映像データを除く残区間映像データに対し、所定のデータ低減処理を適用して前記デジタルエビデンスを生成し記憶装置に格納する、
    ことを特徴とする請求項1に記載のデジタルエビデンス管理方法。
  4. 前記情報処理システムが、
    前記残区間映像データに対する前記データ低減処理として、所定時間帯分のみ抽出、テキスト化、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用する、
    ことを特徴とする請求項3に記載のデジタルエビデンス管理方法。
  5. 前記情報処理システムが、
    前記工程における作業規定の情報を記憶装置でさらに保持し、
    前記テキスト化の処理として、前記残区間映像データに対応した作業に関する、前記作業規定の情報から作業特徴の記述を抽出し、前記抽出した記述をデジタルエビデンスとして生成する、
    ことを特徴とする請求項4に記載のデジタルエビデンス管理方法。
  6. 前記情報処理システムが、
    前記工程における作業規定の情報を記憶装置でさらに保持し、
    前記映像データを、前記作業規定の情報が示す、前記工程における作業単位ごとに分割して保持し、前記作業単位ごとに、前記区間映像データの特定、前記データ低減処理の適用、および前記デジタルエビデンスの格納、の各処理を実行する、
    ことを特徴とする請求項1に記載のデジタルエビデンス管理方法。
  7. 前記情報処理システムが、
    前記デジタルエビデンスの格納に際し、当該デジタルエビデンスの生成に参照した前記作業規定の情報が示す、工程、作業、および作業対象の製品、の少なくともいずれかの情報を当該デジタルエビデンスに紐付けて格納し、
    所定端末からデジタルエビデンスの検索要求を受けた場合、当該検索要求が示す、検索対象の工程、作業、および製品の少なくともいずれかの項目に基づき、前記デジタルエビデンスを記憶装置にて検索し、前記端末に検索結果であるデジタルエビデンスを返信する、
    こと特徴とする請求項6に記載のデジタルエビデンス管理方法。
  8. 所定の工程にて稼働する機器のログデータ、および当該工程を撮影した映像データを保持する記憶装置と、
    前記映像データのうち、前記ログデータが存在する時間帯に関する区間映像データを特定する処理と、前記区間映像データに所定のデータ低減処理を適用する処理と、前記区間映像データに対する前記データ低減処理を経た前記映像データを、前記工程に関するデジタルエビデンスとして記憶装置に格納する処理とを実行する演算装置と、
    を含むことを特徴とするデジタルエビデンス管理システム。
  9. 前記演算装置は、
    前記区間映像データに対する前記データ低減処理として、当該区間映像データの削除、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用するものである、
    ことを特徴とする請求項8に記載のデジタルエビデンス管理システム。
  10. 前記演算装置は、
    前記映像データのうち前記区間映像データを除く残区間映像データに対し、所定のデータ低減処理を適用して前記デジタルエビデンスを生成し記憶装置に格納するものである、
    ことを特徴とする請求項8に記載のデジタルエビデンス管理システム。
  11. 前記演算装置は、
    前記残区間映像データに対する前記データ低減処理として、所定時間帯分のみ抽出、テキスト化、フレームレートの低減、キャンバスサイズの低減、およびキャンバス中の特定部位のみ抽出、の少なくともいずれかの処理を適用するものである、
    ことを特徴とする請求項10に記載のデジタルエビデンス管理システム。
  12. 前記記憶装置は、
    前記工程における作業規定の情報を記憶装置でさらに保持し、
    前記演算装置は、
    前記テキスト化の処理として、前記残区間映像データに対応した作業に関する、前記作業規定の情報から作業特徴の記述を抽出し、前記抽出した記述をデジタルエビデンスとして生成するものである、
    ことを特徴とする請求項11に記載のデジタルエビデンス管理システム。
  13. 前記記憶装置は、
    前記工程における作業規定の情報を記憶装置でさらに保持し、
    前記演算装置は、
    前記映像データを、前記作業規定の情報が示す、前記工程における作業単位ごとに分割して保持し、前記作業単位ごとに、前記区間映像データの特定、前記データ低減処理の適用、および前記デジタルエビデンスの格納、の各処理を実行するものである、
    ことを特徴とする請求項8に記載のデジタルエビデンス管理システム。
  14. 前記演算装置は、
    前記デジタルエビデンスの格納に際し、当該デジタルエビデンスの生成に参照した前記作業規定の情報が示す、工程、作業、および作業対象の製品、の少なくともいずれかの情報を当該デジタルエビデンスに紐付けて格納し、
    所定端末からデジタルエビデンスの検索要求を受けた場合、当該検索要求が示す、検索対象の工程、作業、および製品の少なくともいずれかの項目に基づき、前記デジタルエビデンスを記憶装置にて検索し、前記端末に検索結果であるデジタルエビデンスを返信する
    ものである、
    こと特徴とする請求項13に記載のデジタルエビデンス管理システム。
JP2019048874A 2019-03-15 2019-03-15 デジタルエビデンス管理方法およびデジタルエビデンス管理システム Expired - Fee Related JP7108566B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019048874A JP7108566B2 (ja) 2019-03-15 2019-03-15 デジタルエビデンス管理方法およびデジタルエビデンス管理システム
PCT/JP2019/034822 WO2020188854A1 (ja) 2019-03-15 2019-09-04 デジタルエビデンス管理方法およびデジタルエビデンス管理システム
US17/277,405 US11457192B2 (en) 2019-03-15 2019-09-04 Digital evidence management method and digital evidence management system
EP19920063.5A EP3941035A4 (en) 2019-03-15 2019-09-04 DIGITAL EVIDENCE MANAGEMENT METHOD AND DIGITAL EVIDENCE MANAGEMENT SYSTEM

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019048874A JP7108566B2 (ja) 2019-03-15 2019-03-15 デジタルエビデンス管理方法およびデジタルエビデンス管理システム

Publications (2)

Publication Number Publication Date
JP2020150509A JP2020150509A (ja) 2020-09-17
JP7108566B2 true JP7108566B2 (ja) 2022-07-28

Family

ID=72430004

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019048874A Expired - Fee Related JP7108566B2 (ja) 2019-03-15 2019-03-15 デジタルエビデンス管理方法およびデジタルエビデンス管理システム

Country Status (4)

Country Link
US (1) US11457192B2 (ja)
EP (1) EP3941035A4 (ja)
JP (1) JP7108566B2 (ja)
WO (1) WO2020188854A1 (ja)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7575960B2 (ja) * 2021-02-02 2024-10-30 株式会社日本総合研究所 情報処理装置、情報処理方法、及び、プログラム
US20250157216A1 (en) * 2022-05-17 2025-05-15 Ntt Docomo, Inc. Video manual generation apparatus
JP7744547B1 (ja) * 2025-06-30 2025-09-25 株式会社ブロードリーフ 情報処理装置、情報処理方法及び情報処理プログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005192815A (ja) 2004-01-07 2005-07-21 Glory Ltd データ収集管理システム、データ収集管理方法およびデータ収集管理プログラム
JP2013196345A (ja) 2012-03-19 2013-09-30 Toshiba Corp 自動改札装置、情報収集システムおよび情報収集方法
JP2016115027A (ja) 2014-12-12 2016-06-23 株式会社日立システムズ 作業現場集中監視システム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008084068A (ja) * 2006-09-28 2008-04-10 Toshiba Corp 現場作業実施状況管理装置及び管理方法
JP2011243156A (ja) 2010-05-21 2011-12-01 Nippon Telegr & Teleph Corp <Ntt> 映像変換装置,文書変換装置,映像変換方法,文書変換方法,映像変換プログラムおよび文書変換プログラム
US20140361905A1 (en) * 2013-06-05 2014-12-11 Qualcomm Incorporated Context monitoring
JP6077425B2 (ja) 2013-09-25 2017-02-08 Kddi株式会社 映像管理装置及びプログラム
WO2017200529A1 (en) * 2016-05-17 2017-11-23 Hitachi Data Systems Corporation Digital evidence management
US10248863B2 (en) * 2016-06-15 2019-04-02 International Business Machines Corporation Augemented video analytics for testing internet of things (IoT) devices
US10552294B2 (en) * 2017-03-31 2020-02-04 Commvault Systems, Inc. Management of internet of things devices
JP2019036132A (ja) * 2017-08-16 2019-03-07 オリンパス株式会社 作業支援システム,ウェアラブル装置,撮像装置,作業支援方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005192815A (ja) 2004-01-07 2005-07-21 Glory Ltd データ収集管理システム、データ収集管理方法およびデータ収集管理プログラム
JP2013196345A (ja) 2012-03-19 2013-09-30 Toshiba Corp 自動改札装置、情報収集システムおよび情報収集方法
JP2016115027A (ja) 2014-12-12 2016-06-23 株式会社日立システムズ 作業現場集中監視システム

Also Published As

Publication number Publication date
EP3941035A4 (en) 2022-11-30
EP3941035A1 (en) 2022-01-19
US11457192B2 (en) 2022-09-27
JP2020150509A (ja) 2020-09-17
US20220038671A1 (en) 2022-02-03
WO2020188854A1 (ja) 2020-09-24

Similar Documents

Publication Publication Date Title
CN111553137B (zh) 报告生成方法、装置、存储介质及计算机设备
JP7108566B2 (ja) デジタルエビデンス管理方法およびデジタルエビデンス管理システム
CN109409780B (zh) 变更处理方法、装置、计算机设备和存储介质
CN112308727A (zh) 保险理赔业务处理方法及装置
WO2023063172A1 (ja) 業務情報管理システム及びデータ検索方法
CN111368128B (zh) 目标图片的识别方法、装置和计算机可读存储介质
CN112313641B (zh) 信息提供系统和信息提供方法
CN107291863B (zh) 一种用于工控设备信息安全的快速核查方法及装置
CN112395476A (zh) 一种工程资料管理的方法
US20180295145A1 (en) Multicomputer Digital Data Processing to Provide Information Security Control
CN115619328A (zh) 基于工作票的违章统计方法、装置、存储介质及电子设备
CN114266550A (zh) 数据分析方法、装置、计算机设备和存储介质
CN113298469A (zh) 异常数据检测方法、装置、电子设备和存储介质
CN107346472A (zh) 一种通过在线建模处理运维数据的方法及装置
CN116010349B (zh) 基于元数据的数据检核方法和装置、电子设备和存储介质
CN111045984A (zh) 一种电网实验室文件管理系统及方法
CN115907612B (zh) 一种基于动态管控的影视非数字资产的管理方法和系统
KR102788155B1 (ko) 데이터 포맷 변환 장치 및 그 방법
CN113407502B (zh) 一种数据流转分类管理方法以及系统
CN116976984A (zh) 基于MetaAPI的广告报告获取方法、装置及其相关介质
KR20240059892A (ko) 이미지 인식 기반의 머신러닝 학습 데이터 세트 생성 시스템
CN116822700A (zh) 物流客户订单流失预防方法、装置、设备及存储介质
CN115170073A (zh) 物流仲裁单处理方法、装置、设备及存储介质
CN110119406B (zh) 实时任务记录的核对方法及装置
CN114897425A (zh) 应急数据处理方法、装置和服务器

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210415

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220621

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220715

R150 Certificate of patent or registration of utility model

Ref document number: 7108566

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees