Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP7400862B2 - information processing equipment - Google Patents
[go: Go Back, main page]

JP7400862B2 - information processing equipment - Google Patents

information processing equipment Download PDF

Info

Publication number
JP7400862B2
JP7400862B2 JP2022071421A JP2022071421A JP7400862B2 JP 7400862 B2 JP7400862 B2 JP 7400862B2 JP 2022071421 A JP2022071421 A JP 2022071421A JP 2022071421 A JP2022071421 A JP 2022071421A JP 7400862 B2 JP7400862 B2 JP 7400862B2
Authority
JP
Japan
Prior art keywords
seat
person
information
venue
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2022071421A
Other languages
Japanese (ja)
Other versions
JP2022090082A (en
Inventor
義朗 今井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2022071421A priority Critical patent/JP7400862B2/en
Publication of JP2022090082A publication Critical patent/JP2022090082A/en
Application granted granted Critical
Publication of JP7400862B2 publication Critical patent/JP7400862B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Collating Specific Patterns (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、情報処理装置、情報処理システム、プログラム、情報処理方法に関する。 The present invention relates to an information processing device, an information processing system, a program, and an information processing method.

映画館やコンサートなどの会場では、各出入り口において係員が観客のチケットのチェックを行っている。ところが、観客が多い場合には、入場時に行列になり混雑が起こるおそれがある。このため、観客の満足度向上を図るべくスムーズに入場できるよう、チェックする係員の人数を増やす必要がある。ところが、人員を増やす場合には、人件費が増加する、という問題が生じる。 At venues such as movie theaters and concerts, staff members check the tickets of audience members at each entrance. However, if there are a large number of spectators, there may be queues to enter and congestion may occur. Therefore, in order to improve audience satisfaction, it is necessary to increase the number of staff checking the venue so that they can enter the venue smoothly. However, when increasing the number of personnel, a problem arises in that personnel costs increase.

一方で、近年、人物の顔認証技術の発達により、ゲートに設置したカメラで撮影した人物の顔画像から顔認証を行うウォークスルー顔認証システムが利用されている。このようなウォークスルー顔認証システムを、上述した映画館やコンサートなどの会場に入場する観客のチェックに用いることも可能である。 On the other hand, in recent years, with the development of human face recognition technology, walk-through facial recognition systems are being used that perform facial recognition from images of people's faces taken with cameras installed at gates. Such a walk-through facial recognition system can also be used to check the audience entering the above-mentioned theaters, concerts, and other venues.

しかしながら、映画館やコンサートなどの会場は出入り口が複数あり、これら出入り口毎に顔認証システムを設置することは、費用面や設置スペースに問題が生じる場合がある。 However, venues such as movie theaters and concerts have multiple entrances and exits, and installing a facial recognition system at each of these entrances and exits may pose problems in terms of cost and installation space.

このため、さらに映画館やコンサートなどの会場において観客をチェックする方法を検討すると、例えば、特許文献1に記載のような、座席に着席された人物を確認する方法を利用することも考えられる。 For this reason, if a method of checking the audience at a venue such as a movie theater or a concert is further considered, it may be possible to use a method of checking a person seated in a seat, for example, as described in Patent Document 1.

特開2008-250830号公報Japanese Patent Application Publication No. 2008-250830

しかしながら、特許文献1に記載の方法は、試験会場などにおける出席者の出欠を確認することを目的としており、上述した映画館やコンサートなどの会場における人物の確認には適していない。つまり、映画館やコンサートなどでは、チケットの購入時に座席が決定されるが、試験では申し込みの後日に座席が指定されることがあり、事前に座席と顔画像とを関連付けて登録することが困難となる。そして、特許文献1では、単に、顔画像と座席の位置情報とを対応させて予め登録する、ことしか記載されておらず、その具体的な登録方法は不明であり、例えば、人手で登録されることが予想される。このため、特許文献1の技術では、会場で人物確認を行うシステムにおいて、人物の事前登録に手間がかかる、という問題が生じる。 However, the method described in Patent Document 1 is aimed at confirming the attendance of attendees at an exam venue or the like, and is not suitable for confirming people at venues such as movie theaters and concerts as described above. In other words, for movie theaters, concerts, etc., seats are determined at the time of ticket purchase, but for exams, seats may be assigned after application, making it difficult to associate seats with facial images and register them in advance. becomes. Patent Document 1 simply states that a face image and seat position information are registered in advance in correspondence with each other, and the specific registration method is unknown. It is expected that For this reason, the technique disclosed in Patent Document 1 poses a problem in that it takes time and effort to pre-register a person in a system that performs person identification at a venue.

以上より、本発明の目的は、上述した課題である、会場で人物確認を行うシステムにおいて、人物の事前登録に手間がかかる、という問題を解決することができる情報処理システムを提供することにある。 SUMMARY OF THE INVENTION In view of the above, an object of the present invention is to provide an information processing system that can solve the above-mentioned problem that it takes time and effort to pre-register a person in a system that performs person identification at a venue. .

本発明の一形態である情報処理装置は、
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段と、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段と、
を備えている。
An information processing device that is one form of the present invention includes:
A memory processing means that, when issuing a ticket, acquires an image of the person who issued the ticket, and stores authentication information based on the image of the person in association with seat information that specifies the seat of the issued ticket;
A venue image taken of the inside of the venue where the seat of the issued ticket is located is acquired, and based on the venue image, a set of authentication information of the person in the venue image and seat information of the seat where the person is located is determined. a verification means that performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat are stored in association with each other;
It is equipped with

また、本発明の一形態である情報処理システムは、
撮影手段が装備されたチケット発券装置と、所定の会場内を撮影する会場撮影装置と、前記チケット発券装置及び前記会場撮影装置にネットワークを介して接続された情報処理装置と、を備え、
前記情報処理装置は、
前記チケット発券装置から、チケット発券時に前記撮影手段にて撮影された当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段と、
前記会場撮影装置から、発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段と、
を備えている。
Further, an information processing system that is an embodiment of the present invention includes:
A ticket issuing device equipped with a photographing means, a venue photographing device for photographing the inside of a predetermined venue, and an information processing device connected to the ticket issuing device and the venue photographing device via a network,
The information processing device includes:
From the ticket issuing device, an image of the person who issued the ticket is obtained, taken by the photographing means at the time of ticket issuance, and authentication information based on the image of the person and seat information identifying the seat of the issued ticket are obtained. , a memory processing means for storing in association with each other;
A venue image taken of the inside of the venue where the seat of the issued ticket is located is obtained from the venue photography device, and based on the venue image, authentication information of the person in the venue image and the seat where the person is located are obtained. A verification means that extracts a pair with seat information and performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat are stored in association with each other in the pair;
It is equipped with

また、本発明の一形態であるプログラムは、
情報処理装置に、
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段と、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段と、
を実現させる。
Further, a program that is one form of the present invention is
In the information processing device,
A memory processing means that, when issuing a ticket, acquires an image of the person who issued the ticket, and stores authentication information based on the image of the person in association with seat information that specifies the seat of the issued ticket;
A venue image taken of the inside of the venue where the seat of the issued ticket is located is acquired, and based on the venue image, a set of authentication information of the person in the venue image and seat information of the seat where the person is located is determined. a verification means that performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat are stored in association with each other;
Make it happen.

また、本発明の一形態である情報処理方法は、
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶し、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、
当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う。
Further, an information processing method that is one form of the present invention includes:
At the time of ticket issuance, an image of the person who issued the ticket is obtained, and authentication information based on the image of the person and seat information identifying the seat of the issued ticket are stored in association with each other;
Obtain an image of the venue where the seats for the issued tickets are located,
Based on the venue image, extract a set of the authentication information of the person in the venue image and the seat information of the seat where the person is located, and extract the authentication information of the extracted person and the seat information of the seat in the set. Verification processing is performed to see if they are stored in association.

本発明は、以上のように構成されることにより、会場で人物確認を行うシステムにおいて、人物の事前登録の手間を削減することができる。 By being configured as described above, the present invention can reduce the effort required to pre-register a person in a system that performs person verification at a venue.

本発明の実施形態1における情報処理システムの構成の概略を示す図である。1 is a diagram schematically showing the configuration of an information processing system in Embodiment 1 of the present invention. 図1に開示した情報処理システムの構成を示すブロック図である。2 is a block diagram showing the configuration of the information processing system disclosed in FIG. 1. FIG. 図1に開示した情報処理システムの動作を示すフローチャートである。2 is a flowchart showing the operation of the information processing system disclosed in FIG. 1. FIG. 図1に開示した情報処理システムの動作を示すフローチャートである。2 is a flowchart showing the operation of the information processing system disclosed in FIG. 1. FIG. 本発明の実施形態2における情報処理システムの構成の概略を示す図である。FIG. 2 is a diagram schematically showing the configuration of an information processing system in Embodiment 2 of the present invention. 図5に開示した情報処理システムの構成を示すブロック図である。6 is a block diagram showing the configuration of the information processing system disclosed in FIG. 5. FIG. 本発明の実施形態3における情報処理システムの構成を示すブロック図である。FIG. 3 is a block diagram showing the configuration of an information processing system in Embodiment 3 of the present invention.

<実施形態1>
本発明の第1の実施形態を、図1乃至図4を参照して説明する。図1は、情報処理システムの全体構成を示す概略図であり、図2は、情報処理システムの構成を示すブロック図である。図3乃至図4は、情報処理システムの処理動作を説明するための図である。
<Embodiment 1>
A first embodiment of the present invention will be described with reference to FIGS. 1 to 4. FIG. 1 is a schematic diagram showing the overall configuration of an information processing system, and FIG. 2 is a block diagram showing the configuration of the information processing system. 3 and 4 are diagrams for explaining processing operations of the information processing system.

[構成]
本発明における情報処理システムは、映画館やコンサートなどの会場4において、観客となるユーザの確認を行うためのシステムである。そして、情報処理システムは、図1に示すように、チケットボックス1内に設置された発券機10と、ユーザ宅3内に設置されたユーザ端末30と、データサーバ20と、会場内カメラ40と、認証装置50と、警備装置60と、を備え、これらがネットワークを介して接続されている。以下、各構成について詳述する。
[composition]
The information processing system according to the present invention is a system for confirming users who will be spectators at a venue 4 such as a movie theater or a concert. As shown in FIG. 1, the information processing system includes a ticket issuing machine 10 installed in a ticket box 1, a user terminal 30 installed in a user's home 3, a data server 20, and an in-venue camera 40. , an authentication device 50, and a security device 60, which are connected via a network. Each configuration will be explained in detail below.

チケットボックス1は、会場4近くに設置されたチケット売り場であったり、街中やコンビニなどに設置されたチケット売り場であったりしてもよい。チケットボックス1は、チケットの発券処理を行う情報処理装置にて構成された発券機10を備えている。 The ticket box 1 may be a ticket office installed near the venue 4, or may be a ticket office installed in a downtown area, a convenience store, or the like. The ticket box 1 includes a ticket issuing machine 10 configured with an information processing device that performs ticket issuing processing.

上記発券機10(チケット発券装置)は、チケットの発券を希望する人物であるユーザUaが操作する入力装置や、チケットの内容を表示する表示装置、紙媒体であるチケットを出力する出力装置などを備え、ユーザUaの操作に応じてチケットの発券処理を行う。なお、発券機10は、必ずしも紙媒体のチケットを発券する必要はなく、発券したチケットの内容が記憶された情報を表示したりユーザUaの情報処理端末に送信したりするなど、他の処理によるチケット発券処理を行ってもよい。 The ticket issuing machine 10 (ticket issuing device) includes an input device operated by the user Ua who wishes to issue a ticket, a display device that displays the contents of the ticket, an output device that outputs the ticket as a paper medium, etc. and performs ticket issuance processing in response to user Ua's operations. Note that the ticket issuing machine 10 does not necessarily need to issue a paper ticket, but may perform other processing such as displaying information in which the contents of the issued ticket are stored or transmitting it to the information processing terminal of the user Ua. Ticket issuing processing may also be performed.

また、発券機10は、カメラ11(撮影手段)を備えており、チケットの発券処理を行うユーザUaの顔画像を撮影する。加えて、発券機10は、図2に示すように、装備された演算装置でプログラムが実行されることで構築されたチケットデータ送信部12を備えている。チケットデータ送信部12は、上述したようにチケットの発券時に、チケットボックス1内でチケットを発券したユーザUaの顔画像を撮影し、かかる顔画像と、ユーザUaが発券したチケットの座席を特定する座席情報と、を関連付けて、データサーバ20に送信する。このとき、座席情報には、例えば、発券したチケットにて入場することができる対象となる映画やコンサートなどのイベント名や、対象となる会場の講演時間などと共に、その会場における座席の位置を特定する座席番号が含まれる。但し、座席を特定する座席情報としては、座席番号が含まれることに限らず、会場内における座席の位置を表す情報が含まれていてもよい。 The ticket issuing machine 10 also includes a camera 11 (photographing means), which photographs a facial image of the user Ua who performs ticket issuing processing. In addition, as shown in FIG. 2, the ticket issuing machine 10 includes a ticket data transmitter 12 constructed by executing a program on an equipped arithmetic unit. As described above, when issuing a ticket, the ticket data transmitting unit 12 takes a facial image of the user Ua who issued the ticket in the ticket box 1, and identifies the facial image and the seat of the ticket issued by the user Ua. The seat information is associated and transmitted to the data server 20. At this time, the seat information includes, for example, the name of the event such as a movie or concert that can be entered with the issued ticket, the lecture time of the target venue, and the location of the seat at the venue. Contains the seat number. However, the seat information for specifying a seat is not limited to the seat number, and may include information representing the position of the seat within the venue.

上記ユーザ端末30は、チケットの発券を希望する人物であるユーザUbのユーザ宅3内に設置された情報処理端末である。但し、ユーザ端末30は、携帯型の情報処理端末であってもよく、ユーザUbが操作できる端末であればいかなる情報処理端末であってもよい。 The user terminal 30 is an information processing terminal installed in the user's home 3 of the user Ub who wishes to issue a ticket. However, the user terminal 30 may be a portable information processing terminal, or any information processing terminal that can be operated by the user Ub.

ユーザ端末30は、データサーバ20に接続し、当該データサーバ20による発券処理を受ける。そして、ユーザ端末30は、チケット発券時におけるデータサーバ20の指示に従って、装備しているカメラ(図示せず)にてユーザUbの顔画像を撮影する。そして、ユーザ端末30は、チケットを発券したユーザUbの顔画像と、当該チケットの座席を特定する座席情報と、を関連付けて、データサーバ20に送信する。このとき、ユーザ端末30は、チケット発券時にユーザUbの顔画像を撮影せずに、チケット発券時に予め記憶しているユーザUbの顔画像を読み出して、チケットの座席情報と共にデータサーバ20に送信してもよい。このように、ユーザ端末30は、ユーザUbの顔画像をチケットの座席情報と関連付けて、データサーバ20にアップロードする。なお、ユーザ端末30は、チケット発券と同時ではなく、後日に顔画像をアップロードしてもよい。また、ユーザ端末30は、図示しないインターネット上の発券処理サーバに接続して発券処理を受けてもよく、その場合にも、発券したチケットの座席情報と共に、ユーザUbの顔画像をデータサーバ20に送信する。 The user terminal 30 connects to the data server 20 and receives ticket issuing processing by the data server 20. Then, the user terminal 30 photographs the face image of the user Ub using an equipped camera (not shown) according to instructions from the data server 20 at the time of ticket issuance. Then, the user terminal 30 associates the face image of the user Ub who issued the ticket with seat information that specifies the seat of the ticket, and transmits the associated image to the data server 20. At this time, the user terminal 30 does not take a picture of the face image of the user Ub when issuing the ticket, but reads out the face image of the user Ub stored in advance at the time of issuing the ticket and sends it to the data server 20 together with the seat information of the ticket. You can. In this way, the user terminal 30 uploads the face image of the user Ub to the data server 20 in association with the seat information of the ticket. Note that the user terminal 30 may upload the facial image at a later date, rather than at the same time as ticket issuance. Further, the user terminal 30 may connect to a ticketing processing server on the Internet (not shown) to receive the ticketing process, and in that case, the face image of the user Ub is sent to the data server 20 along with the seat information of the issued ticket. Send.

上記データサーバ20(情報処理装置)は、演算装置及び記憶装置を有する情報処理装置である。そして、データサーバ20は、図2に示すように、演算装置がプログラムを実行することで構築された、データ受信部21と、データ関連付け部22と、を備えている。また、データサーバ20は、記憶装置に構築された、ユーザデータ記憶部23を備えている。 The data server 20 (information processing device) is an information processing device having a calculation device and a storage device. As shown in FIG. 2, the data server 20 includes a data receiving section 21 and a data associating section 22, which are constructed by a computing device executing a program. Further, the data server 20 includes a user data storage section 23 constructed in a storage device.

上記データ受信部21は、上述したように発券機10やユーザ端末30から送信された、ユーザの顔画像と、チケットの座席情報と、の組からなる情報を受信する。そして、上記データ関連付け部22(記憶処理手段)は、受信したユーザの顔画像を取得し、かかる顔画像からユーザを識別する顔特徴量(認証情報)を抽出し、共に受信した座席情報と関連付けて、ユーザデータ記憶部23に記憶する。これにより、ユーザデータ記憶部23には、チケットボックス1やネットワークを介して接続されたユーザ端末30による発券時に、チケットを発券したユーザUa,Ubの認証情報としての顔特徴量と、発券したチケットの座席情報と、の組が記憶されることとなる。 The data receiving unit 21 receives information consisting of a set of a user's face image and ticket seat information transmitted from the ticket issuing machine 10 or the user terminal 30 as described above. Then, the data association unit 22 (storage processing means) acquires the received facial image of the user, extracts facial features (authentication information) for identifying the user from the facial image, and associates the same with the received seat information. and stores it in the user data storage section 23. As a result, when the ticket box 1 or the user terminal 30 connected via the network issues a ticket, the user data storage unit 23 stores facial feature amounts as authentication information of the users Ua and Ub who issued the ticket, and the issued ticket. The set of seat information and , will be stored.

ここで、上述した発券機10やユーザ端末30で、1人のユーザUa,Ubが複数枚のチケットを購入する場合がある。この場合、発券機10やユーザ端末30からは、購入した1人のユーザUa,Ubの顔画像に、複数のチケットのそれぞれの座席情報が関連付けられてデータサーバ20に送信される。すると、上記データ関連付け部22は、1人のユーザUa,Ubの顔画像から抽出した顔特徴量に、各座席情報をそれぞれ関連付けて記憶する。つまり、1人のユーザの顔画像と1つの座席情報との組が、購入されたチケットの枚数分だけ記憶されることとなる。 Here, one user Ua or Ub may purchase a plurality of tickets using the ticket issuing machine 10 or user terminal 30 described above. In this case, the ticket issuing machine 10 and the user terminal 30 transmit the face images of the purchased users Ua and Ub to the data server 20 in association with the seat information of each of the plurality of tickets. Then, the data association unit 22 associates and stores each piece of seat information with the facial features extracted from the facial images of one user Ua and Ub. In other words, as many sets of one user's face image and one seat information as the number of tickets purchased are stored.

なお、データサーバ20は、上述したようにネットワークを介してユーザ端末30に対して発券処理を行う機能を有しているが、かかる発券処理機能は他の情報処理装置にて実現されていてもよい。また、データサーバ20と後述する認証装置50とは、一つの情報処理装置で構成されていてもよい。 Note that the data server 20 has the function of issuing tickets to the user terminal 30 via the network as described above, but even if such ticket issuing processing function is realized by another information processing device, good. Further, the data server 20 and the authentication device 50 described later may be configured as one information processing device.

上記会場内カメラ40(会場撮影装置)は、映画やコンサートなどのイベントが行われる、発券したチケットの座席が設置された会場4内を撮影する撮影装置である。会場内カメラ40は、例えば、一定の時間間隔で会場4内を撮影し、撮影された会場画像を認証装置50に送信する。 The venue camera 40 (venue photographing device) is a photographing device that photographs the inside of the venue 4 where an event such as a movie or a concert is held and where the seats of the issued tickets are installed. The in-venue camera 40 photographs the inside of the venue 4 at regular time intervals, for example, and transmits the captured venue images to the authentication device 50 .

このとき、会場内カメラ40が設置される会場4内においては、座席位置が固定である。このため、会場内カメラ40にて会場4内を撮影することで、会場画像上の座標から、予め設定された座席位置を特定し、かかる座席位置から座席番号などの座席情報を特定することができる。なお、会場内カメラ40は、撮影方向を変えながら順番に客席を撮影していくパン方式のカメラであってもよく、一度に全客席を撮影可能な高解像度カメラであってもよい。例えば、パン式のカメラである場合には、会場画像を撮影したときのカメラの向きと当該会場画像上の座標とに基づいて、座席位置を特定することができる。また、会場内カメラ40は、赤外線対応など、暗所でも輪郭などの顔の特徴をはっきりとらえることができるものであることが望ましい。 At this time, seat positions are fixed within the venue 4 where the in-venue camera 40 is installed. Therefore, by photographing the inside of the venue 4 with the venue camera 40, it is possible to identify preset seat positions from the coordinates on the venue image, and to identify seat information such as seat numbers from the seat positions. can. The in-venue camera 40 may be a pan-type camera that sequentially photographs the audience seats while changing the shooting direction, or may be a high-resolution camera that can capture all the audience seats at once. For example, in the case of a pan-type camera, the seat position can be specified based on the direction of the camera when capturing the venue image and the coordinates on the venue image. Furthermore, it is desirable that the in-venue camera 40 be capable of clearly capturing facial features such as the outline even in a dark place, such as one that is compatible with infrared rays.

上記認証装置50(情報処理装置)は、演算装置及び記憶装置を有する情報処理装置であり、上述したデータサーバ20や会場内カメラ40にネットワークを介して接続される。なお、認証装置50は、上記データサーバ20と一つの情報処理装置で構築されていてもよい。そして、認証装置50は、図2に示すように、演算装置がプログラムを実行することで構築された、画像処理部51と、照合部52と、監視部53と、を備えている。 The authentication device 50 (information processing device) is an information processing device having a calculation device and a storage device, and is connected to the data server 20 and the venue camera 40 described above via a network. Note that the authentication device 50 may be constructed with the data server 20 and one information processing device. As shown in FIG. 2, the authentication device 50 includes an image processing section 51, a verification section 52, and a monitoring section 53, which are constructed by a computing device executing a program.

上記画像処理部51(照合手段)は、会場内カメラ40にて撮影した会場画像を取得し、当該会場画像から会場内の人物Ucであるユーザの顔画像を抽出する。そして、画像処理部51は、各ユーザの顔画像から、認証情報としての顔特徴量を抽出する。さらに、画像処理部51は、抽出した顔画像が位置する会場画像上の座標から、会場4内における座席情報としての座席位置を特定し、かかる座席位置に基づく座席情報を特定する。そして、画像処理部51は、抽出した顔特徴量と座席情報との組を照合部52に渡す。なお、画像処理部51による座席位置の特定は、例えば、予め会場画像内における座標と座席位置との対応情報が認証装置50やデータサーバ20に記憶されており、かかる情報を利用して行ってもよいが、会場画像内から座席に付された座席番号を読み取るなど、いかなる方法で特定してもよい。 The image processing unit 51 (verification means) acquires a venue image taken by the venue camera 40, and extracts a face image of a user who is a person Uc in the venue from the venue image. Then, the image processing unit 51 extracts facial features as authentication information from each user's facial image. Furthermore, the image processing unit 51 specifies a seat position as seat information in the venue 4 from the coordinates on the venue image where the extracted face image is located, and specifies seat information based on the seat position. Then, the image processing unit 51 passes the extracted set of facial feature amount and seat information to the matching unit 52. Note that the identification of the seat position by the image processing unit 51 is performed using, for example, information on the correspondence between the coordinates in the venue image and the seat position, which is stored in advance in the authentication device 50 or the data server 20. However, it may be specified by any method such as reading the seat number attached to the seat from within the venue image.

上記照合部52(照合手段)は、データサーバ20のユーザデータ記憶部23から、チケット発券時に登録された、チケット購入ユーザUa,Ubの顔特徴量と座席情報とが関連付けられた情報を取得する。そして、照合部52は、画像処理部51にて抽出した顔特徴量と座席情報との組が、データサーバ20から取得した情報と一致するか否かを調べる。つまり、所定の座席にいる人物の顔特徴量が、その座席のチケットの購入者として、その座席の座席情報に関連付けられて登録されているか、といった照合を行う。そして、照合部52は、上述した照合処理が失敗した場合には、座席情報と共に失敗した旨を監視部53に通知する。 The collation unit 52 (verification means) acquires, from the user data storage unit 23 of the data server 20, information in which facial features and seat information of the ticket purchasing users Ua and Ub are associated, which is registered at the time of ticket issuance. . Then, the matching unit 52 checks whether the set of facial feature amount and seat information extracted by the image processing unit 51 matches the information acquired from the data server 20. In other words, a check is made to see if the facial feature amount of the person in a predetermined seat is registered as a purchaser of a ticket for that seat in association with the seat information for that seat. If the above-described verification process fails, the verification unit 52 notifies the monitoring unit 53 of the failure together with the seat information.

上記監視部53(監視手段)は、照合処理が失敗した旨と座席情報との通知を受けた場合には、かかる座席情報に位置する人物が会場4内への不正入場であると判断して、当該座席位置に位置する人物の監視処理を行う。監視処理としては、例えば、会場内カメラ40から定期的に送信される会場画像から、照合処理が必敗した座席位置に位置する人物が、かかる位置から離れるといった離席状態を監視する。そして、監視部53は、離席状態を検出すると、会場画像から監視している座席位置に位置する人物の顔画像を抽出し、かかる顔画像と座席位置とを警備装置60に通知する。なお、監視部53は、照合処理が失敗した旨を受信するとすぐに、人物の顔画像を警備装置60に通知してもよい。 When the monitoring unit 53 (monitoring means) receives a notification that the matching process has failed and the seat information, the monitoring unit 53 (monitoring means) determines that the person located at the seat information has entered the venue 4 illegally. , performs monitoring processing for the person located at the relevant seat position. As the monitoring process, for example, based on venue images periodically transmitted from the venue camera 40, a state in which a person located at a seat position where the matching process inevitably fails is moved away from the seat position is monitored. When the monitoring unit 53 detects the absentee state, the monitoring unit 53 extracts a face image of a person located at the seat position being monitored from the venue image, and notifies the security device 60 of the face image and the seat position. Note that the monitoring unit 53 may notify the security device 60 of the person's face image immediately upon receiving the notification that the verification process has failed.

上記警備装置60は、会場4の係員や警備員が所持するスマートフォンなどの情報処理端末である。警備装置60は、装備された演算装置でプログラムを実行することで構築された通知受信部61を備えている。通知受信部61は、上述したように認証装置50の監視部53から、照合処理に失敗したために監視している人物の顔画像と座席位置との通知を受けると、かかる情報を表示部に表示して係員や警備員に通知する。 The security device 60 is an information processing terminal such as a smartphone owned by an attendant or security guard at the venue 4. The security device 60 includes a notification receiving section 61 constructed by executing a program using an equipped arithmetic device. When the notification receiving unit 61 receives a notification from the monitoring unit 53 of the authentication device 50 of the face image and seat position of the person being monitored because the verification process has failed as described above, the notification receiving unit 61 displays such information on the display unit. and notify the staff or security guard.

[動作]
次に、上述した情報処理システムの動作を、主に図3乃至図4のフローチャートを参照して説明する。
[motion]
Next, the operation of the above-mentioned information processing system will be explained mainly with reference to the flowcharts of FIGS. 3 and 4.

まず、ユーザUaは、会場4で行われるイベントの当日にチケットを購入する場合には、チケットボックス1内の発券機10にてチケットを購入する。すると、発券機10は、チケットを発券し(ステップS1)、購入者であるユーザUaの顔画像を撮影する(ステップS2)。そして、発券機10は、撮影したユーザUaの顔画像と、ユーザUaが発券したチケットの座席情報と、を関連付けて、データサーバ20に送信する。 First, when the user Ua purchases a ticket on the day of an event to be held at the venue 4, the user Ua purchases the ticket using the ticket issuing machine 10 in the ticket box 1. Then, the ticket issuing machine 10 issues a ticket (step S1) and photographs the face image of the user Ua who is the purchaser (step S2). Then, the ticket issuing machine 10 associates the photographed facial image of the user Ua with the seat information of the ticket issued by the user Ua, and transmits the image to the data server 20.

データサーバ20は、発券機10から送信されたユーザの顔画像と、チケットの座席情報と、の組を受信する。そして、データサーバ20は、ユーザの顔画像から顔特徴量を抽出し(ステップS3)、当該顔特徴量に、共に受信した座席情報を関連付けて記憶する(ステップS4)。 The data server 20 receives the set of the user's facial image and ticket seat information transmitted from the ticket issuing machine 10. Then, the data server 20 extracts facial features from the user's face image (step S3), and stores the facial features in association with the received seat information (step S4).

なお、イベントの当日ではなく、ユーザUbがインターネット上でチケットを事前購入する場合には、ユーザ端末30からチケット発券処理を行うと共に、ユーザUbの顔画像をデータサーバ20にアップロードする。これにより、データサーバ20は、発券したチケットの座席情報と共に、ユーザUbの顔画像を受け取り、ユーザの顔特徴量と座席情報とを関連付けて記憶する。 Note that if the user Ub purchases tickets in advance on the Internet instead of on the day of the event, the ticket issuing process is performed from the user terminal 30 and the facial image of the user Ub is uploaded to the data server 20. Thereby, the data server 20 receives the facial image of the user Ub along with the seat information of the issued ticket, and stores the user's facial feature amount and the seat information in association with each other.

チケットを購入したユーザは、イベントの当日、イベントが開催される会場4に入場し、購入したチケットの座席に着席する。そして、イベント開始前あるいはイベント中に、会場4内に設置された会場内カメラ40が、会場4内の画像を撮影して、撮影した会場画像を認証装置50に送信する(ステップS11)。 On the day of the event, the user who purchased the ticket enters the venue 4 where the event is held and takes a seat in the seat for which the ticket was purchased. Then, before the start of the event or during the event, the in-venue camera 40 installed in the venue 4 captures an image of the interior of the venue 4, and transmits the captured venue image to the authentication device 50 (step S11).

認証装置50は、会場画像に映る全ての人物の顔画像を抽出する(ステップS12)。そして、認証装置50は、顔画像から顔特徴量を抽出し、さらに、抽出した顔画像の位置から座席位置といった座席情報を特定する(ステップS13)。そして、認証装置50は、会場画像から抽出した顔特徴量と、特定した座席情報との組が、データサーバ20に記憶されているか否かの照合を行う(ステップS14)。 The authentication device 50 extracts the face images of all the people appearing in the venue image (step S12). Then, the authentication device 50 extracts facial features from the facial image, and further specifies seat information such as the seat position from the position of the extracted facial image (step S13). Then, the authentication device 50 checks whether the set of the facial feature extracted from the venue image and the specified seat information is stored in the data server 20 (step S14).

認証装置50は、会場画像から抽出した顔特徴量と座席情報との組が、データサーバ20に記憶されている情報と一致すると、照合成功と判断する(ステップS15:Yes)。つまり、チケットを購入したユーザが、正しい座席に着座していると判断する。 The authentication device 50 determines that the matching is successful when the set of facial feature amount and seat information extracted from the venue image matches the information stored in the data server 20 (step S15: Yes). In other words, it is determined that the user who purchased the ticket is seated in the correct seat.

一方で、会場画像から抽出した顔特徴量と座席情報との組が、データサーバ20に記憶されている情報と一致しない場合には、照合失敗と判断する(ステップS15:No)。この場合、認証装置50は、かかるユーザが不正入場者である可能性があるため、その座席位置のユーザを監視する。例えば、認証装置50は、会場内カメラ40から定期的に送信される会場画像から、その座席に位置するユーザが離席するか否かを監視する(ステップS16)。そして、認証装置50は、その座席のユーザが一定時間離席すると、会場画像からかかるユーザの顔画像を抽出し、かかる顔画像と座席位置とを警備装置60に通知する(ステップS17)。なお、認証装置50は、照合処理が失敗するとすぐに、かかるユーザの顔画像を警備装置60に通知してもよい。警備装置60は、受信した顔画像を保存しておくこともでき、不正入場の履歴として蓄積することもできる。 On the other hand, if the set of facial features and seat information extracted from the venue image does not match the information stored in the data server 20, it is determined that the matching has failed (step S15: No). In this case, the authentication device 50 monitors the user at that seat position because the user may be an unauthorized person. For example, the authentication device 50 monitors whether the user located at the seat leaves the venue based on the venue image periodically transmitted from the in-venue camera 40 (step S16). Then, when the user of the seat leaves the seat for a certain period of time, the authentication device 50 extracts the user's face image from the venue image, and notifies the security device 60 of the face image and the seat position (step S17). Note that the authentication device 50 may notify the security device 60 of the user's face image as soon as the verification process fails. The security device 60 can also save the received facial images and can also accumulate them as a history of unauthorized entry.

このようにすることで、警備員は、スマートフォンなどの警備装置60で上述した不正入場の可能性のあるユーザの顔画像と座席位置を知ることができるため、かかるユーザに迅速かつ適切に対応することができる。なお、警備員は、即座に不正入場のユーザを取り押さえに行くことも可能であるが、座席の間違えや、イベント中の混乱を回避するために、ユーザが離席したタイミングが通知されることで、離席に併せて通路などの離れた場所で取り押さえることも可能である。例えば、警備員は、不正入場の可能性があるユーザが逃亡する前にその会場の出入り口につながる通路へ駆けつけることが可能である。そして、出入り口から出てきたユーザの顔を、スマートフォンである警備装置60に送られてきた顔と比較し、対象の不正入場者であると判断できれば警告し、場合によっては拘束する。 By doing so, the security guard can know the face image and seat position of the user who may have entered the site illegally using the security device 60 such as a smartphone, so that the security guard can quickly and appropriately respond to the user. be able to. Although security guards can immediately arrest users who have entered the event illegally, in order to avoid misplaced seats and confusion during the event, security guards will be notified when users leave their seats. It is also possible to arrest someone in a remote location, such as an aisle, when they leave their seats. For example, a security guard can rush to a hallway leading to an entrance/exit of a venue before a potentially fraudulent user escapes. Then, the face of the user coming out of the doorway is compared with the face sent to the security device 60, which is a smartphone, and if it is determined that the user is an unauthorized person, a warning is given, and in some cases, the user is detained.

なお、1人のユーザが複数のチケットを購入している場合には、上述したように、1人のユーザの顔特徴量に複数の座席情報が関連付けられていることとなる。このような場合に、認証装置50は、照合処理に成功した1人のユーザの顔特徴量が複数の座席情報と関連付けられていることがわかるため、これら座席情報の座席位置に位置する人物については、照合が成功したこととし、上述したように監視や警備装置60への通知は行わない。 Note that if one user has purchased a plurality of tickets, as described above, a plurality of pieces of seat information are associated with one user's facial feature amount. In such a case, the authentication device 50 knows that the facial feature amount of one user who has successfully verified the verification process is associated with a plurality of seat information, so the authentication device 50 can identify the person who is located at the seat position of these seat information. In this case, it is assumed that the verification is successful, and as described above, neither monitoring nor notification to the security device 60 is performed.

以上のように、本発明によると、まず、イベント会場における入場者であるユーザの確認を、会場の出入り口ではなく、会場内のカメラで撮影して行うため、出入り口における混雑を回避することができる。また、出入り口に常に係員を待機させる必要がないため、係員などの人員コストの低減を図ることができる。さらには、ユーザの確認を行うための照合データとなる人物の顔特徴量と座席情報との登録をデータサーバ20にて自動的に行っているため、人物の事前登録の手間も低減でき、事前登録に関するコスト等も削減することができる。 As described above, according to the present invention, first of all, users who are entering the event venue are confirmed by photographing them with a camera inside the venue rather than at the entrance/exit of the venue, so it is possible to avoid crowding at the entrance/exit. . Furthermore, since it is not necessary to have an attendant always on standby at the entrance/exit, the cost of personnel such as attendants can be reduced. Furthermore, since the data server 20 automatically registers a person's facial features and seat information, which serve as verification data for user verification, the effort required to pre-register a person can be reduced. Costs related to registration can also be reduced.

<実施形態2>
次に、本発明の第2の実施形態を、図5乃至図6を参照して説明する。図5は、情報処理システムの全体構成を示す概略図であり、図6は、情報処理システムの構成を示すブロック図である。
<Embodiment 2>
Next, a second embodiment of the present invention will be described with reference to FIGS. 5 and 6. FIG. 5 is a schematic diagram showing the overall configuration of the information processing system, and FIG. 6 is a block diagram showing the configuration of the information processing system.

本実施形態における情報処理システムは、図5及び図6に示すように、上述した実施形態1におけるものと同様の構成であるが、会場4に入場しているユーザUcに対する決済処理を行う点で異なる。以下、主に実施形態1とは異なる構成について詳述する。 As shown in FIGS. 5 and 6, the information processing system in this embodiment has the same configuration as that in the first embodiment described above, except that it performs payment processing for users Uc who have entered the venue 4. different. Hereinafter, mainly the configuration different from the first embodiment will be explained in detail.

まず、本実施形態では、図5に示すように、イベントを行う会場4が複数設定されており、各会場4にそれぞれ会場内カメラ40が設置されている。そして、各会場内カメラ40は、認証装置50とネットワークを介して接続されており、各会場4で撮影した会場画像を一定の時間間隔で認証装置50に送信する。 First, in this embodiment, as shown in FIG. 5, a plurality of venues 4 for holding events are set, and an in-venue camera 40 is installed in each venue 4. Each venue camera 40 is connected to the authentication device 50 via a network, and transmits venue images taken at each venue 4 to the authentication device 50 at regular time intervals.

そして、本実施形態におけるデータサーバ20のデータ関連付け部22は、ユーザの顔特徴量及び座席情報に、当該ユーザにて入力されたクレジットカード番号などの決済情報を関連付けて記憶している。なお、ユーザの決済情報は、ユーザUaが発券機10でチケットを購入する際に入力されたり、ユーザUbがインターネットを介してユーザ端末30でチケットを購入する際に入力されたりして、データサーバ20にて受け付けられて記憶される。 The data association unit 22 of the data server 20 in this embodiment stores the facial feature amount and seat information of the user in association with payment information such as a credit card number input by the user. Note that the user's payment information is input when the user Ua purchases a ticket with the ticket issuing machine 10, or when the user Ub purchases a ticket with the user terminal 30 via the Internet, and is sent to the data server. 20 and stored.

そして、本実施形態における認証装置50は、図6に示すように、実施形態1の構成に加え、演算装置がプログラムを実行することで構築された決済部55を備えている。決済部55(決済手段)は、上述した照合部52により、会場画像内から抽出したユーザUcの顔特徴量と座席情報との組がデータサーバ20に記憶されていると判断して照合処理が成功すると、データサーバ20に記憶されている決済情報に基づいてチケットの決済処理を行う。つまり、会場画像内から抽出したユーザUcの顔特徴量と関連付けて記憶されているデータサーバ20内の決済情報を読み出して、かかる決済情報を用いて決済処理を行う。このとき、決済部55は、データサーバ20に登録されているユーザのメールアドレスや課金用アプリなどのアドレス情報へ決済の旨を通知する。なお、決済部55は、上記照合処理に失敗した場合には、その座席に関連付けて登録されているユーザに通知し、請求拒絶を可能とし、一定期間請求拒絶の連絡がなければ、そのまま請求・課金してもよい。 As shown in FIG. 6, the authentication device 50 in this embodiment includes, in addition to the configuration of the first embodiment, a payment unit 55 constructed by a calculation device executing a program. The payment unit 55 (payment means) determines that the combination of the facial feature amount of the user Uc extracted from the venue image and the seat information is stored in the data server 20 by the verification unit 52 described above, and performs the verification process. If successful, the ticket payment process is performed based on the payment information stored in the data server 20. That is, the payment information stored in the data server 20 in association with the facial feature amount of the user Uc extracted from the venue image is read out, and the payment processing is performed using this payment information. At this time, the payment unit 55 notifies the address information of the user registered in the data server 20, such as the user's e-mail address and the billing application, of the payment. If the above-mentioned verification process fails, the payment unit 55 notifies the user registered in association with the seat and allows the user to reject the claim, and if there is no notification of rejection for a certain period of time, the payment unit 55 will continue to process the claim. You may charge a fee.

このようにすることで、本発明では、実際にイベント会場に入場したユーザに対してのみチケット料金の徴収を行うことができる。その結果、各会場の出入り口で係員等によるチケットのチェックや料金徴収などを行うことを省略することができる。 By doing so, according to the present invention, ticket fees can be collected only from users who actually enter the event venue. As a result, it is possible to omit the need for staff members to check tickets and collect fees at the entrances and exits of each venue.

<実施形態3>
次に、本発明の第3の実施形態を、図7を参照して説明する。図7は、実施形態3における情報処理システムの構成を示すブロック図である。なお、本実施形態では、実施形態1及び実施形態2で説明した情報処理システムの構成の概略を示している。
<Embodiment 3>
Next, a third embodiment of the present invention will be described with reference to FIG. FIG. 7 is a block diagram showing the configuration of an information processing system in the third embodiment. Note that this embodiment shows an outline of the configuration of the information processing system described in the first and second embodiments.

図7に示すように、本実施形態おける情報処理システムは、
撮影手段が装備されたチケット発券装置200と、所定の会場内を撮影する会場撮影装置300と、チケット発券装置及び会場撮影装置にネットワークを介して接続された情報処理装置100と、を備える。
そして、情報処理装置100は、
チケット発券装置200から、チケット発券時に撮影手段にて撮影された当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段110と、
会場撮影装置300から、発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段120と、
を備える。
As shown in FIG. 7, the information processing system in this embodiment is
The venue includes a ticket issuing device 200 equipped with a photographing means, a venue photographing device 300 for photographing the inside of a predetermined venue, and an information processing device 100 connected to the ticket issuing device and the venue photographing device via a network.
Then, the information processing device 100
From the ticket issuing device 200, an image of the person who issued the ticket is obtained, taken by a photographing means at the time of ticket issuance, and authentication information based on the image of the person and seat information specifying the seat of the issued ticket are obtained. a memory processing means 110 for storing in association with;
A venue image taken of the inside of the venue where the seat of the issued ticket is installed is obtained from the venue photographing device 300, and based on the venue image, authentication information of the person in the venue image and the seat where the person is located are obtained. A verification means 120 that extracts a pair with seat information and performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat forming the pair are stored in association with each other;
Equipped with

また、本実施形態では、図7に示す情報処理システムからチケット発券装置200と会場撮影装置300を取り除いてもよい。 Furthermore, in this embodiment, the ticket issuing device 200 and venue photographing device 300 may be removed from the information processing system shown in FIG.

なお、上述した情報処理装置100が備える記憶処理手段110と照合手段120とは、演算装置がプログラムを実行することで構築されるものであってもよく、電子回路で構築されるものであってもよい。 Note that the storage processing means 110 and the collation means 120 included in the information processing device 100 described above may be constructed by an arithmetic device executing a program, or may be constructed by an electronic circuit. Good too.

そして、上記構成の情報処理装置100は、
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶し、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、
当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う、
という処理を行うよう作動する。
Then, the information processing device 100 having the above configuration,
At the time of ticket issuance, an image of the person who issued the ticket is obtained, and authentication information based on the image of the person and seat information identifying the seat of the issued ticket are stored in association with each other;
Obtain an image of the venue where the seats for the issued tickets are located,
Based on the venue image, extract a set of the authentication information of the person in the venue image and the seat information of the seat where the person is located, and extract the authentication information of the extracted person and the seat information of the seat in the set. Performs verification processing to see if it is stored in association.
It operates to perform the following processing.

上述した情報処理システムあるいは情報処理装置100によると、まず、イベント会場における入場者であるユーザの確認を、会場の出入り口ではなく、会場内のカメラで撮影して行うため、出入り口における混雑を回避することができる。また、出入り口に常に係員を待機させる必要がないため、係員などの人員コストの低減を図ることができる。さらには、ユーザの確認を行うための照合データとなる人物の顔特徴量と座席情報との登録を自動で行っているため、人物の事前登録の手間も低減でき、事前登録に関するコスト等も削減することができる。 According to the above-described information processing system or information processing device 100, first, users who are entering the event venue are confirmed by taking pictures with a camera inside the venue rather than at the entrance/exit of the venue, thereby avoiding congestion at the entrance/exit. be able to. Furthermore, since it is not necessary to have an attendant always on standby at the entrance/exit, the cost of personnel such as attendants can be reduced. Furthermore, since the facial features of a person and seat information, which serve as matching data for user verification, are automatically registered, the effort required to pre-register a person can be reduced, and the cost associated with pre-registration can also be reduced. can do.

<付記>
上記実施形態の一部又は全部は、以下の付記のようにも記載されうる。以下、本発明における情報処理装置、情報処理システム、プログラム、情報処理方法の構成の概略を説明する。但し、本発明は、以下の構成に限定されない。
<Additional notes>
Part or all of the above embodiments may also be described as in the following additional notes. Hereinafter, the outline of the configuration of the information processing device, information processing system, program, and information processing method according to the present invention will be explained. However, the present invention is not limited to the following configuration.

(付記1)
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段と、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段と、
を備えた情報処理装置。
(Additional note 1)
A memory processing means that, when issuing a ticket, acquires an image of the person who issued the ticket, and stores authentication information based on the image of the person in association with seat information that specifies the seat of the issued ticket;
A venue image taken of the inside of the venue where the seat of the issued ticket is located is acquired, and based on the venue image, a set of authentication information of the person in the venue image and seat information of the seat where the person is located is determined. a verification means that performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat are stored in association with each other;
An information processing device equipped with

(付記2)
付記1に記載の情報処理装置であって、
前記記憶処理手段は、チケット発券場所におけるチケット発券時に、当該チケット発券場所に設置された撮影手段にて撮影された人物の画像を取得して、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する、
情報処理装置。
(Additional note 2)
The information processing device according to supplementary note 1,
The storage processing means acquires an image of a person photographed by a photographing means installed at the ticket issuing place when issuing a ticket at the ticket issuing place, and stores authentication information based on the image of the person and the issued ticket. associate and memorize seat information that specifies the seat of
Information processing device.

(付記3)
付記1又は2に記載の情報処理装置であって、
前記記憶処理手段は、ネットワークを介して接続された情報処理端末に対するチケット発券処理を行うと共に、当該チケット発券時に、前記情報処理端末にて撮影された人物の画像を取得して、当該人物の画像に基づく認証情報と、販売したチケットの座席を特定する座席情報と、を関連付けて記憶する、
情報処理装置。
(Additional note 3)
The information processing device according to supplementary note 1 or 2,
The storage processing means performs ticket issuing processing for an information processing terminal connected via a network, and at the time of issuing the ticket, acquires an image of a person photographed by the information processing terminal, and stores an image of the person. associate and store authentication information based on , and seat information that identifies the seat of the ticket sold;
Information processing device.

(付記4)
付記1乃至3のいずれかに記載の情報処理装置であって、
前記記憶処理手段は、複数のチケットを発券した人物の画像を取得し、当該人物の画像に基づく前記認証情報と、発券した複数のチケットのそれぞれの座席を特定する各前記座席情報と、をそれぞれ関連付けて記憶する、
情報処理装置。
(Additional note 4)
The information processing device according to any one of Supplementary Notes 1 to 3,
The storage processing means obtains an image of a person who has issued a plurality of tickets, and stores the authentication information based on the image of the person and the seat information that specifies each seat of the plurality of tickets issued. associate and remember
Information processing device.

(付記5)
付記1乃至4のいずれかに記載の情報処理装置であって、
前記照合処理が失敗した場合に、前記会場画像に基づいて前記照合処理が失敗した座席に位置する人物の監視処理を行う監視手段を備えた、
情報処理装置。
(Appendix 5)
The information processing device according to any one of Supplementary Notes 1 to 4,
comprising a monitoring means for performing monitoring processing of a person located at a seat where the matching process has failed based on the venue image when the matching process has failed;
Information processing device.

(付記6)
付記5に記載の情報処理装置であって、
前記監視手段は、前記照合処理が失敗した人物の画像に基づく人物情報と、当該人物が位置する座席の座席情報と、を予め設定された通知先に通知する、
情報処理装置。
(Appendix 6)
The information processing device according to appendix 5,
The monitoring means notifies a preset notification destination of person information based on the image of the person for whom the matching process has failed and seat information of the seat where the person is located.
Information processing device.

(付記7)
付記1乃至6のいずれかに記載の情報処理装置であって、
前記記憶処理手段は、チケットを発券した人物の決済情報の入力を受け付けて、当該人物の画像に基づく前記認証情報に前記決済情報を関連付けて記憶し、
前記会場画像に基づいて当該会場画像内から抽出した人物の認証情報が記憶されている場合に、当該認証情報に関連付けて記憶されている前記決済情報に基づいてチケットの決済処理を行う決済手段を備えた、
情報処理装置。
(Appendix 7)
The information processing device according to any one of Supplementary Notes 1 to 6,
The storage processing means receives input of payment information of the person who issued the ticket, and stores the payment information in association with the authentication information based on the image of the person;
When authentication information of a person extracted from the venue image based on the venue image is stored, a payment method that performs ticket payment processing based on the payment information stored in association with the authentication information. prepared,
Information processing device.

(付記8)
撮影手段が装備されたチケット発券装置と、所定の会場内を撮影する会場撮影装置と、前記チケット発券装置及び前記会場撮影装置にネットワークを介して接続された情報処理装置と、を備え、
前記情報処理装置は、
前記チケット発券装置から、チケット発券時に前記撮影手段にて撮影された当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段と、
前記会場撮影装置から、発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段と、
を備えた、
情報処理システム。
(Appendix 8)
A ticket issuing device equipped with a photographing means, a venue photographing device for photographing the inside of a predetermined venue, and an information processing device connected to the ticket issuing device and the venue photographing device via a network,
The information processing device includes:
From the ticket issuing device, an image of the person who issued the ticket is obtained, taken by the photographing means at the time of ticket issuance, and authentication information based on the image of the person and seat information identifying the seat of the issued ticket are obtained. , a memory processing means for storing in association with each other;
A venue image taken of the inside of the venue where the seat of the issued ticket is located is obtained from the venue photography device, and based on the venue image, authentication information of the person in the venue image and the seat where the person is located are obtained. A verification means that extracts a pair with seat information and performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat are stored in association with each other in the pair;
Equipped with
Information processing system.

(付記9)
情報処理装置に、
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する記憶処理手段と、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う照合手段と、
を実現させるためのプログラム。
(Appendix 9)
In the information processing device,
A memory processing means that, when issuing a ticket, acquires an image of the person who issued the ticket, and stores authentication information based on the image of the person in association with seat information that specifies the seat of the issued ticket;
A venue image taken of the inside of the venue where the seat of the issued ticket is located is acquired, and based on the venue image, a set of authentication information of the person in the venue image and seat information of the seat where the person is located is determined. a verification means that performs a verification process to determine whether the authentication information of the extracted person and the seat information of the seat are stored in association with each other;
A program to make this happen.

(付記10)
チケット発券時に、当該チケットを発券した人物の画像を取得し、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶し、
発券したチケットの座席が設置された会場内を撮影した会場画像を取得し、
当該会場画像に基づいて、当該会場画像内の人物の認証情報と当該人物が位置する座席の座席情報との組を抽出すると共に、当該組となる抽出した人物の認証情報と座席の座席情報とが関連付けて記憶されているか照合処理を行う、
情報処理方法。
(Appendix 10)
At the time of ticket issuance, an image of the person who issued the ticket is obtained, and authentication information based on the image of the person and seat information identifying the seat of the issued ticket are stored in association with each other;
Obtain an image of the venue where the seats for the issued tickets are located,
Based on the venue image, extract a set of the authentication information of the person in the venue image and the seat information of the seat where the person is located, and extract the authentication information of the extracted person and the seat information of the seat in the set. Performs verification processing to see if it is stored in association.
Information processing method.

(付記11)
付記10に記載の情報処理方法であって、
チケット発券場所におけるチケット発券時に、当該チケット発券場所に設置された撮影手段にて撮影された人物の画像を取得して、当該人物の画像に基づく認証情報と、発券したチケットの座席を特定する座席情報と、を関連付けて記憶する、
情報処理方法。
(Appendix 11)
The information processing method according to appendix 10,
At the time of ticket issuance at a ticket issuing location, an image of a person is acquired using a photographing means installed at the ticket issuing location, and authentication information based on the image of the person is obtained, as well as a seat that identifies the seat of the issued ticket. associate and remember information,
Information processing method.

(付記12)
付記10又は11に記載の情報処理方法であって、
ネットワークを介して接続された情報処理端末に対するチケット発券処理を行うと共に、当該チケット発券時に、前記情報処理端末にて撮影された人物の画像を取得して、当該人物の画像に基づく認証情報と、販売したチケットの座席を特定する座席情報と、を関連付けて記憶する、
情報処理方法。
(Appendix 12)
The information processing method according to appendix 10 or 11,
Performing ticket issuance processing for an information processing terminal connected via a network, and at the time of ticket issuance, acquiring an image of a person photographed by the information processing terminal, and providing authentication information based on the image of the person; Seat information that specifies the seat of the ticket sold is associated with and stored.
Information processing method.

(付記13)
付記10乃至12のいずれかに記載の情報処理方法であって、
前記照合処理が失敗した場合に、前記会場画像に基づいて前記照合処理が失敗した座席に位置する人物の監視処理を行う、
情報処理方法。
(Appendix 13)
The information processing method according to any one of Supplementary Notes 10 to 12,
If the matching process fails, performing monitoring processing for a person located at the seat where the matching process failed based on the venue image.
Information processing method.

(付記14)
付記13に記載の情報処理方法であって、
前記監視処理は、前記照合処理が失敗した人物の画像に基づく人物情報と、当該人物が位置する座席の座席情報と、を予め設定された通知先に通知する、
情報処理装置。
(Appendix 14)
The information processing method according to appendix 13,
The monitoring process notifies a preset notification destination of person information based on the image of the person for whom the matching process has failed and seat information of the seat where the person is located.
Information processing device.

(付記15)
付記10乃至14のいずれかに記載の情報処理方法であって、
チケットを発券した人物の決済情報の入力を受け付けて、当該人物の画像に基づく前記認証情報に前記決済情報を関連付けて記憶し、
前記会場画像に基づいて当該会場画像内から抽出した人物の認証情報が記憶されている場合に、当該認証情報に関連付けて記憶されている前記決済情報に基づいてチケットの決済処理を行う、
情報処理方法。
(Appendix 15)
The information processing method according to any one of appendices 10 to 14,
Accepting input of payment information from a person who has issued a ticket, and storing the payment information in association with the authentication information based on the image of the person;
When authentication information of a person extracted from the venue image based on the venue image is stored, performing a ticket payment process based on the payment information stored in association with the authentication information.
Information processing method.

なお、上述したプログラムは、記憶装置に記憶されていたり、コンピュータが読み取り可能な記録媒体に記録されたりしている。例えば、記録媒体は、フレキシブルディスク、光ディスク、光磁気ディスク、及び、半導体メモリ等の可搬性を有する媒体である。 Note that the above-mentioned program is stored in a storage device or recorded in a computer-readable recording medium. For example, the recording medium is a portable medium such as a flexible disk, an optical disk, a magneto-optical disk, and a semiconductor memory.

以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。 Although the present invention has been described above with reference to the above-described embodiments, the present invention is not limited to the above-described embodiments. The configuration and details of the present invention can be modified in various ways within the scope of the present invention by those skilled in the art.

1 チケットボックス
10 発券機
11 カメラ
12 チケットデータ送信部
20 データサーバ
21 データ受信部
22 データ関連付け部
23 ユーザデータ記憶部
3 ユーザ宅
30 ユーザ端末
4 会場
40 会場内カメラ
50 認証装置
51 画像処理部
52 照合部
53 監視部
55 決済部
60 警備装置
61 通知受信部
100 情報処理装置
110 記憶処理手段
120 照合手段
200 チケット発券装置
300 会場撮影装置
1 Ticket box 10 Ticket issuing machine 11 Camera 12 Ticket data transmitting section 20 Data server 21 Data receiving section 22 Data association section 23 User data storage section 3 User home 30 User terminal 4 Venue 40 Venue camera 50 Authentication device 51 Image processing section 52 Verification Section 53 Monitoring section 55 Settlement section 60 Security device 61 Notification receiving section 100 Information processing device 110 Storage processing means 120 Collation means 200 Ticket issuing device 300 Venue photographing device

Claims (4)

チケット発券時に、ユーザ端末から送信されたユーザの顔画像と、チケットの座席の位置を特定する座席情報と、を対応付けて登録する登録部と、
会場内を撮影した会場画像を取得する取得部と、
前記会場画像から抽出された人物の顔画像と、チケット発券時に登録された顔画像と、の照合結果に基づいて、当該人物が位置する座席の位置を特定する座席情報と前記登録された顔画像に対応付けられた座席情報とが異なる場合に、当該人物の画像に基づく人物情報と当該人物が位置する座席の位置を特定する座席情報とを予め設定された通知先に通知する通知部と、
を備えた情報処理装置。
a registration unit that registers a user's face image transmitted from a user terminal in association with seat information that specifies the position of the seat on the ticket at the time of ticket issuance;
an acquisition unit that acquires a venue image taken inside the venue;
Seat information that identifies the position of the seat where the person is located based on a comparison result between the person's face image extracted from the venue image and the face image registered at the time of ticket issuance, and the registered face image . a notification unit that notifies a preset notification destination of person information based on the image of the person and seat information that specifies the position of the seat where the person is located when the seat information associated with the person is different;
An information processing device equipped with
請求項1に記載の情報処理装置であって、
前記通知部は、前記人物が座席から離席したタイミングで、当該人物の前記人物情報と当該人物が位置する座席の座席情報とを前記通知先に通知する、
情報処理装置。
The information processing device according to claim 1,
The notification unit notifies the notification destination of the person information of the person and the seat information of the seat where the person is located at the timing when the person leaves the seat.
Information processing device.
チケット発券時に、ユーザ端末から送信されたユーザの顔画像と、チケットの座席の位置を特定する座席情報と、を対応付けて登録し、
会場内を撮影した会場画像を取得し、
前記会場画像から抽出された人物の顔画像と、チケット発券時に登録された顔画像と、の照合結果に基づいて、当該人物が位置する座席の位置を特定する座席情報と前記登録された顔画像に対応付けられた座席情報とが異なる場合に、当該人物の画像に基づく人物情報と当該人物が位置する座席の位置を特定する座席情報とを予め設定された通知先に通知する、
情報処理方法。
At the time of ticket issuance, the user's facial image sent from the user terminal and seat information that specifies the location of the seat on the ticket are associated and registered,
Obtain venue images taken of the inside of the venue,
Seat information that identifies the position of the seat where the person is located based on a comparison result between the person's face image extracted from the venue image and the face image registered at the time of ticket issuance, and the registered face image . If the seat information associated with the person is different, the person information based on the image of the person and the seat information specifying the position of the seat where the person is located are notified to a preset notification destination;
Information processing method.
チケット発券時に、ユーザ端末から送信されたユーザの顔画像と、チケットの座席の位置を特定する座席情報と、を対応付けて登録し、
会場内を撮影した会場画像を取得し、
前記会場画像から抽出された人物の顔画像と、チケット発券時に登録された顔画像と、の照合結果に基づいて、当該人物が位置する座席の位置を特定する座席情報と前記登録された顔画像に対応付けられた座席情報とが異なる場合に、当該人物の画像に基づく人物情報と当該人物が位置する座席の位置を特定する座席情報とを予め設定された通知先に通知する、
処理をコンピュータに実行させるためのプログラム。
At the time of ticket issuance, the user's facial image sent from the user terminal and seat information that specifies the location of the seat on the ticket are associated and registered,
Obtain venue images taken of the inside of the venue,
Seat information that identifies the position of the seat where the person is located based on a comparison result between the person's face image extracted from the venue image and the face image registered at the time of ticket issuance, and the registered face image . If the seat information associated with the person is different, the person information based on the image of the person and the seat information specifying the position of the seat where the person is located are notified to a preset notification destination;
A program that causes a computer to perform a process.
JP2022071421A 2018-02-22 2022-04-25 information processing equipment Active JP7400862B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2022071421A JP7400862B2 (en) 2018-02-22 2022-04-25 information processing equipment

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018029590A JP7075037B2 (en) 2018-02-22 2018-02-22 Information processing equipment
JP2022071421A JP7400862B2 (en) 2018-02-22 2022-04-25 information processing equipment

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2018029590A Division JP7075037B2 (en) 2018-02-22 2018-02-22 Information processing equipment

Publications (2)

Publication Number Publication Date
JP2022090082A JP2022090082A (en) 2022-06-16
JP7400862B2 true JP7400862B2 (en) 2023-12-19

Family

ID=67773852

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2018029590A Active JP7075037B2 (en) 2018-02-22 2018-02-22 Information processing equipment
JP2022071421A Active JP7400862B2 (en) 2018-02-22 2022-04-25 information processing equipment

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2018029590A Active JP7075037B2 (en) 2018-02-22 2018-02-22 Information processing equipment

Country Status (1)

Country Link
JP (2) JP7075037B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021077017A (en) * 2019-11-07 2021-05-20 グローリー株式会社 Payment state presentation system
JP7622491B2 (en) 2021-03-19 2025-01-28 日本電気株式会社 Inspection system and inspection method
JP7622492B2 (en) 2021-03-19 2025-01-28 日本電気株式会社 Inspection system and inspection method
JP7098033B1 (en) * 2021-08-06 2022-07-08 playground株式会社 Programs, methods, and systems

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004280477A (en) 2003-03-17 2004-10-07 Casio Comput Co Ltd Facility use management system and program
JP2007058763A (en) 2005-08-26 2007-03-08 Toshiba Corp Admission management system and admission management method
JP2008250830A (en) 2007-03-30 2008-10-16 Toshiba Corp Attendance confirmation system and attendance confirmation method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004280477A (en) 2003-03-17 2004-10-07 Casio Comput Co Ltd Facility use management system and program
JP2007058763A (en) 2005-08-26 2007-03-08 Toshiba Corp Admission management system and admission management method
JP2008250830A (en) 2007-03-30 2008-10-16 Toshiba Corp Attendance confirmation system and attendance confirmation method

Also Published As

Publication number Publication date
JP2022090082A (en) 2022-06-16
JP7075037B2 (en) 2022-05-25
JP2019144933A (en) 2019-08-29

Similar Documents

Publication Publication Date Title
JP7400862B2 (en) information processing equipment
JP2022040245A (en) Face collation system, face collation device, face collation method, and recording medium
JP2021015627A (en) Face collation system, face collation method, and program
CN114267112B (en) Access control device, access control method and storage medium
US20210006558A1 (en) Method, apparatus and system for performing authentication using face recognition
JP7666675B2 (en) Stay management device, stay management method, and program
JP7775936B2 (en) Information processing device, information processing method, and recording medium
JP6557897B1 (en) Information processing apparatus, determination method, and program
JP2009037573A (en) Security management system for data center
JP2023157932A (en) Face recognition registration device and face recognition registration method
JP4032908B2 (en) Visitor management system and program
JP2016126414A (en) Face matching system and entertainment facility service providing method
JP2019102024A (en) Event hall face registration system
KR20200060577A (en) Theater&#39;s Ticket Reservation and Ticket Ckeckless System by Using Face Certification and Method thereof
US20230095529A1 (en) Visit assistance apparatus, visit assistance method, and non-transitory computerreadable medium storing program
JP2020140732A (en) Authentication system, server, and authentication program
WO2019163462A1 (en) Visitor registration system, entry/exit management system, visitor registration device, and visitor registration method
JP7767234B2 (en) Program, method, and system
CN112562158A (en) Identity information confirmation system and method
JP2023173267A (en) Door unlocking system, terminal device, equipment control system, and door unlocking method
JP7316982B2 (en) Face authentication server and information processing method
JP7028145B2 (en) Station affairs system, entrance station identification device, entry station identification device, automatic ticket gate, station identification method, and program
JP2007257497A (en) Entrance management system, data processor, entrance management method and entrance management program
US20200410502A1 (en) System having imaging apparatus to recognize users and process fare charging, control method of system, and storage medium
JP2021114252A (en) In-vehicle person specification device, in-vehicle person specification system and in-vehicle person specification method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230627

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230810

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20231107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20231120

R151 Written notification of patent or utility model registration

Ref document number: 7400862

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151