JP6953756B2

JP6953756B2 - 決済処理装置、方法およびプログラム

Info

Publication number: JP6953756B2
Application number: JP2017057111A
Authority: JP
Inventors: 誉典江原; 瑞人関根; 有香菅野; 正人北田; 彩加後藤
Original assignee: NEC Corp
Current assignee: NEC Corp
Priority date: 2017-03-23
Filing date: 2017-03-23
Publication date: 2021-10-27
Anticipated expiration: 2037-03-23
Also published as: JP2018160107A

Description

本発明は、顧客が取得した商品の決済を行う装置、方法およびプログラムに関する。

従来、顧客は棚から購入したい商品を取った後にＰＯＳ（ＰｏｉｎｔＯｆＳａｌｅｓ）端末（レジスタともいう）まで移動し、店員が商品をＰＯＳ端末に読み込ませて決済を行う。また、顧客自身が購入したい商品をＰＯＳ端末に読み込ませる場合もある。いずれの場合でも、商品を棚から取得するステップおよびＰＯＳ端末に商品を読み込ませるステップは独立していることが一般的である。

顧客が複数の商品を購入する場合には、店員がＰＯＳ端末に全ての商品を読み込ませる際に長い時間が掛かる。そのため、店舗においてはＰＯＳ端末における決済がボトルネックになることが多い。顧客の待ち時間を低減するために十分な数の店員およびＰＯＳ端末を用意すると、店員およびＰＯＳ端末を配置するために広い空間が必要であり、また店員を雇うためおよびＰＯＳ端末を導入するために大きなコストが掛かる。

商品の決済を効率化するための技術として、特許文献１には、個別周波数を発信する登録カードによって顧客を特定し、該顧客が商品を棚から抜き取る際に該商品の販売データを該登録カードに登録する技術が記載されている。店員は顧客の登録カードをＰＯＳ端末に読み込ませることによって、１つ１つの商品をＰＯＳ端末に読み込ませることなく、該顧客が取得した全ての商品の決済を行うことができる。

特開平８−１９０６７２号公報

しかしながら、特許文献１に記載の技術では、登録カードによって識別される顧客（すなわち登録された顧客）が商品を棚から取ることを前提としているため、登録されていない顧客の扱いは考慮されていない。そのため、登録された顧客および登録されていない顧客が混在する状況で、登録されていない顧客が棚から商品を取ると、該商品の近くにいる登録された顧客に対して意図しない決済を行わせる可能性がある。

本発明は、上述の問題に鑑みて行われたものであって、登録された顧客および登録されていない顧客が混在する店舗において、登録された顧客が、登録されていない顧客によって取得された商品を意図せず決済することを抑制できる決済処理装置、方法およびプログラムを提供する。

本発明の第１の態様は、決済処理装置であって、登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付け部と、前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する判定部と、前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する追跡部と、前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う通知部と、前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う決済部と、を備える。

本発明の第２の態様は、決済処理装置であって、登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付け部と、前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する判定部と、前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する追跡部と、前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客に対して、前記商品の決済を行う決済部と、を備える。

本発明の第３の態様は、決済処理装置によって実行される決済処理方法であって、登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付ける工程と、前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する工程と、前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する工程と、前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う工程と、前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う工程と、を含む。

本発明の第４の態様は、決済処理プログラムであって、コンピュータに、登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付ける工程と、前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する工程と、前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する工程と、前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う工程と、前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う工程と、を実行させる。

本発明によれば、登録された顧客が、登録されていない顧客によって取得された商品を意図せず決済することを抑制できる。

第１の実施形態に係る決済処理システムの模式図である。第１の実施形態に係る決済処理装置のブロック図である。第１の実施形態に係る決済処理方法の模式図である。第１の実施形態に係る決済処理方法の模式図である。第１の実施形態に係る決済処理方法の模式図である。第１の実施形態に係る決済処理方法の模式図である。第１の実施形態に係る携帯端末上に表示される通知画面の模式図である。第１の実施形態に係る決済処理装置の例示的な機器構成を示す概略構成図である。第１の実施形態に係る決済処理方法のフローチャートを示す図である。第１の実施形態に係る決済処理方法のフローチャートを示す図である。第２の実施形態に係る決済処理装置のブロック図である。第２の実施形態に係る決済処理方法（特に顧客登録処理）の模式図である。各実施形態に係る決済処理装置の概略構成図である。

以下、図面を参照して、本発明の実施形態を説明するが、本発明は本実施形態に限定されるものではない。なお、以下で説明する図面で、同機能を有するものは同一符号を付け、その繰り返しの説明は省略することもある。

（第１の実施形態）
図１は、本実施形態に係る決済処理システム１の模式図である。決済処理システム１は、決済処理を行う決済処理装置１００と、顧客および商品の少なくとも一方の画像を取得するカメラ１０と、顧客の識別情報を読み取るリーダ２０と、顧客および店員の少なくとも一方に所持される携帯端末３０と、を含む。決済処理装置１００、カメラ１０、リーダ２０および携帯端末３０は、ローカルエリアネットワーク、インターネット等の任意のネットワーク４０を介して、有線接続および無線接続の少なくとも一方によって接続される。決済処理システム１は、商品を読み取って決済を行う従来のＰＯＳ端末を含んでもよく、その他のサーバ、端末等の機器を含んでもよい。

カメラ１０は、店舗内の複数の場所に設けられ、顧客および商品の少なくとも一方を撮像する撮像装置である。カメラ１０は、例えばＣＣＤ（ＣｈａｒｇｅＣｏｕｐｌｅｄＤｅｖｉｃｅ）センサ、ＣＭＯＳ（ＣｏｍｐｌｅｍｅｎｔａｒｙＭｅｔａｌＯｘｉｄｅＳｅｍｉｃｏｎｄｕｃｔｏｒ）センサ等のイメージセンサを含む。カメラ１０は、撮像した内容を画像データとして決済処理装置１００に送信する。カメラ１０は、決済処理装置１００に直接接続されてもよく、ネットワーク４０を介して接続されてもよい。

リーダ２０は、店舗の出入口に設置されたゲートに設けられ、顧客が有するカード等から顧客を特定する識別情報を読み取る読取装置である。リーダ２０は、例えば顧客が有するカードに記載された一次元コード、二次元コード等のコードによって表される識別情報を読み取るＣＣＤセンサ、ＣＭＯＳセンサ等のイメージセンサを含んでもよく、顧客が有するカードに含まれる磁気によって示される識別情報を読み取る磁気センサを含んでもよく、あるいは顧客が有するカードに含まれるアンテナからＮＦＣ（ＮｅａｒＦｉｅｌｄＣｏｍｍｕｎｉｃａｔｉｏｎ）等の近距離無線通信によって識別情報を読み取る近距離無線通信装置を含んでもよい。また、リーダ２０は、カードではなく、顧客が有する携帯端末３０上に表示されたコードを読み取ること、あるいは携帯端末３０からの近距離無線通信を受信することによって識別情報を読み取ってもよい。リーダ２０は、読み取った識別情報をデータとして決済処理装置１００に送信する。リーダ２０は、決済処理装置１００に直接接続されてもよく、ネットワーク４０を介して接続されてもよい。

携帯端末３０は、決済処理装置１００から受信した情報を表示し、また顧客又は店員が入力した情報を決済処理装置１００に送信する、持ち運び可能な端末である。携帯端末３０は、顧客又は店員に対して情報を表示する表示装置、および顧客又は店員からの入力を受け付ける入力装置を備える。例えば、携帯端末３０においてタッチパネルとして構成される液晶ディスプレイ又は有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ、ＯＬＥＤともいう）ディスプレイは、表示装置および入力装置の両方として機能する。携帯端末３０は、有線通信又は無線通信によってネットワーク４０を介して決済処理装置１００と通信可能に構成される。

決済処理装置１００は、カメラ１０によって取得された画像に含まれる顧客および商品を識別し、顧客が購入したい商品を棚から取ったことを検出し、顧客に対して商品の決済を行う。また、決済処理装置１００は、携帯端末３０に情報を送信することによって顧客又は店員に所定の通知を行う。決済処理装置１００は、有線通信又は無線通信によってネットワーク４０に接続されており、単一のコンピュータ、又はコンピュータ資源の集合であるクラウドによって構成される。

本実施形態に係る決済処理システム１は、決済情報等が登録された顧客と登録されていない顧客とが混在する店舗に適用され得る。このような店舗では、登録された顧客が取得した商品については、該登録された顧客に対してＰＯＳ端末を介さずに決済を行うことができる。一方、登録されていない顧客が取得した商品については、登録されていない顧客から別の登録された顧客（家族、友人等）に商品を渡し、該別の登録された顧客に対してＰＯＳ端末を介さずに決済を行う。この場合に、登録された顧客が、登録されていない顧客によって取得された商品を意図せず決済してしまう可能性がある。本実施形態に係る決済処理装置１００は、このような問題を解決し、ＰＯＳ端末を介さない決済を可能にする。

図２は、本実施形態に係る決済処理装置１００のブロック図である。図２において、矢印は主なデータの流れを示しており、図２に示したもの以外のデータの流れがあってよい。図２において、各ブロックはハードウェア（装置）単位の構成ではなく、機能単位の構成を示している。そのため、図２に示すブロックは単一の装置内に実装されてよく、あるいは複数の装置内に別れて実装されてよい。ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてよい。

決済処理装置１００は、顧客登録処理のために、識別情報読取部１１０、登録者判定部１２０および同伴者関連付け部１３０を備える。また、決済処理装置１００は、決済処理のために、商品取得検出部１４０、商品取得者判定部１５０、本人決済部１６０、商品追跡部１７０、決済者判定部１８０、通知部１９０および他者決済部２００を備える。また、決済処理装置１００は、記憶部として、登録者記憶部２１０および同伴者記憶部２２０を備える。以下では、各部の詳細な機能を図３〜７を用いて順に説明する。

図３は、本実施形態に係る決済処理方法（特に顧客登録処理）の模式図である。図３を用いて識別情報読取部１１０、登録者判定部１２０および同伴者関連付け部１３０の機能を説明する。店舗の出入口にはゲート２１が設置されており、ゲート２１上にはリーダ２０が設けられる。また、ゲート２１の近傍において、ゲート２１を通過する顧客の顔を含む領域を撮像できる位置にカメラ１０が設けられる。登録者Ａである顧客は、ゲート２１を通過して店舗に入る際に、リーダ２０にカード２２（又は携帯端末３０）をかざして読み取らせることによって、自身の識別情報を提供する。登録者Ａに付随する同伴者Ｂである顧客は登録者Ａの後に続いてゲート２１を通過する。

登録者記憶部２１０には、顧客の決済情報（クレジットカードの番号、銀行口座の番号等）および携帯端末３０の情報（電話番号、メールアドレス等）を含む顧客情報が、顧客の識別情報に関連付けられて予め登録されている。識別情報は、例えば顧客を識別するための固有の顧客ＩＤである。ここでは登録者記憶部２１０に既に登録されている顧客を登録者Ａという。登録者記憶部２１０への顧客情報の登録は、任意の方法によって行われる。登録者記憶部２１０への顧客情報の登録は、顧客自身によって行われてもよく、あるいは顧客が記入した登録用紙等に従って店員によって行われてもよい。

識別情報読取部１１０は、ゲート２１においてリーダ２０によって顧客のカード２２や携帯端末３０等から読み取られた顧客の識別情報を受信し、決済処理装置１００に入力する。

登録者判定部１２０は、識別情報を提供した顧客が、登録者記憶部２１０に登録されているか否かを判定する。具体的には、登録者判定部１２０は、識別情報読取部１１０によって入力された識別情報（例えば顧客ＩＤ）に関連付けられた顧客情報が登録者記憶部２１０に登録されているか否かを判定する。

次に登録者判定部１２０は、顧客が登録者記憶部２１０に登録されている場合に、該顧客が登録者Ａであると判定し、登録者記憶部２１０から該顧客の識別情報に関連付けられた顧客情報を取得する。後述の決済処理において、登録者Ａが購入したい商品を棚から取得する際に、決済処理装置１００は、該登録者Ａ自身の顧客情報（決済情報）を用いて該商品の決済を行う。これにより決済処理装置１００は、登録者Ａが購入したい商品について従来のＰＯＳ端末に通さずに決済を行うことができる。

また、登録者判定部１２０は、カメラ１０から登録者Ａの画像データを取得し、該画像データから登録者Ａの特徴情報Ａ１を取得して登録者記憶部２１０に記録する。このとき、登録者判定部１２０は、登録者Ａの特徴情報Ａ１を、登録者記憶部２１０中で該登録者Ａの顧客情報に関連付ける。登録者Ａの特徴情報Ａ１として、後述の決済処理において登録者Ａを認識可能な任意の特徴情報Ａ１を用いることができる。例えば登録者Ａの特徴情報Ａ１は、登録者Ａの顔を含む領域の画像データそのものでもよく、あるいは登録者の顔を含む領域の画像データから算出した特徴量でもよい。図３には、登録者Ａの特徴情報Ａ１が模式的に破線の枠として示されている。登録者記憶部２１０に登録者Ａの特徴情報Ａ１が既に記録されている場合には、特徴情報Ａ１を新たに取得せずに登録者記憶部２１０に記録された特徴情報Ａ１がそのまま用いられてもよい。換言すると、登録者Ａの特徴情報Ａ１として、過去に取得された特徴情報Ａ１を用いてもよく、あるいは店舗に入る際に取得された特徴情報Ａ１を用いてもよい。店舗に入る際に取得された特徴情報Ａ１は、登録者Ａの最新の髪型や服装を表しているため、店舗内の画像データに基づく登録者Ａの判別を高精度に行うことができ、より好ましい。

また、登録者判定部１２０は、識別情報を提供した顧客が登録者記憶部２１０に登録されていない場合に、登録を促すメッセージを不図示のディスプレイやスピーカから出力する。以降の処理は識別情報を提供した顧客が登録者Ａであることを前提とする。

本実施形態において登録者判定部１２０は、リーダ２０によって読み取られた識別情報に基づいて登録者Ａを判定するが、リーダ２０を用いずにカメラ１０からのゲート２１を通過する顧客の画像データに基づいて登録者Ａを判定してもよい。具体的には、登録者判定部１２０は画像データからゲート２１を通過する顧客の特徴情報を取得し、取得された特徴情報を登録者記憶部２１０に記録された特徴情報Ａ１と比較することによって、ゲート２１を通過する顧客がいずれの登録者Ａであるかを判定する。この場合には、登録者記憶部２１０に登録者Ａの特徴情報Ａ１が予め記録されている必要がある。

同伴者関連付け部１３０は、登録者記憶部２１０に登録されていない顧客（例えば家族、友人等）が登録者Ａと一緒に入店する場合に、該顧客を該登録者Ａに関連付けられた同伴者Ｂとして同伴者記憶部２２０に記録する。具体的には、同伴者関連付け部１３０は、ゲート２１を登録者Ａに続いて通る識別情報を提供しない顧客を、該登録者Ａに付随する同伴者Ｂであると判定する。そして、同伴者関連付け部１３０は、同伴者Ｂの画像データをカメラ１０から取得し、該画像データから同伴者Ｂの特徴情報Ｂ１を取得して同伴者記憶部２２０に記録する。このとき、同伴者関連付け部１３０は、登録者Ａに付随する同伴者Ｂの特徴情報Ｂ１を、登録者記憶部２１０中の該登録者Ａの顧客情報に関連付ける。同伴者Ｂの特徴情報Ｂ１の定義は、登録者Ａの特徴情報Ａ１と同様である。図３には、同伴者Ｂの特徴情報Ｂ１が模式的に破線の枠として示されている。

後述の決済処理において、同伴者Ｂが購入したい商品を棚から取得する際に、決済処理装置１００は、該同伴者Ｂに関連付けられた登録者Ａの顧客情報（決済情報）を用いて該商品の決済を行う。これにより決済処理装置１００は、同伴者Ｂが購入したい商品について登録者Ａが代わりに決済することができる。

店舗内で登録者Ａおよび同伴者Ｂのいずれにも該当しない顧客を非登録者Ｃという。非登録者Ｃが購入したい商品については、店舗に設けられた従来のＰＯＳ端末を用いて決済を行う。

図４は、本実施形態に係る決済処理方法（特に本人決済処理）の模式図である。図４を用いて商品取得検出部１４０、商品取得者判定部１５０および本人決済部１６０の機能を説明する。図４には、非登録者Ｃが商品Ｅを取得した状態が示されている。登録者Ａ又は同伴者Ｂが商品Ｅを取得する場合も同様である。

店舗内には棚Ｄが設置されており、棚Ｄには１つ以上の商品Ｅが並べられる。また、棚Ｄの近傍において、顧客（登録者Ａ、同伴者Ｂ又は非登録者Ｃ）の顔および商品Ｅを含む領域を撮像できる位置にカメラ１０が設けられる。店舗内には、いずれの場所に存在する顧客および商品Ｅをも撮像可能な配置および数のカメラ１０が設けられる。

まず、商品取得検出部１４０は、商品Ｅを含む領域の画像データをカメラ１０から取得し、該画像データから商品Ｅの特徴情報Ｅ１を取得する。そして商品取得検出部１４０は、商品Ｅの特徴情報Ｅ１を用いて、棚Ｄから商品Ｅが取り出されることを検出する。棚Ｄから商品Ｅが取り出されることの検出は、例えば時系列で連続する複数の画像データの間で、商品Ｅの特徴情報Ｅ１が棚Ｄに対応する領域の中から外へ（あるいは接する位置から接しない位置へ）移動することを検出することによって行われる。画像データ中の棚Ｄに対応する領域は、画像データ中の座標として予め記録されてもよく、画像データから棚Ｄを画像認識することによって決定されてもよい。

次に商品取得検出部１４０は、商品Ｅを取り出した顧客（すなわち商品取得者）の顔を含む領域の画像データをカメラ１０から取得する。商品Ｅを取り出した顧客は、例えば取り出された商品Ｅに最も近い顧客である。また、商品取得検出部１４０は、顧客の手を含む領域の画像データをカメラ１０から取得し、該手の位置や動きに基づいて商品Ｅを取り出した顧客を特定してもよい。商品取得検出部１４０は、該画像データから顧客の特徴情報を取得する。商品取得検出部１４０は、商品取得者の特徴情報と取り出された商品Ｅの特徴情報Ｅ１とを関連付ける。図４には、非登録者Ｃの特徴情報Ｃ１および商品Ｅの特徴情報Ｅ１が模式的に破線の枠として示されている。

商品取得者判定部１５０は、商品取得者の特徴情報を、登録者記憶部２１０に記録された特徴情報Ａ１および同伴者記憶部２２０に記録された特徴情報Ｂ１と比較することによって、商品取得者がいずれの登録者Ａおよび同伴者Ｂであるかを判定し、いずれの登録者Ａおよび同伴者Ｂにも該当しない商品取得者を非登録者Ｃであると判定する。登録者Ａおよび同伴者Ｂの特徴情報Ａ１、Ｂ１に基づいて顧客を判定するために、周知の画像認識技術を用いることができる。商品取得者が登録者Ａであると判定された場合には、商品取得者判定部１５０は、該登録者Ａの顧客情報（決済情報）を登録者記憶部２１０から取得する。商品取得者が同伴者Ｂ又は非登録者Ｃであると判定された場合には、図５〜７を用いて後述する他者決済処理を行う。

商品取得者判定部１５０によって商品取得者が登録者Ａであると判定された場合に、本人決済部１６０は、商品取得者判定部１５０によって取得された登録者Ａの顧客情報から決済情報を取り出し、該決済情報（例えば登録されたクレジットカード又は銀行口座への課金）に従って商品Ｅの決済を行う。決済の際に、本人決済部１６０は、決済処理装置１００又は外部のサーバから商品Ｅの特徴情報Ｅ１に基づいて商品Ｅの価格、商品名等を含む商品情報を取得する。商品Ｅの特徴情報Ｅ１から商品情報を取得するために、周知の画像認識技術を用いることができる。

決済は１つの商品Ｅが取得されるごとに行われてもよい。この場合に、ある商品Ｅの決済が行われた後に該商品Ｅが棚Ｄに戻されるときには、本人決済部１６０は該決済を取り消す。あるいは、決済は所定のタイミング（例えば登録者Ａの退店時）で１つ以上の商品Ｅについてまとめて行われてもよい。この場合に、本人決済部１６０は、顧客が取得した商品Ｅを仮想的な購入リストとして決済処理装置１００に一時的に記録し、該商品Ｅの決済が行われる前に該商品Ｅが棚Ｄに戻されるときには該商品Ｅを該購入リストから除去する。そして、本人決済部１６０は、所定のタイミングで該購入リストに含まれる商品Ｅの決済を行う。

図５〜６は、本実施形態に係る決済処理方法（特に他者決済処理）の模式図である。図５〜６を用いて商品追跡部１７０、決済者判定部１８０、通知部１９０および他者決済部２００の機能を説明する。商品追跡処理は、商品取得者判定部１５０によって商品取得者が同伴者Ｂ又は非登録者Ｃであると判定された場合に行われる。図５では非登録者Ｃが店舗内を移動している状態が示されている。図６には、非登録者Ｃが商品Ｅを他の顧客である登録者ＡのバッグＦに入れようとしている状態が示されている。顧客のバッグＦは、顧客自身によって持参されたバッグでもよく、あるいは店舗に予め用意されたバッグ（買い物かご）でもよい。

特に図５に示すように、商品追跡部１７０は、カメラ１０（図５の破線）から取得された店舗内の画像データを用いて、同伴者Ｂ又は非登録者Ｃによって保持された商品Ｅを追跡する。商品Ｅの追跡は、例えば店舗内に配置された複数のカメラ１０から時系列で取得された画像データから同伴者Ｂ又は非登録者Ｃの特徴情報Ｂ１又はＣ１、および商品Ｅの特徴情報Ｅ１を取得し、特徴情報Ｂ１、Ｃ１、Ｅ１を含む画像データを撮像したカメラ１０の位置に基づいて、同伴者Ｂ、非登録者Ｃ、商品Ｅの位置を時系列で特定することによって行われる。

商品追跡部１７０による商品Ｅの追跡は、（ａ）商品Ｅがいずれかの顧客のバッグＦに入れられること、（ｂ）商品Ｅが他の顧客に渡されること、（ｃ）商品Ｅが棚Ｄに戻されること、（ｄ）従来のＰＯＳ端末で商品Ｅが決済されること、のいずれかの条件を満たした場合に終了される。その他の事象によって商品Ｅの追跡が行えなくなった場合には、商品追跡部１７０は店員の携帯端末３０に対して所定のメッセージを含む通知を行ってもよい。

商品Ｅが棚に戻された場合（ｃ）又は従来のＰＯＳ端末で商品Ｅが決済された場合（ｄ）には、商品追跡部１７０は商品Ｅの追跡を終了する。商品Ｅが棚に戻されることの検出は、例えば時系列で連続する複数の画像データの間で、商品Ｅの特徴情報Ｅ１が棚Ｄに対応する領域の外から中へ（あるいは接しない位置から接する位置へ）移動することを検出することによって行われる。従来のＰＯＳ端末で商品Ｅが決済されることの検出は、例えば時系列で連続する複数の画像データの間で、商品Ｅの特徴情報Ｅ１がＰＯＳ端末に対応する領域を通過することを検出することによって行われる。

商品Ｅが他の顧客に渡された場合（ｂ）には、商品追跡部１７０は商品Ｅの追跡を終了し、商品取得検出部１４０、商品取得者判定部１５０および本人決済部１６０は該他の顧客が該商品を取得したものとみなして図４に示した商品取得検出処理を再び実行する。商品Ｅが他の顧客に渡されることの検出は、例えば時系列で連続する複数の画像データの間で、商品Ｅの特徴情報Ｅ１が同伴者Ｂ又は非登録者Ｃの近くから他の顧客の近くへ移動することを検出することによって行われる。

商品Ｅがいずれかの顧客のバッグＦに入れられた場合（ａ）には、商品追跡部１７０は商品Ｅの追跡を終了する。特に図６に示すように、商品Ｅが顧客のバッグＦに入れられることの検出は、例えば時系列で連続する複数の画像データの間で、商品Ｅの特徴情報Ｅ１がバッグＦに対応する領域の外から中へ（あるいは接しない位置から接する位置へ）移動することを検出することによって行われる。

次に決済者判定部１８０は、商品Ｅが入れられたバッグＦから決済を行う登録者Ａ（決済者）を判定する。本実施形態では、決済者判定部１８０は、商品Ｅが入れられたバッグＦに最も近い顧客を、バッグＦの所有者である顧客とみなす。決済者判定部１８０は、バッグＦの所有者である顧客の顔を含む領域の画像データをカメラ１０から取得し、該画像データから顧客の特徴情報を取得する。決済者判定部１８０は、バッグ所有者の特徴情報を、登録者記憶部２１０に記録された特徴情報Ａ１および同伴者記憶部２２０に記録された特徴情報Ｂ１と比較することによって、バッグ所有者がいずれの登録者Ａおよび同伴者Ｂであるかを判定し、いずれの登録者Ａおよび同伴者Ｂにも該当しないバッグ所有者を非登録者Ｃであると判定する。決済者判定部１８０によってバッグ所有者が判定された後に、通知部１９０は登録者Ａ又は店員の携帯端末３０に所定の通知を行う。通知は、例えばメールや携帯端末３０によって実行されるアプリケーションを用いて携帯端末３０に表示される。

図７（ａ）、７（ｂ）は、本実施形態に係る携帯端末３０上に表示される通知画面の模式図である。商品取得者が非登録者Ｃである場合、又は商品取得者が同伴者ＢでありかつバッグＦの所有者が該同伴者Ｂに関連付けられた登録者Ａでない場合には、通知部１９０は、決済処理装置１００に予め記録された店員の携帯端末３０の情報を取得し、店員の携帯端末３０に対して図７（ａ）に示す通知を行う。図７（ａ）の通知画面は、同伴者Ｂ又は非登録者Ｃによって取得された商品Ｅの決済が正しく行われていない旨のメッセージ３１、同伴者Ｂ又は非登録者Ｃの顔を含む画像３２、および商品Ｅの画像３３を含む。これにより、店員は同伴者Ｂ又は非登録者Ｃによって取得された商品Ｅの決済が正しく行われていないことを知ることができ、例えばＰＯＳ端末において商品Ｅの決済を行うように同伴者Ｂ又は非登録者Ｃを誘導することができる。

商品取得者が同伴者ＢでありかつバッグＦの所有者が該同伴者Ｂに関連付けられた登録者Ａである場合には、決済者判定部１８０は、該登録者Ａの顧客情報（決済情報および携帯端末３０の情報）を登録者記憶部２１０から取得する。その後、通知部１９０は決済者判定部１８０によって取得された登録者Ａの顧客情報から携帯端末３０の情報を取り出し、登録者Ａの携帯端末３０に対して図７（ｂ）に示す通知を行う。図７（ｂ）の通知画面は、同伴者Ｂによって取得された商品Ｅの決済を許可するか尋ねるメッセージ３４、同伴者Ｂの顔を含む画像３５、商品Ｅの画像３６、決済を許可するボタン３７、および決済を拒否するボタン３８を含む。これにより、登録者Ａは同伴者Ｂによって取得された商品Ｅの決済を行うか否かを選択することができる。

他者決済部２００は、図７（ｂ）の通知画面において決済の許可又は拒否の選択を登録者Ａから受け付ける。図７（ｂ）の通知画面において登録者Ａによって決済の許可が選択される、すなわち登録者Ａが決済を承認する場合には、他者決済部２００は、決済者判定部１８０によって取得された登録者Ａの顧客情報から決済情報を取り出し、該決済情報（例えば登録されたクレジットカード又は銀行口座への課金）に従って商品Ｅの決済を行う。決済の際に、他者決済部２００は、決済処理装置１００又は外部のサーバから商品Ｅの特徴情報Ｅ１に基づいて商品Ｅの価格、商品名等を含む商品情報を取得する。商品Ｅの特徴情報Ｅ１から商品情報を取得するために、周知の画像認識技術を用いることができる。

決済は１つの商品Ｅが取得されるごとに行われてもよい。この場合に、ある商品Ｅの決済が行われた後に該商品Ｅが棚Ｄに戻されるときには、他者決済部２００は該決済を取り消す。あるいは、決済は所定のタイミング（例えば登録者Ａの退店時）で１つ以上の商品Ｅについてまとめて行われてもよい。この場合に、他者決済部２００は、登録者によって承認された商品Ｅを仮想的な購入リストとして決済処理装置１００に一時的に記録し、該商品Ｅの決済が行われる前に該商品Ｅが棚Ｄに戻されるときには該商品Ｅを該購入リストから除去する。そして、他者決済部２００は、所定のタイミングで該購入リストに含まれる商品Ｅの決済を行う。

通知画面において登録者Ａによって決済の拒否が選択される場合には、他者決済部２００は決済を行わない。このとき、通知部１９０は店員の携帯端末３０に対して図７（ａ）に示す通知を行い、店員に同伴者Ｂ又は非登録者Ｃによって取得された商品Ｅの決済が正しく行われないことを知らせてもよい。

本実施形態では非登録者Ｃが登録者ＡのバッグＦに商品Ｅを入れる場合には、通知部１９０は店員の携帯端末３０に対して図７（ａ）に示す通知を行うが、登録者Ａの携帯端末３０に対して図７（ｂ）に示す通知を行ってもよい。この場合には、他者決済部２００は、同伴者Ｂが登録者ＡのバッグＦに商品Ｅを入れる場合と同様に、非登録者Ｃの顔を含む画像が表示された図７（ｂ）の通知画面において決済の許可又は拒否の選択を登録者Ａから受け付け、該選択に従って決済を行う。

本実施形態では登録者Ａが同伴者Ｂ又は非登録者Ｃによって取得された商品Ｅの決済を承認するが、通知部１９０は店員の携帯端末３０に対して図７（ｂ）に示す通知を行い、店員が該決済を承認してもよい。この場合には、他者決済部２００は、図７（ｂ）の通知画面において決済の許可又は拒否の選択を店員から受け付け、該選択に従って決済を行う。

図８は、本実施形態に係る決済処理装置１００の例示的な機器構成を示す概略構成図である。決済処理装置１００は、ＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）１０１と、メモリ１０２と、記憶装置１０３と、インタフェース１０４とを備える。決済処理装置１００は独立した装置でよく、あるいは他の装置と一体に構成されてよい。

インタフェース１０４は、データの送受信を行う通信部であり、有線通信および無線通信の少なくとも一方の通信方式を実行可能に構成される。インタフェース１０４は、該通信方式に必要なプロセッサ、電気回路、アンテナ、接続端子等を含む。インタフェース１０４は、ＣＰＵ１０１からの信号に従って、該通信方式を用いて通信を行う。インタフェース１０４は、例えばカメラ１０、リーダ２０および携帯端末３０と通信を行う。

記憶装置１０３は、決済処理装置１００が実行するプログラムや、プログラムによる処理結果のデータ等を記憶する。記憶装置１０３は、読み取り専用のＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）や、読み書き可能のハードディスクドライブ又はフラッシュメモリ等を含む。また、記憶装置１０３は、ＣＤ−ＲＯＭ等のコンピュータ読取可能な可搬記憶媒体を含んでもよい。

メモリ１０２は、ＣＰＵ１０１が処理中のデータや記憶装置１０３から読み出されたプログラムおよびデータを一時的に記憶するＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）等を含む。

ＣＰＵ１０１は、処理に用いる一時的なデータをメモリ１０２に一時的に記録し、記憶装置１０３に記録されたプログラムを読み出し、該プログラムに従って該一時的なデータに対して種々の演算、制御、判別などの処理動作を実行するプロセッサである。また、ＣＰＵ１０１は、記憶装置１０３に処理結果のデータを記録し、またインタフェース１０４を介して処理結果のデータを外部に送信する。

本実施形態においてＣＰＵ１０１は、記憶装置１０３に記録されたプログラムを実行することによって、図２の識別情報読取部１１０、登録者判定部１２０、同伴者関連付け部１３０、商品取得検出部１４０、商品取得者判定部１５０、本人決済部１６０、商品追跡部１７０、決済者判定部１８０、通知部１９０および他者決済部２００として機能する。また、メモリ１０２又は記憶装置１０３は、図２の登録者記憶部２１０および同伴者記憶部２２０として機能する。

決済処理装置１００は、図８に示す具体的な構成に限定されない。決済処理装置１００は、１つの装置に限られず、２つ以上の物理的に分離した装置が有線又は無線で接続されることにより構成されていてもよい。決済処理装置１００に含まれる各部は、それぞれ電気回路構成により実現されていてもよい。ここで、電気回路構成とは、単一のデバイス、複数のデバイス、チップセット又はクラウドを概念的に含む文言である。

また、決済処理装置１００の少なくとも一部がＳａａＳ（ＳｏｆｔｗａｒｅａｓａＳｅｒｖｉｃｅ）形式で提供されてよい。すなわち、決済処理装置１００を実現するための機能の少なくとも一部が、ネットワーク経由で実行されるソフトウェアによって実行されてよい。

図９、１０は、本実施形態に係る決済処理方法のフローチャートを示す図である。図９のフローチャートは、本実施形態に係る決済処理方法のうち顧客登録処理を示す。図９のフローチャートは、例えば顧客が識別情報を示すカード２２（又は携帯端末３０）をリーダ２０にかざす際に開始される。

まず、識別情報読取部１１０は、ゲート２１においてリーダ２０によって顧客のカード２２や携帯端末３０等から読み取られた顧客の識別情報を受信し、決済処理装置１００に入力する（ステップＳ１０１）。

登録者判定部１２０は、ステップＳ１０１で入力された識別情報を提供した顧客が、登録者記憶部２１０に記録されたいずれの登録者Ａであるか判定する（ステップＳ１０２）。また、登録者判定部１２０は、ステップＳ１０１で識別情報を提供した登録者Ａの画像データをカメラ１０から取得し、該画像データから該登録者Ａの特徴情報Ａ１を取得して登録者記憶部２１０に記録する（ステップＳ１０３）。このとき、登録者判定部１２０は、登録者Ａの特徴情報Ａ１を、登録者記憶部２１０中で該登録者Ａの顧客情報に関連付ける。該登録者Ａの特徴情報Ａ１が既に登録者記憶部２１０に記録されている場合は、ステップＳ１０３は省略されてもよい。

ステップＳ１０１で識別情報を提供した登録者Ａに続いて識別情報を提供しない別の顧客がゲート２１を通過する場合に（ステップＳ１０４のＹＥＳ）、同伴者関連付け部１３０は該顧客を該登録者Ａの同伴者Ｂと判定する。同伴者関連付け部１３０は、該同伴者Ｂの画像データをカメラ１０から取得し、該画像データから該同伴者Ｂの特徴情報Ｂ１を取得して同伴者記憶部２２０に記録する（ステップＳ１０５）。このとき、同伴者関連付け部１３０は、登録者Ａに付随する同伴者Ｂの特徴情報Ｂ１を、登録者記憶部２１０中の該登録者Ａの顧客情報に関連付ける。登録者Ａに続く同伴者Ｂがいない場合には（ステップＳ１０４のＮＯ）、同伴者Ｂの特徴情報Ｂ１の記録を行わない。

図１０のフローチャートは、本実施形態に係る決済処理方法のうち決済処理を示す。図１０のフローチャートは、例えば顧客が棚Ｄから商品Ｅを取り出す際に開始される。

まず、商品取得検出部１４０は、取り出された商品Ｅを含む領域の画像データをカメラ１０から取得し、該画像データを用いて取り出された該商品Ｅの特徴情報Ｅ１を取得する（ステップＳ２０１）。次に商品取得検出部１４０は、商品Ｅを取り出した顧客（商品取得者）の顔を含む領域の画像データをカメラ１０から取得し、該画像データを用いて該商品取得者の特徴情報を取得する（ステップＳ２０２）。このとき、商品取得検出部１４０は、商品取得者の特徴情報と取り出された商品Ｅの特徴情報Ｅ１とを関連付ける。

次に商品取得者判定部１５０は、ステップＳ２０２で取得された商品取得者の特徴情報を、登録者記憶部２１０に記録された特徴情報Ａ１および同伴者記憶部２２０に記録された特徴情報Ｂ１と比較することによって、商品取得者がいずれの登録者Ａおよび同伴者Ｂであるかを判定し、いずれの登録者Ａおよび同伴者Ｂにも該当しない商品取得者を非登録者Ｃであると判定する（ステップＳ２０３）。

商品取得者が登録者Ａであると判定された場合に（ステップＳ２０３のＹＥＳ）、商品取得者判定部１５０は、該登録者Ａの顧客情報（決済情報）を登録者記憶部２１０から取得し、本人決済部１６０は、該決済情報（例えば登録されたクレジットカード又は銀行口座への課金）に従ってステップＳ２０１で取り出された商品の決済を行う（ステップＳ２０４）。

商品取得者が同伴者Ｂ又は非登録者Ｃであると判定された場合に（ステップＳ２０３のＮＯ）、商品追跡部１７０は、カメラ１０から取得された店舗内の画像データを用いて、同伴者Ｂ又は非登録者Ｃによって保持された商品Ｅを追跡する（ステップＳ２０５）。

商品追跡部１７０は、商品Ｅがいずれかの顧客のバッグＦに入れられたか否かを検出する（ステップＳ２０６）。商品Ｅが顧客のバッグＦに入れられることの検出は、例えば時系列で連続する複数の画像データの間で、商品Ｅの特徴情報Ｅ１がバッグＦに対応する領域の外から中へ（あるいは接しない位置から接する位置へ）移動することを検出することによって行われる。

商品ＥがバッグＦに入れられずに所定の終了条件を満たす場合に（ステップＳ２０６のＮＯ）、決済処理方法を終了する。所定の終了条件は、例えば商品Ｅが他の顧客に渡されること、商品Ｅが棚Ｄに戻されること、あるいは商品ＥがＰＯＳ端末で決済されることである。これらの終了条件のいずれかが満たされる場合に、該終了条件に対応する所定の処理が行われてもよい（図１０には不図示）。

商品Ｅがいずれかの顧客のバッグＦに入れられた場合に（ステップＳ２０６のＹＥＳ）、決済者判定部１８０は、商品Ｅが入れられたバッグＦの所有者である顧客の顔を含む領域の画像データをカメラ１０から取得し、該画像データからバッグ所有者の特徴情報を取得する。決済者判定部１８０は、バッグ所有者の特徴情報を、登録者記憶部２１０に記録された特徴情報Ａ１および同伴者記憶部２２０に記録された特徴情報Ｂ１と比較することによって、バッグ所有者がいずれの登録者Ａおよび同伴者Ｂであるかを判定し、いずれの登録者Ａおよび同伴者Ｂにも該当しないバッグ所有者を非登録者Ｃであると判定する（ステップＳ２０７）。

商品取得者が同伴者Ｂでありかつバッグ所有者が該同伴者Ｂに関連付けられた登録者Ａである場合（ステップＳ２０８のＹＥＳ、ステップＳ２０９のＹＥＳ）に、決済者判定部１８０は、バッグ所有者である登録者Ａの顧客情報（決済情報および携帯端末３０の情報）を登録者記憶部２１０から取得する。その後、通知部１９０はバッグ所有者である登録者Ａの顧客情報から携帯端末３０の情報を取り出し、該登録者Ａの携帯端末３０に対して図７（ｂ）に示すような所定の通知を行う（ステップＳ２１０）。

他者決済部２００は、ステップＳ２１０の通知において登録者Ａからの入力を受け付け、該入力が決済の許可を示す場合には該登録者Ａの顧客情報に含まれる決済情報を用いて商品Ｅの決済を行い、該入力が決済の拒否を示す場合には商品Ｅの決済を行わない（ステップＳ２１１）。決済を行わない場合には、ステップＳ２１２のように店員の携帯端末３０に対して所定の通知を行ってもよい。

商品取得者が非登録者Ｃである場合（ステップＳ２０８のＮＯ）、あるいは商品取得者が同伴者Ｂでありかつバッグ所有者が該同伴者Ｂに関連付けられた登録者Ａでない場合（ステップＳ２０８のＹＥＳ、ステップＳ２０９のＮＯ）に、通知部１９０は、決済処理装置１００に予め記録された店員の携帯端末３０の情報を取得し、該店員の携帯端末３０に対して図７（ａ）に示すような所定の通知を行う（ステップＳ２１２）。

決済処理装置１００のＣＰＵ１０１は、図９、１０に示す決済処理方法に含まれる各ステップ（工程）の主体となる。すなわち、ＣＰＵ１０１は、図９、１０に示す決済処理方法を実行するための決済処理プログラムをメモリ１０２又は記憶装置１０３から読み出し、該プログラムを実行して決済処理装置１００の各部を制御することによって図９、１０に示す決済処理方法を実行する。

本発明に係る決済処理装置１００は、カメラ１０によって取得された画像の情報に基づいて顧客および商品を識別して追跡するが、顧客および商品を識別および追跡するためのその他周知の技術を用いることができる。例えば、店舗に設けられるカメラ、赤外線センサ、圧力センサ、重量センサ、および音センサのうち少なくとも１つから取得される情報又は情報の組み合わせによって、顧客および商品の識別および追跡を行ってもよい。また、顧客が有する携帯端末３０から発せられる無線通信信号やＧＰＳ（全地球測位システム）信号を利用して、顧客の識別および追跡を行ってもよい。

本発明に係る決済処理装置１００は、登録された顧客（登録者）および登録されていない顧客（同伴者又は非登録者）が混在する店舗において、登録された顧客と登録されていない顧客とを判別する。そして決済処理装置１００は、登録されていない顧客が商品を取得し、かつ取得された商品が登録された顧客のバッグに入れられた際に、店員又は該登録された顧客の携帯端末３０へ通知を行う。これにより、登録された顧客が、登録されていない顧客によって取得された商品を意図せず決済することを抑制することができる。また、決済処理装置１００は、通知画面において登録されていない顧客が取得した商品の決済を行うか否かの選択を受け付けるため、登録された顧客が該登録されていない顧客の代わりに商品の決済を行うことができる。

（第２の実施形態）
第１の実施形態ではバッグを保持している顧客をバッグの所有者とみなすため、顧客の間でバッグが受け渡された場合にバッグの本来の所有者を特定できない。それに対して本実施形態は、バッグの所有者とバッグの特徴情報とを関連付けて記録することによって、バッグが顧客の間で受け渡された場合であってもバッグの所有者を特定することができる。それ以外の本実施形態における構成は、第１の実施形態と同様である。

図１１は、本実施形態に係る決済処理装置１００のブロック図である。本実施形態に係る決済処理装置１００は、図２の構成に加えて、さらにバッグ関連付け部２３０およびバッグ記憶部２４０を備える。以下では、バッグ関連付け部２３０およびバッグ記憶部２４０の詳細な機能を、図１２を用いて説明する。

図１２は、本実施形態に係る決済処理方法（特に顧客登録処理）の模式図である。本実施形態では、ゲート２１の近傍において、ゲート２１を通過する顧客の顔を含む領域に加えて、顧客が有するバッグＦを含む領域を撮像できる位置にカメラ１０が設けられる。

本実施形態においては、登録者判定部１２０が登録者Ａを判定して特徴情報を記録した後に、バッグ関連付け部２３０は該登録者Ａが保持するバッグＦの画像データをカメラ１０から取得し、該バッグＦの特徴情報Ｆ１を取得してバッグ記憶部２４０に記録する。このとき、バッグ関連付け部２３０は、登録者Ａが保持するバッグＦの特徴情報Ｆ１を、登録者記憶部２１０中の該登録者Ａの顧客情報に関連付ける。すなわち登録者Ａは入店時にバッグＦの所有者として記録され、入店後にバッグＦが登録者Ａから他の顧客へ渡された場合であっても登録者ＡはバッグＦの所有者のままである。

その後、第１の実施形態と同様に、商品取得検出部１４０および商品取得者判定部１５０が同伴者Ｂ又は非登録者Ｃによる商品Ｅの取得を検出した後、商品追跡部１７０は同伴者Ｂ又は非登録者Ｃが取得した商品Ｅの追跡を行い、商品Ｅがいずれかの顧客のバッグＦに入れられた場合に追跡を終了する。次に決済者判定部１８０は、商品Ｅが入れられたバッグＦから決済を行う登録者Ａを判定する。本実施形態に係る決済者判定部１８０は、第１の実施形態とは異なり、商品Ｅが入れられたバッグＦの特徴情報Ｆ１およびバッグ記憶部２４０に記録されたバッグＦの特徴情報Ｆ１に基づいて、バッグＦの所有者である登録者Ａを判定する。具体的には、決済者判定部１８０は、商品Ｅが入れられたバッグＦを含む領域の画像データをカメラ１０から取得し、該画像データからバッグＦの特徴情報Ｆ１を取得する。決済者判定部１８０は、取得されたバッグＦの特徴情報Ｆ１を、バッグ記憶部２４０に記録されたバッグＦの特徴情報Ｆ１と比較することによって、入店時のバッグＦの所有者である登録者Ａを判定する。

商品取得者が非登録者Ｃである場合、又は商品取得者が同伴者Ｂでありかつ商品Ｅが入れられたバッグＦの所有者が登録者Ａでない場合（すなわちバッグＦの所有者がバッグ記憶部２４０に記録されていない場合）には、通知部１９０は、決済処理装置１００に予め記録された店員の携帯端末３０の情報を取得し、店員の携帯端末３０に対して図７（ａ）に示す通知を行う。

商品取得者が同伴者Ｂでありかつ商品Ｅが入れられたバッグＦの所有者が登録者Ａである場合には、決済者判定部１８０は、該登録者Ａの顧客情報（決済情報および携帯端末３０の情報）を登録者記憶部２１０から取得する。その後、通知部１９０は決済者判定部１８０によって取得された登録者Ａの顧客情報から携帯端末３０の情報を取り出し、登録者Ａの携帯端末３０に対して図７（ｂ）に示す通知を行う。続く処理は第１の実施形態と同様である。

同じ店舗内にいる複数の顧客のバッグＦが同一の製品である場合には、例えば同一のバッグに色、模様又は形状の異なるシールを付すことによって、各バッグＦの特徴情報Ｆ１を異ならせ、各バッグＦを区別可能にすることができる。

顧客のバッグとして店舗に予め用意された買い物かごを用いる場合には、各買い物かごの色、模様又は形状を変える、あるいは各買い物かごに一意の文字列やコードを付すことによって、各買い物かごを外観から区別可能にすることが望ましい。このような構成により、買い物かごをカメラ１０の画像データから容易に判定し、買い物かごの所有者である登録者Ａを特定できる。同一の買い物かごを用いる場合には、買い物かごにＲＦＩＤ（ＲａｄｉｏＦｒｅｑｕｅｎｃｙＩｄｅｎｔｉｆｉｅｒ）等のタグを設け、店舗内に該タグの読取装置を設けることによって、買い物かごの所有者を判定できる。

本実施形態に係る決済処理装置１００は、第１の実施形態と同様の効果を奏するのに加えて、店舗内で顧客の間でバッグが受け渡された場合であっても、入店時に記録されたバッグの所有者である登録された顧客（登録者）を判定し、登録された顧客に対する決済を行うことができる。

（その他の実施形態）
図１３は、上述の各実施形態に係る決済処理装置１００の概略構成図である。図１３には、決済処理装置１００が、登録された顧客および登録されていない顧客が混在する店舗において、意図しない決済を抑制することができる装置として機能するための構成例が示されている。決済処理装置１００は、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する商品取得者判定部１５０（判定部）と、前記商品を取得した顧客が前記登録されていない顧客であり、かつ前記登録されていない顧客によって前記登録された顧客が所有するバッグに前記商品が入れられた場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う通知部１９０と、を備える。

本発明は、上述の実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲において適宜変更可能である。

上述の実施形態の機能を実現するように該実施形態の構成を動作させるプログラム（より具体的には、図９、１０に示す処理をコンピュータに実行させる決済処理プログラム）を記録媒体に記録させ、該記録媒体に記録されたプログラムをコードとして読み出し、コンピュータにおいて実行する処理方法も各実施形態の範疇に含まれる。すなわち、コンピュータ読取可能な記録媒体も各実施形態の範囲に含まれる。また、上述のプログラムが記録された記録媒体はもちろん、そのプログラム自体も各実施形態に含まれる。

該記録媒体としては例えばフロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性メモリカード、ＲＯＭを用いることができる。また該記録媒体に記録されたプログラム単体で処理を実行しているものに限らず、他のソフトウェア、拡張ボードの機能と共同して、ＯＳ上で動作して処理を実行するものも各実施形態の範疇に含まれる。

上述の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。

（付記１）
店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する判定部と、
前記商品を取得した顧客が前記登録されていない顧客であり、かつ前記登録されていない顧客によって前記登録された顧客が所有するバッグに前記商品が入れられた場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う通知部と、
を備える決済処理装置。

（付記２）
前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う決済部をさらに備えることを特徴とする、付記１に記載の決済処理装置。

（付記３）
前記決済部は、前記商品を取得した顧客が前記登録された顧客である場合に、前記商品を取得した前記登録された顧客に対して、前記決済を行うことを特徴とする、付記２に記載の決済処理装置。

（付記４）
前記登録された顧客が前記店舗に入る際に所有している前記バッグの特徴情報を、前記登録された顧客に関連付ける関連付け部をさらに備え、
前記決済部は、前記バッグの前記特徴情報に基づいて、前記バッグを所有する前記登録された顧客に対して前記決済を行うことを特徴とする、付記２又は３に記載の決済処理装置。

（付記５）
前記店舗内で前記登録されていない顧客および前記商品を追跡し、前記商品が入れられた前記バッグを特定する追跡部をさらに備えることを特徴とする、付記１〜４のいずれか一項に記載の決済処理装置。

（付記６）
前記通知部は、前記店舗の店員が有する携帯端末に対して前記通知を行うことを特徴とする、付記１〜５のいずれか一項に記載の決済処理装置。

（付記７）
前記登録された顧客は、前記決済を行うための決済情報が登録されている顧客であり、
前記決済部は、前記決済情報に従って前記決済を行うことを特徴とする、付記２〜４のいずれか一項に記載の決済処理装置。

（付記８）
店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する判定部と、
前記商品を取得した顧客が前記登録されていない顧客であり、かつ前記登録されていない顧客によって前記登録された顧客が所有するバッグに前記商品が入れられた場合に、前記バッグを所有する前記登録された顧客に対して、前記商品の決済を行う決済部と、
を備える決済処理装置。

（付記９）
店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する工程と、
前記商品を取得した顧客が前記登録されていない顧客であり、かつ前記登録されていない顧客によって前記登録された顧客が所有するバッグに前記商品が入れられた場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う工程と、
を含む決済処理方法。

（付記１０）
コンピュータに、
店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する工程と、
前記商品を取得した顧客が前記登録されていない顧客であり、かつ前記登録されていない顧客によって前記登録された顧客が所有するバッグに前記商品が入れられた場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う工程と、
を実行させる決済処理プログラム。

（付記１１）
前記特徴情報は、前記バッグを含む領域の画像データおよび前記画像データから算出される特徴量の少なくとも一方であることを特徴とする、付記４に記載の決済処理装置。

（付記１２）
前記バッグは、前記登録された顧客が持参した前記バッグおよび前記店舗に予め用意された前記バッグのどちらかであることを特徴とする、付記１〜７のいずれか一項に記載の決済処理装置。

１００決済処理装置
１５０商品取得者判定部
１６０本人決済部
１７０商品追跡部
１９０通知部
２００他者決済部
２３０バッグ関連付け部
３０携帯端末

Claims

登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付け部と、
前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する判定部と、
前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する追跡部と、
前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う通知部と、
前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う決済部と、
を備える決済処理装置。
前記決済部は、前記商品を取得した顧客が前記登録された顧客である場合に、前記商品を取得した前記登録された顧客に対して、前記決済を行うことを特徴とする、請求項１に記載の決済処理装置。
前記通知部は、前記店舗の店員が有する携帯端末に対して前記通知を行うことを特徴とする、請求項１または２に記載の決済処理装置。
前記登録された顧客は、前記決済を行うための決済情報が登録されている顧客であり、
前記決済部は、前記決済情報に従って前記決済を行うことを特徴とする、請求項１または２に記載の決済処理装置。
登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付け部と、
前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する判定部と、
前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する追跡部と、
前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客に対して、前記商品の決済を行う決済部と、
を備える決済処理装置。
決済処理装置によって実行される決済処理方法であって、
登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付ける工程と、
前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する工程と、
前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する工程と、
前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う工程と、
前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う工程と、
を含む決済処理方法。
コンピュータに、
登録された顧客が店舗に入る際に所有しているバッグの特徴情報を撮像部によって取得し、前記バッグの前記特徴情報を前記登録された顧客に関連付ける関連付ける工程と、
前記撮像部によって取得した、前記登録された顧客の特徴情報と、登録されていない顧客の特徴情報と、商品の特徴情報とに基づいて、店舗において商品を取得した顧客が登録された顧客および登録されていない顧客のどちらであるか判定する工程と、
前記商品の特徴情報と前記撮像部または他の撮像部によって取得した画像データとに基づき、前記店舗内で前記商品の位置を追跡し、前記位置が前記バッグの前記特徴情報に対応する前記画像データの領域に移動することにより、前記商品が前記バッグに入れられたことを特定する工程と、
前記商品を取得した顧客が前記登録されていない顧客であると判定され、かつ前記登録されていない顧客によって前記バッグに前記商品が入れられたと特定された場合に、前記バッグを所有する前記登録された顧客が有する携帯端末に対して通知を行う工程と、
前記通知において前記登録された顧客によって入力された選択に従って、前記登録された顧客に対して前記商品の決済を行う工程と、
を実行させる決済処理プログラム。