JP7791799B2 - 販売データ処理装置、会計装置およびプログラム - Google Patents

Description

本発明の実施形態は、販売データ処理装置、会計装置およびプログラムに関する。

従来、買物客が操作者となって商品の登録処理や決済処理にかかる操作を行うセルフタイプのＰＯＳ（Ｐｏｉｎｔ Ｏｆ Ｓａｌｅｓ）端末や、商品登録の後の決済処理にかかる操作を買物客が操作者となって行うセミセルフタイプのＰＯＳ端末が知られている。こういったＰＯＳ端末には、操作者を撮像するカメラを備え、カメラが出力する画像から操作者の操作ミスや不正行為を発見可能にしているものがある。このようなカメラは、ＰＯＳ端末のメイン筐体に内蔵されない場合、例えばメイン筐体の上方から撮像するよう配置されることが多い。また、そのようなカメラは、撮像方向を適宜調節可能に構成される。

上述のような構成のＰＯＳ端末が用いられた店舗において、悪意ある顧客等が、不正行為が映り込まないようカメラの向きを変更してしまうことがある。また、地震の影響でカメラの向きがずれてしまうことも考えられる。

ここで、特許文献１は、監視カメラの撮像位置が変わったことを検知して異常を知らせるシステムを開示している。なお、このシステムの監視対象は、ＰＯＳ端末への操作に限らない。

本発明が解決しようとする課題は、操作ミスや不正行為を検知するためのカメラの撮像内容が異常である場合に販売データ処理への不都合の発生を防止可能な販売データ処理装置、会計装置およびプログラムを提供することである。

実施形態の販売データ処理装置は、取引対象である商品の情報を所定の記憶部に記憶させる登録処理を行う登録部と、前記登録部が登録した商品の決済にかかる決済処理を行う決済部と、操作者による操作を受け付ける操作部と、カメラにより前記操作者が映り込む範囲を撮像した画像の解析により得られる情報であって前記カメラの撮像方向が基準からずれていることを示す情報を取得する取得部と、前記取得部が前記情報を取得すると、操作者による不正な操作を防止するための対策処理を行い、当該対策処理において、前記登録処理または前記決済処理の進行を停止させる対策部と、を備える。

図１は、実施形態に係るセルフＰＯＳ端末の操作者側から見た外観の一例を示す斜視図である。 図２は、実施形態に係るセルフＰＯＳ端末のハードウェア構成の一例を示す図である。 図３は、実施形態に係るセルフＰＯＳ端末およびサーバの機能構成の一例を示す図である。 図４は、実施形態に係るカメラの撮像画像の一例を示す図である。 図５は、実施形態に係るカメラの撮像画像の一例を示す図である。 図６は、実施形態に係るセルフＰＯＳ端末において実行される処理の一例を示すフローチャートである。

（第１の実施形態）
実施形態について図面を用いて説明する。図１は、実施形態に係るセルフＰＯＳ端末１０の操作者側から見た外観の一例を示す斜視図である。セルフＰＯＳ端末１０は、商品の登録や決済にかかる処理を買物客が操作者となって行うセルフタイプのＰＯＳ（Ｐｏｉｎｔ Ｏｆ Ｓａｌｅｓ）端末であって、販売データ処理装置の一例である。

なお、実施形態に係る技術は、商品登録の後の決済処理にかかる操作を買物客が操作者となって行うセミセルフタイプのＰＯＳ端末（会計装置の一例）に対して適用することもできる。ここでの決済処理に先立つ登録処理は、例えば、通常のＰＯＳ端末への店員の操作によって行われる。また、登録処理は、買物客自身により行われる場合もある。買物客は、例えば、買物客が所持するスマートフォンで起動されたＰＯＳアプリケーションや、カートＰＯＳ（店内備付のカートに付属した端末）への買物客の操作等によって、商品の登録を行う。

セルフＰＯＳ端末１０は、本体１１、カゴ置台１２、袋詰め台１３を有する。本体１１は、カゴ置台１２及び袋詰め台１３の間に設けられる。カゴ置台１２は、取引対象の商品が入ったカゴ等を置くための物置台である。袋詰め台１３は、買い物袋を開放した状態で引掛けられる物置台である。買い物袋には、登録済みの商品が入れられる。つまり袋詰め台１３には、登録された商品が載置される。

袋詰め台１３は、台座１３１、袋掛けフック１３２及び一時置台１３３を有する。袋掛けフック１３２及び一時置台１３３は、台座１３１に設けられた支柱１３４に支持されて、台座１３１の上方に設けられている。袋掛けフック１３２は、登録後の商品を入れる袋を吊り下げるフックである。台座１３１は、袋の底を支えたり、例えば袋より大きく袋に入れるのに適さない等の商品が載置されたりする台である。一時置台１３３は、例えば壊れやすい等の理由で袋詰めに注意を要する商品を一時的に載置する台である。

セルフＰＯＳ端末１０は、さらに、計量部１４、入出金部１５、スキャナ１６、タッチパネルディスプレイ１７、表示灯１８、カードリーダ１９、プリンタ２０、カメラ２１を、備えている。

計量部１４は、袋詰め台１３に設けられている。計量部１４は、内蔵した重量センサの出力に基づき、袋詰め台１３に載置された商品等の物品の重量を計量する。例えば、計量部１４は、袋詰め台１３にセットされた袋や、袋内に入れられた商品等の合計重量を、計量する。重量センサは、例えば台座１３１の下方に設けられて、台座１３１を支持し、台座１３１が受ける負荷に応じた信号を出力する。

入出金部１５は、例えば本体１１の上下方向中央部に設けられている。入出金部１５は、買物客が支払う硬貨や紙幣の投入を受け付け、釣銭等を排出する。なお、例えばセルフＰＯＳ端末１０が現金を取り扱わないキャッシュレス端末として構成される場合等には、入出金部１５は設けられなくて構わない。

スキャナ１６は、例えば本体１１の上部に設けられている。スキャナ１６は、読取窓１６１を有する。スキャナ１６は、例えば読取窓１６１にかざされた商品に付されている無線タグやバーコードなどのコードシンボルから商品情報を読み取る。無線タグは、ＲＦ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ）タグ等の電子タグである。無線タグは、情報を記憶するＩＣ（Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）チップとアンテナとを有する。無線タグは、無線タグ読取装置から受信した電波に応じてＩＣチップに記憶されているタグ情報を送信する。例えば、無線タグには、無線タグが付されている商品に関する商品情報が記憶されている。商品情報には、例えば、商品を識別可能な商品コードが含まれている。

また、スキャナ１６は、例えば読取窓１６１にかざされた商品を撮像するように構成されたカメラを有していてもよい。スキャナ１６のカメラは、例えばＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ－Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）等の撮像素子を含む。読取窓１６１は、スキャナ１６のカメラにより撮像される光を透過可能である。スキャナ１６のカメラが撮像した商品の画像データは、画像処理装置によるオブジェクト認識処理に供される。これにより、画像データに含まれる商品が特定され、登録される。なお、画像処理装置は、例えば通信Ｉ／Ｆ（interface、インタフェース）を介してセルフＰＯＳ端末１０と通信可能に接続された外部装置である。なお、オブジェクト認識処理は、セルフＰＯＳ端末１０により実行されても構わない。

タッチパネルディスプレイ１７は、例えば本体１１の上方に設けられている。タッチパネルディスプレイ１７は、操作者向けの各種情報を画面に表示し、買物客による操作を受け付ける。

表示灯１８は、例えば本体１１の後方に設けられている。表示灯１８は、セルフＰＯＳ端末１０に異常が発生したこと等を店員に通知する電灯である。

カードリーダ１９は、例えば本体１１においてスキャナ１６の側方に設けられている。カードリーダ１９は、クレジットカード等のカードが記憶する情報を読み取る。

プリンタ２０は、例えば本体１１の筐体の内部に設けられている。プリンタ２０は、一取引の明細が示されたレシートや、商品の割引等のクーポンをレシート用紙等に印字する印字装置である。プリンタ２０は、本体１１の正面に、レシート排出部を有する。レシート排出部は、プリンタ２０が発行したレシート等をセルフＰＯＳ端末１０の外部に排出する排出口である。レシート排出部は、例えば本体１１において入出金部１５とスキャナ１６との間に設けられている。

カメラ２１は、セルフＰＯＳ端末１０の操作者が映り込む範囲を撮像するように構成されたカメラである。カメラ２１は、例えばＣＭＯＳ、ＣＣＤ等の撮像素子を含む。カメラ２１が撮像した画像データは、画像処理部による解析処理（後述）に供される。

図２は、実施形態に係るセルフＰＯＳ端末１０のハードウェア構成の一例を示す図である。セルフＰＯＳ端末１０は、さらに、モータ２２、ＣＰＵ（Central Processing Unit）１０１、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access Memory）１０３、記憶部１０４および通信Ｉ／Ｆ（interface、インタフェース）１０５を、備えている。

計量部１４、入出金部１５、スキャナ１６、タッチパネルディスプレイ１７、表示灯１８、カードリーダ１９、プリンタ２０、カメラ２１、モータ２２、ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、記憶部１０４および通信Ｉ／Ｆ１０５は、データバスやアドレスバス等のシステムバス１０９を介して相互に接続される。

モータ２２（カメラ２１の撮像方向を変える駆動部の一例）は、電力で稼働して回転するものであって、当該回転は、カメラ２１の向きを調整可能に支持する支持部に伝達される。モータ２２の制御により、カメラ２１の撮像角度は自動的に変更可能である。カメラ２１の向きが変わることにより、撮像される範囲が変わる。

記憶部１０４は、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）やＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、フラッシュメモリなどの記憶装置である。記憶部１０４は、制御プログラムや商品マスタ等を記憶する。制御プログラムは、オペレーティングシステムや、セルフＰＯＳ端末１０が有する各種機能を発揮させるためのプログラムである。

商品マスタは、商品を識別可能な識別情報である商品コードに関連づけて、商品の情報（商品情報）を記憶している。商品情報は、例えば、商品の名称や、価格、商品の重量値等である。なお、セルフＰＯＳ端末１０においてオブジェクト認識処理が実行される場合、商品マスタに、商品情報として、照合用特徴量の情報が関連付けられていてもよい。照合用特徴量は、商品の外観の特徴を示す照合用の情報である。照合用特徴量は、商品の標準的な形状、表面の色合い、模様、凹凸状況等の外観の特徴をパラメータ化したものである。

ＣＰＵ１０１は、プロセッサである。ＲＯＭ１０２は、各種プログラムやデータを記憶する記憶媒体である。ＲＡＭ１０３は、各種プログラムや各種データを一時的に記憶する記憶媒体である。ＣＰＵ１０１は、ＲＡＭ１０３をワークエリア（作業領域）としてＲＯＭ１０２又は記憶部１０４等が記憶する各種プログラムを実行することにより、制御部１１０（図３参照、後述）を実現する。制御部１１０は、セルフＰＯＳ端末１０の各部を統括的に制御する。

なお、制御部１１０のプロセッサとしては、ＣＰＵ１０１に限らず、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）やＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）等の他のプロセッサが利用されても構わない。

通信Ｉ／Ｆ１０５は、セルフＰＯＳ端末１０がネットワークを介して外部装置と通信するためのインタフェースである。

外部装置の一例はサーバ３００である。サーバ３００は、ＣＰＵやＲＯＭ、ＲＡＭ、記憶部などを備えるコンピュータ構成の装置である。サーバ３００のＣＰＵは、ＲＯＭや記憶部に記憶されたプログラムを実行することにより、制御部３１０（図３参照、後述）を実現する。

また、他の外部装置として、例えば、セルフＰＯＳ端末１０を管理する店員等の管理者が操作する情報処理装置（以下、管理装置とする）がある。管理装置は、例えばＰＣ（Personal Computer、パーソナルコンピュータ）やタブレット型端末、スマートフォン等である。管理装置は、例えば複数のセルフＰＯＳ端末１０に接続されている。なお、ネットワークを介して互いに接続された複数のセルフＰＯＳ端末１０のうちの任意のセルフＰＯＳ端末１０を管理装置として利用することもできる。管理装置は、セルフＰＯＳ端末１０からの報知情報に基づき不正検知を店員に報知する。

さらに他の外部装置としては、例えばオブジェクト認識処理などの画像処理を実行する画像処理装置があり得る。

図３は、実施形態に係るセルフＰＯＳ端末１０およびサーバ３００の機能構成の一例を示す図である。

セルフＰＯＳ端末１０の制御部１１０は、読取部１１１、登録部１１２、操作部１１３、決済部１１４、撮像部１１５、取得部１１６、対策部１１７等の各種機能部として機能する。また、サーバ３００の制御部３１０は、画像処理部３１１として機能する。

なお、本実施形態でセルフＰＯＳ端末１０の制御部１１０が実現する機能の一部又は全部は、セルフＰＯＳ端末１０の外部装置との協働により実現されてもよいし、セルフＰＯＳ端末１０に搭載された専用回路などのハードウェア構成により実現されても構わない。

読取部１１１は、スキャナ１６を介して、商品に付された無線タグやバーコードなどのコードシンボルから商品コードを読み取り、これを出力する。なお、読取部１１１は、スキャナ１６のカメラが撮像した画像データに基づくオブジェクト認識により商品を特定してもよい。

登録部１１２は、読取部１１１が出力した商品コードに基づいて商品マスタから情報（商品情報）を取得し、取得した商品情報を登録する。ここで、登録とは、取得した商品情報を、所定の記憶領域（例えば記憶部１０４に設けられる）に、販売データとして記憶させることである。なお、登録部１１２は、読取部１１１が出力する商品情報によらず、タッチパネルディスプレイ１７への操作入力により特定された商品を登録してもよい。

操作部１１３は、操作者による操作を受け付ける。より具体的には、操作部１１３は、タッチパネルディスプレイ１７が受けた操作入力に応じた信号を出力する。

決済部１１４は、登録部１１２が登録した商品の決済にかかる処理（決済処理）を行う。例えば、決済部１１４は、登録部１１２が登録した商品の価格の合計額を算出する。また、決済部１１４は、入出金部１５に投入された金額から上記合計額を減算して、釣銭を算出する。そして、決済部１１４は、入出金部１５に釣銭を排出させる。

撮像部１１５は、カメラ２１によりセルフＰＯＳ端末１０の操作者が映り込む範囲を撮像して画像を出力する。より具体的には、撮像部１１５は、カメラ２１を制御し、カメラ２１が出力する撮像画像をサーバ３００等に出力（送信）する。なお、セルフＰＯＳ端末１０の操作者が映り込む範囲とは、操作者がいると想定される位置を含む範囲であり、操作部１１３の向かい側あたりで、セルフＰＯＳ端末１０の正面側である。

サーバ３００の画像処理部３１１は、カメラ２１の撮像画像を解析する処理（解析処理）を実行する。解析処理において、画像処理部３１１は、例えば特徴点を用いて撮像画像を解析し、その結果（解析結果）から、撮像方向が基準からずれたか否かを判断し、その結果（判断結果）を示す情報を、セルフＰＯＳ端末１０に出力（送信）する。

特徴点を用いた画像解析について概略的に説明する。特徴点の抽出や比較には、例えば、ＳＩＦＴ（Ｓｃａｌｅ－Ｉｎｖａｒｉａｎｔ Ｆｅａｔｕｒｅ Ｔｒａｎｓｆｏｒｍ、スケール不変の特徴変換）を用いる。なお、特徴点の抽出や比較は、テンプレートマッチングやディープラーニング等の他の手法によって行われても構わない。

解析処理において、画像処理部３１１は、例えば、まず、撮像画像から特徴点を複数箇所選出し、それら特徴点の座標およびパターン等の特徴量を記録する。解析処理の対象とする撮像画像は、基準のものと、運用中のものである。基準となる撮像画像は、セルフＰＯＳ端末１０の設置時のものや、或いは、開店前の起動時などのものである。また、運用中の撮像画像は、登録処理や決済処理が行われている間のものである。

次に画像処理部３１１は、基準とされる撮像画像から抽出された特徴点の座標およびパターン等の特徴量と、運用中の撮像画像から抽出された特徴点の座標およびパターン等の特徴量とを比較する。比較により、画像処理部３１１は、特徴点の照合（マッチング）を行う。照合において画像処理部３１１は、パターンが似ているかの程度を数値（類似度）に落とし込み、類似度が高い特徴点を対応するものであると判断する。

次に画像処理部３１１は、上記照合にかかる処理において対応するとされた特徴点の座標が、基準とされる撮像画像のものと運用中の撮像画像のものとで異なるかを判断し、異なっていれば、その程度を判断する。

例えば画像処理部３１１は、座標の位置の差が閾値を超えるか否かを判断する。閾値は、ずれを許容する限界の値として適する値であり、予め設定され、所定の記憶領域（例えば記憶部１０４）に記憶されている。次に画像処理部３１１は、特徴点の座標の位置の差が閾値を超えていた場合、カメラ２１の向きがずれていると判断する。

上記処理を、図を参照して説明する。図４および図５は、実施形態に係るカメラ２１の撮像画像の一例を示す図であって、図４は基準とされる撮像画像５１０の一例であり、図５は運用中の撮像画像５２０の一例である。図４および図５が示す撮像画像５１０，５２０には、店内の様子が映り込んでいる。運用中の撮像画像５２０は、基準とされる撮像画像５１０よりも、向かってやや左側の範囲を映したものとなっている。つまり、運用中のカメラ２１の向きは、基準時よりも、やや左にずれている。

図４に示すように、基準とされる撮像画像５１０から、特徴点Ａ～Ｅが選出されているとする。また、図５に示すように、運用中の撮像画像５２０からは、基準とされる撮像画像５１０のものと対応する特徴点Ａ，Ｃ，Ｄが選出されている。このように、特徴点の対応づけは、基準である撮像画像５１０が含む全ての特徴点が運用中の撮像画像５２０にも含まれている必要はなく、いくつかが含まれていれば足りる。

この場合、両撮像画像５１０，５２０における特徴点Ａ，Ｃ，Ｄの座標の位置の差を算出し、閾値と比較する。差が閾値を超えていた場合には、ずれを許容する限界を超えたと判断できるので、画像処理部３１１は、カメラ２１の撮像方向が基準からずれていると判断する。このように、画像処理部３１１は、カメラ２１の撮像画像を解析することにより、カメラ２１の基準時からのずれを検知することができる。

そして、判断を終えた画像処理部３１１は、カメラ２１の撮像方向が基準からずれているか否かを示す情報を、セルフＰＯＳ端末１０に送信する。

図３に戻り、取得部１１６は、サーバ３００から画像処理部３１１が出力する上述の判断結果を受信することにより、カメラ２１の撮像方向が基準からずれているか否かを示す情報を取得する。判断結果が、撮像方向が基準からずれていることを示す情報であった場合、取得部１１６は、対策部１１７に対策を依頼する情報（信号）を出力する。

対策部１１７は、取得部１１６がカメラ２１の撮像方向が基準からずれていることを示す情報を取得すると、操作者による不正な操作を防止するための対策処理を行う。対策処理において、具体的には、対策部１１７は、例えば以下を実行する。

対策部１１７は、登録部１１２による登録処理の進行や、決済部１１４による決済処理の進行を、停止させる。より詳しくは、対策部１１７は、登録部１１２による登録処理が未実行であれば登録処理を実行不可能にし、登録部１１２による登録処理が実行中であれば登録処理を一時停止または中止する。また、対策部１１７は、決済部１１４による決済処理が未実行であれば決済処理を実行不可能にし、決済部１１４による決済処理が実行中であれば決済処理を一時停止または中止する。

また、対策部１１７は、店員が参照可能な装置（管理装置）に、カメラ２１の撮像方向が基準からずれていることを報せる通知を、送信する。これを受けた店員は、必要に応じた対処を行う。

さらに、対策部１１７は、モータ２２を制御することにより、カメラ２１の撮像方向を変えて、基準に近づけるようにしてもよい。

以下、図面を参照して、実施形態に係るセルフＰＯＳ端末１０で実行される処理の流れについて説明する。図６は、実施形態に係るセルフＰＯＳ端末１０において実行される処理の一例を示すフローチャートである。

制御部１１０は、カメラ２１で撮像すると（ステップＳ１）、画像処理にうつる（ステップＳ２）。本実施形態では画像処理はサーバ３００で行うので、制御部１１０は、撮像画像をサーバ３００に出力する。

次に制御部１１０は、画像処理の結果を取得する（ステップＳ３）。本実施形態では画像処理はサーバ３００で行うので、制御部１１０は、画像処理結果をサーバ３００から受信する。画像処理結果は、画像処理による解析の結果であって、具体例としてはカメラ２１の撮像方向が基準からずれていることを示す情報である。

次に制御部１１０は、ステップＳ３で取得した情報に基づいて、カメラ２１の撮像方向のずれの有無を判断する（ステップＳ４）。ずれがないと判断される場合（ステップＳ４のＮｏ）、制御部１１０は処理を初めに戻す。

ステップＳ４においてカメラ２１の撮像方向にずれがあると判断される場合（ステップＳ４のＹｅｓ）、制御部１１０は、対策処理を行う（ステップＳ５）。対策処理で、制御部１１０（対策部１１７）は、例えば、登録部１１２による登録処理の進行の停止や、決済部１１４による決済処理の進行の停止、さらに、管理装置への通知送信などを行う。

なお、登録処理や決済処理は、例えば、セルフＰＯＳ端末１０を確認した店員の停止解除の操作を受けて、再開される。また、制御部１１０（対策部１１７）がモータ２２を制御してカメラ２１の撮像方向を自動修正するのではない場合、セルフＰＯＳ端末１０の確認に来た店員が、手動でカメラ２１の撮像方向を修正した後に、登録処理および決済処理を再開する操作を行う。

以上のような実施形態によれば、カメラ２１の撮像方向が基準のものから変わっていた場合にこれを検知して異常であるとすることができる。また、上記実施形態によれば、カメラ２１の撮像内容が異常である場合に、登録処理や決済処理の進行を定置することができるので、販売データ処理への不都合の発生を防止することができる。これにより、カメラ２１による操作ミスや不正行為の検知が、適切に行われるようにすることができる。

なお、上記実施形態では、画像処理部３１１は、取得部１１６に、撮像方向が基準からずれているか否かの判断結果を示す情報を出力しているが、実施にあたっては、画像処理部３１１は以下のような他の情報を出力するのであってもよい。

例えば、画像処理部３１１は、判断結果ではなく、撮像画像を解析した結果（解析結果）そのものを示す情報を、セルフＰＯＳ端末１０に出力してもよい。この場合、セルフＰＯＳ端末１０の取得部１１６は、解析結果に基づいて、撮像方向が基準からずれたか否かの判断を行い、判断結果を得る（取得する）。

また、画像処理部３１１は、撮像方向が基準からずれていると判断した場合のみ、その旨を示す情報を出力してもよい。つまり、画像処理部３１１の判断結果のうち、カメラ２１の撮像方向は基準からずれていなかったという内容の情報は、取得部１１６へ出力するものから除外されてもよい。

また、解析処理を行う画像処理部３１１を、セルフＰＯＳ端末１０が備えても構わない。

また、上記実施形態では、カメラ２１を１台備えるセルフＰＯＳ端末１０を例に説明したが、販売データ処理装置や会計装置には、２台以上のカメラ２１を備えるものもある。そこで、実施にあたっては、２台以上のカメラ２１を備える装置に実施形態の技術を適用しても構わない。その場合には、カメラ２１全台に上記実施形態の技術を適用してもよいし、或いは一部のカメラ２１に適用してもよい。

また、２台以上のカメラ２１を備える販売データ処理装置や会計装置においては、各カメラ２１の撮像範囲は、例えば、１台は操作者の手元を撮像し、他の１台は操作者の顔を撮像し、他の１台は店内を撮像するというように、それぞれ異ならせて設定されていると考えられる。そのような場合にも、上記実施形態によれば、各カメラ２１について、基準となる撮像画像５１０を準備し、運用中の撮像画像５２０を解析すれば、カメラ２１のずれの有無を判断することができる。

また、カメラ２１や撮像部１１５、モータ２２が、セルフＰＯＳ端末１０に含まれない別体の監視カメラを構成するものであっても、同様に、対策部１１７による対策処理を行うようにしてもよい。

なお、上記実施形態のセルフＰＯＳ端末１０は入出金部１５を備えたものであるが、例えばセルフＰＯＳ端末１０が現金を取り扱わないキャッシュレス端末として構成される場合等には、入出金部１５は設けられなくて構わない。

上述した実施形態は、上述した各装置が有する構成又は機能の一部を変更することで、適宜に変形して実施することも可能である。そこで、以下では、上述した実施形態に係るいくつかの変形例を他の実施形態として説明する。なお、以下では、上述した実施形態と異なる点を主に説明することとし、既に説明した内容と共通する点については同じ符号を用い、詳細な説明を省略する。また、以下で説明する変形例は、個別に実施されてもよいし、適宜組み合わせて実施されてもよい。

（第２の実施形態）
本実施形態では、セミセルフタイプのＰＯＳ端末（以下、セミセルフＰＯＳ端末とする）に、上記実施形態の技術を適用した例について説明する。セミセルフＰＯＳ端末は、商品登録の後の決済処理にかかる操作を買物客が操作者となって行う装置であって、会計装置の一例である。

本実施形態において、決済処理に先立つ登録処理は、例えば、通常のＰＯＳ端末への店員の操作によって行われる。なお、登録処理は、買物客自身により行われる場合もある。買物客は、例えば、買物客が所持するスマートフォンで起動されたＰＯＳアプリケーション（スマホＰＯＳ）や、カートＰＯＳ（店内備付のカートに付属した端末）への買物客の操作等によって、商品の登録を行う。

セミセルフＰＯＳ端末は、上記実施形態におけるセルフＰＯＳ端末１０から、スキャナ１６、読取部１１１、登録部１１２などを除いた構成のものである。或いは、セルフＰＯＳ端末１０においてそれら（スキャナ１６、読取部１１１、登録部１１２など）が非稼働状態に設定されることで、セルフＰＯＳ端末１０がセミセルフＰＯＳ端末として稼働するのであってもよい。

本実施形態においても、図６に示すフローチャートのように、制御部１１０が機能する。本実施形態における対策処理（ステップＳ５）において、制御部１１０は、決済部１１４による決済処理の進行の停止の他、必要に応じて、管理装置への通知送信や、モータ２２を制御してのカメラ２１の撮像方向の自動修正を行う。

このように、第２の実施形態のセミセルフＰＯＳ端末によれば、第１の実施形態と同様に、操作ミスや不正行為を検知するためのカメラ２１の撮像内容が異常である場合に販売データ処理への不都合の発生を防止することができる。

上記実施形態の各装置で実行されるプログラムは、上述した各部（読取部１１１、登録部１１２、操作部１１３、決済部１１４、撮像部１１５、取得部１１６、対策部１１７、画像処理部３１１）を必要に応じて含むモジュール構成となっている。ＣＰＵ（プロセッサ）は、上記記憶媒体からプログラムを読み出して実行することにより、上記各部を主記憶装置上にロードする。これにより、読取部１１１、登録部１１２、操作部１１３、決済部１１４、撮像部１１５、取得部１１６、対策部１１７、画像処理部３１１が、主記憶装置上に生成される。

上述の実施形態の各装置で実行されるプログラムは、ＲＯＭ等に予め組み込まれて提供される。上述の実施形態の各装置で実行されるプログラムは、インストール可能な形式又は実行可能な形式のファイルでＣＤ－ＲＯＭ、フレキシブルディスク（ＦＤ）、ＣＤ－Ｒ、ＤＶＤ（Digital Versatile Disk）等のコンピュータで読み取り可能な記録媒体に記録して提供するように構成してもよい。

さらに、上述の実施形態の各装置で実行されるプログラムを、インターネット等のネットワークに接続されたコンピュータ上に格納し、ネットワーク経由でダウンロードさせることにより提供するように構成してもよい。また、上述の実施形態の各装置で実行されるプログラムをインターネット等のネットワーク経由で提供又は配布するように構成してもよい。

本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更、組み合わせを行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。

１０…セルフＰＯＳ端末、
１１…本体、
１２…カゴ置台、
１３…袋詰め台、
１３１…台座、１３２…袋掛けフック、１３３…一時置台、１３４…支柱、
１４…計量部、
１５…入出金部、
１６…スキャナ、１６１…読取窓、
１７…タッチパネルディスプレイ、
１８…表示灯、
１９…カードリーダ、
２０…プリンタ、
２１…カメラ、２２…モータ、
１０１…ＣＰＵ、１０２…ＲＯＭ、１０３…ＲＡＭ、
１０４…記憶部、１０５…通信Ｉ／Ｆ、１０９…システムバス、
１１０…制御部、
１１１…読取部、１１２…登録部、１１３…操作部、１１４…決済部、
１１５…撮像部、１１６…取得部、１１７…対策部、
３００…サーバ、３１０…制御部、３１１…画像処理部、
５１０，５２０…撮像画像。

特開２００１－３５９０８６号公報

Claims (6)

1. 取引対象である商品の情報を所定の記憶部に記憶させる登録処理を行う登録部と、
   前記登録部が登録した商品の決済にかかる決済処理を行う決済部と、
   操作者による操作を受け付ける操作部と、
   カメラにより前記操作者が映り込む範囲を撮像した画像の解析により得られる情報であって前記カメラの撮像方向が基準からずれていることを示す情報を取得する取得部と、
   前記取得部が前記情報を取得すると、操作者による不正な操作を防止するための対策処理を行い、当該対策処理において、前記登録処理または前記決済処理の進行を停止させる対策部と、
   を備える販売データ処理装置。
2. 前記対策部は、前記対策処理において、店員が参照可能な装置に、前記カメラの撮像方向が基準からずれていることを報せる通知を送信する
   請求項１に記載の販売データ処理装置。
3. 前記対策部は、前記対策処理において、前記カメラの撮像方向を変える駆動部の制御により前記カメラの撮像方向を基準に近づける
   請求項１に記載の販売データ処理装置。
4. 取引対象として登録された商品の決済にかかる決済処理を行う決済部と、
   操作者による操作を受け付ける操作部と、
   カメラにより前記操作者が映り込む範囲を撮像した画像の解析により得られる情報であって前記カメラの撮像方向が基準からずれていることを示す情報を取得する取得部と、
   前記取得部が前記情報を取得すると、操作者による不正な操作を防止するための対策処理を行い、当該対策処理において、前記決済処理の進行を停止させる対策部と、
   を備える会計装置。
5. 操作者による操作を受け付ける操作部を備え、取引対象である商品の情報を所定の記憶部に記憶させる登録処理と、前記記憶部に記憶された商品の決済にかかる決済処理との少なくともいずれかを実行する装置のコンピュータを、
   カメラにより前記操作者が映り込む範囲を撮像した画像の解析により得られる情報であって前記カメラの撮像方向が基準からずれていることを示す情報を取得する取得部と、
   前記取得部が前記情報を取得すると、操作者による不正な操作を防止するための対策処理を行い、当該対策処理において、前記登録処理または前記決済処理の進行を停止させる対策部と、
   として機能させるためのプログラム。
6. 前記対策部は、前記対策処理において、店員が参照可能な装置に、前記カメラの撮像方向が基準からずれていることを報せる通知を送信する
   請求項５に記載のプログラム。