JP5329610B2 - 説明支援システム、説明支援方法及び説明支援プログラム - Google Patents

Description

本発明は、コンピュータ端末を利用して行なわれる説明を支援するための説明支援システム、説明支援方法及び説明支援プログラムに関する。

営業活動等において商品説明を行なう場合、表現等に注意しなければならない場合がある（例えば、特許文献１を参照。）。例えば、金融商品の販売においては、各種リスクや権利行使・中途解約等の制限等の重要事項について購入希望者に説明する必要がある。通常、このような商品は、購入希望者と対面して商品のリスク等の重要事項を説明する。

また、コールセンタにおけるオペレータが使う表現の不適切性を指摘するためのオペレータ業務支援方法も検討されている（例えば、特許文献２を参照。）。この文献に記載された技術では、入力された音声をテキストに変換する音声認識を行なう。そして、キーワードを記憶させた言い換え規則記憶手段から、テキストデータに含まれるキーワードを検出し、検出情報を出力する。

特開２００５−２９３２２１号公報（第３頁） 国際公開第２００７／０９４３４４号公報（第１頁、図１）

特許文献に記載されているように、商品説明においては、各種表現に注意したり、説明義務がある項目に注意したりする必要がある。このような場合、タイムリーに注意喚起する必要がある。

また、管理者等の第三者が、担当者の表現を確認した方がよい場合もある。この場合には、第三者が説明時の状況を的確に把握する必要がある。更に、状況把握の負担が軽いことが望ましい。

本発明は、上記問題点を解決するためになされたものであり、コンピュータ端末を利用して行なわれる説明を支援するための説明支援システム、説明支援方法及び説明支援プログラムを提供することにある。

上記問題点を解決するために、請求項１に記載の発明は、説明資料ファイルと、前記説明資料ファイルに関連付けられて、ＮＧワードが記録されたチェックリストとを記憶したデータ記憶手段と、前記説明資料ファイルを表示する第１ディスプレイと、音声認識結果を記録する認識結果記憶手段と、バックヤード端末に接続された制御手段とを備えたコンピュータ端末、及び前記コンピュータ端末に接続された第２ディスプレイを備えた説明支援システムであって、前記制御手段が、前記第１ディスプレイ、第２ディスプレイに同期して説明資料ファイルを表示する同期エリアと、前記第２ディスプレイには表示しない非同期エリアとを含む画面を、前記第１ディスプレイに表示する手段と、前記第１ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する手段と、集音した音声を音声認識によりテキストに変換した音声認識結果を前記認識結果記憶手段に記録する手段と、前記音声認識結果において、前記チェックリストに含まれるＮＧワードを検知した場合には、検知したＮＧワードに対応した注意喚起メッセージを、前記第１ディスプレイの前記非同期エリアに表示し、前記ＮＧワードの検知時刻を特定し、この検知時刻前後の所定時間の集音時刻範囲の音声認識結果を前記認識結果記憶手段から抽出するとともに、表示された前記注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、前記対応済み入力された時期までの音声認識結果を抽出し、前記音声認識結果を含むＮＧワード通知をバックヤード端末に送信する手段とを備えたことを要旨とする。

請求項２に記載の発明は、請求項１に記載の説明支援システムにおいて、前記ＮＧワー
ドは、複数のキーワードの組み合わせから構成され、前記制御手段が、前記第１ディスプレイの前記非同期エリアに、前記ＮＧワードに対応した注意喚起メッセージを出力することを要旨とする。

請求項３に記載の発明は、請求項１又は２に記載の説明支援システムにおいて、前記制御手段が、前記バックヤード端末から、前記ＮＧワード通知に応じた支援情報を受信した場合には、前記第１ディスプレイの前記非同期エリアに支援情報を出力する手段を更に備えたことを要旨とする。

請求項４に記載の発明は、請求項１〜３のいずれか一つに記載の説明支援システムにおいて、前記ＮＧワードは、説明が必要な項目についてのキーワードであり、前記制御手段が、前記チェックリストを、前記第１ディスプレイの前記非同期エリアに表示する手段を更に備え、前記音声認識結果に基づいて、前記非同期エリアに表示されたチェックリストに含まれるＮＧワードに関連する項目を消し込むことを要旨とする。

請求項５に記載の発明は、説明資料ファイルと、前記説明資料ファイルに関連付けられて、ＮＧワードが記録されたチェックリストとを記憶したデータ記憶手段と、前記説明資料ファイルを表示する第１ディスプレイと、音声認識結果を記録する認識結果記憶手段と、バックヤード端末に接続された制御手段とを備えたコンピュータ端末、及び前記コンピュータ端末に接続された第２ディスプレイを備えた説明支援システムを用いて、説明支援を行なう方法であって、前記制御手段が、前記第１ディスプレイ、第２ディスプレイに同期して説明資料ファイルを表示する同期エリアと、前記第２ディスプレイには表示しない非同期エリアとを含む画面を、前記第１ディスプレイに表示する段階と、前記第１ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する段階と、集音した音声を音声認識によりテキストに変換した音声認識結果を前記認識結果記憶手段に記録する段階と、前記音声認識結果において、前記チェックリストに含まれるＮＧワードを検知した場合には、検知したＮＧワードに対応した注意喚起メッセージを、前記第１ディスプレイの前記非同期エリアに表示し、前記ＮＧワードの検知時刻を特定し、この検知時刻前後の所定時間の集音時刻範囲の音声認識結果を前記認識結果記憶手段から抽出するとともに、表示された前記注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、前記対応済み入力された時期までの音声認識結果を抽出し、前記音声認識結果を含むＮＧワード通知をバックヤード端末に送信する段階とを実行することを要旨とする。

請求項６に記載の発明は、説明資料ファイルと、前記説明資料ファイルに関連付けられて、ＮＧワードが記録されたチェックリストとを記憶したデータ記憶手段と、前記説明資料ファイルを表示する第１ディスプレイと、音声認識結果を記録する認識結果記憶手段と、バックヤード端末に接続された制御手段とを備えたコンピュータ端末、及び前記コンピュータ端末に接続された第２ディスプレイを備えた説明支援システムを用いて、説明支援を行なうためのプログラムであって、前記制御手段を、前記第１ディスプレイ、第２ディスプレイに同期して説明資料ファイルを表示する同期エリアと、前記第２ディスプレイには表示しない非同期エリアとを含む画面を、前記第１ディスプレイに表示する手段、前記第１ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する手段、集音した音声を音声認識によりテキストに変換した音声認識結果を前記認識結果記憶手段に記録する手段、前記音声認識結果において、前記チェックリストに含まれるＮＧワードを検知した場合には、検知したＮＧワードに対応した注意喚起メッセージを、前記第１ディスプレイの前記非同期エリアに表示し、前記ＮＧワードの検知時刻を特定し、この検知時刻前後の所定時間の集音時刻範囲の音声認識結果を前記認識結果記憶手段から抽出するとともに、表示された前記注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、前記対応済み入力された時期までの音声認識結果を抽出し、前記音声認識結果を含むＮＧワード通知をバックヤード端末に送信する手段として機能させることを要旨とする。

（作用）
請求項１、５又は６に記載の発明によれば、制御手段が、ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する。そして、集音した音声を音声認識によりテキストに変換した音声認識結果を認識結果記憶手段に記録する。そして、音声認識結果において、チェックリストに含まれるキーワードを検知した場合には、検知したキーワードを含めたメッセージをディスプレイに表示するとともに、認識結果記憶手段からキーワードの集音時期の音声認識結果を抽出し、バックヤード端末に説明状況を送信する。これにより、チェックリストを用いて、説明内容を確認することができる。更に、バックヤード端末においては、音声認識結果により説明状況を確認することができる。

本発明によれば、キーワードとして、説明時に使用を避けるＮＧワードを用いる。そして、制御手段が、ＮＧワードについて注意喚起メッセージを出力する。これにより、ＮＧワードが含まれる場合、注意を喚起して訂正させることができる。

本発明によれば、制御手段が、ディスプレイに表示された注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、対応済み入力された時期までの音声認識結果をバックヤード端末に送信する。これにより、バックヤード端末において、対応状況を確認することができる。

請求項２に記載の発明によれば、ＮＧワードは、複数のキーワードの組み合わせから構成されており、制御手段が、第１ディスプレイの非同期エリアに、ＮＧワードに対応した注意喚起メッセージを出力する。これにより、組み合わせによって問題が生じる場合にも対応を促すことができる。

請求項３に記載の発明によれば、制御手段が、バックヤード端末から、ＮＧワード通知に応じた支援情報を受信した場合には、第１ディスプレイの非同期エリアに支援情報を出力する。これにより、バックヤードからの支援を受けて対応することができる。

請求項４に記載の発明によれば、ＮＧワードとして、説明が必要な項目についてのキーワードを用いる。そして、制御手段が、説明が必要な項目についてのチェックリストを、第１ディスプレイの非同期エリアに表示する。そして、音声認識結果に基づいて、非同期エリアに表示されたチェックリストに含まれるＮＧワードに関連する項目を消し込む。これにより、説明すべき内容を把握することができる。従って、説明が必要な項目について漏れなく説明することができる。

本発明によれば、コンピュータ端末を利用して行なわれる説明を支援するための説明支援システム、説明支援方法及び説明支援プログラムを提供することができる。

本発明の実施形態の説明支援システムの説明図。 本実施形態において用いるタブレット端末の機能ブロックの説明図。 本実施形態のタブレット端末における表示画面の説明図。 本実施形態の処理手順の説明図。 本実施形態の処理手順の説明図。 本実施形態の処理手順の説明図。 本実施形態の処理手順の説明図。

以下、本発明を具体化した説明支援システムの一実施形態を図１〜図７に従って説明する。本実施形態では、営業担当者が、顧客との対面販売において、説明資料を用いて商品説明を行なう場合を説明する。本実施形態では、図１に示すように、無線通信可能な範囲に設置されたタブレット端末１０（第２の端末）、タブレット端末２０（第１の端末）を用いる。更に、タブレット端末２０は、ネットワークを介してバックヤード端末３０に接続される。

タブレット端末１０は、商品説明を受ける顧客が用いるコンピュータ端末（子機）である。一方、タブレット端末２０は、商品説明を行なう営業担当者が用いるコンピュータ端末（親機）である。タブレット端末１０とタブレット端末２０とは、後述するように相互に通信を行なう。通信方式としては、例えば、Bluetooth （登録商標）等を用いることにより、近距離通信を行なう。そして、親機であるタブレット端末２０に表示された説明資料を、子機であるタブレット端末１０にも表示させて、商品説明を行なう。なお、通信方式は無線通信に限定されるものではなく、有線通信を用いることも可能である。

タブレット端末１０は、図１に示すように、制御部１１、データ記憶部１２、タッチパネルディスプレイ１５、マイク１６、無線通信部１７を備えている。一方、タブレット端末２０は、制御部２１、データ記憶部２２、タッチパネルディスプレイ２５、マイク２６、無線通信部２７を備えている。

タッチパネルディスプレイ（１５、２５）は入出力手段として機能し、ディスプレイ上に情報を出力するとともに、ディスプレイ表面へのタッチを検知した場合、タッチ位置（座標）を特定して各種操作処理（ポインティング処理、キー入力処理等）を行なう。

図３に示すように、タッチパネルディスプレイ１５には同期エリア１５１、タッチパネルディスプレイ２５には同期エリア２５１が設定される。タッチパネルディスプレイ２５の同期エリア２５１に表示されている内容が、タッチパネルディスプレイ１５の同期エリア１５１（同期画面）に拡大されて表示される。本実施形態では、同期エリア（１５１、２５１）には、説明資料ファイルが表示される。同期エリア２５１のフレームをタッチした状態でスライドさせた場合、フレームを水平移動させる制御を行なう。これにより、同期エリア２５１の全体移動や拡大、縮小を行なうことができる。

更に、タブレット端末２０のタッチパネルディスプレイ２５の同期エリア２５１においてタッチされた位置ａ１（第１ポインタ位置）は、後述するようにタブレット端末１０のタッチパネルディスプレイ１５上に、親機ポインタｂ１（第１ポインタ表示）が表示される。また、タブレット端末１０のタッチパネルディスプレイ１５においてタッチされた位置ｂ２（第２ポインタ位置）は、後述するようにタブレット端末２０のタッチパネルディスプレイ２５上に、子機ポインタａ２（第２ポインタ表示）として表示される。

更に、タッチパネルディスプレイ２５において、同期エリア２５１以外の画面領域には、同期開始ボタン２５２、同期停止ボタン２５３、説明義務リスト表示エリア２５４、バックヤード支援要請ボタン２５５、バックヤードメッセージエリア２５６等が表示される。

同期開始ボタン２５２は、同期エリア２５１の表示内容を同期エリア１５１に表示させる同期処理の開始を指示するアイコンである。一方、同期停止ボタン２５３は同期処理の停止を指示するアイコンである。

説明義務リスト表示エリア２５４には、説明資料ファイルを用いた商品説明において、説明すべき項目が列挙された説明義務リストが表示される。そして、この説明義務リスト表示エリア２５４において、説明済みの項目については、消込表示が行なわれる。

バックヤード支援要請ボタン２５５は、バックヤード端末３０を利用している管理者に支援を要請するためのアイコンである。このバックヤード端末３０から、管理者からのメッセージを受信した場合、タッチパネルディスプレイ２５のバックヤードメッセージエリア２５６に表示される。

マイク（１６、２６）は集音手段として機能する。ここでは、マイク１６では主に顧客の音声、マイク２６では主に営業担当者の音声を集音する。
無線通信部（１７、２７）は、通信可能な距離範囲内に存在する他の通信端末との間で、上述の通信方式により無線通信を行なう。この無線通信部（１７、２７）は、ペアリングにより他の通信端末と通信するための端末識別子に関するデータを保持している。

子機であるタブレット端末１０の制御部１１は、制御手段（ＣＰＵ、ＲＡＭ、ＲＯＭ等）を備え、後述する処理（画面操作段階、表示制御段階、録画段階、ポインタ転送段階、録音段階等の各処理等）を行なう。そのための説明支援プログラム（子機用）を実行することにより、制御部１１は、図２に示すように、画面操作手段１１０、表示制御手段１１１、録画手段１１３、ポインタ転送手段１１４、録音手段１１５として機能する。

画面操作手段１１０は、タッチパネルディスプレイ１５におけるタッチ操作による入力情報を取得する処理を実行する。
表示制御手段１１１は、タッチパネルディスプレイ１５の表示を制御する処理を実行する。本実施形態では、タブレット端末２０から同期エリア２５１の画面データを取得し、タブレット端末１０のタッチパネルディスプレイ１５の同期エリア１５１に表示する。表示制御手段１１１は、この同期エリア１５１を、タッチパネルディスプレイ１５上において可能な範囲で大きく表示させる。具体的には、同期エリア２５１と相似形状の同期エリア１５１を生成するとともに、同期エリア１５１の横幅又は高さが、タッチパネルディスプレイ１５の横幅又は高さに一致するように表示する。

録画手段１１３は、タッチパネルディスプレイ１５に表示された画面を、定期的にキャプチャしたキャプチャ画像データを生成する。そして、表示時刻情報に関連付けて、録画ファイルとしてデータ記憶部１２に記録する処理を実行する。この録画手段１１３は、タブレット端末１０とタブレット端末２０との間で画面同期処理が行なわれている期間中、録画ファイルを記録する。

ポインタ転送手段１１４は、タッチパネルディスプレイ１５にタッチされた位置ｂ２を特定し、この位置情報を親機のタブレット端末２０に送信する処理を実行する。ここでは、同期エリア１５１における相対位置を特定する座標情報を転送する。例えば、同期エリア１５１の横幅及び高さに対する比率によって表現された座標情報を用いる。

録音手段１１５は、マイク１６を用いて集音した音声を用いて録音ファイルを生成し、録音時刻情報に関連付けて、データ記憶部１２に記録する処理を実行する。この録音手段１１５は、タブレット端末２０から取得した説明開始指示から説明終了指示までの期間中、録音ファイルを記録する。

データ記憶部１２には、録音ファイル、録画ファイルが記録される。本実施形態では、録音手段１１５によって生成された録音ファイルや、録画手段１１３によって生成された録画ファイルが記録される。録画ファイル領域は録画データ記憶手段として機能する。そして、録音ファイル領域や録画ファイル領域には、時刻に関する情報（録音時刻、表示時刻情報）が関連付けられた音声データや録画データが記録される。

親機であるタブレット端末２０の制御部２１は、制御手段（ＣＰＵ、ＲＡＭ、ＲＯＭ等）を備え、後述する処理（画面操作段階、表示制御段階、同期エリア設定段階、画面転送段階、ポインタ転送段階等の各処理等）を行なう。そのための説明支援プログラム（親機用）を実行することにより、制御部２１は、図２に示すように、画面操作手段２１０、表示制御手段２１１、同期エリア設定手段２１２、画面転送手段２１３、ポインタ転送手段２１４として機能する。更に、制御部２１は、後述する処理（録音段階、キーワード抽出段階、ＮＧワード確認段階、説明義務確認段階、バックヤード連絡段階等の各処理等）を行なう。そして、制御部２１は、図２に示すように、録音手段２１５、キーワード抽出手段２１６、ＮＧワード確認手段２１７、説明義務確認手段２１８、バックヤード連絡手段２１９として機能する。

画面操作手段２１０は、タッチパネルディスプレイ２５におけるタッチ操作による画面操作を制御する処理を実行する。
表示制御手段２１１は、タッチパネルディスプレイ２５における表示を制御する処理を実行する。

同期エリア設定手段２１２は、タッチパネルディスプレイ２５において指定された同期表示領域（同期エリア２５１）を特定する処理を実行する。同期エリア設定手段２１２は、タッチパネルディスプレイ２５において指定された同期エリア２５１の座標に関するデータを記憶する。この同期エリア２５１内に表示された画像が、子機のタブレット端末１０のタッチパネルディスプレイ１５に表示される。

画面転送手段２１３は、同期エリア２５１内に表示された内容（画像データ）を、タブレット端末１０に転送する処理を実行する。
ポインタ転送手段２１４は、タッチパネルディスプレイ２５においてタッチされた位置ａ１の位置情報をタブレット端末１０に転送する処理を実行する。ここでは、同期エリア２５１における相対位置を特定する座標情報を転送する。例えば、同期エリア２５１の横幅及び高さに対する比率によって表現された座標情報を用いる。

録音手段２１５は、マイク２６によって集音された音声を用いて録音ファイルを生成し、データ記憶部２２に記録する処理を実行する。
キーワード抽出手段２１６は、マイク２６によって集音された音声の音声認識処理により、テキストに変換した音声認識結果をデータ記憶部２２に記録する処理を実行する。そして、キーワード抽出手段２１６は、音声認識結果と、データ記憶部２２の説明義務リスト及びＮＧワードリストに記録されたキーワードとをマッチングする処理（キーワードスポッティング処理）を実行する。

ＮＧワード確認手段２１７は、キーワードスポッティングされたテキストを用いて、発言の中で含まれるＮＧワードを特定する処理を実行する。更に、ＮＧワード確認手段２１７は、ＮＧワードに対する対応状況に応じて、バックヤード端末３０に通知の要否を判定するためのＮＧワード通知判定基準時間に関するデータを保持している。更に、ＮＧワード確認手段２１７は、バックヤード端末３０に送信する録音データの録音期間（所定時間）に関するデータを保持している。

説明義務確認手段２１８は、キーワードスポッティングされたテキストを用いて、説明すべき内容の説明状況を確認する処理を実行する。更に、説明義務確認手段２１８は、説明義務項目の消込状況に応じて、バックヤード端末３０に通知の要否を判定するための説明義務通知判定基準時間に関するデータを保持している。更に、説明義務確認手段２１８は、バックヤード端末３０に送信する録音データの録音期間（所定時間）に関するデータを保持している。
バックヤード連絡手段２１９は、バックヤード端末３０に、説明状況（説明義務項目の消込状況やＮＧワードの対応状況）を通知する処理を実行する。

データ記憶部２２には、説明資料ファイル、説明義務リスト、ＮＧワードリスト、確認対象データ、録音ファイル、音声認識結果ファイルが記録される。本実施形態では、説明義務リスト及びＮＧワードリストが、キーワードが記録されたチェックリストとして機能する。

説明資料ファイル領域には、商品説明において用いる文書ファイルが記録される。本実施形態では、スライド形式のファイルを用いる。この説明資料ファイルには、説明対象の商品を特定する商品コードや商品名を関連付けられて記録されている。

説明義務リスト領域には、商品コードに関連付けられた説明義務リストが記録されている。説明義務リストには、この商品コードの商品の説明時に説明する必要がある項目のキーワードが記録されている。説明すべき項目が複数ある場合には、すべての項目に対応するキーワードが記録されている。

ＮＧワードリスト領域には、商品説明時に使用を避ける単語等、注意すべき表現に含まれるキーワード（ＮＧワード）が記録されている。
確認対象データ領域には、商品説明の対象商品の説明義務リストや、検知したＮＧワードが仮記憶される。この説明義務リストには、説明資料ファイルがオープンされた時刻（説明開始時刻）に関するデータが関連付けられて記録される。更に、説明義務リストの各項目には、音声認識においてキーワードを検知した時刻（確認時刻）に関するデータが関連付けられて記録される。また、ＮＧワードには、ＮＧワードを検知した検知時刻に関するデータが関連付けられて記録される。更に、対応済み入力が行なわれた場合には、ＮＧワードに対して対応時刻に関するデータが関連付けられて記録される。

録音ファイル領域は録音データ記憶手段として機能する。そして、録音ファイル領域には、録音手段２１５によって生成された録音ファイルが記録される。録音ファイルには、音声を集音した時刻に関する情報（録音時刻情報）が関連付けられて、音声データが記録される。

音声認識結果ファイル領域は、認識結果記憶手段として機能する。そして、音声認識結果ファイル領域には、音声認識処理により、音声をテキストに変換した認識結果ファイルが記録される。音声認識結果ファイルには、テキストを生成した音声を集音した時刻（集音時期）に関する情報が関連付けられて、音声データが記録される。

バックヤード端末３０は、営業担当者を支援する管理者が用いるコンピュータ端末である。このバックヤード端末３０には、ディスプレイ等の出力手段や、マイク、ポインティングデバイスやキーボードからなる入力手段を備える。更に、バックヤード端末３０は、マイクにより集音した音声をテキスト化する音声認識手段を備える。

次に、この説明支援システムにおける動作を、図４〜図７を用いて説明する。ここでは、画面連携処理、キーワード対応処理、ＮＧワード対応処理、バックヤード支援処理の順番に説明する。

（画面連携処理）
まず、画面連携処理を、図４を用いて説明する。この処理は、顧客と対面して商品説明を行なう場合に行なわれる。この場合、無線通信部（１７、２７）を介して、タブレット端末１０とタブレット端末２０とをペアリングしておく。

そして、タブレット端末２０の制御部２１は、説明開始処理を実行する（ステップＳ１−１）。具体的には、営業担当者が、顧客に対して商品説明を行なう場合、タブレット端末２０において説明支援プログラムを起動し、説明開始指示を入力する。そして、営業担当者は、タブレット端末２０のデータ記憶部２２に格納された説明資料ファイルの中から、商品説明に用いる説明資料ファイルのアイコンを選択する。この場合、制御部２１の画面操作手段２１０は、アイコンに対応する説明資料ファイルの展開処理を行なう。そして、表示制御手段２１１は、タッチパネルディスプレイ２５上に、説明資料ファイルを表示する。

説明開始指示の入力を検知したタブレット端末２０の制御部２１は、録音処理を実行する（ステップＳ１−２）。具体的には、制御部２１の録音手段２１５は、マイク２６において集音を開始する。そして、録音手段２１５は、録音時刻に関連付けて、集音した音声の録音ファイルを生成し、データ記憶部２２に記録する。更に、録音手段２１５は、タブレット端末１０に対して、無線通信部２７を介して、録音開始指示を送信する。

無線通信部１７を介して、録音開始指示を受信したタブレット端末１０の制御部１１は、録音処理を実行する（ステップＳ１−３）。具体的には、制御部１１の録音手段１１５は、マイク１６において集音を開始する。そして、録音手段１１５は、録音時刻に関連付けて、集音した音声の録音ファイルを生成し、データ記憶部１２に記録する。

なお、営業担当者が、顧客に対する商品説明を終了する場合、タブレット端末２０において説明終了を入力する。この場合、録音手段２１５は、録音処理（ステップＳ１−２）を終了するとともに、タブレット端末１０に対して、無線通信部２７を介して、録音終了指示を送信する。そして、録音手段１１５も、録音処理（ステップＳ１−３）を終了する。

次に、タブレット端末２０の制御部２１は、同期エリアの設定処理を実行する（ステップＳ１−４）。具体的には、制御部２１の同期エリア設定手段２１２は、タッチパネルディスプレイ２５に、同期エリアの設定を促すメッセージを出力する。この場合、営業担当者は、タッチパネルディスプレイ２５上に、同期エリアを特定するための座標を入力する。本実施形態では、タッチパネルディスプレイ２５において、同期エリアの始点と終点となる位置をタッチすることにより、両点を対角線上に有する矩形領域を同期エリア２５１として設定する。例えば、商品説明において、タッチパネルディスプレイ２５に表示された説明資料ファイル全体を用いる場合には、説明資料ファイルが表示された領域を同期エリア２５１として設定する。また、商品説明において、説明資料ファイルの表示の一部を用いて説明する場合には、説明に用いる部分を同期エリア２５１として設定する。また、設定した同期エリア２５１を、縮小や拡大、スライド移動させる場合には、同期エリア２５１のフレームにタッチしてスライドさせる。

次に、タブレット端末２０の制御部２１は、同期開始処理を実行する（ステップＳ１−５）。具体的には、制御部２１の同期エリア設定手段２１２は、タッチパネルディスプレイ２５上において、同期エリア２５１以外の領域に、同期開始ボタン２５２と同期停止ボタン２５３とを表示する。ここで、画面操作手段２１０が同期開始ボタン２５２の選択を検知した場合、画面転送手段２１３に対して、同期処理の開始を指示する。

そして、タブレット端末２０の制御部２１は、画面同期処理を実行する（ステップＳ１−６）。具体的には、制御部２１の画面転送手段２１３は、同期エリア２５１に表示されている内容（画面データ）を、無線通信部２７を介してタブレット端末１０に転送する。この画面同期処理は、同期停止ボタン２５３が選択されるまで継続して行なわれる。

無線通信部１７を介して画面データを受信したタブレット端末１０の制御部１１は、画面表示処理を実行する（ステップＳ１−７）。具体的には、制御部１１の表示制御手段１１１は、画面データのサイズに合わせて、タッチパネルディスプレイ１５に同期エリア１５１を設定する。本実施形態では、上述したように、タッチパネルディスプレイ１５の横幅又は高さと一致するように同期エリア１５１として設定する。そして、表示制御手段１１１は、タブレット端末２０から取得した画面データを、タッチパネルディスプレイ１５上の同期エリア１５１に表示する。

更に、タブレット端末１０の制御部１１は、画面録画処理を実行する（ステップＳ１−８）。具体的には、制御部１１の録画手段１１３は、タッチパネルディスプレイ１５に表示された内容を定期的にキャプチャした録画ファイルを生成し、表示時刻に関連付けてデータ記憶部１２に記録する。

商品説明を中断や終了する場合、タブレット端末２０の制御部２１は、同期停止処理を実行する（ステップＳ１−９）。具体的には、制御部２１の画面操作手段２１０が、同期停止ボタン２５３の選択を検知した場合、画面転送手段２１３に対して、画面転送の停止を指示する。再度、同期させる場合には、同期開始ボタン２５２を選択することにより、ステップＳ１−５以降の処理が繰り返される。更に、画面転送手段２１３は、タブレット端末１０に対して録画停止指示を送信する。

録画停止指示を受信したタブレット端末１０の制御部１１は、録画停止処理を実行する（ステップＳ１−１０）。具体的には、制御部１１の録画手段１１３は、録画ファイルの記録を停止する。

また、画面同期処理（ステップＳ１−６）中においては、営業担当者は、必要に応じて説明資料ファイルの所定箇所を指差して説明する。この場合、タブレット端末２０の制御部２１は、画面上での指示検知処理を実行する（ステップＳ１−１１）。具体的には、制御部２１の画面操作手段２１０が、同期エリア２５１上でタッチを検知する。この場合、画面操作手段２１０は、この位置ａ１にポインタを表示する。そして、画面操作手段２１０が、同期エリア２５１上のタッチ位置（座標）をポインタ転送手段２１４に通知する。

この場合、タブレット端末２０の制御部２１は、指示位置の通知処理を実行する（ステップＳ１−１２）。具体的には、制御部２１のポインタ転送手段２１４は、タッチ位置について、同期エリア２５１上の相対座標を特定する。そして、ポインタ転送手段２１４は、無線通信部２７を介して、ポインタ表示指示をタブレット端末１０に送信する。このポインタ表示指示には、特定した位置情報（相対座標）を含める。

無線通信部１７を介して、ポインタ表示指示を受信したタブレット端末１０の制御部１１は、ポインタ表示処理を実行する（ステップＳ１−１３）。具体的には、制御部１１の表示制御手段１１１は、同期エリア１５１において、タブレット端末２０から取得した位置情報に対応する座標（同期エリア２５１上と相対した位置）に親機ポインタｂ１を表示する。このように表示された親機ポインタｂ１も、画面録画処理（ステップＳ１−８）において、録画ファイルに記録される。

また、顧客が、必要に応じて説明資料ファイルの所定箇所を指差すこともある。この場合、タブレット端末１０の制御部１１は、画面上での指示検知処理を実行する（ステップＳ１−１４）。具体的には、制御部１１の画面操作手段１１０が、同期エリア１５１上でタッチを検知する。この場合、画面操作手段１１０は、この位置ｂ２にポインタを表示する。そして、画面操作手段１１０が、同期エリア１５１上のタッチ位置（座標）をポインタ転送手段１１４に通知する。この位置ｂ２に表示されたポインタも、画面録画処理（ステップＳ１−８）において、録画ファイルに記録される。

この場合、タブレット端末１０の制御部１１は、指示位置の通知処理を実行する（ステップＳ１−１５）。具体的には、制御部１１のポインタ転送手段１１４は、タッチ位置について、同期エリア１５１上の相対座標を特定する。そして、ポインタ転送手段１１４は、無線通信部１７を介して、ポインタ表示指示をタブレット端末２０に送信する。このポインタ表示指示には、特定した位置情報（相対座標）を含める。

無線通信部２７を介して、ポインタ表示指示を受信したタブレット端末２０の制御部２１は、ポインタ表示処理を実行する（ステップＳ１−１６）。具体的には、制御部２１の表示制御手段２１１は、同期エリア２５１において、タブレット端末１０から取得した位置情報に対応する座標（同期エリア１５１上と相対した位置）に、子機ポインタａ２を出力する。

（キーワード対応処理）
次に、キーワード対応処理を、図５を用いて説明する。このキーワード対応処理は、営業担当者が、タブレット端末２０を用いて、商品説明を行なっている場合に実行される。

ここでは、タブレット端末２０の制御部２１は、説明義務リストの特定処理を実行する（ステップＳ２−１）。具体的には、制御部２１の説明義務確認手段２１８は、タッチパネルディスプレイ２５に表示されている説明資料ファイルの商品コードを特定する。次に、説明義務確認手段２１８は、データ記憶部２２から、この商品コードに関連付けられている説明義務リストを抽出し、確認対象データ領域に記録する。そして、説明義務確認手段２１８は、確認対象データ領域に記録した説明義務リストに関連付けて、説明開始時刻を記録する。

次に、タブレット端末２０の制御部２１は、説明義務リストの表示処理を実行する（ステップＳ２−２）。具体的には、制御部２１の説明義務確認手段２１８は、図３に示すように、タッチパネルディスプレイ２５上の説明義務リスト表示エリア２５４に説明義務リストを出力する。この段階では、説明義務リストの全項目が未消込の状態で表示される。

次に、タブレット端末２０の制御部２１は、音声取得処理を実行する（ステップＳ２−３）。具体的には、制御部２１のキーワード抽出手段２１６は、マイク２６において集音した音声を取得する。

次に、タブレット端末２０の制御部２１は、キーワード抽出処理を実行する（ステップＳ２−４）。具体的には、制御部２１のキーワード抽出手段２１６は、取得した音声の音声認識処理を実行して、テキストに変換する。そして、キーワード抽出手段２１６は、このテキストを音声認識結果として、集音時刻に関連付けて、データ記憶部２２の音声認識結果ファイルに記録する。次に、キーワード抽出手段２１６は、音声認識したテキストにおいて、形態素解析により、テキストに含まれる単語を特定する。そして、キーワード抽出手段２１６は、説明対象商品の説明義務リスト（確認対象データ領域に記録された説明義務リスト）及びＮＧワードリストに記録されているキーワードと、音声認識された単語とを比較する。

次に、タブレット端末２０の制御部２１は、説明義務項目かどうかについての判定処理を実行する（ステップＳ２−５）。具体的には、制御部２１のキーワード抽出手段２１６は、音声認識されたキーワードが、説明義務リストのキーワードとして記録されている場合には、説明義務項目と判定する。

説明義務項目と判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、説明義務リストの消込処理を実行する（ステップＳ２−６）。具体的には、制御部２１の説明義務確認手段２１８は、データ記憶部２２の確認対象データ領域に記録された説明義務リストにおいて、キーワードを検知した確認時刻を記録する。更に、説明義務確認手段２１８は、タッチパネルディスプレイ２５の説明義務リスト表示エリア２５４に表示された説明義務リストにおいて、特定したキーワードに対応する項目の消込表示を行なう。そして、ステップＳ２−３の処理に戻る。

一方、説明義務項目でないと判定した場合（ステップＳ２−５において「ＮＯ」の場合）、タブレット端末２０の制御部２１は、ＮＧワードかどうかについての判定処理を実行する（ステップＳ２−７）。具体的には、制御部２１のキーワード抽出手段２１６は、音声認識されたキーワードが、ＮＧワードリストのキーワードとして記録されている場合には、ＮＧワードと判定する。

ここで、ＮＧワードでないと判定した場合（ステップＳ２−７において「ＮＯ」の場合）、タブレット端末２０の制御部２１は、ステップＳ２−３以降の処理を繰り返す。
一方、ＮＧワードと判定した場合（ステップＳ２−７において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、ＮＧワード対応処理を実行する（ステップＳ２−８）。ここでは、検知したＮＧワードについては、図６に示すＮＧワード対応処理を実行するととともに、ステップＳ２−３以降の処理を繰り返す。

そして、タブレット端末２０の制御部２１は、定期的に説明義務項目の状況確認処理を実行する。
ここでは、タブレット端末２０の制御部２１は、説明義務リストの消込状況の取得処理を実行する（ステップＳ２−９）。具体的には、制御部２１の説明義務確認手段２１８は、確認対象データ領域に記録された説明義務リストにおいて、確認時刻の記録状況を取得する。

次に、タブレット端末２０の制御部２１は、未消込の項目が残っているかどうかについての判定処理を実行する（ステップＳ２−１０）。具体的には、制御部２１の説明義務確認手段２１８は、確認時刻が記録されていない項目がある場合には、未消込の項目があると判定する。

未消込の項目が残っていない場合（ステップＳ２−１０において「ＮＯ」の場合）、タブレット端末２０の制御部２１は、説明義務項目の状況確認処理を終了する。
一方、未消込の項目が残っている場合（ステップＳ２−１０において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、時間超過かどうかについての判定処理を実行する（ステップＳ２−１１）。具体的には、制御部２１の説明義務確認手段２１８は、システムタイマから現在時刻を取得し、説明開始時刻から現在時刻までの経過時間を算出する。そして、この経過時間と説明義務通知判定基準時間とを比較し、この基準時間を超過しているかどうかを判定する。

説明義務通知判定基準時間を超過していない場合（ステップＳ２−１１において「ＮＯ」の場合）には、説明義務リストの消込状況の取得処理を継続する。
一方、説明義務通知判定基準時間を超過していると判定した場合（ステップＳ２−１１において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、注意喚起処理を実行する（ステップＳ２−１２）。具体的には、制御部２１の説明義務確認手段２１８は、説明義務リストにおいて、説明されていない説明義務項目があることを示したメッセージを、タッチパネルディスプレイ２５に出力する。更に、説明義務確認手段２１８は、バックヤード連絡手段２１９に対して、バックヤード端末３０への連絡を指示する。この場合、バックヤード連絡手段２１９は、バックヤード端末３０に対して、説明状況通知を送信する。この説明状況通知には、未消込の項目に関するデータを含める。管理者は、バックヤード端末３０において説明状況を確認する。そして、管理者は、バックヤード端末３０を用いて、必要に応じて、タブレット端末２０にメッセージを送信する。

（ＮＧワード対応処理）
次に、ＮＧワード対応処理を、図６を用いて説明する。このＮＧワード対応処理は、ＮＧワードを検知した場合に実行される。

ここでは、タブレット端末２０の制御部２１は、注意喚起の出力処理を実行する（ステップＳ３−１）。具体的には、制御部２１のＮＧワード確認手段２１７は、データ記憶部２２の確認対象データ領域に、検知したＮＧワード及び検知時刻を記録する。次に、ＮＧワード確認手段２１７は、タッチパネルディスプレイ２５に注意喚起画面を出力する。この注意喚起画面には、音声認識により検知したＮＧワードを含める。更に、この注意喚起画面には、ＮＧワード対応ボタンを含める。ＮＧワードに対して的確な説明に訂正し直した場合や、ＮＧワードの誤検出の場合には、このＮＧワード対応ボタンを選択する。

次に、タブレット端末２０の制御部２１は、対応済みかどうかについての判定処理を実行する（ステップＳ３−２）。具体的には、制御部２１のＮＧワード確認手段２１７は、確認対象データ領域に記録されたＮＧワードにおいて、対応時刻が記録されていないＮＧワードが残っているかどうかを確認する。

対応時刻が記録されておらず、対応済み入力されていないＮＧワードが残っている場合（ステップＳ３−２において「ＮＯ」の場合）、タブレット端末２０の制御部２１は、時間超過かどうかについての判定処理を実行する（ステップＳ３−３）。具体的には、制御部２１のＮＧワード確認手段２１７は、システムタイマから現在時刻を取得し、ＮＧワードの検知時刻から現在時刻までの経過時間を算出する。そして、この経過時間とＮＧワード通知判定基準時間とを比較し、この基準時間を超過しているかどうかを判定する。

ＮＧワード通知判定基準時間を超過していないと判定した場合（ステップＳ３−３において「ＮＯ」の場合）には、ステップＳ３−２の処理を継続する。
一方、注意喚起画面においてＮＧワード対応ボタンが選択され、対応済みと判定した場合（ステップＳ３−２において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、注意喚起の消去処理を実行する（ステップＳ３−４）。具体的には、制御部２１のＮＧワード確認手段２１７は、データ記憶部２２の確認対象データ領域に記録されたＮＧワードに関連付けて対応時刻を記録する。

注意喚起の消去処理を実行した後や、ＮＧワード通知判定基準時間を超過している場合（ステップＳ３−３において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、バックヤード通知処理を実行する（ステップＳ３−５）。具体的には、制御部２１のＮＧワード確認手段２１７は、ＮＧワードの検知時刻を特定し、認識結果ファイルにおいて、この検知時刻前後の所定時間の集音時刻範囲（集音時期）の音声認識結果を抽出する。ここで、対応時刻が記録されているＮＧワードについては、検知時刻の所定時間前から対応時刻までの音声認識結果を抽出する。そして、ＮＧワード確認手段２１７は、バックヤード連絡手段２１９に対して、バックヤード端末３０への連絡を指示する。この場合、バックヤード連絡手段２１９は、バックヤード端末３０に対して、ＮＧワード通知を送信する。このＮＧワード通知には、確認対象データ領域に記録されたＮＧワードに対する対応状況（検知時刻や対応時刻）や、ＮＧワード確認手段２１７が抽出した音声認識結果を含める。

次に、バックヤード端末３０は、確認処理を実行する（ステップＳ３−６）。具体的には、ＮＧワード通知を受信したバックヤード端末３０は、ディスプレイにＮＧワード通知を出力する。この場合、バックヤード端末３０を利用している管理者は、タブレット端末２０から取得したＮＧワード通知を確認する。更に、管理者は、タブレット端末２０から取得した音声認識結果を閲覧して、ＮＧワードの検知状況や、その後の対応を確認する。

次に、バックヤード端末３０は、必要に応じてメッセージ送信処理を実行する（ステップＳ３−７）。具体的には、管理者は、ＮＧワードの検知状況や対応状況を確認して、支援が必要と判断した場合にはメッセージを入力する。この場合、バックヤード端末３０は、タブレット端末２０に、管理者のメッセージを送信する。

次に、タブレット端末２０の制御部２１は、メッセージ表示処理を実行する（ステップＳ３−８）。具体的には、制御部２１の表示制御手段２１１は、バックヤード端末３０から取得したメッセージを、タッチパネルディスプレイ２５の同期エリア２５１以外に設けられたバックヤードメッセージエリア２５６に出力する。

（バックヤード支援処理）
次に、バックヤード支援処理を、図７を用いて説明する。このバックヤード支援処理は、バックヤードが営業担当者に対して支援を行なう場合に実行される。

まず、タブレット端末２０の制御部２１は、バックヤード支援要請の入力処理を実行する（ステップＳ４−１）。具体的には、制御部２１のバックヤード連絡手段２１９は、タッチパネルディスプレイ２５にバックヤード支援要請ボタン２５５を表示する。そして、画面操作手段２１０がバックヤード支援要請ボタン２５５の選択を検知した場合、バックヤード連絡手段２１９に対して、バックヤード支援要請の検知を通知する。

次に、タブレット端末２０の制御部２１は、説明状況情報の抽出処理を実行する（ステップＳ４−２）。具体的には、制御部２１のバックヤード連絡手段２１９は、データ記憶部２２に記録された音声認識結果ファイルから、所定時間を遡った時刻から現在時刻までの時間範囲の音声認識結果を抽出する。

次に、タブレット端末２０の制御部２１は、バックヤード支援要請の送信処理を実行する（ステップＳ４−３）。具体的には、制御部２１のバックヤード連絡手段２１９は、バックヤード端末３０に、バックヤード支援要請を送信する。このバックヤード支援要請には、データ記憶部２２の音声認識結果ファイルから抽出した音声認識結果を含める。

次に、バックヤード端末３０は、確認処理を実行する（ステップＳ４−４）。具体的には、バックヤード支援要請を受信したバックヤード端末３０は、ディスプレイにバックヤード支援要請を出力する。この場合、バックヤード端末３０を利用している管理者は、タブレット端末２０から取得した音声認識結果を閲覧して、説明状況を確認する。

次に、バックヤード端末３０は、メッセージ作成処理を実行する（ステップＳ４−５）。具体的には、バックヤード端末３０は、メッセージ入力画面を表示して、テキスト入力を促す。また、バックヤード端末３０は、管理者の音声を、マイクを介して取得し、音声認識してテキストを作成するようにしてもよい。

次に、バックヤード端末３０は、メッセージ送信処理を実行する（ステップＳ４−６）。具体的には、バックヤード端末３０は、支援メッセージ（支援情報）をタブレット端末２０に送信する。この支援メッセージには、音声認識により作成されたテキストを含める。更に、商品説明に利用するファイルを、メッセージとともに送信するようにしてもよい。

次に、タブレット端末２０の制御部２１は、メッセージ出力処理を実行する（ステップＳ４−７）。具体的には、制御部２１の表示制御手段２１１は、バックヤード端末３０から取得したメッセージを、タッチパネルディスプレイ２５の同期エリア２５１以外に設けられたバックヤードメッセージエリア２５６に出力する。また、バックヤード端末３０から、商品説明に利用するファイルを受信した場合には、このファイルのアイコンを、同期エリア２５１以外の領域に表示する。そして、営業担当者は、このメッセージやファイルを確認して、商品説明を継続する。

以上、本実施形態によれば、以下に示す効果を得ることができる。
（１）上記実施形態では、タブレット端末２０の制御部２１は、同期エリアの設定処理を実行する（ステップＳ１−４）。そして、タブレット端末２０の制御部２１は、同期開始処理（ステップＳ１−５）、画面同期処理（ステップＳ１−６）を実行する。無線通信部１７を介して画面データを受信したタブレット端末１０の制御部１１は、画面表示処理を実行する（ステップＳ１−７）。この画面同期処理は、同期停止処理（ステップＳ１−９）まで継続される。これにより、親機であるタブレット端末２０のタッチパネルディスプレイ２５に表示された内容において、必要部分のみを、子機であるタブレット端末１０のタッチパネルディスプレイ２５に表示させることができる。

（２）上記実施形態では、タブレット端末１０の制御部１１は、画面録画処理を実行する（ステップＳ１−８）。これにより、録画ファイルが記録されるので、顧客に対して行なわれた商品の説明状況を把握することができる。

（３）上記実施形態では、タブレット端末２０の制御部２１は、画面上での指示検知処理（ステップＳ１−１１）、指示位置の通知処理（ステップＳ１−１２）を実行する。無線通信部１７を介して、ポインタ表示指示を受信したタブレット端末１０の制御部１１は、ポインタ表示処理を実行する（ステップＳ１−１３）。これにより、営業担当者が同期エリア２５１において指し示した位置を、顧客はタブレット端末１０のタッチパネルディスプレイ１５上で把握することができる。

（４）上記実施形態では、タブレット端末１０の制御部１１は、画面上での指示検知処理（ステップＳ１−１４）、指示位置の通知処理（ステップＳ１−１５）を実行する。無線通信部２７を介して、ポインタ表示指示を受信したタブレット端末２０の制御部２１は、ポインタ表示処理を実行する（ステップＳ１−１６）。これにより、顧客が同期エリア１５１において指し示した位置を、営業担当者はタブレット端末２０のタッチパネルディスプレイ２５上で把握することができる。

（５）上記実施形態では、タブレット端末２０の制御部２１は、録音処理を実行する（ステップＳ１−２）。そして、無線通信部１７を介して、録音開始指示を受信したタブレット端末１０の制御部１１は、録音処理を実行する（ステップＳ１−３）。これにより、営業担当者や顧客の発言を、手元のタブレット端末（１０、２０）において録音することができる。そして、この録音ファイルを確認することにより、商品の説明状況を把握することができる。

（６）上記実施形態では、タブレット端末２０の制御部２１は、説明義務リストの特定処理（ステップＳ２−１）、説明義務リストの表示処理（ステップＳ２−２）を実行する。そして、タブレット端末２０の制御部２１は、音声取得処理（ステップＳ２−３）、キーワード抽出処理（ステップＳ２−４）を実行する。キーワードを用いて説明義務項目と判定した場合（ステップＳ２−５において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、説明義務リストの消込処理を実行する（ステップＳ２−６）。これにより、タブレット端末２０を利用している営業担当者は、商品説明において説明すべき内容を把握することができる。そして、説明義務項目を考慮して、商品説明を行なうことができる。

（７）上記実施形態では、タブレット端末２０の制御部２１は、説明義務リストの消込状況の取得処理を実行する（ステップＳ２−９）。そして、未消込の項目が残っており、説明義務通知判定基準時間に対して時間超過していると判定した場合（ステップＳ２−１０、Ｓ２−１１において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、注意喚起処理を実行する（ステップＳ２−１２）。これにより、説明義務がある項目についての説明が遅れている場合には、営業担当者に対して注意喚起することができる。

（８）上記実施形態では、ＮＧワード対応処理において、タブレット端末２０の制御部２１は、注意喚起の出力処理を実行する（ステップＳ３−１）。これにより、ＮＧワードが含まれている場合には、営業担当者に注意喚起を行なうことができる。

更に、タブレット端末２０の制御部２１は、対応済みかどうかについての判定処理を実行する（ステップＳ３−２）。注意喚起画面においてＮＧワード対応ボタンが選択され、対応済みと判定した場合（ステップＳ３−２において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、注意喚起の消去処理（ステップＳ３−４）、バックヤード通知処理（ステップＳ３−５）を実行する。これにより、ＮＧワードに対する対応状況を、バックヤード端末３０において確認することができる。

（９）上記実施形態では、バックヤード支援処理において、タブレット端末２０の制御部２１は、バックヤード支援要請の入力処理（ステップＳ４−１）、説明状況情報の抽出処理（ステップＳ４−２）、バックヤード支援要請の送信処理（ステップＳ４−３）を実行する。これにより、営業担当者が支援を希望する場合には、バックヤード端末３０に支援要請を行なうことができる。バックヤード端末３０においては、音声認識結果を確認することにより、説明状況を把握して、支援を行なうことができる。

（１０）上記実施形態では、バックヤード端末３０はメッセージ作成処理（ステップＳ４−５）、メッセージ送信処理（ステップＳ４−６）を実行し、タブレット端末２０はメッセージ出力処理（ステップＳ４−７）を実行する。これにより、バックヤード端末３０を用いて、効率的に支援情報を提供することができる。更に、バックヤード端末３０からのメッセージは、同期エリア２５１以外の領域に表示されるため、顧客に知られることなく、メッセージを確認することができる。

なお、上記実施形態は、以下の態様に変更してもよい。
・ 上記実施形態では、本願発明を商品説明において適用したが、適用範囲は商品説明に限定されるものではなく、２つのディスプレイを用いた説明に応用することができる。また、第１、第２の端末もタブレット端末に限定されるものでなく、例えばノートパソコン等を用いることができる。

・ 上記実施形態では、データ記憶部２２には、ＮＧワードリストが記録される。ここで、説明資料ファイル毎に、ＮＧワードリストを変更するようにしてもよい。この場合には、商品コードに関連付けてＮＧワードリストをデータ記憶部２２に記録しておく。そして、制御部２１は、タッチパネルディスプレイ２５に表示された説明資料ファイルの商品コードを用いて、ＮＧワードリストを特定する。このＮＧワードリストを確認対象データ領域に記録し、制御部２１は、ＮＧワードかどうかについての判定処理を実行する（ステップＳ２−７）。これにより、説明内容に応じたＮＧワードを検知することができる。

・ 上記実施形態では、タブレット端末２０の制御部２１は、画面同期処理を実行する（ステップＳ１−６）。具体的には、制御部２１の画面転送手段２１３は、同期エリア２５１に表示されている内容（画面データ）を、無線通信部２７を介してタブレット端末１０に転送する。これに代えて、タブレット端末１０のデータ記憶部１２にも説明資料ファイルを格納しておき、この説明資料ファイルを用いて、タブレット端末２０の同期エリア２５１と同期した画面を出力するようにしてもよい。この場合、制御部２１は、同期エリア２５１に表示されている説明資料ファイルのファイル識別子、表示ページ、このページにおいて同期エリア２５１が設定されている座標に関するデータを含めた同期データを、タブレット端末１０に送信する。同期データを受信したタブレット端末１０の制御部１１は、データ記憶部１２に記録されたファイル識別子の説明資料ファイルにおいて、表示ページ、座標により特定される内容を、タッチパネルディスプレイ１５上の同期エリア１５１に表示する。

・ 上記実施形態のＮＧワード対応処理において、説明義務項目でないと判定した場合（ステップＳ２−５において「ＮＯ」の場合）、タブレット端末２０の制御部２１は、ＮＧワードかどうかについての判定処理を実行する（ステップＳ２−７）。ここで、複数のキーワードを組み合わせて、ＮＧワードと判定することも可能である。具体的には、ＮＧワードリストにおいて、ＮＧワードとして、複数のキーワードを組み合わせて記録しておく。例えば、「絶対に」というキーワードと、「儲かる」や「収益」というキーワードを組み合わせておく。そして、制御部２１は、ＮＧワードリストに記録されたキーワードの組み合わせに含まれる一語を検出した場合に、この組み合わせに含まれる他語が所定時間内の発言において検知できるかどうかを判定する。そして、所定時間内の発言において、ＮＧワードリストに記録されたキーワードの組み合わせを検出した場合に、ＮＧワード対応処理を実行する（ステップＳ２−８）。これにより、キーワードの組み合わせにより、使用すべきでない表現を含む発言を検知することができる。

更に、ＮＧワードかどうかについての判定処理において、キーワードの前後関係を考慮してもよい。この場合、ＮＧワードリストに、キーワードの組み合わせとともに、前後関係を記録しておく。そして、ＮＧワードリストに記録された前後関係の順番でキーワードを検出した場合、ＮＧワード対応処理を実行する（ステップＳ２−８）。これにより、キーワードの前後関係により、使用すべきでない表現を含む発言を検知することができる。

更に、ＮＧワードかどうかについての判定処理において、発言内容における文章構成を考慮してもよい。この場合、音声認識において検出される文章の区切りにより文章構成を特定する。そして、文章構成（例えば、一文）に、ＮＧワードリストに記録されたキーワードの組み合わせが含まれる場合に、ＮＧワード対応処理を実行する（ステップＳ２−８）。これにより、キーワードの文章構成により、使用すべきでない表現を含む発言を検知することができる。

また、これらのＮＧワードかどうかについての判定を組み合わせて使用することも可能である。この場合には、ＮＧワードリストにおいて、キーワードに関連付けて、判定方法（１語、組み合わせ、前後関係、文章構成等）を特定する情報を記録しておく。

・ 上記実施形態のＮＧワード対応処理において、説明義務項目でないと判定した場合（ステップＳ２−５において「ＮＯ」の場合）、タブレット端末２０の制御部２１は、ＮＧワードかどうかについての判定処理を実行する（ステップＳ２−７）。ここで、ＮＧワードの重み付けにより、対応処理を変更するようにしてもよい。具体的には、ＮＧワードリストにおいて、ＮＧワードに対して重み付け値を記録しておく。そして、重み付け値が小さいＮＧワードを検出した場合には、制御部２１は、第１の対応処理として、タッチパネルディスプレイ２５に注意喚起を出力する。一方、重み付け値が大きい場合には、制御部２１は、第１の対応処理として、注意喚起の出力、及びバックヤード端末３０への通知を行なう。これにより、ＮＧワードの重要性に応じて、臨機応変に対応することができる。

・ 上記実施形態では、データ記憶部２２には、商品コードに関連付けられた説明義務リストが記録されている。これに代えて、説明資料の頁に対応して、説明義務項目を表示するようにしてもよい。この場合には、説明義務リストにおいて、商品コードに関連付けられた説明資料ファイルの頁に対して、説明義務項目のキーワードを設定しておく。そして、タブレット端末２０の制御部２１は、タッチパネルディスプレイ２５上の同期エリア２５１に表示された説明資料ファイルの頁に対して、説明義務項目を出力する。これにより、説明資料ファイルの各頁の内容に応じて、説明すべき項目を確認することができる。

・ 上記実施形態のＮＧワード対応処理において、タブレット端末２０の制御部２１は、バックヤード通知処理を実行する（ステップＳ３−５）。ここでは、バックヤード端末３０に対して、検知時刻前後の所定の時間範囲の音声認識結果を送信する。また、バックヤード支援処理において、タブレット端末２０の制御部２１は、説明状況情報の抽出処理を実行する（ステップＳ４−２）。ここでは、所定時間を遡った時刻から現在時刻までの時間範囲の音声認識結果を抽出する。ここで、音声認識結果の送信に代えて、音声データを送信するようにしてもよい。この場合には、データ記憶部２２に記録されている録音ファイルから、所定の時間範囲の音声データを抽出し、バックヤード端末３０に送信する。これにより、バックヤード端末３０において、音声データにより説明状況を把握することができる。

・ 上記実施形態では、タブレット端末２０の制御部２１は、同期エリアの設定処理を実行する（ステップＳ１−４）。具体的には、タッチパネルディスプレイ２５において、同期エリアの始点と終点となる位置をタッチすることにより、両点を対角線上に有する矩形領域を同期エリア２５１として設定する。この同期エリア上に加えて、同期させないエリアを設けるようにしてもよい。この場合には、タッチパネルディスプレイ２５上の同期エリア内において、非同期エリアを指定する。この場合、同期エリア２５１と同様に、エリアの始点と終点となる位置をタッチすることにより、両点を対角線上に有する矩形領域を非同期エリアとして特定する。また、作図ツールにおけるマーカ機能やブラシ機能等を用いて、塗りつぶされた領域を非同期エリアとして特定するようにしてもよい。そして、この非同期エリアの指定後に、同期開始処理を実行する（ステップＳ１−５）。これにより、同期エリア２５１において非同期エリアを設定することにより、タブレット端末１０の同期エリア１５１において非表示にして、相手に見せたくない情報を部分的に隠すことができる。なお、タブレット端末２０の同期エリア２５１においては、非同期エリアの内容を表示してもよいし、非表示にしてもよい。

・ 上記実施形態では、注意喚起の消去処理を実行した後や、ＮＧワード通知判定基準時間を超過している場合（ステップＳ３−３において「ＹＥＳ」の場合）、タブレット端末２０の制御部２１は、バックヤード通知処理を実行する（ステップＳ３−５）。バックヤードに通知する内容は、これらに限定されるものではない。ＮＧワードを検知した場合にも通知してもよい。また、ＮＧワード通知判定基準時間を超過している場合のみ、通知するようにしてもよい。

１０，２０…タブレット端末、１１，２１…制御部、１２，２２…データ記憶部、１５，２５…タッチパネルディスプレイ、１６，２６…マイク、１７，２７…無線通信部、１５１，２５１…同期エリア、１１０…画面操作手段、１１１…表示制御手段、１１３…録画手段、１１４…ポインタ転送手段、１１５…録音手段、２１０…画面操作手段、２１１…表示制御手段、２１２…同期エリア設定手段、２１３…画面転送手段、２１４…ポインタ転送手段、２１５…録音手段、２１６…キーワード抽出手段、２１７…ＮＧワード確認手段、２１８…説明義務確認手段、２１９…バックヤード連絡手段、３０…バックヤード端末。

Claims (6)

1. 説明資料ファイルと、前記説明資料ファイルに関連付けられて、ＮＧワードが記録されたチェックリストとを記憶したデータ記憶手段と、
   前記説明資料ファイルを表示する第１ディスプレイと、
   音声認識結果を記録する認識結果記憶手段と、
   バックヤード端末に接続された制御手段とを備えたコンピュータ端末、及び
   前記コンピュータ端末に接続された第２ディスプレイを備えた説明支援システムであって、
   前記制御手段が、
   前記第１ディスプレイ、第２ディスプレイに同期して説明資料ファイルを表示する同期エリアと、前記第２ディスプレイには表示しない非同期エリアとを含む画面を、前記第１ディスプレイに表示する手段と、
   前記第１ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する手段と、
   集音した音声を音声認識によりテキストに変換した音声認識結果を前記認識結果記憶手段に記録する手段と、
   前記音声認識結果において、前記チェックリストに含まれるＮＧワードを検知した場合には、検知したＮＧワードに対応した注意喚起メッセージを、前記第１ディスプレイの前記非同期エリアに表示し、
   前記ＮＧワードの検知時刻を特定し、この検知時刻前後の所定時間の集音時刻範囲の音声認識結果を前記認識結果記憶手段から抽出するとともに、表示された前記注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、前記対応済み入力された時期までの音声認識結果を抽出し、
   前記音声認識結果を含むＮＧワード通知をバックヤード端末に送信する手段と
   を備えたことを特徴とする説明支援システム。
2. 前記ＮＧワードは、複数のキーワードの組み合わせから構成され、
   前記制御手段が、前記第１ディスプレイの前記非同期エリアに、前記ＮＧワードに対応した注意喚起メッセージを出力することを特徴とする請求項１に記載の説明支援システム。
3. 前記制御手段が、前記バックヤード端末から、前記ＮＧワード通知に応じた支援情報を受信した場合には、前記第１ディスプレイの前記非同期エリアに支援情報を出力する手段を更に備えたことを特徴とする請求項１又は２に記載の説明支援システム。
4. 前記ＮＧワードは、説明が必要な項目についてのキーワードであり、
   前記制御手段が、前記チェックリストを、前記第１ディスプレイの前記非同期エリアに表示する手段を更に備え、
   前記音声認識結果に基づいて、前記非同期エリアに表示されたチェックリストに含まれるＮＧワードに関連する項目を消し込むことを特徴とする請求項１〜３のいずれか一つに記載の説明支援システム。
5. 説明資料ファイルと、前記説明資料ファイルに関連付けられて、ＮＧワードが記録されたチェックリストとを記憶したデータ記憶手段と、
   前記説明資料ファイルを表示する第１ディスプレイと、
   音声認識結果を記録する認識結果記憶手段と、
   バックヤード端末に接続された制御手段とを備えたコンピュータ端末、及び
   前記コンピュータ端末に接続された第２ディスプレイを備えた説明支援システムを用いて、説明支援を行なう方法であって、
   前記制御手段が、
   前記第１ディスプレイ、第２ディスプレイに同期して説明資料ファイルを表示する同期エリアと、前記第２ディスプレイには表示しない非同期エリアとを含む画面を、前記第１ディスプレイに表示する段階と、
   前記第１ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する段階と、
   集音した音声を音声認識によりテキストに変換した音声認識結果を前記認識結果記憶手段に記録する段階と、
   前記音声認識結果において、前記チェックリストに含まれるＮＧワードを検知した場合には、検知したＮＧワードに対応した注意喚起メッセージを、前記第１ディスプレイの前記非同期エリアに表示し、
   前記ＮＧワードの検知時刻を特定し、この検知時刻前後の所定時間の集音時刻範囲の音声認識結果を前記認識結果記憶手段から抽出するとともに、表示された前記注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、前記対応済み入力された時期までの音声認識結果を抽出し、
   前記音声認識結果を含むＮＧワード通知をバックヤード端末に送信する段階と
   を実行することを特徴とする説明支援方法。
6. 説明資料ファイルと、前記説明資料ファイルに関連付けられて、ＮＧワードが記録されたチェックリストとを記憶したデータ記憶手段と、
   前記説明資料ファイルを表示する第１ディスプレイと、
   音声認識結果を記録する認識結果記憶手段と、
   バックヤード端末に接続された制御手段とを備えたコンピュータ端末、及び
   前記コンピュータ端末に接続された第２ディスプレイを備えた説明支援システムを用いて、説明支援を行なうためのプログラムであって、
   前記制御手段を、
   前記第１ディスプレイ、第２ディスプレイに同期して説明資料ファイルを表示する同期エリアと、前記第２ディスプレイには表示しない非同期エリアとを含む画面を、前記第１ディスプレイに表示する手段、
   前記第１ディスプレイに表示された説明資料ファイルに基づいてチェックリストを特定する手段、
   集音した音声を音声認識によりテキストに変換した音声認識結果を前記認識結果記憶手段に記録する手段、
   前記音声認識結果において、前記チェックリストに含まれるＮＧワードを検知した場合には、検知したＮＧワードに対応した注意喚起メッセージを、前記第１ディスプレイの前記非同期エリアに表示し、
   前記ＮＧワードの検知時刻を特定し、この検知時刻前後の所定時間の集音時刻範囲の音声認識結果を前記認識結果記憶手段から抽出するとともに、表示された前記注意喚起メッセージに対して、検知したＮＧワードに対する対応済み入力が行なわれた場合、前記対応済み入力された時期までの音声認識結果を抽出し、
   前記音声認識結果を含むＮＧワード通知をバックヤード端末に送信する手段
   として機能させることを特徴とする説明支援プログラム。

Images