Deprecated: The each() function is deprecated. This message will be suppressed on further calls in /home/zhenxiangba/zhenxiangba.com/public_html/phproxy-improved-master/index.php on line 456
JP4634889B2 - 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体 - Google Patents
[go: Go Back, main page]

JP4634889B2 - 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体 - Google Patents

音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体 Download PDF

Info

Publication number
JP4634889B2
JP4634889B2 JP2005235121A JP2005235121A JP4634889B2 JP 4634889 B2 JP4634889 B2 JP 4634889B2 JP 2005235121 A JP2005235121 A JP 2005235121A JP 2005235121 A JP2005235121 A JP 2005235121A JP 4634889 B2 JP4634889 B2 JP 4634889B2
Authority
JP
Japan
Prior art keywords
scenario
original
transition
keyword
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005235121A
Other languages
English (en)
Other versions
JP2007052043A (ja
Inventor
哲郎 甘粕
昇 宮崎
輝雄 萩野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Inc
NTT Inc USA
Original Assignee
Nippon Telegraph and Telephone Corp
NTT Inc USA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp, NTT Inc USA filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2005235121A priority Critical patent/JP4634889B2/ja
Publication of JP2007052043A publication Critical patent/JP2007052043A/ja
Application granted granted Critical
Publication of JP4634889B2 publication Critical patent/JP4634889B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

本発明は複数の話題を扱うことができる音声対話シナリオを作成する音声対話シナリオ作成方法と装置及びこの装置をコンピュータで実現する音声対話シナリオ作成プログラム、このプログラムを記録した記録媒体に関する。
音声認識、合成音声の技術を組み合わせて、利用者と音声を用いて対話を介して、ある作業に関する命令を入力するなどの目的を達成する音声対話装置について、近年では、非特許文献1のように、対話のある時点でシステムが利用者に入力するよう要求している項目とは異なる項目への単語の発生を許容したり、いい淀みなどを許容したりすることが出来るなど、人間にとって非常に自然な音声対話が可能な音声対話システムが提案されている。
また、特許文献1のように画面上に擬人化して表現されたアニメーションエージェントキャラクタを表示させ、ユーザはそのエージェントに対して話しかけるように発声された音声を認識し、応答をあらかじめ録音された音声や合成音で再生したり画面上にテキストで表示するなどして言葉として出力したり、応答のニュアンスをエージェントの仕草としてアニメーションで表示させたりすることで通知しながら対話を進める装置も提案されている。
更に近年では、テキストファイルによるスクリプト言語による記述と、そのスクリプト言語が記述されたファイルをスクリプト言語の実行処理系が読み込むことで音声対話システムを構成することが一般的となっている。
スクリプト言語によるテキストファイルには、ユーザへ応答を返す場合の再生文章や、利用者からの音声入力やその他の入力があった場合の次の応答を選択するための分岐規則や、音声認識装置や音声合成装置、その他の入力装置に対する最小限の指示が記述される。この様なスクリプト言語によるテキストファイルを音声対話シナリオと呼ぶ。
音声対話シナリオを読み込んだ実行処理系は、音声対話シナリオの記述に従って、音声認識、音声合成、その他入出力装置を駆動し音声対話を実行する。各装置の詳細な制御内容は、スクリプト言語の命令記述と対応させて、あらかじめ実行処理系の内部に組み込まれている。音声対話シナリオとその実行処理系の組み合わせにより、システムの可搬性や構築コスト・システム作成者に必要な知識・経験の低減が図られた。
一方、対話システムの役割として一問一答形式の簡便なものを仮定し、一入力毎に複数の対話システムの中から適切なものを一つ選択し、そのシステムの出力を応答する、といった方法も提案されている(特許文献2、特許文献3)。
特開2004−295837号公報 特開2004−240150号公報 特開2004−240225号公報 平沢純一、山本俊一郎、堀貴明、大附克年、"CTI向け自由発話対応音声対話システムRexDialog"、社団法人 情報処理学会 研究報告、2003-SPL-47(8),pp35-40.
しかしながら、音声対話シナリオとその実行処理系の組み合わせにより構築コストの低減が図られたとしても、依然、構築コストが高い場合がある。その一つに、複数の話題を取り扱い、その全話題で扱う語句を音声対話の実行中、音声入力可能な時点で常に受理可能とすることを必要とする場合がある。
例えば、市役所窓口総合音声対話システムであれば、転入・転居案内、社会保険案内、粗大ごみ受付などといったように、複数の話題を扱い、その全ての話題の語句について常に音声対話の途中で音声入力可能とし、入力があった場合は適切に応対しようとする対話システムを作るときには、その音声対話システムの記述量が膨大になるという問題があった。これは常に全ての話題について扱おうとすると、ユーザの入力発話から次の応答内容を決定する処理の中で、それぞれの話題がもつ話題の目的達成のために必要な入力項目(これをスロットと呼ぶ)全てについて、直前の発話による入力によって変化があったかを検査しなくてはならないためである。すなわち、複数の話題を扱い、それぞれの話題が入力対象とする語句を常に受理可能とするには、各話題で扱うスロット数の総和乗の分岐規則を最低でも記述する必要があった。これは、話題の数を少しでも増やすと爆発的に記述量が増大することを示す。
また上記した特許文献2、特許文献3のように、対話システムの役割として一問一答形式の簡便なものを仮定し、一入力毎に複数の対話システムから適切なものを一つ選択しそのシステムの出力を応答する、といった方法を採った場合、
この方法は、記述量が膨大になることを避けることが出来るが、一つ一つの話題の目的達成のための対話のやり取りとして数度にわたるやり取りを行わなければならない対話システムには適用できないという問題があった。
本発明では、それぞれが異なる1つの話題にのみ対応した元シナリオを複数備え、これら複数の元シナリオを連結して複数の話題に対応可能な音声対話シナリオを作成する音声対話シナリオ作成装置を提案するものであり、その特徴とする構成は、元シナリオに備えられているリソースから各元シナリオを連結することに必要な情報、どの元シナリオに話題を遷移するかを決める情報、話題が遷移した状態でも全ての各元シナリオで扱う話題に関する単語を音声認識するための情報を抽出する情報抽出手段と、この情報抽出手段が抽出した情報からどの元シナリオに遷移してもどの元シナリオを実行中であっても他の元シナリオの扱う話題に関する利用者の発声を処理し、音声応答を実行できる環境に整合させるための整合情報を生成する整合情報作成手段とを備えることを特徴とする。
本発明では更に上記音声対話シナリオ作成装置において、整合情報作成手段は、連結された元シナリオ内で扱う各元シナリオの名称と、元シナリオのファイル名、ファイルの位置、最初に実行する元シナリオの情報を記述した連結情報を作成する連結情報作成手段と、各元シナリオの中の音声認識リソースから目的達成のために必要な入力項目に入力される単語と、各元シナリオの名称と、元シナリオを想起させる関連語句とを抽出し、これらを話題の遷移を引き起こす遷移用語句として適正に音声認識し、理解結果を出力するための遷移用リソースを作成する遷移用リソース作成手段と、遷移用語句が認識された場合に、その認識用語句と対応する元シナリオへ遷移するかを確認し、遷移することを表示し、連結されている別の元シナリオに制御を移す動作を実行するための遷移用対話シナリオを作成する話題遷移用対話シナリオ作成手段とによって構成される。
本発明の音声対話シナリオ作成装置に用いる整合情報生成手段は、連結情報作成手段と、遷移用リソース作成手段と、遷移用シナリオ作成手段に加えて、連結された元シナリオで実行可能な対話内容を表示し、音声対話手順を案内するためのナビゲート用シナリオ作成手段を備えることを特徴とする。
本発明の音声対話シナリオ作成装置に用いる遷移用リソース作成手段は、各元シナリオに備えられているリソースの中のキーワード辞書から所定のクラスに属するキーワードを抽出し、抽出したキーワードにこのキーワードの属性を示す情報を付加した遷移用キーワード集を作成する遷移用キーワード辞書作成手段と、各元シナリオに記述されている各キーワードがどの元シナリオに属するかを示す表として作用するシナリオ名キーワード対応データベースを作成するシナリオ名キーワード対応データベース作成手段と、各元シナリオに記述されている発話理解リストから、シナリオキーワードクラスリストに含まれるクラスの、その規則中に含む発話理解規則を抽出し、抽出した各規則のクラス名をシナリオ内のキーワードに属性を表わす情報を付加した名称に、また振り分け先スロット名を遷移先シナリオ関連語にそれぞれ書き替え、シナリオ内キーワードに属性を表わす情報が付加されたキーワード又は遷移先シナリオ関連語に属するキーワードが音声認識した単語列中に出現すれば、そのキーワードを遷移先シナリオ関連語スロットに振り分けよ、とする内容の発話理解規則と、シナリオ指定クラスに属するキーワードが音声認識した単語列中に出現した場合は、そのキーワードを遷移先シナリオスロットに振り分けよ、とした内容の発話理解規則を作成する遷移用発話理解規則作成手段と、各元シナリオが利用する言語モデルを生成した元シナリオ例文リストの中から、シナリオキーワードクラスリスト中にあるクラスを含む例文を抽出し、抽出した各例文中のクラス名をシナリオ内のキーワードの属性を表わす情報を付加したクラス名に置換し、更に追加例文リスト中の各例文からシナリオ関連キーワードリストに含まれる単語を抽出し、その単語をシナリオ関連語クラスに置換し、置換後の追加例文リスト中の各例文を形態素解析手段で単語ごとに分かち書きし、その読み仮名を振って遷移用言語モデルと遷移用認識辞書とを作成する遷移用認識言語モデル・辞書作成手段とによって構成したことを特徴とする。
本発明によれば、複数の話題に対応する音声対話シナリオを非常に小さい作業量で作成することが可能である。また、利用者に対して、別の話題へ遷移するための特別なコマンドを覚えなければならないなどの制約を排除し、システム上で扱えるほとんどのキーワードを受理して必要であれば遷移用の対話へ自動的に移行するコンテンツを作成することができるので、非常に利便性の高い音声対話システムを提供することが可能となる。
本発明による音声対話シナリオ作成方法及び音声対話作成装置はハードウェアによって構成することもできるが、より簡素に実施するにはコンピュータに本発明で提案する音声対話シナリオ作成プログラムをインストールし、コンピュータに音声対話シナリオ作成装置として機能させる形態が最良の実施形態である。
コンピュータに本発明による音声対話シナリオ作成装置として機能させるにはコンピュータにインストールした音声対話シナリオ作成プログラムによりコンピュータ内に元シナリオに備えられているリソースから各元シナリオを連結することに必要な情報、どの元シナリオに話題を連結するかを決める情報、話題が遷移した状態で各元シナリオに適した音声認識を行わせるための情報を抽出する情報抽出手段と、この情報抽出手段が抽出した情報からどの元シナリオに遷移しても各元シナリオが適正に音声応答を実行できる環境に整合させるための整合情報を生成する整合情報生成手段とを構築し、この整合情報生成手段により整合情報を生成し、この整合情報をリソースとして保持することにより、それぞれが異なる1つの話題にのみ対応した複数の元シナリオを、複数の話題に対応可能な音声対話シナリオとして機能させることができる。
図1を用いて本発明による音声対話シナリオ作成装置の概要を説明する。図中100はそれぞれ異なる1つの話題にのみ対応した元シナリオ100A、100B、…100Nで構成される元シナリオ群を示す。各元シナリオ100A、100B、…100Nは元シナリオの名称とか、各元シナリオ100A、100B、…100Nのそれぞれで用いられる音声認識・発話理解リソースなどを格納したリソース101A、101B、…101Nを備える。
200は情報抽出手段を示す。この情報抽出手段200は各元シナリオ100A、100B、…100Nのそれぞれのリソース101A、101B、…101Nから、これら元シナリオ100A、100B、…100Nを連結するに必要な情報を抽出する。各元シナリオ100A、100B、…100Nを連結するに必要な情報とは例えば各元シナリオ101A、101B、…101Nの名称とか、各元シナリオのファイル名、ファイルの位置、最初に実行する元シナリオを指定する情報、等とすることができる。
情報抽出手段200が抽出した情報は整合情報生成手段300に引き渡され、この整合情報生成手段300で整合情報400を生成し、この整合情報400を整合情報記憶部500に記憶させる。
音声対話シナリオ実行手段600は、元シナリオ群100に格納した元シナリオ100A、100B、…100Nの各リソース101A、101B、…101Nと整合情報記憶部500に格納した整合情報400とを用いて複数の話題に対応する音声対話システムとして機能する。
図2以下を用いて各部の詳細を順に説明する。各元シナリオ100A、100B、…100Nはシナリオファイル名101A―1、101B―1…とキーワード辞書101A―2、101B―2…と、発話理解規則リスト101A―3、101B―3…と、元シナリオ例文リスト101A―4、101B―4…とを備える。
ここで、キーワード辞書101A―2、101B−2…とは各元シナリオ101A、101B…の中で用いる目的達成のために必要な入力項目(以下スロットと称す)に入力されるキーワードの辞書を示す。また発話理解規制リスト101A−3、101B−3…とは音声認識された単語列の中からスロットに入れるべきキーワードを抽出してスロットに振り分けるための発話理解規則を集めたもの、元シナリオ例文リスト101A−4、101B―4…とは各元シナリオ実行時に音声認識する際に利用するクラス言語モデルと単語辞書を作成する場合に学習に用いた発話文の例文である。
図1に示した情報抽出手段200はこれらの元シナリオ100A、100B、…から、連絡時に準備する情報としてシナリオファイル名102と、シナリオキーワードクラスリスト103と、シナリオ関連キーワードリスト104と、追加例文リスト105と、各シナリオの内容説明文106とを抽出する。これと共に、これらの情報は図3に示す整合情報生成手段300へ入力される。
整合情報生成手段300は図3に示す実施例では遷移用リソース作成手段301と、ナビゲート用シナリオ作成手段302と、遷移用シナリオ作成手段303と、連結情報作成手段304とによって構成した場合を示す。
遷移用リソース作成手段301は整合情報400の一部を構成する遷移用リソース401を生成する。遷移用リソース401の内容としては遷移用キーワード辞書401−1と、遷移用発話理解規則401−2と、遷移用言語モデル401−3と、遷移用認識辞書401−4とで構成される。更に遷移用リソース作成手段301はシナリオ名キーワード対応DB(データベース)401−5をも生成する。
ナビゲート用シナリオ生成手段303は遷移用シナリオ404を生成し、連結情報作成手段304は連結情報405を生成する。
以下では各部の動作を説明する。ここで、ファイル名は必要であればそのファイルを保持しているコンピュータのネットワーク上のアドレス、そのコンピュータ内の記憶装置内における位置なども含むものであってもよい。ファイル名に関しては以後同様である。
個々の発話理解規則リスト101A−3、101B−3…には、スロットへ入力するキーワードとして取り出すべき単語の属性(以下クラスと称す)を表わす記号と、そのクラスの位置にあったキーワードをどのスロットへ振り分ければよいかという指示が対で示されている。スロットへの振り分けをより高精度に行なうためにクラスの記号が出現する前後単語列の情報を付加してもよい。例えば「“横浜駅”から“品川駅”まで」という発話の中から、“横浜駅”を「発駅スロット」、“品川駅”までを「着駅スロット」に振り分けるための規則は以下のようになる。
発話理解規則例:「<駅名>:発駅スロット から <駅名>:着駅スロット まで」
この発話理解規則例では、「<駅名>」は、駅名クラスに属する単語が出現することを示し、「:発駅スロット」、「:着駅スロット」はそれぞれ、直前のクラス記号に含まれる単語が、それぞれのスロットに振り分けられることを示す。
また、キーワードは、そのキーワードの表記と、クラス言語モデル内のクラスと、そのキーワードの意味素性の3つの情報からなる。
また、元シナリオ100A、100B…中には、各シナリオのエージェントの個性を表現するために、音声応答を行う際に音声合成を使う場合の音色や話速に関するパラメータや、エージェントを画面に表示する場合の画像や動画データを指定するための記述なども含まれる。
シナリオを連結するには上記のほかに、連結しようとしている個々の元シナリオの呼び方(例えば、「ごみ分別案内」等)であるシナリオ名称と、その元シナリオ100A、100B…のキーワード辞書101A−2、101B−2…中のキーワードで、そのシナリオを特徴づけるキーワード(例えば、シナリオ名称が「ごみ分別案内」ならば、各ゴミの名前、ゴミ分別種別などの単語)をシナリオキーワードと呼び、そのシナリオの各シナリオキーワードが属するクラスをリストしたシナリオキーワードクラスリスト103とする。
上記のシナリオキーワードには含まれないが、シナリオの扱う話題や、話題の名称に強く関連する単語(例えば「ゴミの捨て方」など)をシナリオ関連キーワードと呼び、そのシナリオ関連キーワードをリストしたものであるシナリオ関連キーワードリスト104と、
シナリオ関連語リスト内に登録されているシナリオ関連語が出現する発話文の例文と、シナリオ名が出現する発話文の例文を集めた追加例文リスト104と、そのシナリオファイルにおいて扱う話題やその概要などの説明文106とを各元シナリオ100A、100B…100N毎に準備する。
また、連結された元シナリオにおいて、連結前の各元シナリオや本実施例において作成されるナビゲート用シナリオ403のいずれの部分シナリオから対話を開始すればよいのかをシナリオ名称で示した開始シナリオ名406(図2参照)と、この連結したシナリオの総称としてナビゲート用シナリオ403につけるシナリオ名称(例えば、「○○市総合案内」等)であるナビゲートシナリオ名407(図2参照)を準備する。
連結された対話シナリオの作成では、連結された元シナリオ100A、100B…100Nでは各部分シナリオを構成することになる各元シナリオのシナリオファイル名と、そのシナリオに付与されたシナリオ名称と、開始シナリオ名を連結情報作成手段304が読み込み、ナビゲート用シナリオ作成手段302が出力するナビゲート用シナリオ403のファイル名と、そのシナリオに付与されたシナリオ名称と、遷移用シナリオの実行が開始されるときに、最初に実行されるべき部分シナリオのシナリオ名称またはシナリオファイル名をリストにした連結情報405を出力する。
次に図4に遷移用リソース作成手段301の構成の一例を示す。遷移用リソース作成手段301は、情報抽出手段200が抽出したキーワード辞書、発話理解規則リスト、元シナリオ例文リスト、追加例文リストと、ナビゲートシナリオ名を入力とし、これらを用いて遷移用リソース作成手段301内に配置された遷移用シナリオキーワード辞書作成手段310が、遷移用キーワード辞書401−1を出力し、シナリオ名キーワード対応DB作成手段320がシナリオ名キーワード対応DB401−5を出力し、遷移用発話理解規則作成手段330が、遷移用発話理解規則401−2を出力し、遷移用認識言語モデル・辞書作成手段340が、遷移用言語モデル401−3と、遷移用単語辞書401−4をそれぞれ出力する。
遷移用キーワード辞書作成手段310は、遷移用キーワード辞書作成方法を用いて、遷移用キーワード辞書401−1を生成する。図5にその流れを示す。
遷移用キーワード辞書作成方法では、シナリオ内キーワード抽出ステップS5−1、シナリオ内キーワードクラス再付与ステップS5−2、シナリオ関連語クラス再付与ステップS5−3、シナリオ名称キーワード生成ステップS5−4という手順を連結対象となる全ての元シナリオについて繰り返し、それらの手順で得られたキーワードのリストをファイル等に書き出すステップ(S5−5)とを備える。
シナリオ内キーワード抽出ステップS5−1では、各元シナリオのキーワード辞書101A−2、101B−2…から、シナリオキーワードクラスリストに示されたクラスに属するキーワードを抜き出してくる。
次にシナリオ内キーワードクラス再付与ステップS5−2において、シナリオ内キーワード抽出ステップS5−1により抜き出された全キーワードのクラス名を、「シナリオ内キーワード−d」に置き換える。なお、dは、シナリオ内キーワードの属性を表わす情報であり、そのとき処理している元シナリオのシナリオ名称である。シナリオ名称が「ごみ分別案内」ならばクラス名は「シナリオ内キーワード-ごみ分別案内」と置き換えられる。
次にシナリオ関連語クラス再付与ステップS5−3ではシナリオ関連キーワードリスト内の各キーワードを読み込み、その全てのキーワードクラスを、「シナリオ関連語−d」に置き換える。dは、シナリオ内キーワードクラス再付与ステップS5−2と同様に現在処理しているシナリオ名称である。
更に、シナリオ名称キーワード生成ステップS5−4では、表記、意味素性をシナリオ名称とし、クラスを「シナリオ指定」クラスとしてキーワードを生成する。
上記を、各元シナリオについて実行し、さらにナビゲートシナリオ名についても遷移用キーワード辞書作成方法と同様にシナリオ名称キーワードを生成した後、シナリオ内キーワードクラス再付与、シナリオ関連語クラス再付与、シナリオ名称キーワード生成でそれぞれ書き換え、生成したキーワード全てを遷移用キーワードとしてファイル等に書き出す。
シナリオ名キーワード対応DB(データベース)作成手段320は、シナリオ名キーワード対応DB作成方法を用いて、あるキーワードがどの元シナリオに属するかを示す表として作用するシナリオ名キーワード対応DB−401を作成する。図6に、シナリオ名キーワード対応DB作成方法の流れを示す。
シナリオ名キーワード対応DB作成方法では、遷移用キーワード辞書作成手段310が作成した遷移用キーワード辞書401−1を読み込む。そして、シナリオ名-表記取得ステップS6−1において、「シナリオ内キーワード−d」クラスと「シナリオ関連語−d」クラスに属するキーワードを取得する。dは連結しようとしている各元シナリオの名称である。そして、取得した各キーワード毎に、その表記と、クラス名の中からシナリオ名称部分を取得する。
取り出したそれぞれの1つのキーワードの表記とシナリオ名称の対応関係を1つのレコードとして、DB登録処理ステップS6−2によってDBへ登録する。なお、登録するデータベースはSQL言語などを介してアクセスする一般的なリレーショナルデータベースシステムでも良いし、1行に表記と対応するシナリオ名称がカンマ(,)などのデリミタ文字を挟んだものが列挙されているようなテキストファイルなどの形式でも良い。
遷移用発話理解規則作成手段330は、遷移用発話理解規則作成方法を用いて、遷移用発話理解規則401−2を生成する。図7に、遷移用発話理解規則作成方法の流れを示す。
遷移用発話理解規則作成方法は、理解規則抽出ステップS7−1、理解規則書き換えステップS7−2、規則生成1ステップS7−2、規則生成2ステップS7−4の4つの手段が連結しようとする各元シナリオについて繰り返され、ファイル等に生成した規則を書き出す。
理解規則抽出ステップS7−2では、各元シナリオ100A、100Bの発話理解規則リスト101A−3、101B−3…(図2参照)から、シナリオキーワードクラスリスト103に含まれるクラスをその規則中に含む発話理解規則を抽出する。
理解規則書き換えステップS7−2では、理解規則抽出ステップS7−1で抽出した各規則のクラス名を「シナリオ内キーワード−d」に(dは現在処理中の元シナリオ名称)、振り分け先スロット名を「遷移先シナリオ関連語」スロットにそれぞれ書き換える。
規則生成1ステップS7−3では、「シナリオ内キーワード−d」または「シナリオ関連語−d」に属するキーワードが音声認識した単語列中に出現すれば、そのキーワードを「遷移先シナリオ関連語」スロットに振り分けよ、とした内容の発話理解規則を生成する。
規則生成ステップS7−4では、「シナリオ指定」クラスに属するキーワードが音声認識した単語列中に出現すれば、そのキーワードを「遷移先シナリオ」スロットに振り分けよ、とした内容の発話理解規則を生成する。
上記を、各元シナリオについて実行し、さらにナビゲートシナリオ名称について規則生成2ステップS7−4を実行した後、理解規則書き換えステップS7−2、規則生成1ステップS7−3、規則生成2ステップS7−4でそれぞれ書き換え、生成した発話理解規則をファイル等へ書き出し、遷移用発話理解規則401−2とする。
遷移用認識言語モデル・辞書作成手段340は、遷移用認識言語モデル・辞書作成方法を用いて、遷移用言語モデル401−3と遷移用認識辞書401−4を作成する。図8に、遷移用認識言語モデル・辞書作成方法の流れを示す。
遷移用認識言語モデル・辞書作成方法は、連結しようとする各元シナリオについて、例文抽出ステップS8−1と、例文クラス変換ステップS8−2と、キーワード・クラス置換ステップS8−3と、形態素解析ステップS8−4を行い、言語モデルの計算・辞書の作成ステップS8−5と、それらの書き出しという処理ステップS8−6とからなる。
例文抽出ステップS8−1では、各元シナリオが利用する言語モデルを生成した元シナリオ例文リスト(形態素解析され、キーワードが入る位置はクラス名で置き換えられている)の中から、シナリオキーワードクラスリスト中にあるクラスを含む例文を抽出する。
例文クラスステップS8−2では、今度は追加例文リスト105(図2)を読み込み、追加例文リスト105中の各例文に、シナリオ関連キーワードリスト104に含まれる単語があれば、その単語の部分を「シナリオ関連語−d」クラスに置き換える。
キーワード−クラス変換ステップS8−3では、今度は追加例文リスト105(図2)を読み込み、追加例文リスト105中の各例文に、シナリオ関連キーワードリスト104に含まれる単語があれば、その単語の部分を「シナリオ関連語−d」クラスに置き換える。
形態素解析ステップS8−4では、キーワード−クラス置換ステップS8−3でキーワードのクラスへの置換後の追加例文リスト中の各例文を、形態素解析器を使って、単語ごとに分かち書きし、その読み仮名を振る。
言語モデルの計算・辞書の生成ステップS8−5では、上記例文クラス変換ステップS8−2と、形態素解析ステップS8−4で作成した形態素解析済み例文と、クラス内単語辞書の情報として遷移用キーワード辞書とを言語モデル・辞書作成方法を利用して、言語モデルと辞書を作成する。これには、特開2004−69858号公報及び特開2004−53745号公報で示される方法を利用することが出来る。
計算した言語モデル、生成した辞書は、それぞれファイル等に保存され、遷移用言語モデル401−3及び遷移用認識辞書401−4とされる。
ナビゲート用シナリオ作成手段302(図2参照)は、ナビゲートシナリオ名と各元シナリオに付与したシナリオ名称と、連結された対話シナリオにおいて全体的な役割を務める対話シナリオであるナビゲート用シナリオ403を生成する。
ナビゲート用シナリオ403は、このシステムがいったいどんな話題の対話が出来るかという説明を行なうよう記述された対話シナリオである。ナビゲート用シナリオの生成にあたっては、連結される各元シナリオ名称が特定されなくても記述できるフローについてはあらかじめ記述したものをテンプレートとして保存しておき、ナビゲートシナリオ作成手段302が実行されて、連結される元シナリオ名称が定まったところでそのテンプレート内に完成に必要な情報を追記・生成することで完全なシナリオファイルとするといった手段で実現可能である。
また、遷移用シナリオ生成手段303は、各元シナリオ名称とナビゲートシナリオ名を読み込み、遷移用シナリオを生成する。例えば、ユーザが連結されている各元シナリオのいずれかを指示した場合、つまり「遷移先シナリオ」スロットにシナリオ指定クラスに属するキーワードが入力された場合、そのシナリオ名称の示す各元シナリオが連結されているかをシナリオ名称の列挙により応答してユーザの発言を促す。また、遷移先の候補となるシナリオが複数あった場合、つまり「遷移先シナリオ関連語」スロットに入力されたキーワードの表記からシナリオ名キーワード対応DB402を検索した結果、対応するシナリオ名称が複数得られた場合には、そのいずれに遷移すればよいかを確認するなどの対話を行なうように記述されている対話シナリオである。
以上により、連結された対話シナリオが作成できる。
対話シナリオ実行手段600(図1参照)では、連結情報を読み込み最初に実行すべき元シナリオのシナリオファイル(元シナリオの1つか、ナビゲートシナリオ)を読み込んでから実行する。
最初に実行するシナリオが元シナリオの1つであれば、同時に遷移用シナリオと遷移用リソースを読み込み、元シナリオの音声認識・発話理解と平行してユーザの同じ発声に遷移用リソースによる音声認識・発話理解も実行する。遷移用リソースからの発話理解結果が得られ、さらに元シナリオソースからの認識結果が得られない場合または元シナリオソースからの認識結果が得られてもその尤度が遷移用リソースの結果に比して極端に小さい状態となった場合は、遷移用シナリオによる応答動作が実行される。遷移用シナリオによる対話の結果により、他の元シナリオまたはナビゲート用シナリオの実行が遷移用シナリオから要求されると、対話シナリオ実行手段600ではそのシナリオを読み込み実行する。ナビゲート用シナリオが実行されるときには、音声認識・発話理解の処理は遷移用リソースに対してのみ行われる。ナビゲート用シナリオはまたその対話結果に応じて、元シナリオの1つの実行や、対話の終了を対話シナリオ実行手段600に対して要求し、要求を受けた対話シナリオ実行手段600では元シナリオの実行やシステムの終了処理を行なう。
本実施例において、対話システムの連結のために入力として新たに人手等で作成しなければいけない情報は、名称、キーワードの列挙を行なうだけでよく、その作成コストはその対話システムで扱おうとする全話題のスロットに関して待ち受けるための規則を各コスト(>2のスロット数乗)に比してはるかに少ない。
遷移用リソースは、上記で説明した生成過程から、連結しようとする元シナリオが扱うキーワードや、その元シナリオを連想させるキーワードを認識・理解可能である。
また、遷移用リソースからの発話理解結果が得られるとその結果に応じて、遷移用シナリオやナビゲート用シナリオにより、別の話題を扱う対話シナリオへの遷移が可能となっている。
以上説明した音声対話シナリオ作成装置はハードウェアによって実現することも可能であるが、現実的には本発明による音声対話シナリオ作成プログラムをコンピュータにインストールし、コンピュータに音声対話シナリオ作成装置として機能させる実施形態が最も実現性が高い。本発明による音声対話シナリオ作成プログラムはコンピュータが解読可能なプログラム言語によって記述され、コンピュータが読みよ取り可能な例えばCD−ROM、磁気ディスクのような記録媒体に記録される。コンピュータにはこれらの記録媒体から或いは通信回線を通じてインストールされ、コンピュータに備えられたCPUに解読されて音声対話シナリオ作成動作を実行する。
本発明による音声対話シナリオ作成方法及び装置は音声対話システムを構築するためのプログラム作成現場で活用される。
本発明による音声対話シナリオ作成方法及び装置の概要を説明するためのブロック図。 本発明による音声対話シナリオ作成装置の一実施例を説明するためのブロック図。 図2の続きを説明するためのブロック図。 本発明の実施例に用いた遷移用リソース作成手段の詳細を説明するためのブロック図。 図4に示した遷移用リソース作成手段の動作を説明するためのフローチャート。 本発明の実施例に用いたシナリオ名キーワード対応データベース作成手段の動作を説明するためのフローチャート。 本発明の実施例に用いた遷移用発話理解規則作成手段の動作を説明するためのフローチャート。 本発明による実施例に用いた遷移用認識言語モデル・認識辞書作成手段の動作を説明するためのフローチャート。
符号の説明
100 元シナリオ群 401−1 遷移用キーワード辞書
100A〜100N 元シナリオ 401−2 遷移用発話理解規則
101A〜101N リソース 401−3 遷移用言語モデル
101A−1 シナリオファイル名 401−4 遷移用認識辞書
101A−2 キーワード辞書 401−5 シナリオキーワード対応DB
101A−3 発話理解規則リスト 403 ナビゲート用シナリオ
101A−4 元シナリオ例文リスト 404 遷移用シナリオ
102 シナリオファイル名 405 連結情報
103 シナリオキーワードリスト
104 シナリオ関連キーワードリスト
105 追加例文リスト
106 各シナリオの内容
200 情報抽出手段
300 整合情報作成手段
301 遷移用リソース作成手段
302 対話シナリオ
303 遷移用シナリオ作成手段
304 連結情報作成手段

Claims (6)

  1. それぞれが異なる1つの話題にのみ対応した元シナリオを複数備え、これら複数の元シナリオを連結して複数の話題に対応可能な音声対話シナリオを作成する音声対話シナリオ作成方法であって、
    上記元シナリオに備えられているリソースから各元シナリオを連結することに必要な情報、どの元シナリオに話題を遷移するかを決める情報、話題が遷移した状態で各元シナリオに適した音声認識を行わせるための情報を抽出し、これらの情報からどの元シナリオに遷移しても各元シナリオが適正に音声応答を実行できる環境に整合させるための整合情報を生成し、
    上記整合情報は、連結された元シナリオ内で扱う各元シナリオの名称と、元シナリオのファイル名、ファイルの位置、最初に実行する元シナリオの情報を記述した連結情報と、 各元シナリオの中の音声認識リソースから目的達成のために必要な入力項目に入力される単語と、各元シナリオの名称と、元シナリオを想起させる関連語句とを抽出し、これらを話題の遷移を引き起こす遷移用語句として適正に音声認識し、理解結果を出力するための遷移用リソースと、
    遷移用語句が認識された場合に、その認識用語句と対応する元シナリオへ遷移するかを確認し、遷移することを表示し、連結されている別の元シナリオに制御を移す動作を実行するための遷移用対話シナリオとを含み、この整合情報を保有することにより複数の話題に対応可能な音声対話シナリオを作成することを特徴とする音声対話シナリオ作成方法。
  2. それぞれが異なる1つの話題にのみ対応した元シナリオを複数備え、これら複数の元シナリオを連結して複数の話題に対応可能な音声対話シナリオを作成する音声対話シナリオ作成装置であって、
    上記元シナリオに備えられているリソースから各元シナリオを連結するために必要な情報、どの元シナリオに話題を遷移するかを決める情報、話題が遷移した状態で各元シナリオに適した音声認識を行わせるための情報を抽出する情報抽出手段と、
    この情報抽出手段が抽出した情報からどの元シナリオを実行中であっても他の元シナリオの扱う話題に関する利用者の発声を処理し、整合させるための整合情報を作成する整合情報作成手段と、を備え
    上記整合情報作成手段は、
    連結された元シナリオ内で扱う各元シナリオの名称と、元シナリオのファイル名、ファイルの位置、最初に実行する元シナリオの情報を記述した連結情報とを作成する連結情報作成手段と、
    各元シナリオの中の音声認識リソースから目的達成のために必要な入力項目に入力される単語と、各元シナリオの名称と、元シナリオを想起させる関連語句とを抽出し、これらを話題の遷移を引き起こす遷移用語句として適正に音声認識し、理解結果を出力するための遷移用リソースを作成する遷移用リソース作成手段と、
    遷移用語句が認識された場合に、その認識用語句と対応する元シナリオへ遷移するかを確認し、遷移することを表示し、連結されている別の元シナリオに制御を移す動作を実行するための遷移用シナリオを作成する遷移用シナリオ作成手段と、
    によって構成されることを特徴とする音声対話シナリオ作成装置
  3. 請求項に記載の音声対話シナリオ作成装置において、
    上記整合情報生成手段は、上記連結情報作成手段と、遷移用リソース作成手段と、遷移用シナリオ作成手段に加えて、
    上記連結された元シナリオで実行可能な対話内容を表示し、音声対話手順を案内するためのナビゲート用シナリオ作成手段を備えることを特徴とする音声対話シナリオ作成装。
  4. 請求項2又は3に記載の音声対話シナリオ作成装置において、
    上記遷移用リソース作成手段は、
    各元シナリオに備えられているリソースの中のキーワード辞書から所定のクラスに属するキーワードを抽出し、抽出したキーワードにこのキーワードの属性を示す情報を付加した遷移用キーワード集を作成する遷移用キーワード辞書作成手段と、
    各元シナリオに記述されている各キーワードがどの元シナリオに属するかを示す表として作用するシナリオ名キーワード対応データベースを作成するシナリオ名キーワード対応データベース作成手段と、
    各元シナリオに記述されている発話理解規則のリストから、シナリオキーワードクラスリストに含まれるクラスの、その規則中に含む発話理解規則を抽出し、抽出した各規則のクラス名をシナリオ内のキーワードに属性を表わす情報を付加した名称に、また振り分け先スロット名を遷移先シナリオ関連語にそれぞれ書き替え、シナリオ内キーワードに属性を表わす情報が付加されたキーワード又は遷移先シナリオ関連語に属するキーワードが音声認識した単語列中に出現すれば、そのキーワードを遷移先シナリオ関連語スロットに振り分けよ、とする内容の発話理解規則と、シナリオ指定クラスに属するキーワードが音声認識した単語列中に出現した場合は、そのキーワードを遷移先シナリオスロットに振り分けよ、とした内容の発話理解規則を作成する遷移用発話理解規則作成手段と、
    各元シナリオが利用する言語モデルを生成した元シナリオ例文リストの中から、シナリオキーワードクラスリスト中にあるクラスを含む例文を抽出し、抽出した各例文中のクラス名をシナリオ内のキーワードの検索に供する情報を付加したクラス名に置換し、更に追加例文リスト中の各例文からシナリオ関連キーワードリストに含まれるキーワードを抽出し、そのキーワードのクラスをシナリオ関連語クラスに置換したものと、また追加例文リスト中の各例文を形態素解析手段で単語ごとに分かち書きし、その読み仮名を振ったものとから遷移用言語モデルと遷移用認識辞書とを作成する遷移用認識言語モデル・辞書作成手段と、
    によって構成したことを特徴とする音声対話シナリオ作成装置。
  5. コンピユータが解読可能なプログラム言語によって記述され、コンピユータに少なくとも請求項乃至4の何れかに記載した音声対話シナリオ作成装置として機能させる音声対話シナリオ作成プログラム。
  6. コンピュータが読み取り可能な記録媒体によって構成され、この記録媒体に請求項記載の音声対話シナリオ作成プログラムを記録した記録媒体。
JP2005235121A 2005-08-15 2005-08-15 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体 Expired - Fee Related JP4634889B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005235121A JP4634889B2 (ja) 2005-08-15 2005-08-15 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005235121A JP4634889B2 (ja) 2005-08-15 2005-08-15 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体

Publications (2)

Publication Number Publication Date
JP2007052043A JP2007052043A (ja) 2007-03-01
JP4634889B2 true JP4634889B2 (ja) 2011-02-16

Family

ID=37916558

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005235121A Expired - Fee Related JP4634889B2 (ja) 2005-08-15 2005-08-15 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体

Country Status (1)

Country Link
JP (1) JP4634889B2 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5149737B2 (ja) * 2008-08-20 2013-02-20 株式会社ユニバーサルエンターテインメント 自動会話システム、並びに会話シナリオ編集装置
JP6190251B2 (ja) * 2013-11-15 2017-08-30 ヤフー株式会社 情報処理装置及び方法
JP6362861B2 (ja) * 2013-12-25 2018-07-25 Kddi株式会社 対話シナリオに対する動的対話ノードの挿入行動を制御する対話プログラム、サーバ及び方法
CN109524010A (zh) * 2018-12-24 2019-03-26 出门问问信息科技有限公司 一种语音控制方法、装置、设备及存储介质
CN111126201B (zh) * 2019-12-11 2023-06-30 上海众源网络有限公司 剧本中人物识别方法及装置
CN113409778A (zh) * 2020-03-16 2021-09-17 阿里巴巴集团控股有限公司 语音交互方法、系统和终端
CN111768756B (zh) * 2020-06-24 2023-10-20 华人运通(上海)云计算科技有限公司 信息处理方法、装置、车辆和计算机存储介质
CN113521758B (zh) * 2021-08-04 2023-10-24 北京字跳网络技术有限公司 信息交互方法及装置、电子设备、存储介质
CN114118101B (zh) * 2021-11-26 2022-12-09 北京百度网讯科技有限公司 对话数据生成方法及装置、设备和介质
CN116645963A (zh) * 2022-02-15 2023-08-25 博泰车联网科技(上海)股份有限公司 一种语音应答方法、装置、电子设备及可读存储介质
CN114547271B (zh) * 2022-02-25 2025-03-11 北京智源人工智能研究院 对话数据增广方法、电子设备和存储介质
CN115357704B (zh) * 2022-10-19 2023-02-10 深圳市人马互动科技有限公司 语音互动小说中异构剧情节点的处理方法及相关装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3674453B2 (ja) * 2000-04-14 2005-07-20 株式会社デンソー 対話型ユーザインターフェース装置
JP2002023903A (ja) * 2000-07-11 2002-01-25 Nippon Telegr & Teleph Corp <Ntt> ユーザ対話方法、この方法を実施する装置、およびこの方法を実行するプログラムを記憶する記憶媒体
JP3423296B2 (ja) * 2001-06-18 2003-07-07 沖電気工業株式会社 音声対話インターフェース装置
JP2004219714A (ja) * 2003-01-15 2004-08-05 Will Being:Kk 人間からの指示に基づいてそれぞれ予め定めた特定のシーンに属する対話のシーンを識別し、シーンに即した自然対話を構成する応答文を作成して、それを音声合成することにより、音声対話を行うコンピュータによる音声対話方法及び音声対話システム
JP2004240150A (ja) * 2003-02-05 2004-08-26 Nippon Telegr & Teleph Corp <Ntt> 音声対話装置、音声対話装置選択方法、プログラム及び記録媒体
JP3839784B2 (ja) * 2003-04-10 2006-11-01 日本電信電話株式会社 対話シナリオ生成方法、対話シナリオ生成装置、対話シナリオ生成用プログラム
JP4144443B2 (ja) * 2003-06-19 2008-09-03 富士通株式会社 対話装置

Also Published As

Publication number Publication date
JP2007052043A (ja) 2007-03-01

Similar Documents

Publication Publication Date Title
KR100661687B1 (ko) 대화형 음성 응답 애플리케이션 구현 장치 및 방법, 머신 판독가능 매체 및 대화형 음성 응답 시스템
CN102549652B (zh) 信息检索装置
JP2006277677A (ja) コミュニケーション支援装置、コミュニケーション支援方法およびコミュニケーション支援プログラム
CN111177350A (zh) 智能语音机器人的话术形成方法、装置和系统
CN112818089B (zh) 文本注音方法、电子设备及存储介质
JP2011100355A (ja) 発言記録装置、発言記録方法、プログラム及び記録媒体
JP4634889B2 (ja) 音声対話シナリオ作成方法、装置、音声対話シナリオ作成プログラム、記録媒体
US9196251B2 (en) Contextual conversion platform for generating prioritized replacement text for spoken content output
CN111145719B (zh) 将中英混合及语气标签化的数据标注方法及装置
El Ouahabi et al. Toward an automatic speech recognition system for amazigh-tarifit language
Gustafson Developing multimodal spoken dialogue systems: Empirical studies of spoken human–computer interaction
JP2005174325A (ja) 意味的速記のためのシステム及び方法
JP2019144755A (ja) 対話管理サーバ、対話管理方法、及びプログラム
JP2026000442A (ja) 議事録作成支援装置、およびプログラム
Di Fabbrizio et al. AT&t help desk.
JP2004348552A (ja) 音声文書検索装置および方法およびプログラム
JP4220151B2 (ja) 音声対話装置
CN111782779A (zh) 语音问答方法、系统、移动终端及存储介质
KR19990047859A (ko) 도서 문헌 데이터베이스 검색을 위한 자연언어 대화 시스템
CN1275174C (zh) 具有语音辨识辅助功能的中文输入方法及其系统
JP2006236037A (ja) 音声対話コンテンツ作成方法、装置、プログラム、記録媒体
CN111402859B (zh) 一种语音词典生成方法、设备及计算机可读存储介质
KR101030777B1 (ko) 스크립트 데이터 생성 방법 및 장치
JP4206253B2 (ja) 自動音声応答装置及び自動音声応答方法
WO2022054286A1 (ja) 言語リソースのデータ構造及びこれを用いた発話理解支援のための装置、方法及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070810

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100622

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100629

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100830

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101109

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101119

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131126

Year of fee payment: 3

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees