JP3945356B2

JP3945356B2 - 音声対話装置及びプログラム

Info

Publication number: JP3945356B2
Application number: JP2002269941A
Authority: JP
Inventors: 竜一鈴木; 美樹男笹木
Original assignee: Denso Corp
Current assignee: Denso Corp
Priority date: 2002-09-17
Filing date: 2002-09-17
Publication date: 2007-07-18
Anticipated expiration: 2022-09-17
Also published as: JP2004109323A

Description

【０００１】
【発明の属する技術分野】
本発明は、ユーザとの間で音声対話を行うための音声対話装置に関する。
【０００２】
【従来の技術】
従来より、例えばカーナビゲーションシステムにおいてレストラン等の目的地の位置情報を音声により問い合わせたりする情報検索のための装置、音声対話を通じてユーザを楽しませる娯楽用の装置等の音声対話装置が知られている。特に近年では、こうした音声対話においてユーザとの間で自然な対話を実現するために、対話のためのシナリオを予め複数用意してユーザの発話に対応する音声対話装置が提案されている（例えば、特許文献１参照）。
【０００３】
【特許文献１】
特開２００１−３５７０５３号公報
【０００４】
【発明が解決しようとする課題】
しかしながら、上記特許文献１の音声対話装置では、ユーザの発話に対してシステム側の応答が予め対応づけられており、ユーザの質問等の発話に対して予め決められたことしか答えることができなかった。このため、答えを知らない場合には応答することができず、対話を中断するか話題を変えるなどの手段をとるしかなく、知的な対話を行うという観点からは十分ではなかった。
【０００５】
また、ユーザの発話に対してシステム側の応答が予め対応づけられているため、決められた言葉に対して決まりきった発話をすることしかできず、自然な対話を行うという観点からも十分と言えるものではなかった。
本発明は、こうした問題に鑑みなされたものであり、ユーザとの対話状況に応じて発話内容を臨機応変に変えることができると共に、ユーザの知的好奇心にも応えることができ、知的で自然な音声対話を実現する音声対話装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
上記課題に鑑み、請求項１記載の音声対話装置においては、ユーザから対話のための音声入力がなされると、認識手段がこの入力内容を音声認識する。記憶手段には、ユーザとの対話内容に応じた複数のシナリオと、各シナリオに沿った発話対象語が予め記憶されており、選択手段が、認識手段による認識に応じて記憶手段に記憶された発話対象語の中からユーザに向けた発話語を選択し、出力手段が、この選択手段によって選択された発話語を音声により出力することにより、ユーザとの間で対話を行う。
【０００７】
そして特に、学習手段が、記憶手段に記憶された発話対象語の中に、ユーザとの対話内容に応じた発話対象語がない場合に、選択手段にユーザにこの対話内容の答えを問い返すための発話語を選択させ、この問い返しに対してユーザから入力された対話内容の答えに基づき、この対話内容に応じたシナリオを学習し、このシナリオと各シナリオに沿った発話対象語を記憶手段に新たに記憶させ、更新手段が、学習手段により学習された対話情報に基づき、記憶手段において、この対話内容についての音声対話に必要なシナリオ、対話辞書、認識辞書を、自動的に更新するようにし、第２の記憶手段が、学習手段により学習された対話情報について、複数回交わされた同種の対話内容の履歴を記憶するようにし、上記更新手段が、同種の対話内容について互いに不整合なシナリオがある場合には、対話確率の高いシナリオに順次変更して更新するようにする。
【０００８】
すなわち、かかる音声認識装置においては、ユーザから知らないことを聞かれたら、その場では分からないと答えるが、次に同じようなことを聞かれたら、答えられるような学習機能を有する。つまり、ユーザから知らないことを聞かれた場合にユーザにその答えを問い返し、その質問内容と答えを記憶して、次からの対話に用いるようにする。
【０００９】
このため、知らない対話内容によって対話を中断させたり、ユーザの提示する話題を変更したりする必要性が小さくなると共に、学習によって新たなシナリオや語彙を増やして知識を向上させ、次回からのユーザとの対話に反映することができる。その結果、学習を重ねる毎に特定のユーザに対して満足のできる対話を実現することができるようになる。また、異なるユーザに対しては新たな話題や情報を提供することができ、知的な対話を実現することができる。
【００１０】
また、学習によって保有するシナリオや発話語彙のバリエーションを増加させることができ、同じ発話内容であってもその発話語を様々なタイプのユーザに応じて適宜変化させることができる。このため、様々なタイプのユーザとの間で自然な対話を実現することができる。
【００１２】
すなわち、かかる音声対話装置においては、ユーザの発話を認識するための語彙が参照される認識辞書、ユーザとの対話内容に沿った発話を実現するために予め用意された複数種類のシナリオ、各シナリオに沿った発話を実現するための語彙が参照される対話辞書が設けられている。そして、ユーザとの対話を通じて学習手段により新たに学習されたシナリオや語彙を自動的に更新し、次回から参照可能なシナリオや語彙を増加させることにより、上記知的で自然な対話を実現するのである。
【００１３】
しかし、ユーザにより教えられたことが間違っている場合もあるので、対話を行っていく中で、１つの質問に対する答えがいくつか返ってくる場合がある。その場合に上記更新手段が対話内容を逐次更新していくと、次回からの対話においてユーザに間違った情報を提供する虞がある。
【００１５】
しかしながら、かかる音声対話装置においては、例えば異なる複数のユーザとの間で交わされた対話内容を通じて学習手段が学習した問いかけと答えとを履歴情報として記憶する。そして、その問いかけと答えの対応が複数の対話間で異なる場合には、更新手段が、その問いかけに対して最も対話確率（頻度）の高い答えを採用するようにシナリオを順次変更していく。この結果、次回からの対話においては、同じ内容の問いかけに対して、この最も頻度の高いシナリオに沿った発話をすることになる。その結果、発話内容が自然に実際の答えに近づいていくようになり、知的な対話を実現することができるのである。
【００１６】
その際、対話内容についての対話確率が等しい場合も考えられるので、請求項２に記載のように、更新手段は、不整合なシナリオ間で、その対話内容についての対話確率が等しい場合には、先に出現したものを優先するようにしてもよい。
すなわち、対話確率が等しいからといって発話内容が直前に出現したものに度々されると、ユーザから優柔不断と思われ、不快感を感じられる場合がある。そこで、このように先に（より過去に）出現したものを優先することで、音声対話装置としての意志を強調して対話に勢いや信頼性を持たせることができる。
【００４５】
尚、このような音声対話装置の各手段をコンピュータにて実現する機能は、例えば、コンピュータ側で起動するプログラムとして備えることができる（請求項３）。このようなプログラムの場合、例えば、ＦＤ、ＭＯ、ＤＶＤ、ＣＤ−ＲＯＭ、ハードディスク等のコンピュータ読取可能な記録媒体に記録し、必要に応じてコンピュータにロードして起動することにより用いることができる。この他、ＲＯＭやバックアップＲＡＭをコンピュータ読取可能な記録媒体としてプログラムを記録しておき、このＲＯＭ或いはバックアップＲＡＭをコンピュータに組み込んでもよい。尚、ここでいう「各手段」とは、各請求項中の各構成要件としての個々の手段を意味するのではなく、請求項単位の手段の集まりを意味する。
【００４６】
【発明の実施の形態】
以下、本発明の実施の形態を具体化した実施例を図面と共に説明する。図１は本実施例の音声対話装置の全体構成を表すブロック図である。
１．音声対話装置の構成
同図に示すように、音声対話装置１は、音声対話ロボットとして構成され、音声認識部１０，シナリオインタープリタ２０，対話シナリオ部３０，顔画像認識判定部４０，ロボット発話語決定部５０，学習機能部６０，及び音声合成部７０等を備えている。また、ユーザの姿態を撮像可能なカメラがその頭部の周りに一定間隔で複数設けられており、ユーザがたとえロボットの後方から話し掛けてきても、これを認識することができるようになっている。そして、ユーザからはその複数のカメラのうちの２つがロボットの目として認識できるように構成されている。さらに、ユーザの音声を入力するための指向性マイクが、その頭部の周りに一定間隔で複数設けられており、四方からユーザの発話音声を入力できるようになっている。そして、ユーザからはその複数の指向性マイクのうちの２つがロボットの耳として認識できるように構成されている。
【００４７】
そして、ユーザの発話音声は、上記指向性マイクを介してまず音声認識部１０に入力される。音声認識部１０は、ユーザの発話により指向性マイクから入力される音声レベルの大きさやその音声レベルの変化等により、ユーザがロボットの方向を向いて話し掛けてきたかどうか、また、どの方向から話し掛けてきたか等を認識することができる。また、顔画像認識判定部４０は、これと同時に上記複数のカメラから入力されたユーザの顔画像からその顔の位置や向きを判定し、ユーザがロボットの方向を向いて話し掛けてきたかどうかの判定精度を向上させたり、ユーザの唇の動きを解析して所謂リップリーディングによる画像認識を行い、音声認識の精度を向上させることができる。
【００４８】
そして、音声認識部１０は、話し掛けてきたユーザの発話音声を認識すると、対話に必要な語彙が格納された認識辞書１１を参照してこの発話音声の内容を認識し、この認識結果をシナリオインタープリタ２０に出力する。
対話シナリオ部３０には、対話上の条件分岐等を表す複数種類のシナリオが格納されている。この対話シナリオ部３０は、シナリオインタープリタ２０を介して得た上記認識結果，時間計測器８０による経過時間情報等を参照して、対話の進行状況に適合したシナリオ（発話語）を生成し、その情報をシナリオインタープリタ２０に出力する。
【００４９】
シナリオインタープリタ２０は、対話シナリオ部３０にて決定されたシナリオに従って、対話用認識辞書２１及び発話リスト格納部２２を参照し、次の発話内容を設定するための演算処理を行う。ここで、対話用認識辞書２１には、対話用の単語等の装置で用いられる単語が格納され、発話リスト格納部２２には、対話のシナリオに応じて複数設定された文章化された発話語が選択可能に格納されている。
【００５０】
さらに、シナリオインタープリタ２０が、発話リスト格納部２２や対話用認識辞書２１を参照しても、ユーザとの対話内容に応じた発話対象語がない場合には、ユーザにこの対話内容の答えを問い返すことになる。その際、学習機能部６０が、この問い返しに対してユーザから入力された対話内容の答えに基づき、この対話内容に応じたシナリオとこのシナリオに沿った発話対象語（語彙）を学習し、当該シナリオ及び発話対象語をシナリオインタープリタ２０を介して、対話用認識辞書２１，発話リスト格納部２２，対話シナリオ部３０に格納して更新し、次回からの対話に反映させる。つまり、ここでは円滑でかつ適切な対話をするために、シナリオの作成、及びそれに伴う対話辞書、発話リストの作成が行われる。
【００５１】
そして、ユーザとの発話において、ロボット発話語決定部５０が、対話シナリオ部３０に新たに格納されたシナリオ等も含めてロボットの発話語を決定し、これに対応した発話語を発話リスト格納部２２からシナリオインタープリタ２０に出力させる。そして、シナリオインタープリタ２０にて最終的に生成された応答内容が、音声合成部７０にて音声合成され、ロボットの発話としてスピーカから出力される。
２．学習機能（知的な対話）
音声対話を進めていくうちに、ロボットが答えられない（シナリオに記述されていない）ことをユーザから聞かれることが出てくる。その際、はじめは分からないので、ユーザにその答えを問い返す。このことにより、ロボットはその質問内容と答えを学習し、自動的に音声対話装置１に必要なシナリオ、対話辞書、認識辞書を更新する。したがって、２回目以降は、今まで答えられなかったことに対しても、答えられるようになっていく。しかし、学習した答えが間違っている場合もあり、対話を行っていく中で、１つの質問に対して、いくつかの答えが発生する場合が出てくる。その場合は、その答えの中での出現確率が一番高いものをロボットが発話する答えとする。等確率のものが発生した場合は、先に出現したものを優先する。このような機能を備えることで、知らないことを学習できるようになり、また、その答えも高い確率で正確な答えに近づいていくようになる。
３．ロボット発話（自然な対話）
ロボットが応答する発話を、質問に対して、毎回同じことを発話するのではなく、ユーザの応答時間間隔や答え方、発話内容などによって、ロボットの発話も様々に変化させることができる。また、ユーザの感情や方言など、様々な要因によってもロボット発話を変化させることができる。
４．作動
次に、図２〜図４に示すフローチャートに基づいて、本実施例の音声対話装置の動作について説明する。
４．１全体の流れ
本実施例の音声対話装置１の全体の流れとしては、対話シナリオ部３０で設定したシナリオどおりに進んでいく。ユーザの応答待ち、すなわちシナリオの各分岐点において、図３に示す学習機能に関する動作フロー、図４に示すロボット発話に関する動作フローを適用し、それに対応するロボットの発話を出力していく。この操作を繰り返し、シナリオにより、対話終了となった時点で終了とする。
【００５２】
すなわち、図２に示すように、ユーザの応答を待ち（Ｓ１１０）、まず顔画像認識判定処理を実行する（Ｓ１２０）。
この顔画像認識判定処理においては、上述したロボットの複数の目（カメラ）及び耳（マイク）を介して、音声認識部１０が、ユーザがロボットの方向を向いて話し掛けてきたか否かを判定し、図１０に示すように、ユーザがロボットの方向を向いて話し掛けてきたと判定されると音声認識を開始する。そのとき、発話中にユーザが顔を背けても、認識をストップさせず、その発話が完了するまで認識は止めない。また、ユーザがロボットの方向を向いていなくて入ってきた音声は認識せず、その途中で、ユーザがロボットの方向に顔を向けた場合は、その時点から認識を開始させるようにする。この場合、上述のように、ロボットにはその頭部周囲の３６０度全てにわたって一定の間隔で、目（カメラ）及び耳（マイク）が設けられているため、ロボットの後ろの方からの音声でも、ユーザがロボットの方向を向いて話し掛けてきた音声は認識することができる。本実施例では、その際、ロボットがそのユーザの方向を向くようにされており、これにより、人間が行っている会話のように自然な動作／対話をするようになっている。こうすることで、ロボットは、本当に認識したい語彙のみ認識するようになる。
【００５３】
そして、ユーザの顔画像を認識したと判定されると（Ｓ１３０：ＹＥＳ）、続いて、図３に示す学習機能に関する動作フローを実行する（Ｓ１４０）。
４．２学習機能（知的な対話）
音声対話を進めていくうちに、ロボットが答えられない（シナリオに記述されていない）ことをユーザから聞かれることが出てくる。本学習機能は、このような事態に対応できる知的な対話を実現するものである。尚、図５及び図６には、ユーザに知らないことを聞かれたときの対応例が示されている。
【００５４】
すなわち、ユーザとの対話を通じて、シナリオインタープリタ２０が対話シナリオ部３０を参照し、ユーザからの発話内容（質問内容）についてロボットが知っている内容であるか否かを判定する（Ｓ２１０）。このとき、対応するシナリオがなく、知らない内容であると判定されると（Ｓ２１０：ＮＯ）、ロボット側からユーザに対して、「分からないので、教えて」などと言ってその答えを問い返し（Ｓ２２０）、これに対するユーザの回答に基づき、学習機能部６０がその質問内容とその答えを学習する（Ｓ２３０）。そして、このとき得られた新たなシナリオや発話語彙をシナリオインタープリタ２０を介して対話用認識辞書２１，発話リスト格納部２２，及び対話シナリオ部３０等に格納する。つまり、全く知らないことに対してはシナリオを増やしていき、言葉の意味が分からないだけの場合には、認識語彙を増やしていく。このことにより、２回目以降は、分からなかったことに対しても答えられるようになり、新たなシナリオや発話語彙が蓄積されていくことで知的なロボットとなっていく。具体例を示すと、図５に示す如くである。
【００５５】
一方、Ｓ２１０において、対応するシナリオがあり、知っている内容であると判定されると（Ｓ２１０：ＹＥＳ）、そのシナリオに記述されている発話を選択し、音声合成部７０にて音声合成して発話する（Ｓ２４０）。そして、この発話に対してユーザに誤りを指摘されなければ（Ｓ２５０：ＮＯ）、当該動作フローを終了する。
【００５６】
ただし、はじめに答えてもらったユーザの答えが必ずしも正解であるとは限らない。このため、２回目以降にユーザ側から「違うよ」と指摘されることも想定される。このため、Ｓ２５０において、ユーザに誤りを指摘された場合には（Ｓ２５０：ＹＥＳ）、学習機能部６０が、まずその質問内容とその答えを学習する（Ｓ２６０）。そして、その質問内容と同じ対話内容について、発話リスト格納部２２から過去の履歴を参照し、その質問内容に対して現在一番出現確率（累積値）の高い答えとの確率の比較を行う（Ｓ２７０）。
【００５７】
このとき、今回の答えの出現確率が大きいと判定されると、当該質問内容についての答えを正解とみなし、次回からの答えに変更し、シナリオを更新して当該動作フローを終了する（Ｓ２８０）。一方、今回の答えの出現確率が小さいと判定されると、当該質問内容についての答えの変更は行わない（Ｓ２９０）。さらに、両者の確率が等しい場合には、先に（より過去に）出現したものを、次回の発話に使用するように設定する（Ｓ３００）。これらの具体例を示すと、図６に示す如くである。
【００５８】
図２に戻り、続いて図４に示すロボット発話に関する動作フローを実行する（Ｓ１５０）。
４．３ロボット発話（自然な対話）
本動作フローでは、図４に示すように、ロボット側の発話に対するユーザの応答時間間隔（Ｓ３１０），ユーザの答え方（Ｓ３４０），及びユーザの発話内容の判断（Ｓ３５０）に基づき、その発話内容を強調した発話をしたり（Ｓ３２０）、曖昧性を持たせた発話をしたりする（Ｓ３３０）。
【００５９】
具体的には図７に示すように、例えばロボットがユーザに対して、「好きな食べ物は」と聞いた場合、ユーザがすぐに、例えば「リンゴだよ」と答えたとすると、ロボットは「そうですか。リンゴが大好きなんだね。」などと、好きなことを強調するような発話にする。逆に、ユーザが間を開けて（例えば１０秒程度）、「リンゴかな」と答えたとすると、ロボットは「本当にリンゴが好きなの。」といったような、ユーザが考えて出した答えに対して、曖昧性を持たせた返答とする。このように、返答に差をつけることで、意味、感情といった部分を考慮に入れた知的なロボットとなる。
【００６０】
また、ユーザの答え方、例えば、「リンゴだよ」と「リンゴかな」の違いのように、「だよ」であると確信を持った断定的な言い方であるし、「かな」であると少し曖昧性を持った言い方であるので、このような点を見極めて、ロボット発話の返答をかえる。
【００６１】
さらに、ユーザの発話内容から、「えーと、・・・」などと、頭に語彙が入ると、考えていて、あまり確信がなく曖昧な言い方と受け取れるので、このような点も考慮に入れて、ロボット発話の返答をかえる。
図２に戻り、以上のようにして決定されたロボットの発話内容に従って発話を行い（Ｓ１６０）、続いて終了条件判定処理を実行する（Ｓ１７０）。そして、シナリオに基づいて予め設定した終了条件を具備したと判定されると（Ｓ１８０：ＹＥＳ）、一連の処理を終了する。
５．その他の知的で自然なロボット音声対話に関する要因
図８に知的で自然なロボット音声対話装置に関する要因を示す。
５．１感情
図８に示すように、ユーザの発話に含まれる感情を認識し、ロボットの発話口調を変化させる。例えば、ユーザがロボットに対して、怒っているような口調で話し掛けた場合には、ロボットの発話は、なだめるようなやさしい言葉で発話させるようにする。
【００６２】
また図９に示すように、そのユーザの感情の対象の違い、例えば、ロボットの発話に対しての感情か、一般的なことに対しての感情かによっても、ロボット発話を変化させることができるようにする。
５．２方言
図８に示すように、ユーザの発話の方言に対して、ロボットの発話も同様の方言を用いて発話させることで、親しみのわく知的なロボットとする。例えば、ユーザが関西弁で話し掛けた場合には、ロボットの発話も関西弁にするといった具合である。
【００６３】
また、方言の認識より、話題をその土地柄にちなんだものに進めていくようにする。こうすることで、話題の転換ができ、ユーザにとっても答えやすい話題へと進んでいくという工夫を入れている。
５．３言語
図８に示すように、ユーザの発話の言語に対して、ロボットの発話も同様の言語で発話させる。例えば、英語で話し掛けられたら、ロボットも英語で発話するといった具合である。
【００６４】
また、言語の認識より、話題をその国にちなんだものに進めていくようにする。こうすることで、話題の転換ができ、ユーザにとっても答えやすい話題へと進んでいくという工夫を入れている。
５．４発話音声
図８に示すように、ユーザの年齢や性別に応じて、ロボットの発話音声を変化させる。例えば、小さい子供に対しては、幼稚園の先生のようなお姉さんの声で対応し、男の人には女の人の声で、女の人には男の人の声で応答するといった具合である。
【００６５】
また、発話音声だけでなく、年齢や性別にちなんだ話題へと進めていくことができるという工夫を入れている。
５．５画像（目をもたせる）
図８に示すように、１つには、目をもたせることで、ユーザの唇の動きを見ることができるので、リップリーディングの技術を応用し、認識率の向上に努めることができ、どんな言葉でも認識できるという知的なロボットに役立つ。
【００６６】
もう１つには、ユーザの顔の位置を認識し、ロボットはユーザの顔が正面を向いていると判定したときの音声のみを認識することで、ノイズ対策が行え、認識率向上につながる。
具体的には、上記において図１０に基づいて説明したとおりである。

以上に説明したように、本実施例の音声対話装置１においては、ユーザから知らないことを聞かれたら、その場では分からないと答えるが、次に同じようなことを聞かれたら、答えられるような学習機能を有する。つまり、ユーザから知らないことを聞かれた場合にユーザにその答えを問い返し、その質問内容と答えを記憶して、次からの対話に用いるようにする。
【００６７】
このため、知らない対話内容によって対話を中断させたり、ユーザの提示する話題を変更したりする必要性が小さくなると共に、学習によって新たなシナリオや語彙を増やして知識を向上させ、次回からのユーザとの対話に反映することができる。その結果、学習を重ねる毎に特定のユーザに対して満足のできる対話を実現することができるようになる。また、異なるユーザに対しては新たな話題や情報を提供することができ、知的な対話を実現することができる。
【００６８】
また、ユーザの受け答えのタイミングや発話内容等に応じて、音声対話装置１側もその応答内容やタイミングを様々に変化させる。このような装置側の発話の変化により、自然な音声対話を実現することができる。
さらに、音声対話装置１としてのロボットに複数の目（カメラ）や耳（マイク）を設けたり、リップリーディングの技術を応用することにより、ユーザの発話語以外のノイズを除去して音声認識することができ、認識手段による発話語の認識率が向上する。それにより、ユーザの発話に対する装置側の錯誤が防止又は抑制することができ、ユーザとの間で自然な対話を実現することができる。その結果、ユーザとの間で知的な対話を進めることができる。
【００６９】
尚、本実施例において、音声認識部１０が認識手段に該当し、顔画像認識判定部４０が画像認識手段に該当し、シナリオインタープリタ２０，対話シナリオ部３０及びロボット発話語決定部５０が、選択手段，判定手段，更新手段，識別手段に該当する。また、対話用認識辞書２１，発話リスト格納部２２が、記憶手段，第２の記憶手段に該当し、学習機能部６０が学習手段に該当し、音声合成部７０が出力手段に該当する。
【００７０】
以上、本発明の実施例について説明したが、本発明の実施の形態は、上記実施例に何ら限定されることなく、本発明の技術的範囲に属する限り種々の形態をとり得ることはいうまでもない。
例えば、上記実施例では、本発明の音声対話装置をロボットとして構成した例を示したが、これに限らず、ナビゲーションシステム等の装置として構成してもよいことはもちろんである。
【図面の簡単な説明】
【図１】本発明の実施例に係る音声対話装置の概略構成を表すブロック図である。
【図２】実施例の音声対話装置の動作を表すフローチャートである。
【図３】音声対話装置の学習機能の動作を表すフローチャートである。
【図４】音声対話装置に係るロボット発話動作を表すフローチャートである。
【図５】ロボットが知らないことを聞かれたとき（学習機能）の対応例１を表す説明図である。
【図６】ロボットが知らないことを聞かれたとき（学習機能）の対応例２を表す説明図である。
【図７】ユーザの受け答えのタイミングの違いによるロボットの対応例を表す説明図である。
【図８】知的なロボットに関する要因を表す説明図である。
【図９】ユーザの感情の対象の違いによるロボット発話の対応例を表す説明図である。
【図１０】ロボットの画像認識による音声対話の例を表す説明図である。
【図１１】ロボット音声対話の対話例を表す説明図である。
【符号の説明】
１・・・音声対話装置、１０・・・音声認識部、
２０・・・シナリオインタープリタ、２１・・・対話用認識辞書、
２２・・・発話リスト格納部、３０・・・対話シナリオ部、
４０・・・顔画像認識判定部、５０・・・ロボット発話語決定部、
６０・・・学習機能部、７０・・・音声合成部

Claims

ユーザから対話のための音声入力がなされると、該入力内容を音声認識する認識手段と、
ユーザとの対話内容に応じた複数のシナリオと、該各シナリオに沿った発話対象語を予め記憶した記憶手段と、
前記認識手段による認識に応じて、前記記憶手段に記憶された発話対象語の中からユーザに向けた発話語を選択する選択手段と、
該選択手段によって選択された発話語を音声により出力する出力手段と、
を備え、ユーザとの間で対話を行う音声対話装置であって、さらに、
前記記憶手段に記憶された発話対象語の中に、ユーザとの対話内容に応じた発話対象語がない場合に、前記選択手段にユーザに該対話内容の答えを問い返すための発話語を選択させ、該問い返しに対してユーザから入力された対話内容の答えに基づき、該対話内容に応じたシナリオを学習し、該シナリオと該各シナリオに沿った発話対象語を前記記憶手段に新たに記憶させる学習手段と、
前記学習手段により学習された対話情報に基づき、前記記憶手段において、該対話内容についての音声対話に必要なシナリオ、対話辞書、認識辞書を、自動的に更新する更新手段と、
前記学習手段により学習された対話情報について、複数回交わされた同種の対話内容の履歴を記憶する第２の記憶手段を備え、
該第２の記憶手段が記憶した対話情報に基づき、同種の対話内容について互いに不整合なシナリオがある場合には、前記更新手段は、対話確率の高いシナリオに順次変更して更新することを特徴とする音声対話装置。
請求項１に記載の音声対話装置において、
前記更新手段は、前記不整合なシナリオ間で、その対話内容についての前記対話確率が等しい場合は、先に出現したものを優先することを特徴とする音声対話装置。
請求項１または２に記載の音声対話装置の前記各手段としてコンピュータを機能させるためのプログラム。