Estimation of Dialogue States in Database Search Spoken Dialogue System

データベース検索音声対話システムにおける対話状態 の推定

データベース検索を行う音声対話システムにおいて，ユーザの意図を反映し，音声 認識誤りに対処して応答生成を行うための対話状態を推定するモデルについて述べる． データベース検索タスクにおいて，対話の状態が「検索条件の指定」「情報の提示要 求」の二つを遷移するとモデル化する．この 2 つの状態を対話中から得られる素性に 基づき，ロジスティック回帰により予測する．レストランデータベース検索を行う音 声対話システムを構築し，7 名の被験者から対話データを収集し，モデルの学習実験 を行った．ベースラインシステムでの対話状態の決定精度が 87.1%であるのに対して， 学習されたモデルでは，オープンテストで 97.4%であった．また，モデルに用いた素 性のうち，どの素性が対話状態の推定に寄与しているかの確認も行った．


Development and Evaluation of Spoken Dialog System using Multiple Dialog Agents

複数の対話エージェントを扱う音声対話システムの構築と評価

現在の音声対話システムは，一人のユーザに対して一つのエージェントが対応する 1 対 1 の対話を扱っているが，本論文ではシステム側のエージェントを複数にするこ とで多人数対話を実現するシステムを構築する．今回は，2 つのエージェントを扱っ た，三者対話システムの開発を行った．本システムは，我々がこれまでに構築した 1 対 1 対話の音声対話システムを拡張しており，ユーザに対する応答のタイミングや， 応答の種類(あいづちなど)の制御を決定木を用いて行っている．また，ユーザから の非流暢な発話に対しても頑健に応答することが可能になっている．エージェントは， 2D のキャラクタを，それぞれ 2 台のディスプレイに 1 つずつ表示し，出力音声も別々 のスピーカから出力されるようになっている．被験者実験の結果，被験者は三者対話 による内容の幅の広がりや，対話の自然性を感じていることが示された．


Spoken Dialog System using Multiple Dialog Agents

複数の対話エージェントを扱う音声対話システムの開発

現在の音声対話システムは，一人のユーザに対して一つのエージェントが対応する 1 対 1 の対話を扱っているが，本論文ではシステム側のエージェントを複数にするこ とで多人数対話を実現するシステムを構築する．今回は，2 つのエージェントを扱っ た，三者対話システムの開発を行う．本システムは，我々がこれまでに構築した 1 対 1 対話の音声対話システムを拡張しており，ユーザに対する応答のタイミングや，応 答の種類(あいづちなど)の制御を決定木を用いて行っている．また，ユーザからの 非流暢な発話に対しても頑健に応答する事が可能になっている．エージェントは，2D のキャラクタを，それぞれ 2 台のディスプレイに 1 つずつ表示し，出力音声も別々の スピーカから出力されるようになっている．


Spoken Dialog System Considering The Response Timing and The Evaluation

応答タイミングを考慮した音声対話システムとその評価

人間と機械が対話を行う際に，機械が人間同士の会話と同じように，自然な応答を 返すことが出来れば，より円滑な対話を行うことが期待できる．本研究では，人間同 士の雑談対話中にて生じる対話現象を模倣する音声対話システムを構築した．本シス テムでは，応答として，あいづち，復唱，共同補完などを扱っており，決定木を用い て応答種類と応答タイミングを決定している．また，本システムはユーザからのオー バーラップ応答(バージイン)や，非流暢な発話に対しても頑健に応答することが可 能になっている．被験者実験の結果から，オーバーラップを含む通常応答やあいづち に対して高い自然性が示され，被験者の多くがあいづちに対して親しみを感じており， また，バージインは便利であると評価された．


Influence of Response Timing in Speech Dialogues

音声対話における発話タイミングの影響

電子情報通信学会技術研究報告

先行研究で行った対話リズムに関する分析結果の妥当性を確認するために，発話タイミング，分析結果に基づいた音声対話を作成し，対話の自然性や合成音の違和感発言の 聞き取るなどを調べる知覚実験を行った．知覚実験1で合成音声による4段の短い目的指向対話を，知覚実験2では実音と合成音の1 分長の長めの雑談対話を用って実験を行った．その結果，発言では自然な発話が存在すること，発話内容に即した発話タイミングに自然性を感じるなど， 対話リズムに関連する分析結果の妥当性を示すことができた．


Subjective Experiments on Influence of Response Timing in Speech Dialogues

音声対話における発話タイミングの影響に関する知覚実験


Analysis of relationship between impression of human-human conversations and prosodic change and its modeling

人間同士の対話の印象と韻律変化との関係の分析と そのモデル化

人間と機械が対話を行う際に，機械が人間同士の 会話と同じように，相手に同調を示すことができれ ば，より円滑な対話を行うことが期待できる．そのた めには，実際の人間同士の対話の印象がどのような 要因で決められるのかを把握し，その情報を用いて 相手に良い印象を与えていくようにする必要がある． 本研究では，韻律情報に着目し，人間同士の対話の印 象と韻律変化との間にどのような関係性があるのか を分析した．そして，音声対話システムへの実装を目 指した円滑に対話を行うための韻律制御モデルの構 築を試みた．


Modeling prosodic change in conversations and its application for a spoken dialog system

音声対話システムにおける対話中の 韻律変化のモデル化と適用

人間と機械が対話を行う際に，機械が人間同士の 会話と同じように，話者交代，割り込み，あいづちな どを自然に返すことが出来れば，より円滑な対話を 行うことが期待できる．そのためには応答を返すタ イミングや，出力音声の韻律情報を，実際の人間同 士の対話のように制御する必要がある．本研究では， 協調的な音声対話システムを実現するために，人間同 士の対話における応答タイミングや韻律的な同調と， 対話としての盛り上がり・意見の相違などとの関連を 分析し，そのモデル化を試みた．また，そのモデルを 音声対話システムに実装した．


Response Timing and Prosody Change Modeling in Conversations and Their Application to a Spoken Dialog System

対話における韻律変化・タイミングのモデル化と音声対話システムへの適用

人工知能学会 言語・音声理解と対話処理研究会

人工知能学会 言語・音声理解と対話処理研究会

本研究では，協調的な音声対話システムを実現するた めに，人間同士の対話における韻律的な同調と対話とし ての盛り上がりとの関連を分析し，そのモデル化を試み た．また，そのモデルを音声対話システムに搭載した． 音声対話システムは，リアルタイムにあいづち，話者交 替などの応答タイミングを検出し種々の雑談現象を扱い 応答することが出来る雑談に向けた対話システムであ り，タイミングの検出と応答の種類の決定には決定木を 用い，応答を出力する際の韻律情報は，モデルを用いて 制御している．


A spoken dialog system for chat-like conversations considering response timing

応答タイミングを考慮した雑談音声対話システム

人工知能学会 言語・音声理解と対話処理研究会

人工知能学会 言語・音声理解と対話処理研究会

本研究では，リアルタイムにあいづち，話者交替など の応答タイミングを検出し種々の雑談現象を扱い応答す ることが出来る雑談に向けた対話システムの構築を行っ た．タイミングの検出と応答の種類の決定には決定木を 用いており，その決定木の素性としては，言語情報と韻 律情報を用いている．ポーズを検出せずに逐次的に処 理をして応答を返すことから，オーバーラップした応答 なども返すことが可能であり，実際の雑談に現れる様々 な現象を実現できる．