权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

情報抽出に基づくユーザやドメインに適応的なマルチモーダル対話システム

基于信息提取的适应用户和领域的多模态对话系统

基本信息

批准号：
13J04537
负责人：
吉野幸一郎
金额：
$ 1.15万
依托单位：
Kyoto University
依托单位国家：
日本
项目类别：
Grant-in-Aid for JSPS Fellows
财政年份：
2013
资助国家：
日本
起止时间：
2013-04-01 至 2015-03-31
项目状态：
已结题

项目摘要

収集した対話データを利用して、音声により情報案内を行う対話システムを部分観測マルコフ決定過程（POMDP）によって統計的に制御する枠組みの構築と評価を行った。具体的には、収録された対話データから統計的にユーザの意図、焦点、それに対応するシステムの行動を推定するモデルを構築し、対話の各ターンにおいて適切な振る舞いをモデル化した。このモデルを評価するため、構築された対話システムを実際のユーザを相手に運用した結果、ユーザの焦点（興味の対象）に応じて適応的にシステムを制御することの有効性が、ユーザの意図の追従・システムの行動決定の両面から示された。また、前年に対話の盛り上がり（継続ターン数）やユーザからの積極的な対話への参与（具体的な焦点を含む質問）が強化学習における有効な報酬であることが示されていたが、これに加えてシステムが行った情報案内の結果（ユーザが求める情報が得られたかどうか）を新たな報酬として導入し、その効果が確認された。ユーザの興味に応じて対話システムの行動決定を行うのが良いということは先行研究においても示唆されていたが、実ユーザに対するシステムの行動決定を定量的に計測することによりその知見が明確に示された。特に情報案内においては、ユーザの興味が現在の話題に対して継続している場合はその話題を継続し、興味が失われた場合は話題を変更するという人間同士の対話においては当たり前に行われていることが、焦点の導入によって対話システムにおいても実現されている。また、ユーザに適応的な対話システム構築のための検討として対話行為としての相槌に着目し、協調的な対話においては相槌の韻律や形態が先行する発話に同調することが確認された。ユーザの焦点とあわせて、言語・非言語双方の多様なモダリティを用いて対話システムの制御を行うことが、適応的・協調的な音声対話システムの構築に有効であることが示された。

The collection of data, the use of sound, the implementation of data, the implementation of part of the measurement process (POMDP), the implementation of statistical control, and the implementation of evaluation. Specific information, including the meaning of the call, the focus of the call, the estimation of the call, the construction of the call, and the appropriate response. This article reviews, constructs, and uses the results, focuses on (interesting objects), controls, and controls of the appropriate session, and displays the actions and decisions of the session. In the previous year, the number of participants in the conversation was increased, and the number of participants in the conversation was increased. In the past year, the number of participants in the conversation was increased The first step is to determine the behavior of the user. The second step is to determine the behavior of the user. Special information in the case of interest in the current topic, interest in the current situation, the topic of interest in the current situation, the situation, the topic of interest in the current situation, the topic of interest in the current situation, the current situation, the topic of interest in the current situation, For example, if you want to make a decision, you can make a decision. The focus of the speech and non-speech is to control the speech and non-speech.

项目成果

期刊论文数量（0）

专著数量（0）

科研奖励数量（0）

会议论文数量（0）

专利数量（0）

Statistical Dialogue Management using Intention Dependency Graph

DOI：
发表时间：
2013-10
期刊：
影响因子：
0
作者：
Koichiro Yoshino;Shinji Watanabe;Jonathan Le Roux;J. Hershey
通讯作者：
Koichiro Yoshino;Shinji Watanabe;Jonathan Le Roux;J. Hershey

Predicate Argument Structure Analysis using Partially Annotated Corpora

DOI：
发表时间：
2013-10
期刊：
影响因子：
0
作者：
Koichiro Yoshino;Shinsuke Mori;Tatsuya Kawahara
通讯作者：
Koichiro Yoshino;Shinsuke Mori;Tatsuya Kawahara

ユーザの焦点に適応的な音声によるニュース案内システム

适应用户焦点的音频新闻引导系统

DOI：
发表时间：
2014
期刊：
影响因子：
0
作者：
上里美樹;吉野幸一郎;高梨克也;河原達也;吉野幸一郎
通讯作者：
吉野幸一郎

Automatic Speech Recognition for Mixed Dialect Utterances by Mixing Dialect Language Models

通过混合方言语言模型进行混合方言的自动语音识别

DOI：
10.1109/taslp.2014.2387414
发表时间：
2015
期刊：
EEE/ACM Transactions on Audio, Speech and Language Processing
影响因子：
0
作者：
Naoki Hirayama;Koichiro Yoshino;Katsutoshi Itoyama;Shinsuke Mori;and Hiroshi G. Okuno
通讯作者：
and Hiroshi G. Okuno

擬似生成した複数方言言語モデル混合による混合方言音声認識

使用伪生成的多方言语言模型的混合的混合方言语音识别