权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

Automatic Multilingual Subtitling of Lecture Videos Towards University Globalization

讲座视频自动多语言字幕迈向大学全球化

基本信息

批准号：
20K03120
负责人：
美馬秀樹
金额：
$ 2.75万
依托单位：
Kyushu University (2022)Kyoto University (2021)The University of Tokyo (2020)
依托单位国家：
日本
项目类别：
Grant-in-Aid for Scientific Research (C)
财政年份：
2020
资助国家：
日本
起止时间：
2020-04-01 至 2024-03-31
项目状态：
已结题

项目摘要

“いつでも，どこでも，だれにでも”同等の教育の機会を提供することは非常に重要である．国連サミットにて採択されたSDGsにおいても，「質の高い教育をみんなに」は，今後の持続可能な社会における重要な政策目標の一つとなっている．また，海外からの留学性や教員も利用することを考慮すると，字幕に対して翻訳を行うことも必要な要素である．現に，私が以前，担当していたUTokyo OCWサイトに併設されているSNSには，国内外より，聴覚障害者からの字幕付与，言語習得も含めた学習教材化，等への要望も多く寄せられていた．しかしながら，講義映像が短時間で少量であれば人手で行うことも可能であるが，一般に高コストであり，本研究開発において期待されるような多数の講義映像に対して行うことは難しい．そこで映像音声に対して自動的に音声認識を行い，その結果を字幕として表示，あるいはその結果に対して人手により修正を行うことで字幕とする等の手法の研究開発が行われている．しかしながら，音声認識システムの認識精度は年々向上してはいるものの，そのまま字幕として使用するには未だ十分な精度とは言い難い．特に，本研究で対象とする高等教育での講義映像の音声には専門用語が多く含まれており，認識できない用語があるのに加え，字幕として利用するためには同音異義語も正しく漢字へと変換することが必要となる。この解決には、講義で話されているテキストを大量に収集し、分析を行い、言語モデルを再構成することが望ましい。そこで、昨年度は、サイバー大学より講義ビデオの提供をいただく契約を行い、約100時間分の講義ビデオを収集することに成功した。また、情報通信研究機構（NICT）との共同により、収集した講義ビデオからの音声テキストデータの抽出を進めており、適宜、音声翻訳の精度向上のためのデータとして利用する準備が整ったと言える。

" The SDGs are designed to provide quality education, and the future may be an important policy objective for society. The overseas students and teachers should consider the necessary factors. Now, in the past, I have taken the responsibility of UTokyo OCW service and set up SNS service, both at home and abroad, and I have paid subtitles to the victims, and I have learned to include learning materials, etc. A small number of handouts are available for a short period of time, but a large number of handouts are available for a short period of time. The research and development of the method of automatic sound recognition of the image sound is carried out, and the result is subtitled. The accuracy of sound recognition is very high. The accuracy of sound recognition is very high. In particular, this study aims to improve the quality of teaching materials in higher education. The solution is to collect, analyze, and reconstruct the speech. For example, in the past year, the university has submitted a report to the Ministry of Education, and the report has been submitted to the Ministry of Education for 100 minutes. The Information and Communication Research Institute (NICT) has been working together to collect and extract information from the audio and video files, and to improve the accuracy of audio and video translation.