自然言語理解により未知の形式表現を扱うセマンティックパージング

使用自然语言理解进行语义解析来处理未知的形式表达

• 批准号: 21K17798
• 负责人: 鷲尾 光樹
• 金额: $ 3万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Early-Career Scientists
• 财政年份: 2021
• 资助国家: 日本
• 起止时间: 2021-04-01 至 2022-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-21K17798/
• 关键词: 自然言語処理; 意味解析; セマンティックパージング; 言語理解; 汎化

本研究では自然言語処理における意味解析を対象として研究を遂行した。意味解析、その中でも特にセマンティックパージングは自然言語で与えられる指示・命令を機械実行可能な形式表現へ変換する技術である。近年では機械学習を用いて大量の自然言語と形式表現のペアから成る訓練データから適切な変換を学習する。しかし、このような純粋な経験的手法では、訓練データに出現しなかった形式表現を扱えないという問題がある。この問題は、機能が頻繁に拡張され、新たな形式表現が追加されるような実世界のアプリケーションにセマンティックパージングを適用する上で重大な問題となる。本研究では、形式表現に割り当てられた自然言語説明文の言語理解によって、未知の形式表現に適応する枠組みを研究した。具体的には、（１）本研究で提案する枠組みを評価するためのデータセットの構築を行い、（２）説明文を参照して、未知の形式表現を予測時に出力可能なモデルを提案した。（１）では、既存のプログラミング言語生成のセマンティックパージングのデータセットの各事例で用いられている関数やメソッドにAPIドキュメントから抽出した説明文を人手で付与すると同時に、評価データには訓練データに含まれない未知のライブラリが出現するようにデータを分割した。これにより未知の形式表現を扱うセマンティックパージングの評価を可能にした。（２）では、APIドキュメントにおける形式表現のプロトタイプと説明文のアライメントと、コピー機構を利用することで、予測時に未知の形式表現を出力することができるモデルを提案した。

这项研究的重点是自然语言处理中的语义分析。其中包括语义分析是一种将自然语言提供的指令和指令转换为机器可观表达式表达式的技术。近年来，机器学习用于从包括大量自然语言和正式表达对的训练数据中学习适当的转换。但是，这种纯粹的经验方法存在一个问题，即他们无法处理未出现在培训数据中的正式表示。这个问题是将语义清除应用于经常扩展功能并添加新形式表示形式的现实应用程序的严重问题。在这项研究中，我们研究了一个框架，通过对分配给正式表示的自然语言解释性文本的语言理解来适应未知的形式表示。具体而言，（1）我们构建了一个数据集来评估本研究中提出的框架，并且（2）我们提出了一个模型，该模型可以在预测时输出未知的形式表示，指的是描述。在（1）中，从API文档中提取了现有编程语言生成的语义清除数据集的每个示例中使用的功能和方法，而数据则分为零件，以便培训数据中未包括的未知库出现在评估数据中。这允许评估语义清除以处理未知的形式表示。在（2）中，我们提出了一个模型，该模型可以在预测过程中通过使用原型和API文档中格式表达式的描述和复制机制来输出未知形式表达式。

项目成果

On the Relationship between Zipf's Law of Abbreviation and Interfering Noise in Emergent Languages

齐普夫缩写定律与新兴语言干扰噪声的关系

• 发表时间: 2021
• 作者: Ryo Ueda;Koki Washio
• 通讯作者: Koki Washio

議論の構造化と妥当性評価のためのBayesian Argumentation-Scheme Networksの提案とアノテーションデータ作成

贝叶斯论证方案网络的提议以及用于构建论证和评估有效性的注释数据的创建

• 发表时间: 2021
• 作者: 近藤 崇宏;鷲尾 光樹;林 克彦;宮尾 祐介
• 通讯作者: 宮尾 祐介