Subcharacter Information in Japanese Embeddings: When Is It Worth It?
Subcharacter Information in Japanese Embeddings: When Is It Worth It?
复制标题
DOI：
10.18653/v1/w18-2905
复制
发表时间：
2018
期刊：
影响因子：
--
通讯作者：
Marzena Karpinska;Bofang Li;Anna Rogers;Aleksandr Drozd
中科院分区：
文献类型：
--
作者：
Marzena Karpinska;Bofang Li;Anna Rogers;Aleksandr Drozd
具有表意书写系统的语言给传统的字符级模型带来了困难。最近的研究表明，利用子字符信息对于中文中的许多内在和外在任务是有益的。我们研究相同的策略是否可以应用于日语，并为这种语言提供一个新的类比数据集。
Languages with logographic writing systems present a difficulty for traditional character-level models. Leveraging the subcharacter information was recently shown to be beneficial for a number of intrinsic and extrinsic tasks in Chinese. We examine whether the same strategies could be applied for Japanese, and contribute a new analogy dataset for this language.