Segmenting and POS tagging Classical Tibetan using a memory-based tagger
Segmenting and POS tagging Classical Tibetan using a memory-based tagger
复制标题
使用基于内存的标记器对古典藏文进行分段和词性标记
DOI：
10.5070/h916234501
复制
发表时间：
2018
期刊：
影响因子：
--
通讯作者：
Nathan W. Hill
中科院分区：
文献类型：
--
作者：
M. Meelen;Nathan W. Hill
本文提出了一种新方法来解决古典藏文中两个具有挑战性的 NLP 任务：分词和词性（POS）标记。我们演示了如何以相同的方式解决这两个问题，即生成一个基于内存的标记器，该标记器将 1) 分段标记和 2) POS 标记分配给由未分段的藏文字符行组成的测试语料库。我们提出了一个三阶段工作流程，并评估分段和词性标记任务的结果。我们认为，基于记忆的标注器（MBT）和提出的工作流程不仅为这些 NLP 挑战提供了充分的解决方案，而且还是构建更大的藏语注释语料库的高效工具。
This paper presents a new approach to two challenging NLP tasks in Classical Tibetan: word segmentation and Part-of-Speech (POS) tagging. We demonstrate how both these problems can be approached in the same way, by generating a memory-based tagger that assigns 1) segmentation tags and 2) POS tags to a test corpus consisting of unsegmented lines of Tibetan characters. We propose a three-stage workflow and evaluate the results of both the segmenting and the POS tagging tasks. We argue that the Memory-Based Tagger (MBT) and the proposed workflow not only provide an adequate solution to these NLP challenges, they are also highly efficient tools for building larger annotated corpora of Tibetan.
语料库语言学对词典学的贡献和藏语词典的未来
DOI：
--
发表时间：
2015
期刊：
Revue d'Études Tibétaines
影响因子：
--
作者：
Garrett, E
通讯作者：
Garrett, E
基于规则的古典藏语词性标注器
影响因子：
--
作者：
Garrett E
通讯作者：
Garrett E