A Dataset for Assessing Machine Translation Evaluation Metrics
A Dataset for Assessing Machine Translation Evaluation Metrics
复制标题
用于评估机器翻译评估指标的数据集
DOI：
--
复制
发表时间：
2010
期刊：
影响因子：
--
通讯作者：
Marc Dymetman
中科院分区：
文献类型：
--
作者：
Lucia Specia;Nicola Cancedda;Marc Dymetman
我们描述了一个数据集，其中包含由四个机器翻译系统生成的16，000个翻译，并由专业翻译人员手动注释质量。该数据集可用于评估机器翻译评估指标的一系列任务，从基本的相关性分析到基于机器学习的指标的训练和测试。通过为这些任务提供标准数据集，我们希望鼓励开发更好的MT评估指标。
We describe a dataset containing 16,000 translations produced by four machine translation systems and manually annotated for quality by professional translators. This dataset can be used in a range of tasks assessing machine translation evaluation metrics, from basic correlation analysis to training and test of machine learning-based metrics. By providing a standard dataset for such tasks, we hope to encourage the development of better MT evaluation metrics.