开发集训练集测试集

训练集：用于训练模型的数据的集合。

开发集：是在使用训练集训练出模型后，对训练出的模型的参数进行调整的数据集合。

测试集：用于测试最终生成的模型的数据集合。

三者的关系：

训练集+测试集=所有的数据集合

训练集∩测试集=∅

开发集⊊训练集

NiuTrans翻译系统是“数据驱动”的MT系统，要求使用数据对系统进行训练和/或调参。在运行该系统前要求用户准备好以下数据：

a). 训练数据：双语句对以及对应的词对齐结果

b). 开发数据：带有至少一个参考译文的源语句子集

c). 测试数据：新句集

d). 评价数据：测试数据集的参考答案