一种错误敏感的词对齐评价方法.ppt

《一种错误敏感的词对齐评价方法.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、2021/7/301一种错误敏感的词对齐评价方法黄书剑奚宁赵迎功戴新宇陈家骏南京大学计算机系自然语言处理实验室2021/7/302研究动因相关工作问题分析我们的工作实验及分析小结及展望提纲2021/7/303研究动因相关工作问题分析我们的工作实验及分析小结及展望提纲双语平行语料词对齐短语翻译模型训练参数学习测试双语平行语料词对齐调序模型训练参数学习测试大规模单语语料词对齐结果语言模型训练参数学习测试PBSMT基本流程2021/7/304词对齐在PBSMT中起到了至关重要的作用如何衡量词对齐的质量？？通过整个机器翻译系统的效果来评价效果直接可见缺点：时间消耗多

2、通过人工标注的对齐矩阵来评价以AER为代表独立于机器翻译系统计算高效，便于迭代优化2021/7/305如何评价词对齐质量？对齐错误率(AlignmentErrorRate)(Ochetal.,2003)出发点：以link为单位计算词对齐的质量通过准确率和召回率来描述困境：AER与机器翻译系统的一致性较差(Ayanetal.,2006;Fraseretal.,2007)大幅度减少AER的同时，BLEU的提高并不明显(Zhangetal.2004;Liangetal.,2006;DeNeroetal.,2007…)2021/7/3062021/7/307研究动因

3、相关工作问题分析我们的工作实验及分析小结及展望提纲权值可调的F-measure(Fraseretal.,2007)出发点：AER中对准确率和召回率处以相同的权重是有偏的用权值α来调节准确率和召回率潜在问题：α对于不同的语料要进行重新训练本质上没有考虑短语抽取的过程2021/7/308一致短语错误率(ConsistentPhraseErrorRate)(Ayanetal.,2006)出发点：为短语抽取服务以多个对齐的结果上共同抽取的短语作为评价标准以短语的准确率和召回率来衡量对齐的质量潜在问题：需要同时有多个对齐才能进行短语抽取本身具有一定的盲目性代价大，不便

4、于快速计算和多次迭代2021/7/3092021/7/3010研究动因相关工作问题分析我们的工作实验结果分析小结及展望提纲人工标注的词对齐2021/7/3011印尼重申反对外国MilitaryPresence军队进驻ReiterateditsOppositiontoForeignIndonesia部分抽取出的短语重申reiterated重申反对reiterateditsoppositionto重申反对外国reiterateditsoppositiontoforeign反对oppositionto反对外国oppositiontoforeign外国foreign

5、外国军队foreignmilitary词对齐错误12021/7/3012印尼重申反对外国MilitaryPresence军队进驻ReiterateditsOppositiontoForeignIndonesia部分抽取出的短语重申reiterated重申反对reiterateditsoppositionto重申反对外国reiterateditsoppositiontoforeign反对oppositionto反对外国oppositiontoforeign外国foreign外国军队foreignmilitary词对齐错误22021/7/3013印尼重申反对外国

6、MilitaryPresence军队进驻ReiterateditsOppositiontoForeignIndonesia部分抽取出的短语重申reiterated重申反对reiterateditsoppositionto重申反对外国reiterateditsoppositiontoforeign反对oppositionto反对外国oppositiontoforeign外国foreign外国军队foreignmilitary错误的严重程度与错误链接的位置有关缺失链接2021/7/3014印尼重申反对外国MilitaryPresence军队进驻Reiterate

7、ditsOppositiontoForeignIndonesia部分抽取出的短语重申reiterated重申反对reiterateditsoppositionto重申反对外国reiterateditsoppositiontoforeign反对oppositionto反对外国oppositiontoforeign外国foreign外国军队foreignmilitary缺失链接的影响远小于错误链接冗余链接2021/7/3015印尼重申反对外国MilitaryPresence军队进驻ReiterateditsOppositiontoForeignIndonesia

8、错误的严重程度与冗余链接的位置和数量有关2021/7