命名实体翻译分析与研究

《命名实体翻译分析与研究》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、命名实体翻译分析与研究报告人：陈钰枫中科院自动化所中文信息处理组2006.10.17OutlineNE（NamedEntity）翻译概述NE对齐组织机构名的翻译研究参考文献一、NE翻译概述NE翻译各类机器翻译方法NE对齐双语NE语料库双语平行文档语料库一、NE翻译概述采用各种机器翻译方法的缺陷：翻译结果不够规范NE中的一些词义是特定的，例如：风陵渡——Fenglingdu——windcombcross（×）音译问题一、NE翻译概述采用NE对齐建立词典进行NE翻译的缺陷：不够灵活覆盖面取决于双语语料库的大小二、NE对齐二、NE对齐NE对齐与NE识

2、别的关系通常NE对齐先要分别在两种语言中进行NE识别，然后在识别结果的基础上产生候选翻译对，再过滤得到对齐结果；识别和对齐结合在一起进行，或只进行单语识别；两个过程交替迭代进行的，以得到较好的对齐结果和较高的识别精度。二、NE对齐NE对齐和短语对齐的关系NE有具体，严格的边界，和NE识别的关系NE对齐一般是完整，不间断共同问题:如何从词对位实现NE或短语的对位二、NE对齐NE对齐和分词的关系对于汉语来说，识别和对齐之前往往需要进行词切分；不进行切分，通过窗口移动直接在句子中得到候选翻译项二、NE对齐NE对齐的两个过程：（单语或双语）进行NE识别

3、后，从平行双语句子对中抽取NE候选翻译对将候选翻译对进行过滤，得到最优的NE对齐二、NE对齐在过程1中分词和NE识别可能引入的错误:SegmentationerrorUntaggedPartiallytaggedTaggedwithotherwordsasoneNE二、NE对齐解决方法:用单语NE识别代替双语NE识别滑动窗（Anopen-endNEalignmentwindow）基于双语NE识别:将已标注为NE的词作为中心,窗口向两边扩展基于单语NE识别:利用IBM模型得到的翻译词表来确定“锚点”。然后以这些“锚点”为中心，在一定长度的词窗范围

4、内选取词或词组作为候选命名实体。二、NE对齐过滤候选翻译对（过程2）：采用多特征融合的方法，所以一般利用多特征对齐模型或者最大熵模型等可用的特征模型：TranslationModelTransliterationModelTaggingModelCo-occurrenceModelDistortionModelAbbreviationhandling……三、组织机构名的翻译研究机构名（ON,Organizationname）特点：1、ON的结构最复杂，其中可能包含人名，地名等；2、通过NE对齐建立翻译词典的方法比较适合人名、地名的翻译，而对于粒

5、度大，结构易变的ON，还要抓住其本质结构；例如：中国国际对外科技交流中心闽台新闻交流联谊会BNF形式：ON{[locationname][organizationname][ordinalnumber][personname][organizationtype][othermodifier]}*三、组织机构名的翻译研究行政管理机构名主要是从属于国家或地方级别的公共机构，例如国家部门、省市政府、大学和协会等。这类机构名的组成比较规则，并且它的组成词大部分是已登录词。企业机构名主要是私有的带

6、有盈利性质的机构，例如酒店、银行、公司等，这类机构名多以地名开头，中间加以企业字号，例如“吉百利”等，大部分是未登录词。三、组织机构名的翻译研究行政管理机构名和企业机构名比较（LDC2005T34）统计类别总数分词结果翻译次序结构音译结尾信息行政管理机构308001～21个词包含1～7个词的NE占95.6%34％有次序的调整5％825类企业机构547471～21个词包含2～7个词的NE占92.0%94％顺序翻译90％以上单一如银行，公司三、组织机构名的翻译研究行政管理机构名和企业机构名比较：行政管理机构名特征：1、有比较强的组成结构信息；2、地

7、名，人名涉及音译，通过词典可以大部分解决；翻译的重点在结构企业机构名特征：1、绝大部分按顺序翻译，即使有次序调整，只是前后调换一次；例如：中国银行/bankofchina/2、企业商标名以音译为主，约定俗成，音译缺乏规律性，例如：吉百利/cadbury/；3、词尾信息单一：以“公司”结尾占83％。翻译的重点在于音译。采用NE对齐方法实现翻译可行三、组织机构名的翻译研究行政管理机构名对位结果分析Society（1）for（2）the（3）Study（4）of（5）Mao（6）Zedong‘s（7）Philosophical（8)Ideas(9)毛

8、泽东({67})哲学({8})思想({9})研究({345})会({12})SocietyfortheStudyofMaoZedong‘sPhilos