欢迎来到天天文库
浏览记录
ID:38565829
大小:29.50 KB
页数:4页
时间:2019-06-15
《自然语言理解1》由会员上传分享,免费在线阅读,更多相关内容在工程资料-天天文库。
1、自然语言处理自然语言处理(NaturalLanguageProcessing)俗称人机对话,是研究如何利用计算机来理解和处理自然语言的,即把计算机作为语言研究的工具,在计算机技术的支持下对语言信息进行定量化的研究,通常又被称为自然语言理解或计算语言学。1.自然语言处理研究的意义 它是计算机科学领域与人工智能领域中的一个重要分支学科,其研究是用电子计算机模拟人的语言交际过程,使计算机能理解和运用人类社会的自然语言如汉语、英语等,实现人机之间的自然语言通信,以代替人的部分脑力劳动,包括查询资料、解答问题、摘录文献、汇编资料以及
2、一切有关自然语言信息的加工处理。这在当前新技术革命的浪潮中占有十分重要的地位。研制第5代计算机的主要目标之一,就是要使计算机具有理解和运用自然语言的功能。自然语言理解是一门新兴的边缘学科,内容涉及语言学、心理学、逻辑学、声学、数学和计算机科学,而以语言学为基础。自然语言处理的目的是实现计算机对语言信息的自动分析和理解,它立足于实验、理论和计算三大支柱,通过以对人脑及语言认知的实现途径进行模拟研究,建立起多层次网络处理模型来阐明人脑语言信息处理系统,以期取得突破性的进展。自然语言理解的研究,具有很强的生命力,是当代科学新的生长
3、点。其综合应用了现代语音学、音系学语法学、语义学、语用学的知识,同时也向现代语言学提出了一系列的问题和要求。另外它的研究不可能一步就达到对大规模真是文本的完善处理,必须逐层逐步地加以分析和解决,各层次的研究既相互独立,又有着十分密切的联系,对每一层次的研究,都应考虑更高层次的研究需要。由于自然语言处理的对象是人类自然形成的极其复杂的语言现象,所以这门学科极具艰巨性。事实上,这门学科自20世纪40年代产生以来,经历了十分曲折的发展历程;然而随着信息社会的到来,自然语言处理,在机器翻译、信息检索、人机交互等信息处理领域有着广泛的
4、应用前景,这是这门学科的实用价值。2.自然语言处理的发展历程及现状2.1国外研究现状自然语言处理是运用计算机对自然语言进行分析和理解,从而使计算机在某种程度上具有像人的语言处理能力。国外关于自然语言处理方面的研究起步较早,一些卓有成就的语言学家、逻辑学家和心理学家都在自然语言处理中的语法、句法及语义分析方面提出了一系列较为系统的理论方法。可以认为,自然语言处理的研究始于机器翻译。1954年初,美国乔治敦大学在国际商用机器公司(IBM)的帮助下,在IBM—701上进行了第一次机器翻译实验。此后,机器翻译成了自然语言处理的重要研
5、究课题。到了20世纪60年代,随着一些新的人工智能方法的提出和Chomsky等人在语言理论上的突破,人工智能学者开发了一批新的语言处理系统。这些早期的自然处理没有成熟的语言句法分析,采用的主要技术是模式识别中的句法匹配,而且智能达到英语的受限领域的有限目标。在20世纪70年代,出现了一些有名的自然语言处理系统。如W.Woods在1972年设计了自然语言信息检索系统LUNAR,并在此系统中提出了著名的扩充转移网络(augmentedtransitionnetwork,英文缩写为ATN)。SHRDLU是T.Winogard于19
6、72年在美国麻省理工学院的人工智能实验室开发出来的一个自然语言理解系统,该系统包括一个句法分析程序(具有一部基于M.Halliday系统语法的大型英语语法)、一个语义分析程序(含有为解释词和结构所需的知识)、一个问题求解器(可以为执行命令和寻找问题答案作出安排),是一个句法、语义和推理的组合系统。MARGL是由R.Schank于1975年在斯坦福大学人工智能实验室建立起来的一个系统,其目的是提供一个自然语言理解的模型,该系统是根据Schank早年提出的概念从属理论建立的,系统由概念分析器、推理机和篇章生成3个模块组成。20世
7、纪80年代,各种新的语法体系应运而生。如Gazder的广义短语结构语法(generaliedphrasestructuregrammer)、Bresnan与Kaplan的词汇功能语法(lexicalfunctionalgrammer)、M.Kay的功能合一语法(functionalunificationgrammer)等。由于新的语法体系运用了复杂特征集雨功能合一技术,使得自然语言处理能力较以前采用单一标记的处理大大增强。20世纪90年代,在国际上掀起了语料库语言学(corpuslinguistics)的研究热潮。语料库语言
8、学研究机读(自然语言)文本的采集、存储、检索、统计、语法标注、句法和语义分析,以及具有上述功能的语料库在语言定量分析、词典编撰、作品风格分析和机器翻译等领域的应用,为自然语言处理的研究提供了新思路。2.2国内研究现状与国外的研究相比,我国自然语言处理研究所面临的一个重要难题就是如何结合汉语
此文档下载收益归作者所有