人工智能中的语义分析技术及其应用.pdf

《人工智能中的语义分析技术及其应用.pdf》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、融合论坛INTEGRATIONFORUM人工智能中的语义分析技术及其应用文/神州泰岳中国国民经济和社会发展第十三个五年规划纲要指出，实施国家大数据战略，把大数据作为基础性战略资源，全面实施促进大数据发展行动，加快推动数据资源共享开放和开发应用，助力产业转型升级和社会治理创新。一、人工智能语义分析技术二、语义分析技术语义分析（SemanticAnalysis）是人工智（一）基础技术（按照词语分析、句子分能（ArtificialIntelligence）的一个分支，析、篇章分析来写）是自然语言处理技术的几个核心任务，涉及语分别从词汇级、句子级和篇章级三个层次言学、计

2、算语言学、机器学习，以及认知语言等描述语义分析相关技术。多个学科，语义分析任务有助于促进其他自然1.词语级语义分析语言处理任务的快速发展。人工智能中的语义词汇层面上的语义分析主要体现在如何理分析技术，特别是深度学习（DeepLearning）解某个词汇的含义，主要包含两个方面：词义消技术近年来发展迅猛，已经在围棋对弈、自动歧和词义表示驾驶、图像识别、语音识别等多个领域取得了（1）词义消歧突破性进展。词汇的歧义性是自然语言的固有特征。词语义分析指运用各种方法，学习与理解一义消歧根据一个多义词在文本中出现的上下文段文本所表示的语义内容，任何对语言的理解环境来确定其词

3、义，作为各项自然语言处理的都可以归为语义分析的范畴。一段文本通常由基础步骤和必经阶段被提出来。词义消歧包含词、句子和段落来构成，根据理解对象的语言两个必要的步骤:（a）在词典中描述词语的意义;单位不同，语义分析又可进一步分解为词汇级（b）在语料中进行词义自动消歧。例如“苹果”语义分析、句子级语义分析以及篇章级语义分在词典中描述有两个不同的意义:一种常见的水析。一般来说，词汇级语义分析关注的是如何果;美国一家科技公司。对于下面两个句子:获取或区别单词的语义，句子级语义分析则试她的脸红得像苹果。图分析整个句子所表达的语义，而篇章语义分最近几个月苹果营收出现下滑。析旨

4、在研究自然语言文本的内在结构并理解文词义消歧的任务是自动将第一个苹果归为本单元（可以是句子从句或段落）间的语义关“水果”,而将第二个苹果归为“公司”。从上面系。简单地讲，语义分析的目标就是通过建立的例子中我们发现，词义消歧主要面临如下两有效的模型和系统，实现在各个语言单位（包个关键问题：（a）词典的构建；（b）上下文的建括词汇、句子和篇章等）的自动语义分析，从而北京神州泰岳软件股份有限公司实现理解整个文本表达的真实语义。42软件和集成电路SOFTWAREANDINTEGRATEDCIRCUIT人工智能中的语义分析技术及其应用人工智能中的语义分析技术及其应用图：循

5、环神经网络结构模。2.句子级语义分析（2）词义表示和学习句子级的语义分析试图根据句子的句法结对于词义表示，早期的做法将某个词义表构和句中词的词义等信息，推导出能够反映这个示为，从该词义在同义词网络中出现的位置到该句子意义的某种形式化表示。根据句子级语义网络根节点之间的路径信息。词义表示的另一分析的深浅，又可以进一步划分为浅层语义分个思路是将其数字化。最直观,也是到目前为止析和深层语义分析。最常用的词表示方法是one-hot表示方法，这种（1）浅层语义分析方法把每个词表示为一个很长的向量。这个向语义角色标注(SemanticRoleLabeling,量的维度是词表

6、大小，其中绝大多数元素为0，简称SRL)是一种浅层的语义分析。给定一个句只有一个维度的值为1，这个维度就代表了当前子，SRL的任务是找出句子中谓词的相应语义角的词。不难想象，这种表示方法存在一个重要的色成分，包括核心语义角色（如施事者、受事者问题：任意两个词之间都是孤立的。造成的结等）和附属语义角色（如地点、时间、方式、原因果是：光从两个向量中看不出两个词是否有关等）。系，即使这两个词是同义词，例如“计算机”和目前SRL的实现通常都是基于句法分析结“电脑”、“上海”和“上海市”。果，即对于某个给定的句子，首先得到其句法随着机器学习算法的发展，目前更流行的分析结果

7、，然后基于该句法分析结果，再实现词义表示方式是词嵌入（WordEmbedding,又SRL。称词向量）。其基本想法是：通过训练将某种语（2）深层语义分析言中的每一个词映射成一个固定维数的向量，深层的语义分析（有时直接称为语义分将所有这些向量放在一起形成一个词向量空析,SemanticParsing）不再以谓词为中心，而间，而每一向量则可视为该空间中的一个点，在是将整个句子转化为某种形式化表示，例如：这个空间上引入“距离”，则可以根据词之间的谓词逻辑表达式（包括lambda演算表达式）、距离来判断它们之间的（词法、语义上的）相似基于依存的组合式语义表达式（depe

8、ndency-性。bas