第5章 神经网络的理论基础ppt课件.ppt

《第5章 神经网络的理论基础ppt课件.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、人工神经网络定义人工神经网络是一个由许多简单的并行工作的处理单元组成的系统，其功能取决于网络的结构、连接强度以及各单元的处理方式。人工神经网络是一种旨在模仿人脑结构及其功能的信息处理系统。神经网络是由多个非常简单的处理单元彼此按某种方式相互连接而形成的计算系统，该系统是靠其状态对外部输入信息的动态响应来处理信息的。2021/9/40神经网络的基本特征与功能结构特征：并行式处理分布式存储容错性能力特征：自学习自组织自适应性2021/9/41神经网络的基本特征与功能联想记忆功能非线性映射功能神经网络的基本特征与功能2021/9/43分类与识别功能神经网络的

2、基本特征与功能2021/9/44生物神经元及其信息处理生物神经元人工神经元模型人类大脑大约包含有1.41011个神经元，每个神经元与大约103～105个其它神经元相连接，构成一个极为庞大而复杂的网络，即生物神经网络。生物神经元及其信息处理6神经生理学和神经解剖学的研究结果表明，神经元(Neuron)是脑组织的基本单元，是人脑信息处理系统的最小单元。生物神经元及其信息处理2021/9/47生物神经元的结构神经元在结构上由细胞体(Cellbody)树突(Dendrite)轴突(Axon)突触(Synapse)四部分组成。用来完成神经元间信息的接收、传递和

3、处理。生物神经元及其信息处理2021/9/482021/9/49信息的传递与接收生物神经元的信息处理机理2021/9/4102021/9/411信息的整合空间整合：同一时刻产生的刺激所引起的膜电位变化，大致等于各单独刺激引起的膜电位变化的代数和。时间整合：各输入脉冲抵达神经元的时间先后不一样。总的突触后膜电位为一段时间内的累积。生物神经元的信息处理机理2021/9/412生物神经网络由多个生物神经元以确定方式和拓扑结构相互连接形成生物神经网络。生物神经网络的功能不是单个神经元信息处理功能的简单叠加。神经元之间的突触连接方式和连接强度不同并且具有可塑性，

4、这使神经网络在宏观呈现出千变万化的复杂的信息处理能力。2021/9/413人工神经元模型及人工神经网络模型神经元及其突触是神经网络的基本器件。因此，模拟生物神经网络应首先模拟生物神经元。在人工神经网络中，神经元常被称为“处理单元”。有时从网络的观点出发常把它称为“节点”。人工神经元是对生物神经元的一种形式化描述。2021/9/414人工神经元模型神经元模型示意图2021/9/415神经元的数学模型τij——输入输出间的突触时延；Tj——神经元j的阈值；wij——神经元i到j的突触连接系数或称权重值；f——神经元转移函数。(1)(2)人工神经元模型202

5、1/9/416(3)net’j=WjTX(4)Wj=(w1w2…wn)TX=(x1x2…xn)T令x0=-1，w0=Tj，则有-Tj=x0w0人工神经元模型神经元的数学模型2021/9/417(5)oj=f(netj)=f(WjTX)(6)神经元的数学模型人工神经元模型2021/9/418神经元的转移函数(1)阈值型转移函数1x≥0f(x)=(7)0x＜0人工神经元模型2021/9/419(2)非线性转移函数神经元的转移函数(8)人工神经元模型2021/9/420(3)分段线性转移函数0x≤0f(x)=cx0＜x≤xc(9)1xc＜x神经元的转移函数人

6、工神经元模型2021/9/421层次型结构人工神经网络模型按神经元连接方式分类2021/9/422输出层到输入层有连接人工神经网络模型按神经元连接方式分类2021/9/423层内有连接的层次型结构人工神经网络模型按神经元连接方式分类2021/9/424全互连型结构按神经元连接方式分类人工神经网络模型2021/9/425按网络信息流向分类前馈型网络人工神经网络模型2021/9/426反馈型网络按网络信息流向分类人工神经网络模型2021/9/427神经网络能够通过对样本的学习训练不断改变网络的连接权值以及拓扑结构，使得网络的输出不断地接近期望的输出。这一过

7、程称为神经网络的学习或训练，其本质是可变权值的动态调整。人工神经网络的学习2021/9/428神经网络的学习算法：有导师学习(有监督学习)无导师学习(无监督学习)再励学习人工神经网络模型2021/9/429人工神经网络常用学习规则2021/9/430