自组织神经网络课件.ppt

《自组织神经网络课件.ppt》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、智能控制基础ShanghaiUniversity,Shanghai,P.R.China5.人工神经网络及其在控制中的应用5.4.自组织神经网络15.4自组织神经网络5.4.1自组织神经网络概述与竞争学习5.4.3对偶传播神经网络5.4.2自组织特征映射神经网络5.5.4自适应共振理论网络5.4自组织神经网络5.4.1自组织神经网络概述与竞争学习5.4.3对偶传播神经网络5.4.2自组织特征映射神经网络5.5.4自适应共振理论网络自组织神经网络，又称为自组织竞争神经网络,特别适合于解决模式分类和识别方面的应用问题。自组织神经网络概述5.4.1自组织神经网络概述与竞争学习自组织神经网络

2、属于前向神经网络类型，采用无导师学习算法，自组织特征映射(self-OrganizingMap，SOM)网络自适应共振理论(AdaptiveResonanceTheory，ART)网络对传(CounterPropagation，CP)网络协同神经网络(SynergeticNeuralNetwork．SNN)几种常见的自组织神经网络5.4.1自组织神经网络概述与竞争学习竞争层输入层自组织神经网络的典型结构5.4.1自组织神经网络概述与竞争学习通过自动寻找样本中的内在规律和本质属性，自组织、自适应地改变网络参数与结构。自组织学习(self-organizedlearning)自组织网络

3、的自组织功能是通过竞争学习（competitivelearning）实现的。5.4.1自组织神经网络概述与竞争学习聚类——无导师指导的分类称为聚类，聚类的目的是将相似的模式样本划归一类，而将不相似的分离开。分类和聚类分类——分类是在类别知识等导师信号的指导下，将待识别的输入模式分配到各自的模式类中去。5.4.1自组织神经网络概述与竞争学习相似性测量——欧式距离法5.4.1自组织神经网络概述与竞争学习相似性测量——余弦法5.4.1自组织神经网络概述与竞争学习网络的输出神经元之间相互竞争以求被激活，结果在每一时刻只有一个输出神经元被激活。这个被激活的神经元称为竞争获胜神经元，而其它神经

4、元的状态被抑制，故称为Winner-Take-All。竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习1.向量归一化首先将当前输入模式向量X和竞争层中各神经元对应的内星向量Wj全部进行归一化处理；(j=1,2,…,m)竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习向量归一化之前竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习向量归一化之后竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习2.寻找获胜神经元当网络得到一个输入模式向量时，竞争层

5、的所有神经元对应的内星权向量均与其进行相似性比较，并将最相似的内星权向量判为竞争获胜神经元。欲使两单位向量最相似，须使其点积最大。即：竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习从上式可以看出，欲使两单位向量的欧式距离最小，须使两向量的点积最大。即：竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习3.网络输出与权值调整jj*步骤3完成后回到步骤1继续训练，直到学习率衰减到0。注意：调整后的向量需要重新归一化！！！竞争学习规则——Winner-Take-All5.4.1自组织神经网络概述与竞争学习☻竞争学习

6、的几何意义5.4.1自组织神经网络概述与竞争学习*1Wˆ*ˆjW*)](ˆ)(ˆ)[()(*ttttjpWXW-=hD*┆)(ˆ*1tj+W)(ˆtpXjWˆmWˆ*…***竞争学习的几何意义5.4.1自组织神经网络概述与竞争学习例用竞争学习算法将下列各模式分为2类：解：为作图方便，将上述模式转换成极坐标形式：竞争层设两个权向量，随机初始化为单位向量：5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4

7、.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4.1自组织神经网络概述与竞争学习5.4自组织神经网络5.4.1自组织神经网络概述与竞争学习5.4.3对偶传播神经网络5.4.2自组织特征映射神经网络5.5.4自适应共振理论网络5.4.2自组织特征映射神经网络由芬兰学者TeuvoKohonen于