资源预览内容
第1页 / 共18页
第2页 / 共18页
第3页 / 共18页
第4页 / 共18页
第5页 / 共18页
第6页 / 共18页
第7页 / 共18页
第8页 / 共18页
第9页 / 共18页
第10页 / 共18页
亲,该文档总共18页,到这儿已超出免费预览范围,如果喜欢就下载吧!
资源描述
基于BP神经网络的手写数字识别,内容,1,2,3,4,背景介绍,神经网络分类器设计,实例讲解,小结,手写数字识别是光学字符识别技术(OCR)的一个分支, 研究如何利用计算机自动辨认手写在纸张上的数字。手写 体数字的随意性很大,字体大小、倾斜、笔画的粗细等都会 对识别结果造成影响。下面是一些样例:,研究背景,图像标准化处理,输入:白底黑字的二值图像处理办法:把图像中每10*10的点进行划分相加,进行相加成一个点,统计每个小区域中图像象素所占百分比作为特征数据输出:5*7=35个网格特征,待测图片标准化,人工神经网络概况,人工神经网络(Artificial Neural Networks,ANN):简称神经网络。,模拟人脑神经细胞的工作特点:,与目前按串行安排程序指令的计算机结构截然不同。,* 单元间的广泛连接; * 并行分布式的信息存贮与处理; * 自适应的学习能力等。,人工神经元,人工神经元:生物神经元的简化模拟。,人工神经元间的互连:信息传递路径轴突-突触-树突的简化;,连接的权值:两个互连的神经元之间相互作用的强弱。,人工神经元模型,接收的信息 (其它神经元的输出),互连强度,作比较 的阈值,n维输入向量X,输出,激活函数,神经元的动作:,激活函数 f:,阈值型,S型,分段线性型,输出值:,设 ,点积形式:,式中,,BP神经网络,网络拓扑结构:,1、BP神经网络具有三层或三层以上的多层神经网络 2、每一层都由若干个神经元组成 3、左右各层之间神经元实现全连接,同层神经元无连接,神经网络之梯度下降法,确定参数,1、输入向量 X=X1,X2,X3,.,Xn2、输出向量 Y=Y1,Y2,Y3,.,Yn希望输出向量 O=O1,O2,O3,.,On3、隐含层输出向量 B=b1,b2,b3,.,bpT4、输入层到隐含层权值 Wji=wj1,wj2,.,wjt,.,wjn5、隐含层到输出层权值 Vkj=vk1,vk2,.,vkj.,vkp,输入模式顺传播:,1、计算隐含层各神经元的激活值激活函数采用S型函数,即2、隐含层j单元的输出值同理,可以求得输出端的激活值和输出值,神经网络之梯度下降法,3、计算输出层第k个单元的激活值4、计算输出层第k个单元的实际输出值,输入模式顺传播:,神经网络之梯度下降法,输出误差的逆传播:,1、输出层的校正误差2、隐含层各单元校正误差3、连接权值以及校正量,神经网络之梯度下降法,循环记忆训练:,为了让网络的输出误差趋于极小值,一般需要进行数百次甚至上万次循环记忆,不断的反复循环上面介绍的步骤,神经网络之梯度下降法,实例详解,图片库mnist样例:(09)500*(28*28),待测试图片:,实例详解1,实例详解2,小结,1、神经网络可以有效对手写数字进行分类 2、需要尽可能的添加手写数字到样品库 3、神经网络有可能会陷入局部极小值,导致错分,结束,
网站客服QQ:2055934822
金锄头文库版权所有
经营许可证:蜀ICP备13022795号 | 川公网安备 51140202000112号