基于卷积神经网络的手写数字识别研究与设计

来源 :成都理工大学 | 被引量 : 12次 | 上传用户:babygnus
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
手写体数字识别技术是模式识别下一个重要的支派,拥有非常广泛的应用前景。该技术可以应用在财政报表、邮政自动分拣、试卷成绩统计、银行单据、金融数字统计等手写数字自动化识别录入系统上。在全球信息化全面发展和自动化程度提升的背景下,对手写体数字识别技术的需求变得十分急迫,研究出精准且高效率的识别方式有重要的意义和价值。随着卷积神经网络对图像分类的研究兴起,给手写体数字识别带来了无限的可能。卷积神经网络独特的二维数据处理方式和在分类识别时自动提取图像特征的特点,可以提高手写体数字识别的泛化能力和准确度。本文依托于清华大学苏研院大数据处理中心的企业项目,针对手写体数字识别的性能低效和准确率不足等问题,依据卷积神经网络在图像分类处理上的优势,开展了对手写体数字识别的一系列研究与设计工作。着重对卷积神经网络的LeNet-5模型进行设计与优化,使其在实现手写体数字识别的同时获得较高的识别率与更优的性能。针对传统手写体数字识别方法中特征提取数据冗余、图片预处理复杂、收敛速度缓慢、泛化能力差等问题,提出将卷积神经网络应用到手写体数字识别上。研究了卷积神经网络LeNet-5模型7层结构与各层中的工作原理,确定并推导了卷积神经网络训练时使用的前向传播、反向传播及梯度下降算法。对网络模型各层的训练参数以及初始化参数进行了设计。利用Caffe深度学习框架搭建手写体数字识别的LeNet-5模型结构,使用MNIST数据样本库训练和测试该网络模型。在此基础上实现了基于卷积神经网络LeNet-5模型的手写体数字识别,实验结果验证了卷积神经网络在手写体数字识别上的可行性。本文对于卷积神经网络LeNet-5模型用在手写体数字识别上出现的问题,提出三项优化改进办法:1、为了有效解决局部极小点的问题,在网络的损失代价函数里添加一个权值衰减项;2、为了提高网络的泛化能力和识别率并且避免过拟合,提出用Dropout技术来构造网络高层结构;3、为了解决LeNet-5模型训练识别时出现的不收敛问题,提高收敛速度,选择ReLU函数代替常用的Sigmoid等饱和函数作为LeNet-5中各层输出的激活函数。本文在研究中将改进项整合到一起,搭建出一个性能更优的网络模型LeNet-5+,与LeNet-5模型的识别结果和性能进行对比分析,通过实验探究了不同模型对网络误识率、识别率、迭代误差及网络收敛速度的影响。改进后的网络模型将识别率从93.61%提高到了97.30%,误识率从0.96%下降到了0.75%,拒识率从5.43%下降到了1.95%,迭代误差从0.40降低至0.15,识别收敛速度也大大提高。由此验证了本文改进的网络模型LeNet-5+在手写体数字识别上的有效性及优势。目前,本文所研究的技术成果已成功应用在了成都准星云学科技有限公司的一系列人工智能教育产品中,提供笔记识别和自动判卷等智能精准的教学服务。本文的研究成果对手写数字识别技术应用到人工智能教育领域有较大的现实价值及意义(1)
其他文献
本文立足于对于徐州高校大学生社会主义核心价值观认知和践行问卷调查,了解到当代大学生社会主义核心价值培育中一定程度上存在着认知真空、理想模糊、知行脱节的现象,进而分
:从传统智力测验所依据的测验理论 (真分数理论 )来看 ,传统智力测验在测验标准化、测量精度、误差控制、时间限制、定性分析等方面存在诸多缺陷
广西民营企业的扩大和良性发展正面临着一个黄金时期,但广西民营企业竞争力与东部发达省份相比差距很大,文章从多方面比较分析了广西民营企业竞争力弱的现状及其形成的内因。
<正>网络传媒的崛起,给传统媒体带来极大的挑战,如何改变报纸副刊的生存状况,维护好原有的读者群并有所拓展,是保山日报社一直寻求突破的课题。2015年1月10日,一份全新的八版
目的:研究不同分期糖尿病视网膜病变患者黄斑厚度及黄斑体积的变化特点。方法:选取2016-01-01/2017-01-01于我院眼科门诊就诊的40例78眼糖尿病视网膜病变患者作为研究对象,根
随着中国城市化进程的加快,城市建设面临日益复杂的空间关系与空间决策,特别是建设项目的规划决策不断影响着城市环境的协调性,基于二维平面图和效果图的规划决策已不能满足
河北省农民专业合作社的运行情况是以地方立法方式完善农民专业合作社法的实证基础。通过深入调研,发现河北省农民专业合作社在运行过程中存在发展不平衡、管理不规范、融资
此次调研的对象为全国中等职业学校的俄语专业,调研采用了实地访谈、问卷调查和网络及电话调查相结合的方式,调查内容主要包括中职学校俄语专业的培养模式、课程设置、办学条
地方政府政策创新是珠三角规划纲要实施中的重要议题。根据政策动态学、新制度经济学、传播模型及内部决定模型对政策创新动因的解释,在珠三角规划纲要实施中,地方政府政策的