《人工智能开源硬件与python编程实践》课件-项目12 卷积神经网络初步与笑脸识别

Net类的应用方法
nn.load(path)方法，用来将神经网络从.network 二进制参数文件加载到内存中，构造一个CNN神 经网络Net类。它将.network二进制模型参数文件 加载到内存中，包括神经网络的层、权值、偏置 等参数，返回一个Net对象。
net.forward（）方法，用于在图像roi区域上运行 指定的神经网络，返回经过神经网络分类计算得 出的结果列表。
SimleNet笑脸模型的建模、训练以及应用的方法可以应用 在其它物体的目标检测吗？比如宠物爱好者常常提出希望 有一个狗脸、猫脸检测功能，提出你的模型建立、训练和 编程实施方案。
SimleNet笑脸检测方法如何进一步应用到表情识别系统之 中？
笑脸检测技术如何进一步应用到校园生活中，你有什么创 意？可以设计出哪种智能应用系统？对你的新创意进行设 计和编程实践。
知识拓展：CNN网络模型基本结构
典型的卷积神经网络主要由输入层、卷积 层、池化层、全连接层和输出层构成
设计与实践
SmileNet模型结构 CNN神经网络的加载 编写第一个嵌入式Python程序 调试、验证及完善
SmileNet模型结构
卷积层。负责从图像中提取特征。通过随机失活（ dropout）方式在训练阶段忽略随机节点来避免过拟合。 就是在前向传播的时候，让某个神经元的激活值以一定的 概率p停止工作，使得模型泛化性变强。
完整的Python实现过程
摄像头工作初始化 加载人脸Haar级联
模型，设定工作级数 ； 加载微笑检测网络模 型 捕获图像帧，检测出 所有人脸 检测笑脸 叠加显示了实时检测 出的人脸区域
分析与思考
比较人脸检测与笑脸检测方法的不同，特别是Haar人脸检 测模型与SimleNet笑脸模型的区别。从特征参数、模型结 构、运算性能、识别效果等方面进行说明。
知识拓展：神经网络
神经网络主要由：输入层，隐藏层，输出 层构成。
知识拓展：卷积神经网络
卷积神经网络（CNN）是一类包含卷积计 算且具有深度结构的前馈神经网络，是深 度学习的代表算法之一。卷积神经网络具 有表征学习能力，能够按其阶层结构对输 入信息进行平移不变分类。
卷积神经网络采用局部感知域和权值共享 的方法，减少了网络的参数的个数，降低 了网络模型的复杂度，缓解了网络模型过 拟合的问题。
其中，roi 是待处理区域的矩形元组（x，y，w， h），仅运算 roi 中的像素。如果未指定，则它等 于图像矩形。如果softmax为True，则列表中所有 的输出总和为1。否则，列表中的任何输出都可以 在0和1之间。dry_run参数用于调试，打印出正在 执行的网络层参数，实际并不执行它们。
笑脸检测编程实现
深度学习包括卷积神经网络、基于多层神 经元的自编码神经网络和深度置信网络三 类。
知识拓展：神经网络
神经网络是一种应用类似于大脑神经突触 联接的结构进行信息处理的数学模型，是 一种模仿生物神经网络的结构和功能的数 学模型或计算模型，用于对函数进行估计 或近似。
它建立M个隐藏层，按顺序建立输入层跟隐 藏层的联结，最后建立隐藏层跟输出层的 联结。为每个隐藏层的每个节点选择激活 函数。求解每个联结的权重和每个节点自 带的bias值。
import sensor, time, image, os, nn # 加载笑脸检测网络 net = nn.load('/work') #进行微笑检测
img.draw_rectangle(r) out = net.forward(img, roi=r, softmax=True) img.draw_string(r[0], r[1], ':)' if (out[0] > 0.8) else ':(', color=(255), scale=2)
机器学习是研究怎样使用计算机模拟或实现人类 学习活动的科学。
机器学习的研究内容主要包括决策树、随机森林 、人工神经网络、贝叶斯学习等。
知识拓展：深度学习
深度学习是机器学习的新方向和新发展，主要体 现为人工神经网络的研究和应用；
本质上是训练深层结构模型的方法，也是对于通 过多层来表示对数据之间的复杂关系进行建模的 算法，目的是实现人工智能的普及化。
人工智能开源硬件与python编程实践
卷积神经网络初步与 笑脸识别
情境导入
面部表情分析已经成为了人工智能等领域的一个 热点问题。
新款的相机、智能手机都采用了智能技术，不仅 能够自动检测到取景框内的人脸，自动往人脸对 焦，还能检测到笑脸状态，辅助拍下高质量的人 物照片。
任务与目标
了解卷积神经网络CNN的基本原理、相关算法和 应用方法；
net.search（）方法，以滑动窗口的方式在图像 roi区域上运行网络指定的神经网络，返回得出的 结果列表。
加载笑脸检测网络及启动笑脸检测
Net 类中提供net.forward(image[, roi[, softmax=False[, dry_run=False]]]) 方法，用于在 图像roi上运行指定的神经网络，返回经过神经网 络分类得出的结果列表。
池化层。负责逐步减小模型的空间大小，从而减少参数的 数量和网络中的计算量，从而也控制过度拟合。
全连接层。用来把前边提取到的特征综合起来，起分类器 的作用，将得到的特征表示映射到样本标记空间。
CNN神经网络的加载
Python库中提供了Net类，进行神经网络模 型的加载和计算处理，包括load、forward 和search 三种方法。先加载神经网络模型 ，构造出一个CNN神经网络Net类，就可以 使用forward 和search方法进行网络搜索。
了解笑脸检测技术的基本原理、模型结构和应用 框架；
了解运用人工智能开源硬件和OpenAIE Python库 中CNN算法设计人脸检测笑脸识别功能的编程方 法；
针对生活应用场景，进一步开展创意设计，设计
具有实用价值的笑脸检测习专门研究计算机怎样模拟或实现人类的 学习行为，以获取新的知识或技能，重新组织已 有的知识结构使之不断改善自身的性能。
深度学习网络就像人类大脑的学习机制一样，通 过低层特征的组合形成更加抽象的高层特征，学 习到数据的分布式特征，从而可像人脑一样实现 对输入信息的分级表达来表示信息的属性或类别 。
知识拓展：深度学习的具体过程
挖掘所给样本数据的内在规律与联系，提 取、分析样本的特征信息，如图像、文本 和声音，处理数据信息并发出指令，控制 机器的行为，使机器具有类似于人类的学 习、分析、识别、处理等能力。