专栏/深度卷积神经网络基本介绍

深度卷积神经网络基本介绍

2022年06月24日 10:47--浏览 · --点赞 · --评论
倾糍
粉丝:7969文章:22

      关于深度卷积神经网络的前世今生,就不在此处进行过多的介绍。在此,主要对网络的各个组成部分进行简要介绍:


图片


 图1 基本的深度卷积网络结构


       通过图1可知深度卷积神经网络主要是由输入层、卷积层、激活函数、池化层、全连接层和输出层组成。以下将以人脸识别为例对网络的各个组成部分进行简单的介绍:


        输入层:深度卷积网络可直接将图片作为网络的输入,通过训练提取特征,但是为了获得更好的效果,通常需要将图片进行预处理,在人脸识别中,就需要进行人脸检测等处理(MTCNN是一种较好的人脸检测方法)。此外,在样本不足的情况下会需要进行样本增强处理,包括旋转、平移,剪切、增加噪声、颜色变换等。


        卷积层:通过卷积运算实质是对输入进行另一种表示,若将卷积层视为黑盒子,那么我们可以将输出看作是输入的另外一种表示,而整个网络的训练也就是训练出这种表示所需的中间参数。图2为一般神经网络的示意图:


图片


图2 简单神经网络


        图2中w和b即为网络训练所需得到的参数,在卷积层中需要添加激活函数对运算进行非线性化。深度卷积网络将小的神经网络串联起来构成深度神经网络,主要有两种特殊的处理方式:


采用局部感受野:神经元仅与其相邻的上一层神经元相连接,通过对学习到的局部特征进行组合形成最后的全局特征。

采用权值共享:同一个卷积核在对不同的局部感受野进行操作时,采用相同的权值参数,能够减少网络运行过程中所需的参数计算量。通过每一层的多个卷积核获得图片的不同特征,不需要特意考虑特征在图片中的具体位置,该处理方式使得其在分析和处理图片任务上具有显著优势

图片


图3 卷积操作示意图

        图3为某个三维图进行卷积处理,同一卷积核对不同输入层进行卷积操作,得到一组输出,多个卷积核得到多少个输出。不同的图层和不同的输入图处理方法相似,中间的卷积运算时一种对参数进行处理的过程,而最后决定分类个数的是最后一层全连接层的个数。如100张图片,大小为32*32,图片为3维,即输入为100*32*32*3,通过大小为3*3的256个卷积核进行边缘补充后计算,输出为100*32*32*256,即在该层的卷积运算仅需对256个卷积核进行共享就可实现卷积操作,大大减少了所需参数。


  卷积运算输入和输出窗口的大小变化为:

图片

,其中W为输入的长/宽(输入长宽不一定相等),F为卷积核的大小,P为边缘补充个数,S为步长(卷积间隔个数),如图3中,输入为5*5,卷积核的大小为3*3,边缘补充为1,步长为2,其计算即为N=(5-3+1*2)/2+1,故而输出为3*3。



        vggnet通过实验证明三个3*3的卷积核效果比一个7*7的卷积核效果好,2个3*3的卷积核比一个5*5的网络效果好。此外,resnet提出的残差网络结构能有效的避免网络中参数泛华的问题。


        池化层:是卷积神经网络中的一种对数据进行的特殊处理操作,通过池化处理缩小图片特征尺寸,能有效的去除由上一层的结果作为输入而带来的计算量较大的问题,图4为常使用的池化方法。


图片


图4 平均池化和最大池化


      2*2的池化可以使特征图大小减半,后常采用大小为3*3,步长为2,pad=0的卷积核替换池化层,可实现类似的效果。


      激活函数:网络中卷积操作和池化操作都是线性操作,而生活中的大量样本,在进行分类时并不是线性关系,因而需要在网络中引入非线性元素使得网络能解决非线性问题。常见的激活函数如下:


图片


图5 Relu函数及其改进函数


        全连接层:该层是网络中消耗参数最多的层,若全连接层的输入是4*4*100,全连接层的输出是512,则该层需要4*4*100* 512个参数;而一般的卷积层,若卷积核为4*4,输出为512,则仅需4*4*512个参数。常见的网络会含有两个全连接层,第二个全连接层的输出与分类个数的输出对应,而近期有文献表明,第一个卷积层是可以通过全局平均池化层等替换。

最后

给大家整理了一份200G的AI资料包,内含:

1.基础知识:Python基础+高数基础

2.机器学习理论入门:机器学习经典算法详解

3.机器学习实战项目:Kaggle竞赛案例/推荐系统实战/数据分析建模等

4.深度学习理论入门:必备框架(Pytorch+TensorFlow)+神经网络模型基础

5.计算机视觉实战项目:OpenCV图像处理+物体检测YOLO实战+Unet图像分割实战等

6.自然语言处理应用项目实战:基础知识+BERT框架实战

7.人工智能行业报告+AI必读经典书籍:花园书、西瓜书等

8.人工智能论文合集:上百篇人工智能优质论文

9.国内外优质学习资源整合:李沐、吴恩达、李飞飞等大佬的优质课程

10.人工智能论文:100篇+人工智能论文合集

需要的朋友评论【666】即可免费领取了。


投诉或建议

玻璃钢生产厂家玻璃钢雕塑鸟银川城市玻璃钢雕塑定做丽水玻璃钢花盆仙林商场户外美陈玻璃钢仿真兔子雕塑商场顶部干花美陈布置盐城喜妹玻璃钢雕塑北京公园玻璃钢雕塑定做塑料雕塑与玻璃钢雕塑的比较郑州玻璃钢浮雕铜雕塑定制厂家卡通造型玻璃钢雕塑工厂成都玻璃钢卡通雕塑厂家供应淮安十一商场美陈四川大型商场美陈生产厂家玻璃钢花钵花盆系列雕塑价格孝感市玻璃钢雕塑厂工艺玻璃钢雕塑推荐厂家鑫业鑫玻璃钢花盆东莞玻璃钢不锈钢雕塑安顺玻璃钢仿真雕塑商场美陈方案dp点玻璃钢雕塑防腐的重要性宁夏公园玻璃钢雕塑广东抽象玻璃钢雕塑多少钱上海玻璃钢雕塑植物大战僵尸图片武汉玻璃钢雕塑价格北京特色商场美陈怎么样宣城欧式玻璃钢雕塑定制商场老上海式美陈玻璃钢仿真动物雕塑哪家有香港通过《维护国家安全条例》两大学生合买彩票中奖一人不认账让美丽中国“从细节出发”19岁小伙救下5人后溺亡 多方发声单亲妈妈陷入热恋 14岁儿子报警汪小菲曝离婚始末遭遇山火的松茸之乡雅江山火三名扑火人员牺牲系谣言何赛飞追着代拍打萧美琴窜访捷克 外交部回应卫健委通报少年有偿捐血浆16次猝死手机成瘾是影响睡眠质量重要因素高校汽车撞人致3死16伤 司机系学生315晚会后胖东来又人满为患了小米汽车超级工厂正式揭幕中国拥有亿元资产的家庭达13.3万户周杰伦一审败诉网易男孩8年未见母亲被告知被遗忘许家印被限制高消费饲养员用铁锨驱打大熊猫被辞退男子被猫抓伤后确诊“猫抓病”特朗普无法缴纳4.54亿美元罚金倪萍分享减重40斤方法联合利华开始重组张家界的山上“长”满了韩国人?张立群任西安交通大学校长杨倩无缘巴黎奥运“重生之我在北大当嫡校长”黑马情侣提车了专访95后高颜值猪保姆考生莫言也上北大硕士复试名单了网友洛杉矶偶遇贾玲专家建议不必谈骨泥色变沉迷短剧的人就像掉进了杀猪盘奥巴马现身唐宁街 黑色着装引猜测七年后宇文玥被薅头发捞上岸事业单位女子向同事水杯投不明物质凯特王妃现身!外出购物视频曝光河南驻马店通报西平中学跳楼事件王树国卸任西安交大校长 师生送别恒大被罚41.75亿到底怎么缴男子被流浪猫绊倒 投喂者赔24万房客欠租失踪 房东直发愁西双版纳热带植物园回应蜉蝣大爆发钱人豪晒法院裁定实锤抄袭外国人感慨凌晨的中国很安全胖东来员工每周单休无小长假白宫:哈马斯三号人物被杀测试车高速逃费 小米:已补缴老人退休金被冒领16年 金额超20万

玻璃钢生产厂家 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化