news 2026/6/10 16:48:43

这是一份动手学深度学习笔记!(附学习资料)

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
这是一份动手学深度学习笔记!(附学习资料)

如果你正在学习深度学习,肯定听说过李沐老师的动手学深度学习,这是公认的经典之作

这一期主要是给大家总结这个教程的大纲内容

并给大家分享电子pdf、完整的教程视频、配套的课件源码以及学习笔记(如下图)

需要的兄弟可以按照这个图的方式免费获取


第一章:引言和预备知识

机器学习研究计算机系统如何利用经验(通常是数据)来提高特定任务的性能。它结合了统计学、数据挖掘和优化的思想。通常,它是被用作实现人工智能解决方案的一种手段,深度学习不仅取代了传统机器学习的浅层模型,而且取代了劳动密集型的特征工程

第二章:线性神经网络

这一部分先介绍线性回归模型,线性回归是比较简单的线性模型,用pytorch直接手搓线性回归模型,然后介绍softmax回归函数,应用于图像分类数据集,最后从零开始手搓softmax回归

第三章:多层感知机

这一部分先介绍多层感知机的原理,以及从零开始实现多层感知机,然后介绍模型选择,欠拟合和过拟合的问题,权重衰减和dropout的技巧,前向传播,反向传播和计算图模型,介绍一些数值稳定性,模型初始化,分布偏移,最后以kaggle比赛预测房价收尾


第四章:深度学习计算

这一部分先介绍神经网络的层和块,然后介绍参数管理,比如参数访问,参数初始化,参数绑定,然后介绍延后初始化,自定义参数/不带参数的网络层,读写文件,最后是张量与GPU,神经网络与GPU的介绍


第五章:卷积神经网络

这一部分先介绍卷积神经网络的结构,从全连接层到卷积,图像卷积,介绍填充和步幅,然后介绍多输入多输出通道,汇聚层,然后介绍现在常见的CNN的变体,比如VGG, GoogLeNet, ResNet, DenseNet等


第六章:循环神经网络

这一部分先介绍时间序列模型,然后是文本预处理,从零开始实现循环神经网络,然后介绍循环神经网络的变体,包括LSTM和GRU模型,双向循环神经网络,编解码器结构,序列到序列模型等


第七章:注意力机制

这一部分先介绍注意力的概念,注意力机制是深度学习中一个重要创新,这里的注意力机制包括Bahdanau注意力,多头注意力,以及自注意力,在transformer模型中引入了自注意力,交叉注意力和位置编码,引入注意力会增加计算量,但往往都有精度提升


第八章:优化算法

这一部分先介绍优化和深度学习,其次介绍凸函数,梯度下降算法,随机梯度下降,小批量随机梯度下降,动量法,AdaGrad算法,RMSProp算法,Adam优化器等


第九章:计算性能

这一部分先介绍编译器和解释器的概念,异步计算,自动并行,以及相应的硬件的支持,多GPU卡的训练,多GPU的简洁实现,参数服务器等内容


第十章:计算机视觉

这一部分先介绍计算机视觉中的图像增广,模型微调,目标检测和边界框,以及多尺度目标检测算法,目标检测的数据集,单发多框检测SSD,语义分割和数据集,全卷积神经网络,最后介绍kaggle比赛图像分类和狗的品种识别任务


第十一章:自然语言处理

这一部分先介绍词嵌入,预训练模型word2vec, 全局向量的词嵌入Glove,词的相似性和类比任务,以及Bert模型,预训练Bert, 然后介绍情感分析及数据集,使用循环神经网络和卷积神经网络做情感分析,使用注意力做自然语言推断,最后是微调Bert模型的任务

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/10 10:38:09

2024年VR安全体验馆领域权威推荐:经实测的最新榜单

2024年VR安全体验馆领域权威推荐指南一、开篇引言在2024年,VR安全体验馆对于提升公众安全意识、进行高效安全培训等方面发挥着愈发重要的作用。然而,当前市场上VR安全体验馆产品质量参差不齐,用户在选择时面临诸多困难。根据“某行业协会”发…

作者头像 李华
网站建设 2026/6/10 12:11:32

【2025网络安全含金量最高的4本证书】:NISP、CISP、CISP-PTE、CISSP(必考证书)零基础入门到精通,看完这一篇就够了!

前言 学习网络安全,有4个必考证书:NISP、CISP、CISP-PTE、CISSP。 这4本证书分别代表了国内和国际上对信息安全专业人员不同程度的认证标准,对于想要提升技术和就业晋升转行人员来说非常重要! 一、NISP(中国信息安全测…

作者头像 李华
网站建设 2026/6/10 12:01:49

1.什么是类?

1.类的定义类(Class)是一种用户自定义的复合数据类型,它将数据(成员变量 / 属性) 和操作这些数据的函数(成员函数 / 方法) 封装在一个逻辑单元中;类定义了一个抽象数据类型&#xff…

作者头像 李华
网站建设 2026/6/10 12:13:59

string,byte,rune,character?详解Golang编码-UTF-8

理解 Go 语言中的字符串、字节与符文 📖 引言 我们之前的博文详细解释了 Go 语言切片的工作原理,并辅以大量示例阐明了其实现机制。在此背景下,本文将深入探讨 Go 语言中的字符串。乍一看,字符串似乎是一个过于简单的话题&#…

作者头像 李华
网站建设 2026/6/10 12:10:18

基于改进粒子群优化支持向量机(IPSO - SVM)的数据回归预测

基于改进粒子群优化支持向量机(IPSO-SVM)的数据回归预测 IPSO-SVM回归 改进点:线性权重递减 采用 Libsvm 工具箱(无需安装,可直接运行),仅支持 Windows 64位系统 此处为回归,需要分类和时序预测也可以。 需…

作者头像 李华