李宏毅2021&2022机器学习

重磅须知

 2022仅在2021基础上进行小补充，2021内容变成了前置知识，UP会在视频标题打上2022的标签；
 
 2021资料已打包装进百度云盘，ppt/pdf支持直链下载。
 
 （选修）To Learn More是21/22通用的，放入云盘：提取码：sr0o

更新日志

日期	项目
2021/03/16	更新HW1、HW2，同步更新助教范例
2021/03/26	更新HW3、HW4课件、代码、范例；release页发布HW1-HW4数据
2021/04/01	更新选修内容To Learn More，基本是李老师今年不打算讲而以前讲过的知识点(旧视频)
2021/04/09	更新GAN 及 HW05
2021/04/16	更新Self-Supervised Learning 及 HW06
2021/04/30	更新Explainable AI&Adversarial Attack 及 HW07&HW08
2021/05/06	更新Domain Adaptation 及 HW09&HW10
2021/05/21	更新RL 及 HW11
2021/05/28	更新Quantum ML
2021/06/04	更新Life-Long&Compression 及 HW12
2021/06/11	更新Meta Learning 及 HW13&HW14
2021/06/18	更新HW15，随着李老师课程结语视频上传，2021机器学习基本结束啦
2021/12/20	更新Github排版，删除repo中的ppt/pdf直接提供下载链接，2021总资料放入百度云盘-提取码：sv1i
2022/02/17	2022春季机器学习课程仅在21基础上进行小补充，UP同步更新官网补充内容
2022/02/21	更新Lecture 1:Introductionof Deep Learning补充内容，Github排版大更新
2022/02/25	更新Lecture 2:What to do if my network fails to train补充内容与HW2

B站主页	啥都会一点的研究生
人工智能技术探讨群1	78174903
人工智能技术探讨群2	571218304
人工智能技术探讨群3	584723646

名称	项目
2021课程主页	李宏毅2021春季机器学习
2022课程主页	李宏毅2022春季机器学习
B站视频合集	(强推)李宏毅2021春机器学习课程
GitHub资料汇总	GitHub链接

2021课件及作业资料（已完结）

章节	名称	资料	作业
Introduction	Course Introduction	ppt pdf	Colab: pdf code Pytorch: pdf1 pdf2 code
Introduction	Introduction of ML/DL	ppt pdf	HW1: pdf code
Deep Learning	Guideline of ML: overfit	ppt pdf	-
Deep Learning	Critical Point: small gradient	ppt pdf	-
Deep Learning	Adaptive Learning Rate: optimizer	ppt pdf	-
Deep Learning	Loss of Classification: classification	ppt pdf	HW2: pdf code code
CNN & Self-Attention	ML Pretest	-	pdf
CNN & Self-Attention	CNN	ppt pdf	HW3: pdf code
CNN & Self-Attention	Self-Attention	ppt pdf	HW4: pdf code
Theory of ML	PAC Learning	pdf	-
Transformer	Normalization	ppt pdf	-
Transformer	Seq2Seq	ppt pdf	HW5: pdf code code
Generative Model	GAN	ppt pdf	HW6: pdf code
Self-Supervised Learning	BERT	ppt pdf	HW7: pdf code
Self-Supervised Learning	Auto-Encoder & Anomaly Detection	ppt pdf	HW8: pdf code
Explainable AI / Adversarial Attack	Explainable AI	ppt pdf	HW9: pdf code
Explainable AI / Adversarial Attack	Adversarial Attack	ppt pdf	HW10: pdf code
Domain Adaptation	-	ppt pdf	HW11: pdf code code
RL	DRL	ppt pdf	HW12: pdf code code
Quantum ML	-	pdf	-
Life-Long/Compression	Life-long Learning	ppt pdf	HW13: pdf code
Life-Long/Compression	Network Compression	ppt pdf	HW14: pdf code
Meta Learning	-	ppt pdf	HW15: pdf code

2022课件及作业资料（未完结，会同步更新）

章节	2021前置知识	2022补充	选修	作业
Lecture 1	（上）机器学习基本概念简介 （下）机器学习基本概念简介	Video: 2022-机器学习相关规定 2022-Colab教学 2022-Pytorch Tutorial 1 2022-Pytorch Tutorial 2 PDF: Rules Chinese class course intro Pytorch Tutorial 1 Pytorch Tutorial 2 Colab Tutorial Environment Setup	深度学习简介 反向传播 预测-宝可梦 分类-宝可梦 逻辑回归	Video Slide Code Submission
Lecture 2	（一）局部最小值 (local minima) 与鞍点 (saddle point) （二）批次 (batch) 与动量 (momentum) （三）自动调整学习率 (Learning Rate) （四）损失函数 (Loss) 也可能有影响	Video: 2022-再探宝可梦、数码宝贝分类器 — 浅谈机器学习原理 PDF: Theory	Gradient Descent (Demo by AOE) Beyond Adam (part 1) Beyond Adam (part 2)	Video Slide Code Submission