统计学习方法公式推导

【机器学习】白板公式推导-1-书籍&视频

【机器学习】白板公式推导-1-介绍书籍列表频率派-统计机器学习统计学习方法-李航ESL贝叶斯派-概率图模型模式识别与机器学习（PRML）-ChristopherM.BishopMLAPP其他机器学习（西瓜书
暖焱·2022-12-20 17:01

机器学习公式推导--Introduction

记录机器学习公式推导的文档，好好学数学哦~参考视频：https://www.bilibili.com/video/BV1aE411o7qd?
如果你也听说~·2022-12-20 17:57

主成分分析（PCA）（principal component analysis）

参考deeplearningbook.org一书2.12Example:PrincipalComponentsAnalysis参考李航统计学习方法第16章主成分分析本文的目录如下：目录用到的知识点PCA
大豆木南·2022-12-20 15:36

概率分布介绍：泊松分布

二项分布二项分布的缺点1.二项随机变量xxx是只有0或12.二项分布中，实验次数nnn应该提前知道泊松分布的公式推导泊松分布的特点函数图像参考泊松分布(PoissonDistribution)定义假设在一定时间间隔
coasxu·2022-12-20 13:25

机器学习：公式推导与代码实现全书代码！

今年新书《机器学习：公式推导与代码实现》目前在印刷中，本月底即将出版，现开源本书全部章节代码。全书总共6大部分26个章节，包括入门、监督学习单模型、监督学习集成模型、无监督学习模型、概率模型和总结。
机器学习与AI生成创作·2022-12-20 13:12

小白西瓜书机器学习打卡Task2

学习笔记：课程来自B站【吃瓜教程】《机器学习公式详解》（南瓜书）与西瓜书公式推导直播合集https://www.bilibili.com/video/BV1Mh411e7VU?
Olivia LI.·2022-12-20 12:37

统计学习方法 | 第1章 统计学习方法概论

第1章统计学习方法概论《统计学习方法》Python代码实现【转载自Github开源项目】https://github.com/fengdu78/lihang-code1．统计学习是关于计算机基于数据构建概率统计模型并运用模型对数据进行分析与预测的一门学科
Dazza Lark·2022-12-20 09:28

统计学习方法概论

也是好久没更新了，前面项目基础开发的工作已经基本完结，但又给了我两个任务，一个是做一个QA系统，一个是做一个推荐系统，想想我是基本不会啊，于是只是学呗，网上找了一些资料，人家说先看李航老师的书，于是做个笔记。1统计学习统计学习的对象：（1）data：计算机及互联网上的各种数字、文字、图像、视频、音频数据以及它们的组合。（2）数据的基本假设是同类数据具有一定的统计规律性。统计学习的目的：用于对数据（
一枝韩独秀·2022-12-20 09:57

统计学习方法- 统计学习方法概论

统计学习以方法为中心，统计学习方法构建模型并应用模型进行预测与分析。统计学习是概率论、统计学、信息论、计算理论、最优化理论及计算
海伦•·2022-12-20 09:25

统计学习方法 | 感知机

感知机是二类分类的线性分类模型，其输入为实例的特征向量，输出为实例的类别，取+1和-1二值感知机对应于输入空间（特征空间）中将实例划分为正负两类的分离超平面，属于判别模型一.模型介绍和学习策略1.模型介绍2.几何含义3.学习策略数据集的线性可分性二.梯度下降法1.概念2.算法3.原理三.原始形式首先任意选取一个超平面，然后用梯度下降法不断极小化目标函数在这个过程中一次随机选取一个误分类点使其梯度下
奔跑的蜗牛君666·2022-12-20 09:23

统计学习方法 | K 近邻法

一.简介1.直观理解定义：是一种基本的分类与回归方法主要思想：假定给定一个训练数据集，其中实例标签已定，当输入新的实例时，可以根据其最近的K个训练实例的标签，预测新实例对应的标注信息分类问题：对新的实例，根据与之相邻的K个训练实例的类别，通过多数表决等方式进行预测回归问题：对新的实例，根据与之相邻的K个训练实例的标签，通过均值计算进行预测2.算法3.误差率二.三要素1.模型K近邻法不具有显性的学习
奔跑的蜗牛君666·2022-12-20 09:23

统计学习方法 | 朴素贝叶斯

朴素贝叶斯法是基于贝叶斯定理与特征条件独立假设的分类方法对于给定的训练数据集，首先基于特征条件独立假设学习输入/输出的联合概率分布；然后基于此模型，对给定的输入x，利用贝叶斯定理求出后验概率最大的输出y朴素贝叶斯法实现简单，学习和预测的效率都很高，是一种常用的方法朴素贝叶斯法实际上学习到生成数据的机制，所以属于生成模型一.贝叶斯定理贝叶斯思维：先验概率→调整因子→后验概率1.条件概率2.贝叶斯定理
奔跑的蜗牛君666·2022-12-20 09:23

统计学习方法 李航 课后习题答案 第二版 机器学习

李航《统计学习方法》课后习题答案（第2版）【李航课后习题解答+书中疑点推导+算法代码实现+可私聊耐心解答(48小时内回复)，包会！！】
#苦行僧·2022-12-20 09:50

统计学习方法 | 概论

一.简介统计学习是关于计算机基于数据构建概率统计模型并运用模型对数据进行预测与分析的一门学科1.统计学习方法的步骤①得到一个有限的训练数据集合②确定学习模型的集合（模型）③确定模型选择的准则（策略）④实现求解最优模型的算法
奔跑的蜗牛君666·2022-12-20 09:49

隐马尔可夫模型 (hidden Markov model, HMM)

本文为《统计学习方法》的读书笔记目录隐马尔可夫模型的基本概念隐马尔可夫模型的定义观测序列的生成过程隐马尔可夫模型的3个基本问题概率计算算法直接计算法前向算法(forwardalgorithm)后向算法(
连理o·2022-12-20 07:38

数据挖掘系列（8）朴素贝叶斯分类算法原理与实践

一个简单的例子朴素贝叶斯算法是一个典型的统计学习方法，主要理论基础就是一个贝叶斯公式，贝叶斯公式的基本定义如下：这个公式虽然看上去简单，但它却能总结历史，预知未来。
youbo_sun·2022-12-19 23:39

Towards Evaluating the Robustness of Neural Networks

本文主要是对这篇论文的一些思想的理解，包括公式推导还有一些总结。除此之外发现原文在论文第6页中提出的7个目标函数中，第5个目标函数有错误，主要是对数里面的式子写反了，如果是仔细看的话是能够看出来的。
馆主君晓·2022-12-19 18:33

机器学习——（1）

参考书籍机器学习，周志华，清华大学出版社，2016统计学习方法，李航，清华大学出版社，2012DeepLearning,I.Goodfellow,Y.BengioandA.Courville,2016课程推荐
Sky_177·2022-12-19 09:54

重要性采样(Importance Sampling)详细学习笔记

详细学习笔记文章目录重要性采样(ImportanceSampling)详细学习笔记前言：参考主体：on-policy和off-policyOn-policy:Off-policy:重要性采样重要性采样后方差的变化-公式推导重要性采样在
hehedadaq·2022-12-19 00:58

非负矩阵分解NMF(1): 非调包python实现

文章目录1.矩阵分解(MatrixFactorization):1.1公式推导1.2代码实现1.3在图像数据下的效果2.非负矩阵分解(Non-negativeMatrixFactorization)2.1
FrenchOldDriver·2022-12-18 19:09

非负矩阵分解NMF(2): 拟牛顿法及其他方法

文章目录写在前面拟牛顿法(Quasi-Newtonmethod)公式推导代码实现其他方法公式推导代码实现写在前面在之前的一篇文章中非负矩阵分解（1）已经介绍了NMF的基本概念，数学基础以及代码实现，这里不再对
FrenchOldDriver·2022-12-18 19:09

隐马尔可夫模型最详细讲解 HMM(Hidden Markov Model)

www.bilibili.com/video/BV1BW411P7gV悉尼科大徐亦达https://www.bilibili.com/video/BV1MW41167Rfshuhuai大神如果是喜欢看书的，请参考李航老师《统计学习方法
BruceJust·2022-12-18 16:19

【机器学习系列】隐马尔科夫模型第二讲：前向算法、后向算法

作者：CHEONG公众号：AI机器学习与知识图谱研究方向：自然语言处理与知识图谱阅读本文之前，首先注意以下两点：1、机器学习系列文章常含有大量公式推导证明，为了更好理解，文章在最开始会给出本文的重要结论
CHEONG_KG·2022-12-18 16:45

机器学习-白板推导系列(十四)-隐马尔科夫(HMM，Hidden Markov Model)

频率派频率派的思想就衍生出了统计学习方法，统计学习方法的重点在于优化，找lossfunction。
Paul-Huang·2022-12-18 16:45

SLAM位姿变换关系总结

目录1.坐标变换1.1已知k帧坐标1.2已知0帧坐标2.临帧变换2.1临帧的相对变换关系2.2临帧的变换关系（基于全局帧）2.3临近两帧点关系3.速度公式推导（场景流）3.1点速度3.2物体速度图片来源
DIANZI_nan·2022-12-18 07:45

【深度学习】语音识别之CTC算法原理解释与公式推导

不搞语音识别得人开这个论文确实有点费劲，结合上图，思考一下语音识别的场景，输入是一段录音，输出是识别的音素，输入的语音文件的长度和输出的音素个数之间没有一一对应关系，通常将语音文件「分片」之后，会出现多对一的关系。这个场景在「翻译问题」和「OCR问题」中也普遍存在。本文的特点是，提出来一种end-to-end的方法，直接将语音转问音素。不需要添加规则/后处理等过程。文章目录[隐藏]1几个定义2构造
JIN_嫣熙·2022-12-17 23:46

机器学习面试题——线性回归LR与逻辑回归LR

——线性回归LR与逻辑回归LR提示：平时除了练习数据结构与算法之外，还需要学习这些机器学习知识文章目录机器学习面试题——线性回归LR与逻辑回归LR@[TOC](文章目录)题目逻辑回归LR详细推导，LR公式推导基本条件损失函数推导梯度求导回归和分类的区别
冰露可乐·2022-12-17 15:20

Xavier初始化方法简要笔记

根据一些前提假设以及概率统计公式推导出满足上述设计原则的权重W应服从又由于实际当中输入、输出的个数n往往不相等，为了综合考虑，将W的方差初始化为当W用对称区间的均匀分布生成时，根据(b−a
Blateyang·2022-12-17 15:37

深度学习超参数——momentum、learning rate和weight decay

文章目录前言一、momentum二、权重衰减（weightdecay）1.背景2.L2正则化与权重衰减系数3.公式推导4.正则项（权重衰减）作用三、学习率（learningrate）前言利用深度学习网络训练模型时
破茧蛰伏的日子·2022-12-17 14:28

机器学习笔记-PCA(主成分分析）

参考资料（大量参考了第一个链接，里面讲的非常详细）：https://zhuanlan.zhihu.com/p/77151308统计学习方法（李航）https://zhuanlan.zhihu.com/p
Serendipity-Wu·2022-12-17 14:49

构成特定和需要添加的最少元素~~~数组公式推导+防止整型溢出+向上取整+贪心】

题目描述给你一个整数数组nums，和两个整数limit与goal。数组nums有一条重要属性：abs(nums[i])=0，那么abs(x)等于x；否则，等于-x。示例1：输入：nums=[1,-1,1],limit=3,goal=-4输出：2解释：可以将-2和-3添加到数组中，数组的元素总和变为1-1+1-2-3=-4。示例2：输入：nums=[1,-10,9,1],limit=100,goal
硕风和炜·2022-12-17 10:11

统计学习方法---感知机

《统计学习方法》系列笔记的第一篇，对应原著第二章。大量引用原著讲解，加入了自己的理解。对书中算法采用Python实现，并用Matplotlib可视化了动画出来。
千寻～·2022-12-17 08:04

学习list：GAN、SRGAN入门基础知识

一、最近在学GAN相关知识，下面两个是讲GAN讲的比较透彻的两篇博文，mark一下1、讲的通俗易懂https://www.jianshu.com/p/91b35a8108d22、公式推导比较详细https
KatherinePavlovna·2022-12-17 07:52

神经网络详解及代码实现

神经网络详解及代码实现1神经网络结构特点2BP算法公式推导3向量化3.1前向传播3.2反向更新4代码实现参考文献原创不易，转载请标明出处谢谢。
凌晨4点de洛杉机·2022-12-16 23:10

神经网络损失函数公式解读

原文地址：https://www.cnblogs.com/pinard/p/6437495.html上面地址是一篇讲解DNN的文章，其中部分公式推导过程，自己在这里做一些记录，方便以后查阅。
weixin_34095889·2022-12-16 19:04

机器人轨迹弧线规划

公式推导：第一步：首先先确定空间中三点位置p1（x1,y1,z1）,p2（x2,y2,z2）,p3（x3,y3,z3）以这空间三点为基准建立坐标系P1—UVW确定U
白纸道·2022-12-16 15:21

《统计学习方法》学习笔记_感知机（手写扫描）

感知机Perceptron由Rosenblatt于1957年提出，可以说是神经网络与支持向量机的爸爸。感知机是二类分类的线性分类模型，其输入为实例的特征向量，输出为实例的类别，取+1和-1二值。感知机对应于输入空间（特征空间）中将实例划分为正负两类的分离超平面，属于判别模型。感知机学习旨在求出将训练数据进行线性划分的分离超平面，为此，导入基于误分类的损失函数，利用梯度下降法对损失函数进行极小化，求
全自动学习机器·2022-12-16 13:32

《集体智慧编程》读书笔记

书中涉及到一些机器学习相关的内容,在统计学习方法读书笔记和西瓜书读书笔记中有所记录,所以只简单带过.本书源代码下载地址书中使用的python技巧字典的setdefault(key,value)方法,作用是如果键不在字典中
weixin_30396699·2022-12-16 12:37

统计学习方法之kNN算法

统计学习方法读书笔记之kNN算法k近邻是什么k近邻法是机器学习中最基本的分类和回归方法，也称为kNN算法。通常k近邻法用于分类问题。k近邻法假定给定一个训练数据集，其中实例类别已定。
Morgan928·2022-12-16 08:20

开关电源设计中 AP值的推导过程

开关电源设计之：AP法的公式推导1前提条件由变压器基本公式可得下列表序号说明1忽略磁芯的磁阻，全部能量在气隙中2气隙量较大，磁导率$u_{r}$接近常数，且不触发磁饱和3气隙中磁通密度为均匀分布4气隙中磁场强度
可爱的水酱·2022-12-16 08:58

Gradient Descent Algorithm 梯度下降算法

文章目录2、GradientDescentAlgorithm梯度下降算法2.1优化问题2.2公式推导2.3GradientDescent梯度下降2.4StochasticGradientDescent随机梯度下降
LeoATLiang·2022-12-16 06:05

深度之眼课程打卡-统计学习方法01

绪论统计学习方法主要是讲李航博士统计学习方法那本书，一开始主要讲解了一些基本概念。作业打卡L1和L2范式l1范数的数学定义是所有数绝对值之和。在坐标平面上它是个正方形。l2范数的数
Big_quant·2022-12-16 06:34

RLS算法-公式初探

RLS算法-公式推导不带遗忘因子的推导：递推最小二乘法推导（RLS）——全网最简单易懂的推导过程-阿Q在江湖的文章-知乎https://zhuanlan.zhihu.com/p/111758532对于一组观测点
天之道，利而不害·2022-12-16 01:26

决策树(decision tree)——(1)生成与度量指标

**注：本博客为李航《统计学习方法》与周志华《机器学习》读书笔记，虽然有一些自己的理解，但是其中仍然有大量文字摘自李老师和周老师的书籍内容。
猿童学·2022-12-15 22:43

自动驾驶算法-滤波器系列（二）—— 卡尔曼滤波简介及其变种（EKF、UKF、PF）介绍

KF&EKF&UKF&PF1.基础知识概要协方差矩阵多维高斯分布状态空间表达式2.什么是卡尔曼滤波器3.五个重要的公式公式介绍公式推导过程4.卡尔曼滤波的变种KF（KalmanFilter）EKF（ExtendedKalmanFilter
_归尘_·2022-12-15 16:05

语言模型公式推导

语言模型公式推导句子的概率P(S)及n-gram语法模型bigram模型计算条件概率n-gram模型计算条件概率语言模型在信息检索、机器翻译、语音识别中承担着重要的任务。
luoyulai1987·2022-12-15 07:42

罗德里格斯（Rodrigues）旋转公式推导

转载：原文链接1罗德里格斯（Rodrigues）旋转公式简介对于三维空间向量vvv的旋转问题，给定罗德里格斯旋转向量qqq（由旋转轴nnn和旋转角度θ\thetaθ构成），那么，用罗德里格斯（Rodrigues）旋转公式就可以得出旋转后的向量v′v'v′，如下：v′=v+(1−cosθ)∗N2⋅v+sinθ∗N⋅vv'=v+(1-cos\theta)*N^{2}\cdotv+sin\theta*N
wang.chen.xue·2022-12-15 05:55

决策树算法总结

点击上方“小白学视觉”，选择加"星标"或“置顶”重磅干货，第一时间送达前言决策树是机器学习模型较常用的一种方法，李航老师《统计学习方法》详细的描述了决策树的生成和剪枝，本文根据书中的内容，对决策树进行了总结
小白学视觉·2022-12-15 03:49

python降维中特征维度的问题

python降维中特征维度的问题最近在学PCA降维，参考的是李航老师的统计学习方法第二版，自己上手编程时发现按照李航老师P310页公式16.39来定义样本数据时出现了一些问题，特此记录以供日后翻阅sklearn
nofaliure·2022-12-14 22:48

朴素贝叶斯分类

一：贝叶斯原理朴素贝叶斯分类算法是一个典型的统计学习方法，主要的理论基础就是贝叶斯公式。贝叶斯公式定义如下所示：先验概率：通过经验来判断事情发生的概率。后验概率：后验概率就是发生结果之后，推测原因的概
onlynb·2022-12-14 20:44
上一页 17 18 19 20 21 22 23 24 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他