----机器学习笔记

机器学习笔记 - 基于PyTorch + 类似ResNet的单目标检测

一、获取并了解数据我们将处理年龄相关性黄斑变性(AMD)患者的眼部图像。数据集下载地址，从下面的地址中，找到iChallenge-AMD，然后下载。BaiduResearchOpen-AccessDataset-DownloadDownloadBaiduResearchOpen-AccessDatasethttps://ai.baidu.com/broad/download这里也提供了百度网盘下载
坐望云起·2023-08-13 06:21

机器学习笔记 - 关于向量嵌入embedding在机器学习中的使用

向量嵌入概述向量嵌入是机器学习中最有趣和最有用的概念之一。它们是许多NLP、推荐和搜索算法的核心。如果您曾经使用过推荐引擎、语音助手、语言翻译器等工具，您就会遇到过依赖嵌入的系统。与大多数软件算法一样，机器学习算法也需要使用数字。有时，我们的数据集包含数值列或可以转换为数值的值（序数、分类等）。其他时候我们会遇到更抽象的东西，比如整个文本文档。我们为这样的数据创建向量嵌入，它们只是数字列表，以便用
坐望云起·2023-08-12 20:59

机器学习笔记 - 基于C++的深度学习 二、实现卷积运算

一、卷积卷积是信号处理领域的老朋友。最初的定义如下在机器学习术语中：I(…)通常称为输入K(…)作为内核，并且F(…)作为给定K的I(x)的特征图。虑多维离散域，我们可以将积分转换为以下求和对于二维数字图像，我们可以将其重写为：<
坐望云起·2023-08-12 14:48

机器学习笔记 - 基于C++的深度学习 三、实现成本函数

机器学习中的建模作为人工智能工程师，我们通常将每个任务或问题定义为一个函数。例如，如果我们正在开发面部识别系统，我们的第一步是将问题定义为将输入图像映射到标识符的函数F(X)。但是问题是如何知道F(X)公式？事实上，使用公式或一系列固有规则来定义F(X)是不可行的（有一天我会解释原因）。一般来说，我们不是寻找或定义正确的函数F(X)，而是尝试找到F(X)的近似值。我们将这种近似称为假设函数，或者简
坐望云起·2023-08-12 05:59

机器学习笔记：李宏毅chatgpt 大模型 & 大资料

1大模型1.1大模型的顿悟时刻EmergentAbilitiesofLargeLanguageModels，TransactionsonMachineLearningResearch2022模型的效果不是随着模型参数量变多而慢慢变好，而是在某一个瞬间，模型“顿悟”了这边举的一个例子是，比如让模型回答鸡兔同笼问题一开始小模型什么都学不到，故而效果不好随着模型参数量增大，模型慢慢地会一定地推导了，但是
UQI-LIUWJ·2023-08-12 03:37

吴恩达机器学习笔记（二）

模型描述：根据房间的大小（平方数）预测其能售卖出的价格1、监督学习（每个例子都有一个正确的输出值）1.1、回归问题，可以预测一个准确的数值输出1.2、分类问题，可以预测离散值输出（只有0和1的离散值输出）2、训练集（trainingset）：在监督学习中提供“参考”的数据集合三个要素：训练集的数量，输入变量，输出变量训练样本（trainingexample）：（x^(i),y^(i)）第i个训练样
五大人·2023-08-12 02:26

机器学习笔记之优化算法(十三)关于二次上界引理

机器学习笔记之优化算法——关于二次上界引理引言回顾：利普希兹连续梯度下降法介绍二次上界引理：介绍与作用二次上界与最优步长之间的关系二次上界引理证明过程引言本节将介绍二次上界的具体作用以及它的证明过程。
静静的喝酒·2023-08-11 20:41

机器学习笔记值优化算法(十四)梯度下降法在凸函数上的收敛性

机器学习笔记之优化算法——梯度下降法在凸函数上的收敛性引言回顾：收敛速度：次线性收敛二次上界引理梯度下降法在凸函数上的收敛性收敛性定理介绍证明过程引言本节将介绍梯度下降法在凸函数上的收敛性。
静静的喝酒·2023-08-11 20:10

机器学习笔记 - 基于C++的深度学习 一、向量运算

由于它们的可扩展性和灵活性，现在很少找到不使用TensorFlow、PyTorch、Paddle......（这里的省略号是指各种成熟的深度学习库）的项目。花时间从头开始编写机器学习算法（即在没有任何基础框架的情况下）似乎有些重复造轮子的感觉。然而，事实并非如此。自己编写算法可以让我们清楚、扎实地理解算法如何工作以及模型真正在做什么。C++曾经是一种古老的语言，但在过去十年中发生了巨大的发展。主要
坐望云起·2023-08-11 08:37

机器学习笔记 - 使用CLIP在没有数据的情况下创建图像分类器

想象一下，如果我们现在需要对人们是否戴眼镜进行分类，但您没有数据或资源来训练自定义模型。该怎么办？这里我们了解如何使用预先训练的CLIP模型来创建自定义分类器，而无需任何培训。这种方法称为零样本图像分类，它可以对原始CLIP模型训练期间未明确看到的类别图像进行分类。一、CLIP理论背景CLIP（对比语言-图像预训练）模型由OpenAI开发，是一种多模态视觉和语言模型。它将图像和文本描述映射到相同的
坐望云起·2023-08-11 02:31

机器学习笔记之优化算法(十一)梯度下降法：凸函数VS强凸函数

机器学习笔记之优化算法——梯度下降法：凸函数VS强凸函数引言凸函数：凸函数的定义与判定条件凸函数的一阶条件凸函数的梯度单调性凸函数的二阶条件强凸函数强凸函数的定义强凸函数的判定条件强凸函数的一阶条件强凸函数的梯度单调性强突函数的二阶条件引言本节将介绍凸函数
静静的喝酒·2023-08-10 10:01

机器学习笔记1_逻辑回归

@[toc]1LogisticRegressionLogisticRegression逻辑回归，简称LR，适合于分类问题1.1LR模型对于线性回归模型，需要拟合一个的函数，回归问题适合于连续的问题，而对于分类问题，需要得到一系列离散的标签，以二分类为例，需要预测的类别为0，1.可以使用sigmoid函数将连续问题转化为离散问题:sigmoid函数的图像为：sigmoid其中，时，，时，.Sigmo
cuiyr123·2023-08-09 17:41

机器学习笔记：李宏毅ChatGPT Finetune VS Prompt

1两种大语言模型：GPTVSBERT2对于大语言模型的两种不同期待2.1“专才”2.1.1成为专才的好处IsChatGPTAGoodTranslator?APreliminaryStudy2023Arxiv箭头方向指的是从哪个方向往哪个方向翻译表格里面的数值越大表示翻译的越好可以发现专门做翻译的工作会比ChatGPT好一些HowGoodAreGPTModelsatMachineTranslatio
UQI-LIUWJ·2023-08-09 08:43

吴恩达机器学习笔记（自用）

吴恩达机器学习机器学习的定义什么是机器学习？机器学习算法1.监督学习（SupervisedLearning）2.无监督学习（UnsupervisedLearning）单变量线性回归模型描述（ModelRepresentation）代价函数梯度下降线性回归中的梯度下降凸函数（convexfunction）多变量线性回归多元梯度下降法特征缩放（FeatureScaling）学习率（Learningra
cosθ·2023-08-09 06:02

机器学习笔记自用

matplotlib.legend中的ncol，例如plt.legend(label,loc=0,ncol=4)表示一行可放置4个标签loc表示位置常用位置如下
鄙人不善奔跑·2023-08-09 05:00

「AI大咖谈」阿里算法专家谈大规模推荐系统粗排层的设计与实现

这里是「王喆的机器学习笔记」的第三十七篇文章。今天我们「AI大咖谈」邀请的大咖是阿里的算法专家王哲，所以今天是一次王喆对王哲的访谈。
王喆的机器学习笔记·2023-08-09 05:20

机器学习笔记之优化算法(十一)凸函数铺垫：梯度与方向导数

机器学习笔记之优化算法——凸函数铺垫：梯度与方向导数引言回顾：偏导数方向余弦方向导数方向导数的几何意义方向导数的定义方向导数与偏导数之间的关联关系证明过程梯度(Gradient)(\text{Gradient
静静的喝酒·2023-08-08 18:38

机器学习笔记：李宏毅ChatGPT：生成式学习的两种策略

1策略1“各个击破”——autoregressivemodel“各个击破”——一个一个生成出来2策略2：“一次到位”——non-autoregressvemodel一步到位，全部生成出来2.1non-autoregressivemodel如何确定长度？两种策略策略1：始终生成固定长度（比如100），如果出现end，那么end后面的部分直接扔掉策略2：首先输出一个数字n，表示之后我们要输出多长，然后
UQI-LIUWJ·2023-08-08 17:41

机器学习笔记 - week9 -（十五、异常检测）

15.1问题的动机在接下来的一系列视频中，我将向大家介绍异常检测(Anomalydetection)问题。这是机器学习算法的一个常见应用。什么是异常检测呢？为了解释这个概念，让我举一个例子吧：假想你是一个飞机引擎制造商，当你生产的飞机引擎从生产线上流出时，你需要进行QA(质量控制测试)，而作为这个测试的一部分，你测量了飞机引擎的一些特征变量，比如引擎运转时产生的热量，或者引擎的振动等等。这样一来，
火箭蛋头·2023-08-08 05:12

机器学习——支持向量机（数学基础推导篇）

支持向量机（SVM）——原理篇机器学习笔记（五）：支持向量机（SVM）支持向量机算法（SVM）详细讲解(含手推
# JFZero·2023-08-07 11:32

机器学习笔记 - 关于GPT-4的一些问题清单

一、简述据报道，GPT-4的系统由八个模型组成，每个模型都有2200亿个参数。GPT-4的参数总数估计约为1.76万亿个。近年来，得益于GPT-4等高级语言模型的发展，自然语言处理(NLP)取得了长足的进步。凭借其前所未有的规模和能力，GPT-4为语言AI设立了新标准，并为机器生成内容开辟了一个充满了无限可能性的世界。然而，GPT-4令人印象深刻的性能背后隐藏着控制其行为的复杂参数网络。我们这里将
坐望云起·2023-08-07 06:29

机器学习笔记 - 基于Python发现最佳计算机视觉模型的神经架构搜索技术NAS

典型案例YOLO-NAS(NeuralArchitectureSearch)机器学习笔记-YOLO-NAS最高效的
坐望云起·2023-08-07 05:52

机器学习笔记：李宏毅ChatGPT课程1：刨析ChatGPT

ChatGPT——ChatGenerativePre-trainedTransformer1文字接龙每次输出一个概率分布，根据概率sample一个答案——>因为是根据概率采样，所以ChatGPT每次的答案是不一样的（把生成式学习拆分成多个分类问题）将生成的答案加到原来的句子里面1.1同时使用同一个会话中之前的互动作为输入模型的输入不止有现在的互动，还有同一会话中过去的互动这里说的1700亿参数是O
UQI-LIUWJ·2023-08-06 20:46

机器学习笔记 - YOLO-NAS 最高效的目标检测算法之一

一、YOLO-NAS概述YOLO（YouOnlyLookOnce）是一种对象检测算法，它使用深度神经网络模型，特别是卷积神经网络，来实时检测和分类对象。该算法首次在2016年由JosephRedmon、SantoshDivvala、RossGirshick和AliFarhadi发表的论文《YouOnlyLookOnce:Unified,Real-TimeObjectDetection》中被引入。自
坐望云起·2023-08-06 12:16

机器学习笔记之优化算法(十)梯度下降法铺垫：总体介绍

机器学习笔记之优化算法——梯度下降法铺垫：总体介绍引言回顾：线搜索方法线搜索方法的方向Pk\mathcalP_kPk线搜索方法的步长αk\alpha_kαk梯度下降方法整体介绍引言从本节开始，将介绍梯度下降法
静静的喝酒·2023-08-06 09:02

机器学习笔记 - 使用 Tensorflow 从头开始构建您自己的对象检测器

机器学习笔记-使用Keras、TensorFlow框架进行自定义数据集目标检测训练_keras制作目标检测数据集_坐望云起的博客-CSDN博客学习如何训练自定义深度学习模型，以通过Keras、TensorFlow
坐望云起·2023-08-05 06:48

机器学习笔记之优化算法(九)收敛速度的简单认识

机器学习笔记之优化算法——收敛速度的简单认识引言收敛速度的判别标准Q\mathcalQQ-收敛速度R\mathcalRR-收敛速度关于算法复杂度与收敛速度引言本节对收敛速度简单介绍。
静静的喝酒·2023-08-04 08:59

机器学习笔记 - 使用 YOLOv5、OpenCV、Python 和 C++ 检测物体

一、YOLOv5简述YOLOv5虽然已经不是最先进的对象检测器，但是YOLOv5使用了一个简单的卷积神经网络CNN架构（相对YOLOv8来讲，不过v8精度是更高了一些），更易理解。这里主要介绍如何轻松使用YOLOv5来识别图像中的对象。将使用OpenCV、Python和C++来加载和调用我们的YOLOv5模型。目标检测是最重要的计算机视觉任务之一。对于给定图像，对象检测器将发现：图像中的物体物体的
坐望云起·2023-08-04 01:30

机器学习笔记 - 了解 GitHub Copilot 如何通过提供自动完成式建议来帮助您编码

一、GitHubCopilot介绍GitHubCopilot是世界上第一个大规模AI开发人员工具，可以帮助您以更少的工作更快地编写代码。GitHubCopilot从注释和代码中提取上下文，以立即建议单独的行和整个函数。研究发现GitHubCopilot可以帮助开发人员更快地编码、专注于解决更大的问题、更长时间地保持在流程中，并对他们的工作感到更满足。GitHubCopilot的生成式预训练语言模型
坐望云起·2023-08-03 23:37

机器学习笔记之优化算法(七)线搜索方法(步长角度；非精确搜索；Wolfe Condition)

机器学习笔记之优化算法——线搜索方法[步长角度，非精确搜索，WolfeCondition]引言回顾：Armijo\text{Armijo}Armijo准则及其弊端Glodstein\text{Glodstein
静静的喝酒·2023-08-03 16:55

机器学习笔记之优化算法(六)线搜索方法(步长角度；非精确搜索；Glodstein Condition)

机器学习笔记之优化算法——线搜索方法[步长角度，非精确搜索，GlodsteinCondition]引言回顾：ArmijoCondition\text{ArmijoCondition}ArmijoCondition
静静的喝酒·2023-08-03 16:54

机器学习笔记之优化算法(八)简单认识Wolfe Condition的收敛性证明

机器学习笔记之优化算法——简单认识WolfeCondition收敛性证明引言回顾：Wolfe\text{Wolfe}Wolfe准则准备工作推导条件介绍推导结论介绍关于Wolfe\text{Wolfe}Wolfe
静静的喝酒·2023-08-03 16:23

机器学习笔记 - 目标检测中的加权框融合与非极大值抑制的对比

一、对象检测后处理后处理步骤是目标检测中一个琐碎但重要的组成部分。本文主要是为了了解当拥有多个对象检测模型的集合时，加权框融合（WBF）相对于传统非极大值抑制（NMS）作为对象检测中后处理步骤的差异。对象检测模型通常使用非极大值抑制(NMS)作为默认后处理步骤来过滤掉冗余边界框。然而，这种方法无法有效地跨多个模型提供统一的平均预测，因为它们往往会删除具有显着重叠的置信低的框。为了缓解这个问题，出现
坐望云起·2023-08-03 15:30

机器学习笔记

文章目录BatchNormalization好处BatchNormalization尽量使得w1和w2之间呈现为正圆训练模型的时候，μ\muμ和σ\sigmaσ不可以认为是常数，而是包含数据的变量，取值大小和batch中的数据有关。γ\gammaγ和β\betaβ是自己认为定义的，虽然两组数据可以相同，但是意义是完全不一样的。好处
爱转呼啦圈的小兔子·2023-08-02 11:42

机器学习笔记 - 什么是keras-core？

一、keras-core简而言之，KerasCore是KerasAPI的新多后端实现，支持TensorFlow、JAX和PyTorch。可以使用如下命令简单安装pipinstallkeras-coreKeras是一个用Python编写的用于深度学习的用户友好工具。它旨在与AI领域的另一个主要参与者TensorFlow一起使用。KerasCore是Keras的新改进版本。它支持多个平台，包括Tens
坐望云起·2023-08-01 14:17

机器学习笔记之优化算法(四)线搜索方法(步长角度；非精确搜索)

机器学习笔记之优化算法——线搜索方法[步长角度，非精确搜索]引言回顾：精确搜索步长及其弊端非精确搜索近似求解最优步长的条件反例论述引言上一节介绍了从精确搜索的步长角度观察了线搜索方法，本节将从非精确搜索的步长角度重新观察线搜索方法
静静的喝酒·2023-08-01 12:48

机器学习笔记之优化算法(五)线搜索方法(步长角度；非精确搜索；Armijo Condition)

机器学习笔记之优化算法——线搜索方法[步长角度，非精确搜索，ArmijoCondition]引言回顾：关于f(xk+1)=ϕ(α)f(x_{k+1})=\phi(\alpha)f(xk+1)=ϕ(α)的一些特性非精确搜索近似求解最优步长的条件
静静的喝酒·2023-08-01 12:17

机器学习笔记8——抑制过拟合之Dropout、BN

过拟合：网络在训练数据上效果好，在测试数据上效果差。抑制过拟合的方法有以下几种：（1）dropout（2）正则化（3）图像增强本次主要谈论一下dropoutdropout定义：是一种在学习的过程中随机删除神经元的方法。训练时随机选取隐藏层的神经元，并将其删除。如图所示：主要作用：（1）取平均的作用（2）减少神经元之间复杂的共适应关系：因为dropout程序导致两个神经元不一定每次都在一个dropo
hello everyone！·2023-07-31 19:28

YouTube深度学习推荐模型最全总结

这里是「王喆的机器学习笔记」的第三十篇文章。
王喆的机器学习笔记·2023-07-31 04:13

吴恩达机器学习笔记（3）

多变量线性回归：问题：根据多个属性，如房子面积，房子楼层，房子年龄等估计房子的价格多变量线性回归中的变量多变量线性回归的假设此时有多个特征,i对应不同的特征值，如房子面积，楼层，年龄等，参数为一个n+1维向量多变量线性回归中的梯度下降，对每一个参数求偏导数从而得到不同参数的梯度参数特征缩放——加速梯度下降过程收敛到最优值多变量梯度下降时，参数的取值要尽量小在多多变量梯度下降中，要让不同参数的取值范
魏清宇·2023-07-30 01:52

机器学习笔记之优化算法(二)线搜索方法(方向角度)

机器学习笔记之优化算法——线搜索方法[方向角度]引言回顾：线搜索方法从方向角度观察线搜索方法场景构建假设1：目标函数结果的单调性假设2：屏蔽步长αk\alpha_kαk对线搜索方法过程的影响假设3：限定向量
静静的喝酒·2023-07-29 11:28

机器学习笔记之优化算法(一)无约束优化概述

机器学习笔记之优化算法——无约束优化概述引言回顾：关于支持向量机的凸二次优化问题无约束优化问题概述解析解与数值解数值解的单调性关于优化问题的策略线搜索方法信赖域方法引言从本节开始，将介绍优化算法(OptimizationAlgorithm
静静的喝酒·2023-07-29 11:27

Python机器学习笔记：XgBoost算法

转载：https://www.cnblogs.com/wj-1314/p/9402324.html前言1，Xgboost简介Xgboost是Boosting算法的其中一种，Boosting算法的思想是将许多弱分类器集成在一起，形成一个强分类器。因为Xgboost是一种提升树模型，所以它是将许多树模型集成在一起，形成一个很强的分类器。而所用到的树模型则是CART回归树模型。Xgboost是在GBDT
SeaSky_Steven·2023-07-29 11:26

机器学习笔记之优化算法(三)线搜索方法(步长角度；精确搜索)

机器学习笔记之优化算法——线搜索方法[步长角度，精确搜索]引言回顾：线搜索方法——方向角度关于收敛性的假设关于单调性的假设下降方向与最速方向从步长角度观察线搜索方法关于方向向量的假设精确搜索过程引言上一节介绍了从方向角度认识线搜索方法
静静的喝酒·2023-07-29 11:54

白话机器学习笔记（一）学习回归

最小二乘法定义模型表达式：fθ(x)=θ0+θ1xf_\theta(x)=\theta_0+\theta_1xfθ(x)=θ0+θ1x（常用θ\thetaθ表示未知数、fθ(x)f_\theta(x)fθ(x)表示含有参数θ\thetaθ并且和变量xxx相关的函数）目标函数假设有nnn个训练数据，那么它们的误差之和可以这样表示，这个表达式称为目标函数。E(θ)=12∑i=1n(y(i)−fθ(x(
WangXinmingg·2023-07-26 22:47

白话机器学习笔记（三）评估已建立的模型

模型评估在进行回归和分类时，为了进行预测，我们定义了函数fθ(x)f_\theta(x)fθ(x)，然后根据训练数据求出了函数的参数θ\thetaθ。如何预测函数fθ(x)f_\theta(x)fθ(x)的精度？看它能否很好的拟合训练数据？我们需要能够定量的表示机器学习模型的精度，这就是模型的评估。交叉验证回归问题的验证把获取的全部训练数据分成两份：一份用于测试，一份用于训练。前者来评估模型。一般
WangXinmingg·2023-07-26 22:47

白话机器学习笔记（二）学习分类

分类用图形来解释，把他想象为有大小有方向带箭头的向量。设权重向量为www，虚线为使权重向量称为法线向量的直线。直线的表达式为：w⋅x=0w\cdotx=0w⋅x=0(两个向量的内积)也可写为：w⋅x=∑i=1nwixi=w1x1+w2x2=0w\cdotx=\sum\limits_{i=1}^nw_ix_i=w_1x_1+w_2x_2=0w⋅x=i=1∑nwixi=w1x1+w2x2=0w⋅x=∣
WangXinmingg·2023-07-26 22:14

从阿里的User Interest Center看模型线上实时serving方法

这里是「王喆的机器学习笔记」的第二十九篇文章。最近写书的时候在总结一些深度学习模型线上serving的主流方法。
王喆的机器学习笔记·2023-07-21 06:21

机器学习笔记

神经元神经网络的基本模型是神经元，神经元的基本模型就是数学中的乘、加运算：神经元神经网络两层的神经网络（一个隐藏层）更进一步地，过激活函数以提高表现力的神经元模型：常用的激活函数有:relusigmoidtanh损失函数loss计算得到的预测值与已知答案的差距：均方误差MSE自定义损失函数：根据问题的实际情况交叉熵CE（CrossEntropy）反向传播训练中，以减小loss值为优化目标，有梯度下
微雨旧时歌丶·2023-07-20 15:27

机器学习笔记--xgboost核心思想

今天给大家讲xgboost，这是一个非常优秀的算法，在各大回归类的人工智能竞赛中，经常可以在榜首看到这个算法的身影。前面我们已经讲了决策树，提升树（BoostingDecisionTree）是迭代多棵决策树来共同决策，当采用平方误差作为损失函数的时候，每一棵树学习的是之前所有树之和的残差值，残差=真实值-预测值。比如A的年龄是18岁，第一棵树的预测值是13岁，与真实值相差了5岁（就是我们说的残差）
weixin_39210914·2023-07-19 23:10
上一页 3 4 5 6 7 8 9 10 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他