机器学习--数据处理第27页

Hadoop分布式系统架构-MapReduce-02

MapReduce的思想核心是“分而治之”，适用于大量复杂的任务处理场景（大规模数据处理场景）。Map负责“分”，即把复杂的任务分解为若干个“简单的任务”来并行处理。

一直上上签X·2024-02-12 16:41

C#系列-C#EF框架的优缺点+针对大数据处理的优化（19）

C#EF框架的优缺点C#EF（EntityFramework）框架的优缺点如下：优点：简单易用：EF框架提供了丰富的API和工具，使得开发者可以轻松地实现数据库的增删改查等操作，无需编写繁琐的SQL语句。对象化数据库操作：EF框架将数据库表映射为C#对象，使得开发者可以使用面向对象的方式来操作数据库，提高了开发效率和代码可读性。数据库无关性：EF框架支持多种数据库引擎，如SQLServer、MyS

管理大亨·2024-02-12 16:27

大数据视频教程百度网盘下载

大数据1.0时代,社会大数据成就了Google，yahoo，百度大数据2.0时代,消费大数据造就了亚马逊，Ebay，阿里巴巴，腾讯大数据3.0时代，把关注焦点转到了非结构化数据处理上面，特别是图像、视频

QFdongdong·2024-02-12 16:42

shapash，一个神奇的 Python 库！

Github地址：https://github.com/MAIF/shapash在机器学习领域，模型的可解释性对于理解模型的决策过程和进行决策支持非常重要。

漫走云雾·2024-02-12 15:18

王树森：学 DRL 走过的弯路太多，想让大家避开（文末赠送福利）

而强化学习是机器学习的一个分支，研究如何基于对环境的观测做出决策，以最大化长期回报。从20世纪80年代至今，强化学习一直是机器学习领域的热门研究方向。

人工智能与算法学习·2024-02-12 15:43

Python自学之路：从入门到精通

一、引言Python，作为最受欢迎的编程语言之一，不仅语法简洁易懂，而且应用领域广泛，从数据科学、机器学习、网络开发到自动化脚本编写等，无所不能。

白猫a~·2024-02-12 15:37

Week10

第10周十七、大规模机器学习(LargeScaleMachineLearning)17.1大型数据集的学习参考视频:17-1-LearningWithLargeDatasets(6min).mkv如果我们有一个低方差的模型

kidling_G·2024-02-12 14:29

阿里云人工智能工程师ACP认证考试：15天备考到通过经验分享

随着2023年AIGC的火热，个人的热情被带动起来，有必要系统、全面的对人工智能、机器学习、深度学习进行总结和再学习。那就设立一个可量化的学习目标吧：考个人工智能相关的认证，以证促学。

North_D·2024-02-12 13:59

后天开课 | 第三届磁共振脑影像结构班（训练营：2023.8.4~8.21）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师

茗创科技·2024-02-12 13:00

MySQL性能调优篇(1)-分析执行计划的方法

MySQL是一种常用的关系型数据库管理系统，它的性能优化对于数据处理的效率和性能至关重要。在优化MySQL数据库的过程中，分析执行计划是一个重要的步骤。

俞兆鹏·2024-02-12 13:56

【机器学习实战】大数据与MapReduce

当运算需求超出了当前资源的运算能力，一、可以考虑购买更好的机器；二、可以将计算转换成并行作业，MapReduce就提供了这种方案的一个具体实施框架。MapReduce：分布式计算的框架MapReduce是一个软件框架，可以将单个计算工作分配给多台计算机执行。工作流程包括map和reduce阶段。第一阶段，输入数据被切片分发到节点上，各个节点对本地数据进行处理对应的运算代码叫做mapper。第二阶段

吵吵人·2024-02-12 12:48

Vitis AI 集成

·2024-02-12 12:42

神经网络中的分位数回归和分位数损失

在使用机器学习构建预测模型时，我们不只是想知道“预测值(点预测)”，而是想知道“预测值落在某个范围内的可能性有多大(区间预测)”。

·2024-02-12 12:41

【机器学习】数据清洗之处理缺失点

个人主页：[甜美的江]欢迎点赞✍评论⭐收藏收录专栏：[机器学习]希望本文对您有所裨益，如有不足之处，欢迎在评论区提出指正，让我们共同学习、交流进步！

·2024-02-12 12:11

李宏毅机器学习笔记 2.回归

最近在跟着Datawhale组队学习打卡，学习李宏毅的机器学习/深度学习的课程。

Simone Zeng·2024-02-12 11:34

机器学习 | 凸/非凸目标函数 |非凸目标函数导致求解陷入局部最优

数学中最优化问题的一般表述是求取x∗∈χx^{*}\in\chix∗∈χ，使f(x∗)=min{f(x):x∈χ}f(x^{*})=min\{f(x):x\in\chi\}f(x∗)=min{f(x):x∈χ}，其中x是n维向量，χ\chiχ是x的可行域，f是χ\chiχ上的实值函数。凸优化问题是指χ\chiχ是闭合的凸集且f是χ\chiχ上的凸函数的最优化问题，这两个条件任一不满足则该问题即为非

stone_fall·2024-02-12 11:04

西瓜书-机器学习5.4 全局最小与局部极小

两种“最优”：“局部极小”(localminimum)和"全局最小"(globalminimum)对和，若存在使得多组不同参数值初始化多个神经网络使用“模拟退火”：以一定的概率接受比当前解更差的结果，有助于“跳出”局部极小使用随机梯度下降遗传算法(geneticalgorithms)[Goldberg,1989]也常用来训练神经网络以上用于跳出局部极小的技术大多是启发式，理论上商缺乏保障。Gold

lestat_black·2024-02-12 11:32

机器学习入门之基础概念及线性回归

任务目录什么是Machinelearning学习中心极限定理，学习正态分布，学习最大似然估计推导回归Lossfunction学习损失函数与凸函数之间的关系了解全局最优和局部最优学习导数，泰勒展开推导梯度下降公式写出梯度下降的代码学习L2-Norm，L1-Norm，L0-Norm推导正则化公式说明为什么用L1-Norm代替L0-Norm学习为什么只对w/Θ做限制，不对b做限制Question1：Wh

StarCoder_Yue·2024-02-12 11:01

机器学习40讲学习笔记-18 从全局到局部：核技巧

一序本文属于极客时间机器学习40讲学习笔记系列。18从全局到局部：核技巧对偶性主要应用在最优决策边界的求解中。

bohu83·2024-02-12 11:01

[机器学习]全局最小与局部最小

机器学习中很多任务最终都会转化为优化任务，基于梯度的搜索是使用最广泛的参数寻优方法。梯度法：从某些初始解出发，迭代寻找最优参数值。

3points·2024-02-12 11:01

面试题：说下局部最优和全局最优的区别

耗子来啦·2024-02-12 11:31

机器学习之监督学习和非监督学习

监督学习(SupervisedLearning)监督学习是一种学习方式，其中模型从标记的训练数据中学习。这意味着每个训练样本都是由输入向量和相应的目标输出(也称为标签)组成的。模型的任务是学习输入到输出的映射函数，以便当提供新的、未见过的数据时，模型能够预测出正确的输出。例子:邮件分类:根据邮件内容将邮件自动分类为“垃圾邮件或“非垃圾邮件”。这里，邮件内容是输入，而“垃圾邮件“或“非垃圾邮件”的非

华农DrLai·2024-02-12 11:30

机器学习之局部最优和全局最优

(1)局部最优，就是在函数值空间的一个有限区域内寻找最小值;而全局最优，是在函数值空间整个区域寻找最小值问题。(2)函数局部最小点是它的函数值小于或等于附近点的点，但是有可能大于较远距离的点。(3)全局最小点是那种它的函数值小于或等于所有的可行点。面试：你能解释一下梯度下降法及其在寻找全局最优解时的局限性吗？梯度下降法通过迭代沿着目标函数的负梯度方向更新参数，以寻找最小值。局限性：它可能会陷入局部

华农DrLai·2024-02-12 11:29

一本Python爬虫的书，凭什么能畅销10W册

对于数据科学和机器学习领域的程序员来说，Python提供了强大的API和众多的库，使其成为数据科学和机器学习的首选语言。在Python的众多应用中，爬虫一直有着超高需求。

程序员老冉·2024-02-12 11:21

[机器学习]决策树

决策树决策树学习采用的是自顶向下的递归方法，其基本思想是以信息熵为度量构造一颗熵值下降最快的树，到叶子节点处，熵值为0具有非常好的可解释性、分类速度快的优点，是一种有监督学习最早提及决策树思想的是Quinlan在1986年提出的ID3算法和1993年提出的C4.5算法，以及Breiman等人在1984年提出的CART算法工作原理一般的，一颗决策树包含一个根结点、若干个内部节点和若干个叶节点构造构造

LBENULL·2024-02-12 11:21

Spark MLlib

目录一、SparkMLlib简介（一）什么是机器学习（二）基于大数据的机器学习（三）Spark机器学习库MLlib二、机器学习流水线（一）机器学习流水线概念（二）流水线工作过程（三）构建一个机器学习流水线三

Francek Chen·2024-02-12 11:15

机器学习简介

介绍机器学习是人工智能（AI）的一个子领域。机器学习的目标通常是理解数据的结构，并将该数据拟合到可以被人理解和利用的模型中。尽管机器学习是计算机科学的一个领域，但它与传统的计算方法有所不同。

白如意i·2024-02-12 10:36

机器学习：Softmax介绍及代码实现

Softmax原理Softmax函数用于将分类结果归一化，形成一个概率分布。作用类似于二分类中的Sigmoid函数。对于一个k维向量z，我们想把这个结果转换为一个k个类别的概率分布p(z)。softmax可以用于实现上述结果，具体计算公式为：对于k维向量z来说，其中zi∈Rzi∈R，我们使用指数函数变换可以将元素的取值范围变换到(0,+∞)(0,+∞),之后我们再所有元素求和将结果缩放到[0,1]

是Dream呀·2024-02-12 10:44

机器学习 —— 多项式回归和正规方程

一、多项式回归房价预测中：有两个特征，frontage和depth，即临街长度和房子的宽度。假如我们计算一个x=frontage*depth(房子面积)，则假设函数变成了hθ(x)=θo+θ1x。线性回归并不适用于所有数据，有时我们需要曲线来适应我们的数据，比如一个二次方模型或者三次方模型。通常我们需要先观察数据然后再决定准备尝试怎样的模型。另外，我们可以令：X2=X2^3,X3=X3^3,从而将

BioLearner·2024-02-12 10:36

第十三届脑电数据分析入门班（训练营：2023.11.15~11.28）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师

茗创科技·2024-02-12 09:44

使用 Python 5 年后，我转向了Go

\n几乎可以用它来做任何事情–从创建简单的脚本，Web开发，到数据可视化以及机器学习。

六六子大顺1·2024-02-12 09:29

米贸搜|Facebook在购物季使用的Meta广告投放流程

一、账户简化当广告系列开始投放后，每个广告组都会经历一个初始的“机器学习阶段”。简化账户架构可以帮助AI系统更快获得广告主所需的成效。

mimaosoulily·2024-02-12 09:29

【机器学习笔记】基于实例的学习

基于实例的学习文章目录基于实例的学习1基本概念与最近邻方法2K-近邻（KNN）3距离加权KNN4基于实例/记忆的学习器5局部加权回归5多种回归方式对比6懒惰学习与贪婪学习动机：人们通过记忆和行动来推理学习。1基本概念与最近邻方法名词概念参数化设定一个特定的函数形式优点：简单，容易估计和解释可能存在很大的偏置：实际的数据分布可能不遵循假设的分布非参数化：分布或密度的估计是数据驱动的（data-dri

住在天上的云·2024-02-12 09:57

Python概率建模算法和图示

从数据中学习概率模型参数，贝叶斯决策论，信息论，线性代数和优化Python线性判别分析分类模型，逻辑回归，线性回归，广义线性模型Python结构化数据，图像和序列神经网络朴素贝叶斯分类器示例概率学习在机器学习的广阔领域中

亚图跨际·2024-02-12 09:26

【机器学习】支持向量机（SVM）

支持向量机（SVM）1背景信息分类算法回顾决策树样本的属性非数值目标函数是离散的贝叶斯学习样本的属性可以是数值或非数值目标函数是连续的（概率）K-近邻样本是空间（例如欧氏空间）中的点目标函数可以是连续的也可以是离散的支持向量机(SupportVectorMachine)样本是空间（例如欧氏空间）中的点目标函数可以是连续的也可以是离散的背景信息当前版本的支持向量机大部分是由Vapnik和他的同事在A

住在天上的云·2024-02-12 09:56

机器学习案例2：使用 plaidML在 macOS利用GPU进行机器学习

想要在Mac的集成AMDGPU或外部显卡上训练机器学习模型？PlaidML就是您的最佳选择。任何尝试过在macOS上使用TensorFlow训练神经网络的人都知道这个过程有点糟糕。

suoge223·2024-02-12 09:25

机器学习案例1：利用 Python 将语音转换为文本

目录内容简介基本环境配置Python库安装麦克风语音识别音频文件的语音识别长音频源语音识别内容简介语音识别是机器或程序识别口语中的单词和短语并将其转换为文本信息的能力。大多数对于语音识别技术的应用场景就是Siri、Cortana和GoogleAssistant等个人助理，以及其他通过语音交互的虚拟助理。为了理解你的声音，这些虚拟助手需要进行语音识别。语音识别是一个复杂的过程，因此我不会教您如何训练

suoge223·2024-02-12 09:24

神经语言程式(NLP)项目的15 个开源训练数据集

然而，聊天机器人开发的主要瓶颈是获取现实的、面向任务的对话数据来训练这些基于机器学习的系统。我们整理了训练聊天机器人所需的对话数据集，包括问答数据、客户支持数据、对话数据和多语言数据。

suoge223·2024-02-12 09:54

兵棋推演是离散问题，深度学习是连续问题

深度学习是一种机器学习方法，旨在通过大规模数据的训练来学习复杂的模式和关系。它通常应用于连续数据和问题，例如图像识别、语音识别、自然语言处理等。

人机与认知实验室·2024-02-12 09:54

Python标准库全览：功能强大且不可不知的基础组件

无论是在数据处理、网络通信、文件操作还是系统交互等方面，标准库都能为我们提供强大的支持。本文将对Python标准库的重要模块进行概览性总结，帮助开发者了解和充分利用这些宝贵的资源。

极客代码·2024-02-12 08:13

浅谈人工智能之深度学习~

目录前言：深度学习的进展一：深度学习的基本原理和算法二：深度学习的应用实例三：深度学习的挑战和未来发展方向四：深度学习与机器学习的关系五：深度学习与人类的智能交互悟已往之不谏，知来者犹可追创作不易，宝子们

秋风起，再归来～·2024-02-12 08:30

【大厂AI课学习笔记】【1.6 人工智能基础知识】（3）神经网络

深度学习是机器学习中一种基于对数据进行表征学习的算法。观测值(例如一幅草莓照片)可以使用多种方式来表示，如每个像素强度值的向量，或者更抽象地表示成一系列边、特定形状的区域等。

giszz·2024-02-12 08:57

【大厂AI课学习笔记】【1.6 人工智能基础知识】（2）机器学习

目录必须理解的知识点：举一个草莓的例子：机器学习的三个类别：监督学习：无监督学习：强化学习：更多知识背景：机器学习的诞生需求监督学习的关键技术与实现步骤无监督学习的关键技术与实现步骤区别：联系：其他关键知识点

giszz·2024-02-12 08:26

【大厂AI课学习笔记】【1.6 人工智能基础知识】（4）深度学习和机器学习

关于深度学习和机器学习，出来包含关系之外，还有如上总结的知识点。分别从特征处理、学习方法、数据依赖、硬件依赖等4个方面，进行了总结。从特征处理上看：深度学习从数据中习得高级特征，并自行创建新的特征。

giszz·2024-02-12 08:56

Pandas数据清洗大百科：从基础到高级，解锁数据处理的奇妙世界【第71篇—python：数据清洗】

文章目录Pandas数据清洗大百科：从基础到高级，解锁数据处理的奇妙世界1.判断缺失值2.删除空值3.填补空值4.替换元素5.分割元素6.数据类型转换7.去重8.大小写转换9.重命名列10.自定义函数应用

一见已难忘的申公豹·2024-02-12 07:26

快速上手医学影像组学和机器学习（训练营：2023.9.19~9.26）