ML&DL-大数据学习

2018-11-03

JAVA、Python、web前端大数据学习资料练手项目。领取方式；转
巴斯光年暴暴龙·2023-03-15 21:08

大数据学习之Hadoop——05MapReduce概念(感觉没写什么, 后面再补充)

欢迎关注我的CSDN:https://blog.csdn.net/bingque6535一.基本概念1.为什么需要MapReduce海量数据在单机上处理因为硬件资源限制，无法胜任而一旦将单机版程序扩展到集群来分布式运行，将极大增加程序的复杂度和开发难度MapReduce把大量分布式程序涉及到的内容都封装进了该运算框架引入MapReduce框架后，开发人员可以将绝大部分工作集中在业务逻辑的开发上，而
Jiang锋时刻·2023-03-15 17:37

大数据学习路线+脑图，附全套自学资料

大数据自学路线+脑图+学习资史上最全面的料，快拿走！跟着柠檬走，分分钟拿下大数据！小伙伴们加油吧！学习路线：（一）Linux理论（Linux基础Linux-shell编程高并发:lvs负载均衡高可用&反向代理）（二）Hadoop理论（hadoop-hdfs理论hadoop-hdfs集群搭建hadoop-hdfs2.x&apihadoop-MR理论hadoop-MR开发&源码分析hadoop-MR源
舟晚梦星辰98·2023-03-14 07:49

大数据学习心得2020-09-10--Zookeeper基本学习与模拟服务器动态上下线监听API实现

ZooKeeperZookeeper简介概述zookeeper是一个开源的分布式的，为分布式应用提供协调服务地Aoache项目。zookeeper是基于观察者模式的分布式服务管理框架。它负责存储和管理大家都关心的数据，然后接受观察者的注册。一旦这些数据发生变化，zk就负责通知所有已经在zk上注册的那些观察者做出的响应的反应。zookeeper=文件系统+通知系统特点zk是由一个leader和多个f
airleaya·2023-03-13 16:20

大数据学习笔记-2020-09-12--MR常用组件与MR数据处理流程

MR中常用组件的介绍Mapper：map阶段核心的处理逻辑Reducer：reduce阶段核心的处理逻辑InputFormat：输入格式MR程序必须指定一个输入目录和一个输出目录InputFormat代表输入目录中的文件格式–如果是普通文件，可以用FileInputFormat–如果是SequenceFile（hadoop提供的一种序列化文件格式），可以使用SequenceFileInputFor
airleaya·2023-03-13 16:20

零基础转行IT，Java、Python、大数据学习哪个比较好？

很多想转行IT的人，会犹豫选择哪门编程语言学习，哪个方向未来发展比较好，在过往工作中，很多人问过我，Java、Python、大数据学哪个？谁的发展前景比较好？今天我们就让合肥北大青鸟一元校区的老师来给我们说下。大数据是一种发展方向，而Java、Python则是编程语言，三者并能直接进行对比。虽然Java、Python是编程语言，大数据是一种技术体系的总称，是发展方向，不过在未来发展和应用上，三者是
冬天的落叶1912·2023-03-12 02:08

大数据学习之Hadoop——15Yarn资源调度

声明:笔记整理于尚硅谷教学课件,本来想投转载的,但是没法填写链接,使用投了原创,非本意.侵权修改.Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行于操作系统之上的应用程序。一.Yarn基本架构YARN主要由ResourceManager、NodeManager、ApplicationMaster和Contain
Jiang锋时刻·2023-03-09 10:30

hadoop03-MapReduce【尚硅谷】

大数据学习笔记MapReduce一、MapReduce概述MapReduce是一个分布式运算程序的编程框架，是基于Hadoop的数据分析计算的核心框架。
Blueming_first·2023-03-09 10:55

hadoop02-HDFS【尚硅谷】

HDFS大数据学习笔记一、HDFS产出背景及定义HDFS产生背景随着数据量越来越大，在一个操作系统存不下所有的数据，那么就分配到更多的操作系统管理的磁盘中，但是不方便管理和维护，迫切需要一种系统来管理多台机器上的文件
Blueming_first·2023-03-09 10:55

hadoop-Yarn资源调度器【尚硅谷】

大数据学习笔记Yarn资源调度器Yarn是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行与操作系统之上的应用程序。
Blueming_first·2023-03-09 10:21

全栈之路-前端篇 | 第一讲.基础前置知识【浏览器内核与网络知识】学习笔记

涉及企业运维、网络安全、应用开发、物联网、人工智能、大数据学习知识“花开堪折直须折，莫待无花空折枝。”
全栈工程师修炼指南·2023-02-28 14:26

大神之路-起始篇 | 第18章.计算机科学导论之【人工智能】学习笔记...

涉及企业运维、网络安全、应用开发、物联网、人工智能、大数据学习知识“花开堪折直须折，莫待无花空折枝。”
全栈工程师修炼指南·2023-02-26 05:27

【java EE与大数据学习路线】

javaEE与大数据学习路线JavaEE第一阶段：JAVASE第二阶段：Javaweb第三阶段：JavaEE框架第四阶段：JavaEE高级大数据技术一二阶段：JavaSE与JavaEE核心第三阶段：Hadoop
程序猿张同学·2023-02-23 14:12

大数据学习之(十二)HBase快速上手

HBase快速上手前言Hbase是Hadoop数据库，一种分布式、可扩展的大数据存储。关键词：实时nosql半结构化，非结构化线性可扩展高效写入，高可用自动故障转移读取灵活性差无事务处理一、完全分布式安装基于之前node1,node2,node3,node4上的hadoop，hive环境继续搭建hbase。1.解压hbase包#node1tar-zxvfhbase-2.0.5-bin.tar.gz
往事如雷灌顶·2023-02-17 14:21

零基础学习大数据？科多大数据告诉你，没问题

很多零基础想学习大数据的朋友，一直有很多担心，大数据学习并不是高深莫测的，虽然它并没有多简单，但是通过努力，零基础的朋友也是完全可以掌握大数据的。
kuntoria·2023-02-07 00:54

数据分析需要学习哪些课程?

首先你需要看下这张图，这是一张数据分析师能力体系图：1、数学知识在这里小编给大家推荐编程学习圈，有免费课程分享，开发工具大数据学习qq群：458345782python学习qq群：250933691数学知识是数据分析师的基础知识
yoku酱·2023-02-06 19:04

IT技术人员转行大数据应该考虑哪些问题

分享之前我还是要推荐下我自己创建的大数据学习交流Qun531629188无论是大牛还是想转行想学习的大学生小编我都挺欢迎，
Alukar·2023-02-06 19:58

(二十二)大数据学习之流式计算

大数据学习之流式计算一.1.计算分类：批量计算、实时计算、离线计算、流式计算2.共同点：数据源-->采集数据-->taskworker-->taskworker-->sink输出3.批量计算和流式计算的区别
Movle·2023-02-06 18:22

大数据开发：HDFS Namenode元数据管理

HDFS作为分布式文件系统的代表性产品，在大数据学习当中的重要性是不言而喻的，基于Hadoop基础架构，HDFS更是得到了广泛的认可，在大规模离线数据处理上，提供稳固的底层支持。
成都加米谷大数据·2023-02-06 04:13

Java Spark 简单示例（九） CheckPoint 检查点使用

大数据学习交流微信群Spark采用Lineage（书里叫血统）和CheckPoint（检查点）两种方式来解决分布式数据集中的容错问题。
憨人Zoe·2023-02-06 02:51

大数据学习系列：Hadoop3.0苦命学习（一）

传送门：大数据学习系列：Hadoop3.0苦命学习（一）大数据学习系列：Hadoop3.0苦命学习（二）大数据学习系列：Hadoop3.0苦命学习（三）大数据学习系列：Hadoop3.0苦命学习（四）大数据学习系列
咖喱东东·2023-02-04 18:15

大数据学习系列：Hadoop3.0苦命学习（五）

传送门：大数据学习系列：Hadoop3.0苦命学习（一）大数据学习系列：Hadoop3.0苦命学习（二）大数据学习系列：Hadoop3.0苦命学习（三）大数据学习系列：Hadoop3.0苦命学习（四）大数据学习系列
咖喱东东·2023-02-04 18:15

大数据学习系列：Hadoop3.0苦命学习（七）

传送门：大数据学习系列：Hadoop3.0苦命学习（一）大数据学习系列：Hadoop3.0苦命学习（二）大数据学习系列：Hadoop3.0苦命学习（三）大数据学习系列：Hadoop3.0苦命学习（四）大数据学习系列
咖喱东东·2023-02-04 18:15

大数据学习路线

一、大数据处理流程上图是一个简化的大数据处理流程图，大数据处理的主要流程包括数据收集、数据存储、数据处理、数据应用等主要环节。下面我们逐一对各个环节所需要的技术栈进行讲解：1.1数据收集大数据处理的第一步是数据的收集。现在的中大型项目通常采用微服务架构进行分布式部署，所以数据的采集需要在多台服务器上进行，且采集过程不能影响正常业务的开展。基于这种需求，就衍生了多种日志收集工具，如Flume、Log
Cynicism_Kevin·2023-02-04 17:49

从零开始系统规划大数据学习之路

大数据的领域非常广泛，往往使想要开始学习大数据及相关技术的人望而生畏。大数据技术的种类众多，这同样使得初学者难以选择从何处下手。我写此文是给大家学习大数据提供一个思路以及在大数据产业领域找到工作指路明灯，提供帮助。1.如何开始？2.在大数据领域有哪些职位需求？3.如何成为一名大数据工程师？你需要了解的系统和结构学习去设计解决方案并且学习相关技术对大数据感兴趣的，想转行大数据的，想学习项目经验的，欢
首席数据师·2023-02-04 17:19

大数据学习（ip与ssh具体配置）

Ubuntu17.04系统环境下的具体操作1.1防火墙的关闭查询资料后得知Ubuntu安装后好像并不带防火墙...?(然而后面有个安全模式)1.2修改静态ipUbuntu修改ip的文件是在该目录的interfaces文件下root打开后一般不是旧版本的Ubuntu会有两个auto，一个lo，一个ens33（有些系统并非ens33，但只是名称变化而已）。我们只编辑ens33如下Master（按自己的
严武小虎·2023-02-03 20:28

块元素 / 行内元素

块元素(blockelement)*address-地址*blockquote-块引用*center-举中对齐块*dir-目录列表*div-常用块级容易，也是csslayout的主要标签*dl-定义列表
情怀已售罄丶·2023-02-03 16:00

大数据入门级学习方案

数据分析师3.大数据科学家4.其他（数据挖掘本质算是机器学习，不过和数据相关，也可以理解为大数据的一个方向吧）由于本人曾是大数据工程师的角色，我就这个方向做一些介绍本回答目录:一、大数据工程师的技能要求二、大数据学习路径三
程序员搬运工·2023-02-02 14:27

2021-11-07大数据学习日志——MySQL进阶——窗口函数

01_窗口函数概述学习目标了解窗口函数的优点1.1窗口函数接下来的课程中我们来介绍窗口函数windowfunctions.MYSQL8.0之后，加入了窗口函数功能，简化了数据分析工作中查询语句的书写在没有窗口函数之前，我们需要通过定义临时变量和大量的子查询才能完成的工作，使用窗口函数实现起来更加简洁高效窗口函数是数据分析工作中必须掌握的工具，在SQL笔试中也是高频考点为什么说窗口函数可以使复杂的查
成长的小狮子·2023-02-02 08:12

大数据学习之Hadoop——11MapReduce相关练习02(共同好友)

欢迎关注我的CSDN:https://blog.csdn.net/bingque65351.问题:求数据集中任意两人之间的共同好友2.数据集A:B,C,D,F,E,OB:A,C,E,KC:F,A,D,ID:A,E,F,LE:B,C,D,M,LF:A,B,C,D,E,O,MG:A,C,D,E,FH:A,C,D,E,OI:A,OJ:B,OK:A,C,DL:D,E,FM:E,F,GO:A,H,I,J,K
Jiang锋时刻·2023-01-31 13:24

大数据之Hadoop集群搭建（4个节点）

大数据必备–搭建Hadoop集群（4个节点）初学大数据肯定第一步先搭建hadoop集群，虽然不知道怎么用，但是先搭建集群是你大数据学习之旅的第一步，操作步骤有以下这几步，用的centos系统对四台虚拟机进网络和静态
普通网友·2023-01-30 15:46

H5的东东

+tab：H5基本格式3、table>tr*5>td*2>{item$}：5行2列表格4、select>option*5：可选列表二、其他1、定义列表：dl->dt->dd，dt通常放图片，做图文混排2
贾建西·2023-01-28 17:32

大数据学习难度

那么大数据作为炙热的项目，大数据学习难度大吗？大数据应该怎么学习呢？下面科多大数据老师就带着大家一起来看一看。
kuntoria·2023-01-26 13:42

大数据处理的关键技术及应用

大数据采集技术在这里我还是要推荐下我自己建的大数据学习交流qq裙：957205962，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相
数据工程师大牛·2023-01-22 19:37

2023版大数据学习路线图（适合自学）

接下来千锋小编就给大家分享一份完整的大数据学习路线，助力大家快速入门！第一阶段为JAVASE+MYSQL+JDBC，主要学习一些Java语言的概念，如字符、流程
千锋IT教育·2023-01-18 09:00

Java全栈大数据学习笔记NO.12（jQuery-1）

jQuery-1一、jQuery二、jq的使用三、jq的基本语法四、jq的选择器五、jq的事件六、jq的效果七、jq的动画八、jq的回调九、jq方法的链接十、jq操作内容和属性一、jQueryjQuery简介jQuery是由美国人John创建于2006年，它是目前最流行的js程序库，它对js的对象和函数进行封装，设计思想是writeless,domore。jq能干什么访问和操作DOM对象控制页面样
芒果不茫QAQ·2023-01-16 08:45

初识大数据（一）什么是大数据

此篇文章主要介绍什么是大数据、大数据有什么用、大数据学习很难吗、大数据发展的趋势等几个观点来阐述，如果你是大数据行业的小白，建议看一下，如果您是大神，请略过，本人文笔不是很好，如有描述不清楚的地方，欢迎大家留言批评指正
数据法师·2023-01-14 22:14

SpringMVC学习笔记

一些基本概念及要求ssm：spring+springMVCMVC三层架构+mybatisJavaSE：java基础学习JavaWeb：java网站设计框架：研究官方文档，锻炼自学能力，锻炼笔记能力，锻炼项目能力大数据学习基于
风叶z·2023-01-14 22:43

大数据学习笔记（一）：Hadoop笔记2

文章目录大数据学习笔记（1）：Hadoop笔记二一、HDFS1.简介2.优缺点2.1优点2.2缺点二、HDFS架构1.HDFS架构2.HDFS参数等3.HDFS读写数据三、HDFS实操总结大数据学习笔记
WeXn·2023-01-14 08:38

一、大数据学习之路——探索性数据分析（EDA）

定义：对已有的数据（特别是调查或观察得来的原始数据）在尽量少的先验假定下进行探索，通过作图、制表、方程拟合、计算特征量等手段探索数据的结构和规律的一种数据分析方法。数据类型：https://blog.csdn.net/Shingle_/article/details/80035405数据类型是统计学中的重要概念，我们需要对它有正确的理解方能利用正确的数据类型来获得结论。这篇文章将介绍几种用于机器学
十二呀呀呀·2023-01-14 06:52

大数据学习路线图（2023版自学路线）

接下来小编就给大家分享一份完整的大数据学习路线，助力大家快速入门！第一阶段为JAVASE+MYSQL+JDBC，主要学习一些Java语言的概念，如字符、流程控制
·2023-01-13 17:28

大数据学习路线图（2023版自学路线）

接下来小编就给大家分享一份完整的大数据学习路线，助力大家快速入门！第一阶段为JAVASE+MYSQL+JDBC，主要学习一些Java语言的概念，如字符、流程控制
·2023-01-13 16:57

大数据开发：Hadoop入门学习路线

以Hadoop来说，这是大数据学习当中必不可少的部分。今天大数据学习分享，我们来聊聊Hadoop学习路线。
加米谷大数据张老师·2023-01-12 21:05

大数据学习笔记之Spark：Spark基础解析

第1章Spark概述spark的产生背景spark是如何产生的，这要先送大数据说起，大数据是如何产生的？Google就是处理大数据的，网页和网页之间有很多的关联关系，为了处理排序啊这些算法，所以Google就发明了，Google就发布了三个论文，基于这三个论文的开源，实现了Hadoop、Hdfs、MapReduce、Hbase等，但是感觉好像每次MapReduce只能处理一次数据，而且开始跑map
BAO7988·2023-01-07 14:32

2021-11-07大数据学习日志——Pandas——pandas综合案例（上）

案例1：零售会员数据分析学习目标能够使用pandas、seaborn进行数据分析和可视化1.零售会员数据分析案例1.1案例业务介绍案例背景：1）某女鞋连锁零售企业，当前业务以线下门店为主，线上销售为辅2）通过对会员的注册数据以及消费数据的分析，监控会员运营情况，为后续会员运营提供决策依据3）会员等级说明白银：注册(0)黄金：下单(1~3888)铂金：3888~6888钻石：6888以上分析需求：1
成长的小狮子·2023-01-04 13:21

My Plan——大数据学习之路

大数据学习之路本文简介相关书籍计算机基础数据结构与算法计算机组成原理操作系统计算机网络数据库JAVAPythonLinux大数据其他本科专业课程安排学习计划计划总结本文简介本人为某985软件工程专业的一名在校本科生
zcharlotteyq·2023-01-02 08:28

大数据之Hive详解

,大家可关注weixin公众号：大数据技术工程师有更多大数据精彩内容等你来看，还有大数据学习资料免费领取哦，回复关键字即可。简单来说，Hive就是在Hadoop上架了一层SQL接口，可以将SQL翻译成
qingdsj·2022-12-29 13:00

【DL-安装遇错】tensorflow突然检测不到GPU，显示False的问题

tensorflow突然检测不到GPU，显示False的问题问题描述：之前装好后输入以下命令，可以正常显示以下内容；但是之后重新安装了TensorFlow-GPU后测试，检测不到GPU，显示false的问题。#检测tensorflow能使用的设备情况fromtensorflow.python.clientimportdevice_lib#os.environ["CUDA_VISIBLE_DEVIC
★半岛铁盒·2022-12-28 16:57

关于大数据相关的问答汇总，持续更新中~

答：1，Java编程技术Java编程技术是大数据学习的基础，Java是一种强类型语言，拥有极高的跨平台能力，可以编写桌面应用程序、Web应用程序、分布式系统和嵌入式系统应用程序等，是大数据工程师最喜欢的编程工具
weixin_33721344·2022-12-24 16:16

关于大数据相关的问答汇总，每天持续更新中哦~

答：1，Java编程技术Java编程技术是大数据学习的基础，Java是一种强类型语言，拥有极高的跨平台能力，可以编写桌面应用程序、Web应用程序、分布式系统和嵌入式系统应用程序等，是大数据工程师最喜欢的编程工具
chuanmao9486·2022-12-24 16:43
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他