ML&DL-大数据学习

大数据课程00——[基础篇]大数据学习入门

文章作者邮箱：[email protected]地址：广东惠州▲前置知识一、编程语言至少应该掌握一门编程语言，计算机专业的同学大多学的第一门编程语言是C语言，然后再学Java语言，对于零基础的同学，可直接学习Java语言，至少应该把JavaSE阶段学完！二、计算机基础如果你是计算机相关专业，相信你这些基础都已经会了，可以直接略过本节，往下看。但是如果你是零基础，还是需要先掌握下计算机行业必备知
伟雄·2023-11-19 00:44

Java大数据学习第八天----继承 重写 final 静态static 多态

继承中变量的使用父类成员变量和子类成员变量重名时,使用super.变量名指定父类的成员变量继承中构造方法的使用创建子类对象时会先调用父类的无参构造因为子类的构造函数中默认存在一个super();如果父类没有无参构造的话,我们需要手动指定子类去调用父类的含参构造super(参数);构造方法不可以被继承,原因是构造方法必须是本类类名,不可能在子类中存在一个父类类名的构造方法方法的重写重写:子类对父类的
打字超慢·2023-11-12 03:47

利用Hadoop API使用Java开发程序学习-HDFS上传下载文件

CSDN话题挑战赛第2期参赛话题：大数据学习成长记录参考：利用HadoopAPI使用Java开发程序学习-文件夹操作前言/背景提示：Hadoop学习时，通常大家使用的都是shell命令操作hdfs系统，
pblh123·2023-11-11 11:49

大数据学习：使用Java API操作HDFS

文章目录一、创建Maven项目二、添加依赖三、创建日志属性文件四、在HDFS上创建文件五、写入HDFS文件1、将数据直接写入HDFS文件2、将本地文件写入HDFS文件六、读取HDFS文件1、读取HDFS文件直接在控制台显示2、读取HDFS文件，保存为本地文件一、创建Maven项目二、添加依赖在pom.xml文件里添加hadoop和junit依赖org.apache.hadoophadoop-cli
X_Serendipity·2023-11-11 11:15

大数据学习入门必备规划

大数据方向的工作目前分为三个主要方向:01.大数据工程师02.数据分析师03.大数据科学家04.其他（数据挖掘本质算是机器学习，不过和数据相关，也可以理解为大数据的一个方向吧）一、大数据工程师的技能要求二、大数据学习路径三
金罗老师·2023-11-10 18:54

容灾恢复 | 记一次K8S集群中etcd数据快照的备份恢复实践

涉及企业运维、网络安全、应用开发、物联网、人工智能、大数据学习知识“花开堪折直须折，莫待无花空折枝。”
全栈工程师修炼指南·2023-11-10 12:28

大数据学习计划（不断改善）(小白入门指南)

大数据时代的出现简单的讲是海量数据同完美计算能力结合的结果，确切的说是移动互联网、物联网产生了海量的数据，大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。当我们最初谈大数据的时候，谈的最多的可能是用户行为分析，即通过各种用户行为，包括浏览记录，消费记录，交往和购物娱乐，行动轨迹等各种用户行为产生的数据。由于这些数据本身符合海量，异构的特征，同时通过分析这些数据之间的关联性容易匹配
qq_43958076·2023-11-09 11:52

大数据学习之错误——FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException:

在大数据学习过程中会遇到各种各样得错误，儿我们就需要解决这些错误，所以我就遇到一个错误，并记录解决得方法。
人生无重来·2023-11-09 10:11

HBASE2.5.3集群安装-大数据学习系列（五）

01-安装HBASE2.5.3集群版本前置：集群规划机器信息Hostnamek8s-masterk8s-node1k8s-node2外网IP106.15.186.55139.196.15.2847.101.63.122内网IP172.25.73.65172.25.73.64172.25.73.66HBASE数据库HBASEYYYPS：这是基于之前hadoop和hive安装好的基础上的1.各机器ho
zhenwudi·2023-11-09 08:47

hive中复制（备份）一张表的两种方式

createtableifnotexistsalikebinsertintoaselect*fromb有关大数据学习资源，请关注微信公众号“码农书斋”。回复“大
宇文智·2023-11-08 13:03

大数据学习之一文学会Spark【Spark知识点总结】

文章目录什么是SparkSpark的特点SparkvsHadoopSpark+HadoopSpark集群安装部署Spark集群安装部署StandaloneONYARNSpark的工作原理什么是RDDRDD的特点Spark架构相关进程Spark架构原理Spark实战：单词统计Scala代码开发java代码开发任务提交Transformation与Action开发创建RDD使用集合创建RDD使用本地文
小崔的技术博客·2023-11-08 06:37

大数据学习之Spark性能优化

文章目录Spark三种任务提交模式宽依赖和窄依赖StageSparkJob的三种提交模式Shuffle机制分析未优化的HashBasedShuffle优化后的HashBasedShuffleSort-BasedShuffleSpark之checkpointcheckpoint概述checkpoint与持久化的区别checkPoint的使用checkpoint源码分析Spark程序性能优化性能优化分
小崔的技术博客·2023-11-08 05:02

【基础篇】大数据学习笔记（4）相关名词解释

RAID：RedundantArraysofIndependentDrives独立冗余磁盘阵列，独立磁盘构成的具有冗余功能的阵列。GFS：GoogleFileSystemGoogle文件系统HDFS：HadoopDsitributedFileSystemHadoop分布式文件系统Zookeeper：分布式应用程序协调服务，是Hadoop和Hbase的重要组件Hadoop：Apache基金会所开发的
风也醉·2023-11-06 02:54

大数据学习方法：高效学习大数据采集、分析与存储！

大数据学习方法：高效学习大数据采集、分析与存储！随着信息时代的到来，大数据已经成为了各个领域中不可或缺的重要资源。对于想要深入学习大数据采集、分析与存储的人来说，掌握有效的学习方法至关重要。
数据科学智慧·2023-11-06 00:07

入行大数据，需要学习哪些基础知识？

1、学习大数据首先要学习Java基础怎样进行大数据学习的快速入门?学大数据课程之前要先学习一种计算机编程语言。Java是大数据学习需要的编程语言基础，因为大数据的开发基于常用的高级语言。
人工智能爱好者·2023-11-02 15:48

大数据(21)-skew-GroupBy

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦Skew-GroupBy优化是一种针对大数据处理的优化技术，它通过将数据分散到不同的
viperrrrrrr·2023-11-02 07:14

大数据学习——Java项目实战-吃货联盟订餐系统

吃货联盟订餐系统项目需求项目环境准备项目覆盖技能点阶段划分难点分析使用数组对象保存订单信息访问订单信息删除订单信息计算订单的总金额项目实现思路数据初始化实现菜单切换实现查看餐袋实现我要订餐实现签收订单实现删除订单实现我要点赞代码展示项目需求现今已进入网络时代，人们的日常生活已离不开网络，如网上购物、看新闻、交友等。“只要点点手指，就能送餐上门”，网上订餐越来越受到都是年轻人的青睐。先要求开发一个网
蜂蜜柚子加苦茶·2023-10-30 10:57

大数据学习(18)-任务并行度优化

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦对于一个分布式的计算任务而言，设置一个合适的并行度十分重要。
viperrrrrrr·2023-10-30 06:52

量分享| 你真的知道什么是“大数据”吗？

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：
金豆数据工程师·2023-10-28 09:05

大数据处理技术如何学习?

关键词：数据分析大数据学习群：716581014首先我们要学习Python语言和Linux操作系统，这两个是学习大数据的基础，学习的顺序不分前后。
大数据05·2023-10-26 18:35

大数据学习-Java Day11

大数据学习-JavaDay11String类的概述和使用1String类的概念（重点）java.lang.String类用于描述字符串，Java程序中所有的字符串字面值都可以使用该类的对象加以描述，如：
靈龗·2023-10-26 06:15

2021-09-24——大数据学习日志——Python基础——容器类型（附练习题）

学习目标：能够说出常用Python容器类型的名字：列表、元组、字典、字符串、集合掌握容器类型的基本操作：定义和使用、增删改查、遍历等01_列表学习目标：知道定义列表的基本格式知道列表的常用操作：增删改查能够使用for循环实现对列表中所有元素的遍历1.1列表的定义list（列表）是Python中使用最频繁的数据类型专门用于存储一组数据，存储的每个数据称为元素列表用[]定义，元素之间使用,分隔列表的索
王络不稳定·2023-10-25 01:15

2021年 全网最细大数据学习笔记（二）：Hadoop 伪分布式安装

文章目录一、Linux操作系统的安装二、在Ubuntu20.04.2.0中进行Hadoop伪分布式安装1、Ubuntu20.04.2.0安装jdk2、配置SSH无密码登录3、Hadoop的下载与安装4、Hadoop环境配置5、启动与关闭Hadoop6、查看Hadoop的基本信息6.1、查看HDFSWeb界面6.2、查看YARNWeb界面三、在Centos7中进行Hadoop伪分布式安装一、Linu
Amo Xiang·2023-10-24 16:17

华为云hadoop伪分布式安装学习笔记（一）

所属专栏：【大数据学习笔记（华为云）】作  者：我是夜阑的狗个人简介：一个正在努力学技术的码仔，专注基础和实战分享，欢迎咨询！
我是夜阑的狗·2023-10-24 16:07

大数据学习04 Scala的学习

大数据学习04Scala的学习在Spark学习之前，先进行对Scala的学习提示：已经有Scala基础的同学可以先跳过这部分文章目录大数据学习04Scala的学习Scala是什么一、Scala入门1.为什么学习
燕大扎克伯格·2023-10-24 01:12

大数据学习-Hadoop

大数据学习-Hadoop1.大数据概念现状分析：实时计算原因分析：离线计算预测分析：机器学习（对未来趋势进行预测）2.分布式与集群分布式：多台机器，不同组件分布式存储，分布式集群，多台机器集群：多台机器
小七fighting·2023-10-24 01:30

在这里，你不会的大数据之Linux系统安装JDK都可以学到！

在这里我还是要推荐下我自己建的大数据学习交流群：53221814
大数据学习01·2023-10-23 10:16

视频教程-大数据硬实战之kafka视频教程-大数据

¥69.00立即订阅扫码下载「CSDN程序员学院APP」，1000+技术好课免费看APP订阅课程，领取优惠，最少立减5元↓↓↓订阅后：请点击此处观看视频课程视频教程-大数据硬实战之kafka视频教程-大数据学习有效期
学院导师-肖滨·2023-10-23 07:23

大数据学习(17)-mapreduce task详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦MapReduceLocalTask和提交到YARN上运行的MapReduce
viperrrrrrr·2023-10-22 00:54

5种必知的大数据处理框架技术

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：716加上【五8一】最后014，即可免费领取一整套系统的大数据学习教程本文将介绍大
大数据05·2023-10-21 16:05

史上最完整的大数据学习（四） Zookeeper 完结篇 （API操作， shell命令 ，ZooKeeperACL 以及 分布式应用）

Zookeeper的认识以及节点详情ZooKeeper的安装使用六、JavaAPI操作6.1原生API1）Maven依赖org.apache.zookeeperzookeeper3.4.6pom2）相关操作（1）获得客户端对象privateZooKeeperzooKeeper;@BeforepublicvoidgetCline()throwsException{zooKeeper=newZooKe
热忱 ㅤ ㅤ·2023-10-21 13:17

大数据学习15之spark streaming入门

文章目录一、概述二、应用场景三、集成Spark生态系统的使用四、发展史五、从词频统计功能着手入门1.spark-submit执行2.spark-shell执行（测试时使用）六、工作原理一、概述spark官网Documentation->LatestRelease->ProgrammingGuides->SparkStreamingSpark流是核心SparkAPI的扩展，可实现对实时数据流的可缩放
米泽玄師·2023-10-21 11:30

大数据学习hadoop3.1.3——Flume相关数据流监控Ganglia的安装与部署--测试

1、Ganglia的安装与部署1、集群里都需要安装gangliasudoyuminstall-yepel-release2、在101安装web,meta和monitorsudoyum-yinstallganglia-gmetadganglia-webganglia-gmond3、在102、103安装monitorsudoyum-yinstallganglia-gmondGanglia由gmond、
Carson_xcb·2023-10-21 07:40

大数据学习路线+Java转行大数据最新最全的必备第一手资料

系统每天关注上限100人1:为了防止关注人数上限，私信收不到，2:私信发网盘链接失效，)3:为了加人气，需要以下，Python，大数据,架构等资料的朋友！免费送给前100评论留言者。私信小编，小编微信，发给你网盘链接，手慢无！学习路线：（一）Linux理论（Linux基础Linux-shell编程高并发:lvs负载均衡高可用&反向代理）（二）Hadoop理论（hadoop-hdfs理论hadoop
大数据客栈i·2023-10-20 19:16

大数据学习笔记-MapReduce（二） 深度

深度了解MapReduce运行流程，通过案例全面了解MR运行过程、涉及的组件、设计的思想。对MapReducePartition、MapreduceCombiner、MapReduce编程技巧掌握，对自定义对象、序列化、排序、分区、分组的实现熟练掌握，掌握MapReduce并行度机制、工作流程和shuffle的机制。1、MapreducePartition、Combiner输出结果文件只有一个。默
天码村·2023-10-20 18:11

大数据学习(15)-数据倾斜

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博>主哦数据倾斜概述数据倾斜问题，通常是指参与计算的数据分布不均，即某个
viperrrrrrr·2023-10-20 18:10

大数据学习（五）Mapreduce详解

一、什么是mapreduce简单明了来讲，Mapreduce就是一个分布式运算程序的编程框架二、mapreduce组成MapReduce包含四个组成部分，分别为Client，JobTracker，TaskTracker，Task：1.Client：每一个Job都会在用户端通过Client类将应用程序以及参数配置Configuration打包成Jar文件存储在HDFS，并把路径提交到JobTrack
阿齐（努力打工版）·2023-10-20 18:40

大数据学习(13)-join优化详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博>主哦MapJoinMapJoin有两种触发方式，一种是用户在SQL
viperrrrrrr·2023-10-20 18:40

大数据学习(14)-Map Join和Common Join

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博>主哦什么是MapJoin和CommonJoin。
viperrrrrrr·2023-10-20 18:40

【大数据学习】hadoop-mapReduce阶段

mapperReduce阶段大概流程图MapReduce编程规范用户编写的程序分成三个部分：Mapper、Reducer和Driver。（代码上传到git）hadoop序列化java的序列化serializable是一个重量级的序列化框架，序列化后会附带很多额外的信息，不利于高效的网络传输。hadoop序列化Writable1紧凑2快速3可扩展4互操作编写bean时，实现Writable接口，重写
重生之我在异世界打工·2023-10-20 18:10

大数据学习——MapReduce

目录1MapReduce概述1.1MapReduce定义1.2MapReduce优缺点1.3MapReduce核心思想1.4WordCount1.4.1计算流程1.4.2环境准备创建maven工程，添加如下依赖配置log4j.properties1.4.3编写程序（1）Mapper类（2）Reducer类（3）Driver1.4.4测试本地测试集群测试2Hadoop序列化2.1自定义bean对象实
daybreak98·2023-10-20 18:39

大数据学习(16)-mapreduce详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦在MapReduce中，Map阶段和Reduce阶段分别执行以下任务
viperrrrrrr·2023-10-20 18:00

02-初识大数据-我的大数据工程师成长之路：虚拟机环境搭建

首先声明由于学习过程是根据阿里云大学的大数据学习路线学习，所以本系列的文章也会引用来自该路线课程中的一些资料，如侵权请联系我删除，谢谢。
风华是一指流砂·2023-10-20 17:58

01-初识大数据-我的大数据工程师成长之路：Hadoop介绍

首先声明由于学习过程是根据阿里云大学的大数据学习路线学习，所以本系列的文章也会引用来自该路线课程中的一些资料，如侵权请联系我删除，谢谢。
风华是一指流砂·2023-10-20 17:28

2021-11-03大数据学习日志——数据埋点+网络爬虫——requests 模块

requests是用python语言编写的一个开源的HTTP库，可以通过requests库编写python代码发送网络请求，其简单易用，是编写爬虫程序时必知必会的一个模块。requests模块的作用发送网络请求，获取响应数据。中文文档：Requests:让HTTP服务人类—Requests2.18.1文档requests模块的安装安装命令如下：pipinstallrequests或者pipinst
王络不稳定·2023-10-20 04:24

学习大数据的正确方法和常见误区

大数据学习：正确方法与常见误区大数据已成为当今信息时代的重要资源，对于数据科学家和分析师而言，掌握大数据技能变得至关重要。
抱紧大佬大腿不松开·2023-10-19 02:57

为什么学习大数据，大数据科学家写给大数据学习者的坚定理由

在为你讲为什么要学习大数据前给分享一个大数据资料分享群593188212每天分享大数据学习资料和学习方法，让我们在2018年一起成长，为
阿福大数据·2023-10-18 13:57

用户之声 | 初探国产数据库之光——南大通用GBase

为加快个性化应用向GBase迁移，2021年6月上旬，山东移动省公司组织大数据学习，南大通用培训讲师进行了量身定做的GBase8aGDCA培训，开启了第一次GBase8a线下学习之旅；随后在6月下旬，参加了
GBASE数据库·2023-10-18 08:54

python面试知识图谱_全网首发！零基础大数据方向学习面试知识图谱，包含教程+面试题...

大纲本系列主题是大数据开发面试指南，旨在为大家提供一个大数据学习的基本路线，完善数据开发的技术栈，以及我们面试一个大数据开发岗位的时候，哪些东西是重点考察的，这些公司更希望面试者具备哪些技能。
weixin_39655689·2023-10-18 01:51

年底重磅福利Java，Python，web，大数据学习资料免费发送！想学习IT编程的同学赶快领取资料哦！

小编为大家辛苦整理来的学习资料，电子书，高清视频，等等资料即刻免费分享，不需要你们再为资料少而犯愁了。想要资料的同学赶快私信小编领取资料！图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App
编程小语言·2023-10-17 12:27
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他