ML&DL-大数据学习第3页

大数据开发(19)-hash table详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦在Map-side聚合中，每个Map任务（mapper）都会维护一个独立的哈希表

viperrrrrrr·2023-11-20 07:36

大数据学习（22）-spark

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦Spark是一个基于内存计算的大数据并行计算框架，具有快速、易用

viperrrrrrr·2023-11-20 07:23

读书笔记-《无人驾驶》7-20200929

相机、激光雷达、无线电测距雷达、超声波传感器、GPS提供稳定的数据流，线控技术，取代人类的手和脚，深度学习将大数据学习，提升检测能力。SLAM即时定位于地图构建技术，提高机器人自主地图定位的

关七666·2023-11-20 02:04

Hadoop大数据学习线路图-单篇

入门知识对于我们新手入门学习hadoop的朋友来说，首先了解一下云计算和云计算技术是有必要的。下面先是介绍云计算和云计算技术的：云计算，是一种基于互联网的计算方式，通过这种方式，共享的软硬件资源和信息可以按需求提供给计算机和其他设备，主要是基于互联网的相关服务地增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云是网络、互联网的一种比喻说法。过去在图中往往用云来表示电信

doers123·2023-11-19 10:06

大数据课程00——[基础篇]大数据学习入门

文章作者邮箱：[email protected]地址：广东惠州▲前置知识一、编程语言至少应该掌握一门编程语言，计算机专业的同学大多学的第一门编程语言是C语言，然后再学Java语言，对于零基础的同学，可直接学习Java语言，至少应该把JavaSE阶段学完！二、计算机基础如果你是计算机相关专业，相信你这些基础都已经会了，可以直接略过本节，往下看。但是如果你是零基础，还是需要先掌握下计算机行业必备知

伟雄·2023-11-19 00:44

Java大数据学习第八天----继承重写 final 静态static 多态

继承中变量的使用父类成员变量和子类成员变量重名时,使用super.变量名指定父类的成员变量继承中构造方法的使用创建子类对象时会先调用父类的无参构造因为子类的构造函数中默认存在一个super();如果父类没有无参构造的话,我们需要手动指定子类去调用父类的含参构造super(参数);构造方法不可以被继承,原因是构造方法必须是本类类名,不可能在子类中存在一个父类类名的构造方法方法的重写重写:子类对父类的

打字超慢·2023-11-12 03:47

利用Hadoop API使用Java开发程序学习-HDFS上传下载文件

CSDN话题挑战赛第2期参赛话题：大数据学习成长记录参考：利用HadoopAPI使用Java开发程序学习-文件夹操作前言/背景提示：Hadoop学习时，通常大家使用的都是shell命令操作hdfs系统，

pblh123·2023-11-11 11:49

大数据学习：使用Java API操作HDFS

文章目录一、创建Maven项目二、添加依赖三、创建日志属性文件四、在HDFS上创建文件五、写入HDFS文件1、将数据直接写入HDFS文件2、将本地文件写入HDFS文件六、读取HDFS文件1、读取HDFS文件直接在控制台显示2、读取HDFS文件，保存为本地文件一、创建Maven项目二、添加依赖在pom.xml文件里添加hadoop和junit依赖org.apache.hadoophadoop-cli

X_Serendipity·2023-11-11 11:15

大数据学习入门必备规划

大数据方向的工作目前分为三个主要方向:01.大数据工程师02.数据分析师03.大数据科学家04.其他（数据挖掘本质算是机器学习，不过和数据相关，也可以理解为大数据的一个方向吧）一、大数据工程师的技能要求二、大数据学习路径三

金罗老师·2023-11-10 18:54

容灾恢复 | 记一次K8S集群中etcd数据快照的备份恢复实践

涉及企业运维、网络安全、应用开发、物联网、人工智能、大数据学习知识“花开堪折直须折，莫待无花空折枝。”

全栈工程师修炼指南·2023-11-10 12:28

大数据学习计划（不断改善）(小白入门指南)

大数据时代的出现简单的讲是海量数据同完美计算能力结合的结果，确切的说是移动互联网、物联网产生了海量的数据，大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。当我们最初谈大数据的时候，谈的最多的可能是用户行为分析，即通过各种用户行为，包括浏览记录，消费记录，交往和购物娱乐，行动轨迹等各种用户行为产生的数据。由于这些数据本身符合海量，异构的特征，同时通过分析这些数据之间的关联性容易匹配

qq_43958076·2023-11-09 11:52

大数据学习之错误——FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException:

在大数据学习过程中会遇到各种各样得错误，儿我们就需要解决这些错误，所以我就遇到一个错误，并记录解决得方法。

人生无重来·2023-11-09 10:11

HBASE2.5.3集群安装-大数据学习系列（五）

01-安装HBASE2.5.3集群版本前置：集群规划机器信息Hostnamek8s-masterk8s-node1k8s-node2外网IP106.15.186.55139.196.15.2847.101.63.122内网IP172.25.73.65172.25.73.64172.25.73.66HBASE数据库HBASEYYYPS：这是基于之前hadoop和hive安装好的基础上的1.各机器ho

zhenwudi·2023-11-09 08:47

hive中复制（备份）一张表的两种方式

createtableifnotexistsalikebinsertintoaselect*fromb有关大数据学习资源，请关注微信公众号“码农书斋”。回复“大

宇文智·2023-11-08 13:03

大数据学习之一文学会Spark【Spark知识点总结】

文章目录什么是SparkSpark的特点SparkvsHadoopSpark+HadoopSpark集群安装部署Spark集群安装部署StandaloneONYARNSpark的工作原理什么是RDDRDD的特点Spark架构相关进程Spark架构原理Spark实战：单词统计Scala代码开发java代码开发任务提交Transformation与Action开发创建RDD使用集合创建RDD使用本地文

小崔的技术博客·2023-11-08 06:37

大数据学习之Spark性能优化

文章目录Spark三种任务提交模式宽依赖和窄依赖StageSparkJob的三种提交模式Shuffle机制分析未优化的HashBasedShuffle优化后的HashBasedShuffleSort-BasedShuffleSpark之checkpointcheckpoint概述checkpoint与持久化的区别checkPoint的使用checkpoint源码分析Spark程序性能优化性能优化分

小崔的技术博客·2023-11-08 05:02

【基础篇】大数据学习笔记（4）相关名词解释

RAID：RedundantArraysofIndependentDrives独立冗余磁盘阵列，独立磁盘构成的具有冗余功能的阵列。GFS：GoogleFileSystemGoogle文件系统HDFS：HadoopDsitributedFileSystemHadoop分布式文件系统Zookeeper：分布式应用程序协调服务，是Hadoop和Hbase的重要组件Hadoop：Apache基金会所开发的

风也醉·2023-11-06 02:54

DL Homework 6

）感受野二、探究不同卷积核的作用1~3三种情况下，运用不同的卷积核的代码分析4.实现灰度图的边缘检测、锐化、模糊5.总结不同卷积核的特征和作用总结参考文献本博客引用了几个比较著名的DL的书这里介绍一下DL

熬夜患者·2023-11-06 01:30

大数据学习方法：高效学习大数据采集、分析与存储！

大数据学习方法：高效学习大数据采集、分析与存储！随着信息时代的到来，大数据已经成为了各个领域中不可或缺的重要资源。对于想要深入学习大数据采集、分析与存储的人来说，掌握有效的学习方法至关重要。

数据科学智慧·2023-11-06 00:07

前知教育建筑类更新

[2020年二建]二建[法规]精讲班-ES-基础精讲(12~12)王竹梅二建[管理]精讲班-DL-面授精讲(07~15)吴新华二建[建筑]精讲班-ES-基础入门(16~16)郭炜二建[建筑]精讲班-ES

突然的自我1994·2023-11-03 19:46

入行大数据，需要学习哪些基础知识？

1、学习大数据首先要学习Java基础怎样进行大数据学习的快速入门?学大数据课程之前要先学习一种计算机编程语言。Java是大数据学习需要的编程语言基础，因为大数据的开发基于常用的高级语言。

人工智能爱好者·2023-11-02 15:48

大数据(21)-skew-GroupBy

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦Skew-GroupBy优化是一种针对大数据处理的优化技术，它通过将数据分散到不同的

viperrrrrrr·2023-11-02 07:14

大数据学习——Java项目实战-吃货联盟订餐系统

吃货联盟订餐系统项目需求项目环境准备项目覆盖技能点阶段划分难点分析使用数组对象保存订单信息访问订单信息删除订单信息计算订单的总金额项目实现思路数据初始化实现菜单切换实现查看餐袋实现我要订餐实现签收订单实现删除订单实现我要点赞代码展示项目需求现今已进入网络时代，人们的日常生活已离不开网络，如网上购物、看新闻、交友等。“只要点点手指，就能送餐上门”，网上订餐越来越受到都是年轻人的青睐。先要求开发一个网

蜂蜜柚子加苦茶·2023-10-30 10:57

大数据学习(18)-任务并行度优化

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦对于一个分布式的计算任务而言，设置一个合适的并行度十分重要。

viperrrrrrr·2023-10-30 06:52

量分享| 你真的知道什么是“大数据”吗？

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：

金豆数据工程师·2023-10-28 09:05

大数据处理技术如何学习?

关键词：数据分析大数据学习群：716581014首先我们要学习Python语言和Linux操作系统，这两个是学习大数据的基础，学习的顺序不分前后。

大数据05·2023-10-26 18:35

大数据学习-Java Day11

大数据学习-JavaDay11String类的概述和使用1String类的概念（重点）java.lang.String类用于描述字符串，Java程序中所有的字符串字面值都可以使用该类的对象加以描述，如：

靈龗·2023-10-26 06:15

2021-09-24——大数据学习日志——Python基础——容器类型（附练习题）

学习目标：能够说出常用Python容器类型的名字：列表、元组、字典、字符串、集合掌握容器类型的基本操作：定义和使用、增删改查、遍历等01_列表学习目标：知道定义列表的基本格式知道列表的常用操作：增删改查能够使用for循环实现对列表中所有元素的遍历1.1列表的定义list（列表）是Python中使用最频繁的数据类型专门用于存储一组数据，存储的每个数据称为元素列表用[]定义，元素之间使用,分隔列表的索

王络不稳定·2023-10-25 01:15

2021年全网最细大数据学习笔记（二）：Hadoop 伪分布式安装

文章目录一、Linux操作系统的安装二、在Ubuntu20.04.2.0中进行Hadoop伪分布式安装1、Ubuntu20.04.2.0安装jdk2、配置SSH无密码登录3、Hadoop的下载与安装4、Hadoop环境配置5、启动与关闭Hadoop6、查看Hadoop的基本信息6.1、查看HDFSWeb界面6.2、查看YARNWeb界面三、在Centos7中进行Hadoop伪分布式安装一、Linu

Amo Xiang·2023-10-24 16:17

华为云hadoop伪分布式安装学习笔记（一）

所属专栏：【大数据学习笔记（华为云）】作者：我是夜阑的狗个人简介：一个正在努力学技术的码仔，专注基础和实战分享，欢迎咨询！

我是夜阑的狗·2023-10-24 16:07

大数据学习04 Scala的学习

大数据学习04Scala的学习在Spark学习之前，先进行对Scala的学习提示：已经有Scala基础的同学可以先跳过这部分文章目录大数据学习04Scala的学习Scala是什么一、Scala入门1.为什么学习

燕大扎克伯格·2023-10-24 01:12

大数据学习-Hadoop

大数据学习-Hadoop1.大数据概念现状分析：实时计算原因分析：离线计算预测分析：机器学习（对未来趋势进行预测）2.分布式与集群分布式：多台机器，不同组件分布式存储，分布式集群，多台机器集群：多台机器

小七fighting·2023-10-24 01:30

在这里，你不会的大数据之Linux系统安装JDK都可以学到！

在这里我还是要推荐下我自己建的大数据学习交流群：53221814

大数据学习01·2023-10-23 10:16

视频教程-大数据硬实战之kafka视频教程-大数据

¥69.00立即订阅扫码下载「CSDN程序员学院APP」，1000+技术好课免费看APP订阅课程，领取优惠，最少立减5元↓↓↓订阅后：请点击此处观看视频课程视频教程-大数据硬实战之kafka视频教程-大数据学习有效期

学院导师-肖滨·2023-10-23 07:23

大数据学习(17)-mapreduce task详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦MapReduceLocalTask和提交到YARN上运行的MapReduce

viperrrrrrr·2023-10-22 00:54

5种必知的大数据处理框架技术

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：716加上【五8一】最后014，即可免费领取一整套系统的大数据学习教程本文将介绍大

大数据05·2023-10-21 16:05

史上最完整的大数据学习（四） Zookeeper 完结篇（API操作， shell命令，ZooKeeperACL 以及分布式应用）

Zookeeper的认识以及节点详情ZooKeeper的安装使用六、JavaAPI操作6.1原生API1）Maven依赖org.apache.zookeeperzookeeper3.4.6pom2）相关操作（1）获得客户端对象privateZooKeeperzooKeeper;@BeforepublicvoidgetCline()throwsException{zooKeeper=newZooKe

热忱 ㅤ ㅤ·2023-10-21 13:17

大数据学习15之spark streaming入门

文章目录一、概述二、应用场景三、集成Spark生态系统的使用四、发展史五、从词频统计功能着手入门1.spark-submit执行2.spark-shell执行（测试时使用）六、工作原理一、概述spark官网Documentation->LatestRelease->ProgrammingGuides->SparkStreamingSpark流是核心SparkAPI的扩展，可实现对实时数据流的可缩放

米泽玄師·2023-10-21 11:30

大数据学习hadoop3.1.3——Flume相关数据流监控Ganglia的安装与部署--测试

1、Ganglia的安装与部署1、集群里都需要安装gangliasudoyuminstall-yepel-release2、在101安装web,meta和monitorsudoyum-yinstallganglia-gmetadganglia-webganglia-gmond3、在102、103安装monitorsudoyum-yinstallganglia-gmondGanglia由gmond、

Carson_xcb·2023-10-21 07:40

大数据学习路线+Java转行大数据最新最全的必备第一手资料

系统每天关注上限100人1:为了防止关注人数上限，私信收不到，2:私信发网盘链接失效，)3:为了加人气，需要以下，Python，大数据,架构等资料的朋友！免费送给前100评论留言者。私信小编，小编微信，发给你网盘链接，手慢无！学习路线：（一）Linux理论（Linux基础Linux-shell编程高并发:lvs负载均衡高可用&反向代理）（二）Hadoop理论（hadoop-hdfs理论hadoop

大数据客栈i·2023-10-20 19:16

大数据学习笔记-MapReduce（二）深度

深度了解MapReduce运行流程，通过案例全面了解MR运行过程、涉及的组件、设计的思想。对MapReducePartition、MapreduceCombiner、MapReduce编程技巧掌握，对自定义对象、序列化、排序、分区、分组的实现熟练掌握，掌握MapReduce并行度机制、工作流程和shuffle的机制。1、MapreducePartition、Combiner输出结果文件只有一个。默

天码村·2023-10-20 18:11

大数据学习(15)-数据倾斜

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博>主哦数据倾斜概述数据倾斜问题，通常是指参与计算的数据分布不均，即某个

viperrrrrrr·2023-10-20 18:10

大数据学习（五）Mapreduce详解

一、什么是mapreduce简单明了来讲，Mapreduce就是一个分布式运算程序的编程框架二、mapreduce组成MapReduce包含四个组成部分，分别为Client，JobTracker，TaskTracker，Task：1.Client：每一个Job都会在用户端通过Client类将应用程序以及参数配置Configuration打包成Jar文件存储在HDFS，并把路径提交到JobTrack

阿齐（努力打工版）·2023-10-20 18:40

大数据学习(13)-join优化详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博>主哦MapJoinMapJoin有两种触发方式，一种是用户在SQL

viperrrrrrr·2023-10-20 18:40

大数据学习(14)-Map Join和Common Join

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博>主哦什么是MapJoin和CommonJoin。