HPE大数据学习第3页

大数据学习笔记-HDFS（一）

目录1、企业存储系统1.1认识硬盘、RAID1.2存储架构1.3文件系统1.4文件系统的分类（按照位置）1.5海量数据存储面临的问题2、场景案例：如何实现分布式文件存储2.1如何解决海量数据存的下的问题2.2如何解决海量数据文件查询边界问题2.3如何解决大文件传输效率慢的问题2.4如何解决硬件故障导致的数据丢失问题2.5如何解决用户查询视角统一规整问题3、分布式文件系统HDFS入门3.1简介3.2

天码村·2023-11-24 13:05

[大数据学习之ClickHouse]05-ClickHouse之SQL操作

传统关系型数据库支持的SQL语句,CLK基本都支持1.insert语法一致,不过多做讲解2.UpDate/DeleteCLK支持修改和删除操作,但是不支持事务,并且语法和传统数据库有区别,删除和修改用的比较少一点删除:altertablet_order_smtdeletewheresku_id='sku_001';修改:altertablet_order_smtupdatetotal_amount

阿月.·2023-11-24 01:08

大数据学习教程SD版第十三篇【Clickhouse】

Clickhouse列式数据库快，简单，yandex开源，C++编写，分析型数据库，SQL查询，列操作快，多样化引擎，高吞吐写入（LSMTree），多版本数据（Hbase），顺序Append写，数据分区，线程级并行（单条查询能利用整机所有CPU），不适合初始存储，尽量避免join操作（不快，右表加载到内存）1.Clickhouse安装准备工作关闭防火墙#statussystemctlstatusf

道-闇影·2023-11-24 01:37

大数据学习(23)-hive on mapreduce对比hive on spark

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦HiveonSpark和HiveonMapReduce是两种不同的

viperrrrrrr·2023-11-23 11:23

大神之路-起始篇 | 第16章.计算机科学导论之【网络安全】学习笔记

涉及企业运维、网络安全、应用开发、物联网、人工智能、大数据学习知识“花开堪折直须折，莫待无花空折枝。”

全栈工程师修炼指南·2023-11-22 04:19

大数据学习路线图让你轻松掌握大数据技术学习

大数据学习QQ群：957205962阶段一、Java语言基础

金光闪闪耶·2023-11-22 02:59

清华教授：这16条完整又系统的大数据学习路线才是未来的趋势

一份专业的大数据学习资料才是学习大数据的利刃。小编分享的这套大数据学习资料将从学习大纲、书籍、视频教程分别分享。

郭小姐520·2023-11-21 11:00

HPE_3PAR C630 & H3C CF22030监控命令集

HP3PARCLI提供了可显示系统中已用空间和可用空间大小的命令。这些命令允许您查看系统级别的空间使用信息，以及针对每个物理磁盘的空间使用信息。可使用下列CLI命令查看空间使用信息：showpd-显示系统中物理磁盘的配置信息。showspare-显示系统中备用存储块的信息。showsys-显示系统的容量和连接性的概况。系统容量确定系统容量，请执行showsys-space命令：系统容量以MB

xiaozhanfeng·2023-11-21 10:49

大数据学习（十五）维度建模步骤以及实例

一、维度建模概述（kimball）它将客观世界划分为度量和上下文。度量是常常是以数值形式出现，事实周围有上下文包围着，这种上下文被直观地分成独立的逻辑块，称之为维度。它与实体-关系建模有很大的区别，实体-关系建模是面向应用，遵循第三范式，以消除数据冗余为目标的设计技术。维度建模是面向分析，为了提高查询性能可以增加数据冗余，反规范化的设计技术。二、如何进行维度建模选择业务过程→声明粒度→确认维度→确

阿齐（努力打工版）·2023-11-20 20:40

大数据开发(20)-Skew join

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦skewjoin的原理是，为倾斜的大key单独启动一个mapjoin

viperrrrrrr·2023-11-20 07:06

大数据开发(19)-hash table详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦在Map-side聚合中，每个Map任务（mapper）都会维护一个独立的哈希表

viperrrrrrr·2023-11-20 07:36

大数据学习（22）-spark

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦Spark是一个基于内存计算的大数据并行计算框架，具有快速、易用

viperrrrrrr·2023-11-20 07:23

读书笔记-《无人驾驶》7-20200929

相机、激光雷达、无线电测距雷达、超声波传感器、GPS提供稳定的数据流，线控技术，取代人类的手和脚，深度学习将大数据学习，提升检测能力。SLAM即时定位于地图构建技术，提高机器人自主地图定位的

关七666·2023-11-20 02:04

Hadoop大数据学习线路图-单篇

入门知识对于我们新手入门学习hadoop的朋友来说，首先了解一下云计算和云计算技术是有必要的。下面先是介绍云计算和云计算技术的：云计算，是一种基于互联网的计算方式，通过这种方式，共享的软硬件资源和信息可以按需求提供给计算机和其他设备，主要是基于互联网的相关服务地增加、使用和交付模式，通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源。云是网络、互联网的一种比喻说法。过去在图中往往用云来表示电信

doers123·2023-11-19 10:06

大数据课程00——[基础篇]大数据学习入门

文章作者邮箱：[email protected]地址：广东惠州▲前置知识一、编程语言至少应该掌握一门编程语言，计算机专业的同学大多学的第一门编程语言是C语言，然后再学Java语言，对于零基础的同学，可直接学习Java语言，至少应该把JavaSE阶段学完！二、计算机基础如果你是计算机相关专业，相信你这些基础都已经会了，可以直接略过本节，往下看。但是如果你是零基础，还是需要先掌握下计算机行业必备知

伟雄·2023-11-19 00:44

【CV with Pytorch】第 6 章：姿态估计

人体姿势估计(HPE)是一项计算机视觉任务，它通过估计给定帧/视频中的主要关键点（例如眼睛、耳朵、手和腿）来检测人体姿势。图6-1显示了人体姿态估计的一个例子。

Sonhhxg_柒·2023-11-15 07:47

Java大数据学习第八天----继承重写 final 静态static 多态

继承中变量的使用父类成员变量和子类成员变量重名时,使用super.变量名指定父类的成员变量继承中构造方法的使用创建子类对象时会先调用父类的无参构造因为子类的构造函数中默认存在一个super();如果父类没有无参构造的话,我们需要手动指定子类去调用父类的含参构造super(参数);构造方法不可以被继承,原因是构造方法必须是本类类名,不可能在子类中存在一个父类类名的构造方法方法的重写重写:子类对父类的

打字超慢·2023-11-12 03:47

利用Hadoop API使用Java开发程序学习-HDFS上传下载文件

CSDN话题挑战赛第2期参赛话题：大数据学习成长记录参考：利用HadoopAPI使用Java开发程序学习-文件夹操作前言/背景提示：Hadoop学习时，通常大家使用的都是shell命令操作hdfs系统，

pblh123·2023-11-11 11:49

大数据学习：使用Java API操作HDFS

文章目录一、创建Maven项目二、添加依赖三、创建日志属性文件四、在HDFS上创建文件五、写入HDFS文件1、将数据直接写入HDFS文件2、将本地文件写入HDFS文件六、读取HDFS文件1、读取HDFS文件直接在控制台显示2、读取HDFS文件，保存为本地文件一、创建Maven项目二、添加依赖在pom.xml文件里添加hadoop和junit依赖org.apache.hadoophadoop-cli

X_Serendipity·2023-11-11 11:15

大数据学习入门必备规划

大数据方向的工作目前分为三个主要方向:01.大数据工程师02.数据分析师03.大数据科学家04.其他（数据挖掘本质算是机器学习，不过和数据相关，也可以理解为大数据的一个方向吧）一、大数据工程师的技能要求二、大数据学习路径三

金罗老师·2023-11-10 18:54

容灾恢复 | 记一次K8S集群中etcd数据快照的备份恢复实践

涉及企业运维、网络安全、应用开发、物联网、人工智能、大数据学习知识“花开堪折直须折，莫待无花空折枝。”

全栈工程师修炼指南·2023-11-10 12:28

大数据学习计划（不断改善）(小白入门指南)

大数据时代的出现简单的讲是海量数据同完美计算能力结合的结果，确切的说是移动互联网、物联网产生了海量的数据，大数据计算技术完美地解决了海量数据的收集、存储、计算、分析的问题。当我们最初谈大数据的时候，谈的最多的可能是用户行为分析，即通过各种用户行为，包括浏览记录，消费记录，交往和购物娱乐，行动轨迹等各种用户行为产生的数据。由于这些数据本身符合海量，异构的特征，同时通过分析这些数据之间的关联性容易匹配

qq_43958076·2023-11-09 11:52

大数据学习之错误——FAILED: SemanticException org.apache.hadoop.hive.ql.metadata.HiveException:

在大数据学习过程中会遇到各种各样得错误，儿我们就需要解决这些错误，所以我就遇到一个错误，并记录解决得方法。

人生无重来·2023-11-09 10:11

HBASE2.5.3集群安装-大数据学习系列（五）

01-安装HBASE2.5.3集群版本前置：集群规划机器信息Hostnamek8s-masterk8s-node1k8s-node2外网IP106.15.186.55139.196.15.2847.101.63.122内网IP172.25.73.65172.25.73.64172.25.73.66HBASE数据库HBASEYYYPS：这是基于之前hadoop和hive安装好的基础上的1.各机器ho

zhenwudi·2023-11-09 08:47

hive中复制（备份）一张表的两种方式

createtableifnotexistsalikebinsertintoaselect*fromb有关大数据学习资源，请关注微信公众号“码农书斋”。回复“大

宇文智·2023-11-08 13:03

大数据学习之一文学会Spark【Spark知识点总结】

文章目录什么是SparkSpark的特点SparkvsHadoopSpark+HadoopSpark集群安装部署Spark集群安装部署StandaloneONYARNSpark的工作原理什么是RDDRDD的特点Spark架构相关进程Spark架构原理Spark实战：单词统计Scala代码开发java代码开发任务提交Transformation与Action开发创建RDD使用集合创建RDD使用本地文

小崔的技术博客·2023-11-08 06:37

大数据学习之Spark性能优化

文章目录Spark三种任务提交模式宽依赖和窄依赖StageSparkJob的三种提交模式Shuffle机制分析未优化的HashBasedShuffle优化后的HashBasedShuffleSort-BasedShuffleSpark之checkpointcheckpoint概述checkpoint与持久化的区别checkPoint的使用checkpoint源码分析Spark程序性能优化性能优化分

小崔的技术博客·2023-11-08 05:02

【基础篇】大数据学习笔记（4）相关名词解释

RAID：RedundantArraysofIndependentDrives独立冗余磁盘阵列，独立磁盘构成的具有冗余功能的阵列。GFS：GoogleFileSystemGoogle文件系统HDFS：HadoopDsitributedFileSystemHadoop分布式文件系统Zookeeper：分布式应用程序协调服务，是Hadoop和Hbase的重要组件Hadoop：Apache基金会所开发的

风也醉·2023-11-06 02:54

大数据学习方法：高效学习大数据采集、分析与存储！

大数据学习方法：高效学习大数据采集、分析与存储！随着信息时代的到来，大数据已经成为了各个领域中不可或缺的重要资源。对于想要深入学习大数据采集、分析与存储的人来说，掌握有效的学习方法至关重要。

数据科学智慧·2023-11-06 00:07

入行大数据，需要学习哪些基础知识？

1、学习大数据首先要学习Java基础怎样进行大数据学习的快速入门?学大数据课程之前要先学习一种计算机编程语言。Java是大数据学习需要的编程语言基础，因为大数据的开发基于常用的高级语言。

人工智能爱好者·2023-11-02 15:48

大数据(21)-skew-GroupBy

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦Skew-GroupBy优化是一种针对大数据处理的优化技术，它通过将数据分散到不同的

viperrrrrrr·2023-11-02 07:14

HPE Compute Scale-up Server 3200服务器来了！突破算力瓶颈，护航企业数字化转型

为满足千行百业海量多态的数据场景，近日，HPE推出了具有极致性能、更添超强扩展能力的HPEComputeScale-upServer3200服务器，搭载最新的第四代英特尔®至强®可扩

CSDN云计算·2023-11-01 20:08

大数据学习——Java项目实战-吃货联盟订餐系统

吃货联盟订餐系统项目需求项目环境准备项目覆盖技能点阶段划分难点分析使用数组对象保存订单信息访问订单信息删除订单信息计算订单的总金额项目实现思路数据初始化实现菜单切换实现查看餐袋实现我要订餐实现签收订单实现删除订单实现我要点赞代码展示项目需求现今已进入网络时代，人们的日常生活已离不开网络，如网上购物、看新闻、交友等。“只要点点手指，就能送餐上门”，网上订餐越来越受到都是年轻人的青睐。先要求开发一个网

蜂蜜柚子加苦茶·2023-10-30 10:57

大数据学习(18)-任务并行度优化

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦对于一个分布式的计算任务而言，设置一个合适的并行度十分重要。

viperrrrrrr·2023-10-30 06:52

量分享| 你真的知道什么是“大数据”吗？

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：

金豆数据工程师·2023-10-28 09:05

大数据处理技术如何学习?

关键词：数据分析大数据学习群：716581014首先我们要学习Python语言和Linux操作系统，这两个是学习大数据的基础，学习的顺序不分前后。

大数据05·2023-10-26 18:35

大数据学习-Java Day11

大数据学习-JavaDay11String类的概述和使用1String类的概念（重点）java.lang.String类用于描述字符串，Java程序中所有的字符串字面值都可以使用该类的对象加以描述，如：

靈龗·2023-10-26 06:15

2021-09-24——大数据学习日志——Python基础——容器类型（附练习题）

学习目标：能够说出常用Python容器类型的名字：列表、元组、字典、字符串、集合掌握容器类型的基本操作：定义和使用、增删改查、遍历等01_列表学习目标：知道定义列表的基本格式知道列表的常用操作：增删改查能够使用for循环实现对列表中所有元素的遍历1.1列表的定义list（列表）是Python中使用最频繁的数据类型专门用于存储一组数据，存储的每个数据称为元素列表用[]定义，元素之间使用,分隔列表的索

王络不稳定·2023-10-25 01:15

2021年全网最细大数据学习笔记（二）：Hadoop 伪分布式安装

文章目录一、Linux操作系统的安装二、在Ubuntu20.04.2.0中进行Hadoop伪分布式安装1、Ubuntu20.04.2.0安装jdk2、配置SSH无密码登录3、Hadoop的下载与安装4、Hadoop环境配置5、启动与关闭Hadoop6、查看Hadoop的基本信息6.1、查看HDFSWeb界面6.2、查看YARNWeb界面三、在Centos7中进行Hadoop伪分布式安装一、Linu

Amo Xiang·2023-10-24 16:17

华为云hadoop伪分布式安装学习笔记（一）

所属专栏：【大数据学习笔记（华为云）】作者：我是夜阑的狗个人简介：一个正在努力学技术的码仔，专注基础和实战分享，欢迎咨询！

我是夜阑的狗·2023-10-24 16:07

大数据学习04 Scala的学习

大数据学习04Scala的学习在Spark学习之前，先进行对Scala的学习提示：已经有Scala基础的同学可以先跳过这部分文章目录大数据学习04Scala的学习Scala是什么一、Scala入门1.为什么学习

燕大扎克伯格·2023-10-24 01:12

大数据学习-Hadoop

大数据学习-Hadoop1.大数据概念现状分析：实时计算原因分析：离线计算预测分析：机器学习（对未来趋势进行预测）2.分布式与集群分布式：多台机器，不同组件分布式存储，分布式集群，多台机器集群：多台机器

小七fighting·2023-10-24 01:30

在这里，你不会的大数据之Linux系统安装JDK都可以学到！

在这里我还是要推荐下我自己建的大数据学习交流群：53221814

大数据学习01·2023-10-23 10:16

视频教程-大数据硬实战之kafka视频教程-大数据

¥69.00立即订阅扫码下载「CSDN程序员学院APP」，1000+技术好课免费看APP订阅课程，领取优惠，最少立减5元↓↓↓订阅后：请点击此处观看视频课程视频教程-大数据硬实战之kafka视频教程-大数据学习有效期

学院导师-肖滨·2023-10-23 07:23

大数据学习(17)-mapreduce task详解

&&大数据学习&&系列专栏：哲学语录:承认自己的无知，乃是开启智慧的大门如果觉得博主的文章还不错的话，请点赞+收藏⭐️+留言支持一下博主哦MapReduceLocalTask和提交到YARN上运行的MapReduce

viperrrrrrr·2023-10-22 00:54

5种必知的大数据处理框架技术

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习裙：716加上【五8一】最后014，即可免费领取一整套系统的大数据学习教程本文将介绍大

大数据05·2023-10-21 16:05

史上最完整的大数据学习（四） Zookeeper 完结篇（API操作， shell命令，ZooKeeperACL 以及分布式应用）

Zookeeper的认识以及节点详情ZooKeeper的安装使用六、JavaAPI操作6.1原生API1）Maven依赖org.apache.zookeeperzookeeper3.4.6pom2）相关操作（1）获得客户端对象privateZooKeeperzooKeeper;@BeforepublicvoidgetCline()throwsException{zooKeeper=newZooKe

热忱 ㅤ ㅤ·2023-10-21 13:17

大数据学习15之spark streaming入门

文章目录一、概述二、应用场景三、集成Spark生态系统的使用四、发展史五、从词频统计功能着手入门1.spark-submit执行2.spark-shell执行（测试时使用）六、工作原理一、概述spark官网Documentation->LatestRelease->ProgrammingGuides->SparkStreamingSpark流是核心SparkAPI的扩展，可实现对实时数据流的可缩放

米泽玄師·2023-10-21 11:30

大数据学习hadoop3.1.3——Flume相关数据流监控Ganglia的安装与部署--测试

1、Ganglia的安装与部署1、集群里都需要安装gangliasudoyuminstall-yepel-release2、在101安装web,meta和monitorsudoyum-yinstallganglia-gmetadganglia-webganglia-gmond3、在102、103安装monitorsudoyum-yinstallganglia-gmondGanglia由gmond、

Carson_xcb·2023-10-21 07:40

大数据学习路线+Java转行大数据最新最全的必备第一手资料

系统每天关注上限100人1:为了防止关注人数上限，私信收不到，2:私信发网盘链接失效，)3:为了加人气，需要以下，Python，大数据,架构等资料的朋友！免费送给前100评论留言者。私信小编，小编微信，发给你网盘链接，手慢无！学习路线：（一）Linux理论（Linux基础Linux-shell编程高并发:lvs负载均衡高可用&反向代理）（二）Hadoop理论（hadoop-hdfs理论hadoop

大数据客栈i·2023-10-20 19:16

推荐频道

HPE大数据学习