HPE大数据学习

大数据行业薪资实在太诱人！你还在犹豫转大数据吗？

综合以上三点来看，分享大数据学习交流扣扣群：49
大数据群722680258·2020-07-09 23:44

【大数据学习】之hdfs垃圾回收站配置

我们知道linux是没有垃圾回收站的，而hdfs同样默认是没有的，但是hdfs是可以开启垃圾回收站的。1、我们可以登录官网，选2.8.5版本，https://hadoop.apache.org/docs/r2.8.5/拉到页面最下面点击core-default.xml2、然后在页面按ctrl+F全局搜索"trash"，找到fs.trash.interval和fs.trash.checkpoint.
奔走觅衣粮·2020-07-09 23:53

大数据学习笔记——hadoop生态圈

学习hadoop入门阅读资料，google的三篇论文《Googlefilesystem》：论述了怎样借助普通机器有效的存储海量的大数据；《GoogleMapReduce》：论述了怎样快速计算海量的数据；《GoogleBigTable》：论述了怎样实现海量数据的快速查询；大数据技术本质上无非解决4个核心问题。1、存储，海量的数据怎样有效的存储？主要包括hdfs、Kafka；2、计算，海量的数据怎样快
在南京看海·2020-07-09 22:02

大数据学习笔记1——大数据相关的基本概念、学习路线

一、基本概念1，大数据解决了什么问题？（1）如何存储大量数据？（HDFS）（2）如何处理大量数据？（Map-Reduce、storm、spark等）2，传统数据仓库和OLAP？（1）hadoop其实就是数据仓库的一种实现方式。（2）数据仓库其实就是数据库，比如oracle通过dbca工具可以创建一个数据仓库，如果使用oracle的warehouse，就可以建立一个数据仓库。3，为什么会出现hado
苏云南雁·2020-07-09 22:09

大数据学习笔记3--HDFS扩展和mapreduce工作过程

HDFS配置：客户端中的配置参数可以覆盖服务端的参数。例如：副本数，切块大小HDFS文件存储：服务端存储block的实际大小，但是不适合存储小文件，小文件会占用namenode的元数据空间。对于小文件数据的优化，可以在上传之前先合并再上传。例如：压缩、文本文件合并HDFS扩展：hdfs支持restAPI，与平台无关jetty容器hdfs支持restcommand分布式任务传统方式：任务资源分发ja
程序小小望·2020-07-09 18:01

大数据学习笔记2--hdfs工作原理及源码分析

windows下配置hadoophadoop安装包解压，路径不要有特殊字符lib和bin直接解压出来的不可用，需要自己重新编译配置环境变量：HADOOP_HOME,path中添加：bin目录namenode整个文件系统的管理节点。它维护着整个文件系统的文件目录树，文件/目录的元信息和每个文件对应的数据块列表。接收用户的操作请求。响应客户端的请求，上传文件：client申请上传文件，namenode
程序小小望·2020-07-09 18:01

什么是大数据？如何成为大数据工程师？

这里还是要推荐下小编的大数据学习群:532218147，不管你是小白还是大牛，小编我都欢迎，不定期分享干货，包括小编自己整理的一份2017最新的大数据资料和0基础入门教
大数据学习01·2020-07-09 17:48

大数据学习踩坑（1）安装Anaconda，只有Prompt，conda还不是内部命令，spyder打不开的问题

大数据学习踩坑（1）安装Anaconda，只有Prompt，conda还不是内部命令，spyder打不开的问题安装Anaconda1.安装n次Anaconda都只有Prompt，conda不能用2.安装完成
hs_lxy·2020-07-09 17:55

大数据学习过程笔记——第一阶段

大数据学习过程笔记大数据学习视频网址推荐博客Hadoop安装配置说明页Hadoop架构介绍—>CentOS可能会用到的依赖：yum-yinstallgccgcc-c++autoconflibjpeglibjpeg-devellibpnglibpng-develfreetypefreetype-devellibxml2libxml2
尤小硕·2020-07-09 15:54

巨头的云计算正在吃掉世界！疯狂圈地后，谁将是下一个霸主？

以及我自己整理了一套最新的大数据学习系统教程，包括Hadoop，数据挖掘，数据分析。送给正在学习大数据的小伙伴！这里是大数据学习者聚集地，欢迎初学和进阶中的小伙伴！加
飞飛飛·2020-07-09 15:24

大数据之Linux下Solr如何搭建集群？这里有十年架构师总结经验！ 一：Solr简介 Solr是一个独立的企业级搜索应用服务器，它对外提供类似于Web-service的API接口。用户可以通...

功能：1、集中式的配置信息2、自动容错3、近实时搜索4、查询时自动负载均衡在这里我还是要推荐下我自己建的大数据学习交流群：532218147，
大数据学习05·2020-07-09 12:01

强烈推荐-十四个鲜为人知的大数据学习网站

关注:程序员大牛↑，走好数据之路欢迎关注微信公众号：程序员大牛，我们是专注于商业智能BI，大数据，数据分析领域的垂直社区。对商业智能BI、大数据分析挖掘、机器学习，python，R等数据领域感兴趣的同学加微信：tstoutiao，邀请你进入头条数据爱好者交流群:532218147，数据爱好者们都在这儿。数据分析重要性越来越多的管理者意识到数据分析对经济发展、企业运营的重要意义在古代，得琅琊阁者得天
大数据学习05·2020-07-09 12:16

HPE:Superdome:X 关键业务服务器

在诸多IT核心基础架构体系中，关键业务系统一直是支撑国民经济体系运行的重要组成部分，如电信、金融、制造、公共服务等行业的数据中心，但过去一直被小型机、Unix操作系统这一相对封闭的阵营占据。为避免对厂商的过度依赖，同时又能够引入最新技术，获得高投资收益（ROI），越来越多的企业开始选择从封闭式架构逐步向开放式架构转变，现在以x86服务器、Linux操作系统为代表的开放、标准化技术，在关键业务领域市
中国计算机报·2020-07-09 11:14

大数据学习的思维原理（定制产品原理）

大数据的学习原理有很多，我们在前面众多的文章中给大家介绍了很多的思维原理，这些都是非常重要的，而大数据学习的思维原理中还有一个定制产品原理，是一般产品经理需要注意的事情，下面就小编为大家介绍一下这个定制产品原理
CDA·数据分析师·2020-07-09 10:45

大数据学习笔记 第一章 大数据简介与概论

大数据笔记第一章Hadoop简介Hadoop简介Apache开源软件计算框架：分布式、可靠、可伸缩搜索引擎、海量数据存储。Hadoop发展史2002Apache抓取网页，数十亿存储瓶颈GFS论文（谷歌），以分布式存储大量数据NDFSHDFS的前身2004MapReduce映射化解2005Nutch应用MR2006MapReduce和NDFS分离，行程Hadoop作为独立项目2008Yahoo\一万
数据汪东哥·2020-07-09 09:03

大数据学习系列之七 ----- Hadoop+Spark+Zookeeper+HBase+Hive集群搭建 图文详解

目录引言目录一、环境选择1，集群机器安装图2，配置说明3，下载地址二、集群的相关配置1，主机名更改以及主机和IP做相关映射2，ssh免登录3，防火墙关闭4，时间配置5，快捷键设置(可选)6，整体环境变量设置二、Hadoop的环境搭建1，JDK配置2，hadoop配置3，hadoop启动四、Spark的环境配置1，Scala配置2，Spark配置3，spark启动五、Zookeeper的环境配置1，
weixin_33842328·2020-07-09 09:17

大数据与云计算学习（1）

大数据学习一、大数据概述：1、大数据概念和特征。
猿小白_white·2020-07-09 05:53

大数据学习路线之hive存储格式

好程序员大数据学习路线之hive存储格式，hive的存储格式通常是三种：textfile、sequencefile、rcfile、orc、自定义sethive.default.fileformat=TextFile
xinxindsj·2020-07-09 02:59

HPE server 如何利用SPP包升级BIOS

HPEserver如何升级BIOS一.通过U盘启动盘安装首先将下载好的SPP通过惠普的官方工具USBKEY做成U盘启动，工具下载链接如下：https://support.hpe.com/hpsc/swd
S锐·2020-07-08 23:23

大数据学习环境配置——windows和macOS下的python+mysql+hadoop+spark配置

随着大数据的热度与市场需求不断提升，学习大数据的小伙伴越来越多，然而，大家的个人电脑平时可能都用做了打游戏，看剧，逛论坛，没有配置过一套适合于学习大数据的环境，于是乎感叹万事开头难，今天，就带大家打开大数据世界的大门，带领大家在自己的电脑下配置Hadoop+Spark+Mysql，当然，还有Python3+JupyterNotebook的开发环境。PART1——Windows系统下的配置（以Win
夏洛克江户川·2020-07-08 18:23

Linux下轻量级的集群管理利器ClusterShell

最近在进行大数据学习，集群中系统环境的配置，Hadoop和Spark的各种配置文件分发搞得我心力憔悴。最终，还是选择了一款轻量级的集群管理软件。
Jackeroo·2020-07-08 15:05

边缘计算的福音——Akraino来了！

HPE首席执行官AntonioNeri表示，该公
weixin_33691817·2020-07-08 15:29

大数据学习——spark笔记

变量的定义vala:Int=1varb=2方法和函数区别：函数可以作为参数传递给方法方法：deftest(arg:Int):Int=>Int={方法体}valfun=（test_:Int=>(Int=>Int)）=>函数体逻辑执行语句vala=if(条件){执行逻辑返回值}else{执行逻辑}while(条件){执行逻辑}valarr=Array(1,2,3,4,5)for(i1)valmap=M
weixin_30514745·2020-07-08 13:19

大数据学习笔记(spark总结)

Spark的运行模式local，standalone，yarn，mesos。yarn还分为yarn-client和yarn-master.Spark名词Standalone模式下：Master：集群中含有Master进程的节点。Master是整个集群的控制器，负责整个集群的正常运行。Worker：Worker是工作节点，接收主节点的命令并进行状态汇报。Yarn模式下：ResourceManager
smy12138·2020-07-08 06:24

大数据学习——TensorFlow学习笔记1—keras、梯度下降算法、多层感知器

一、tensorflow的特点与概述《TENSORFLOWROADMAP》1、What’sthepointofthisopensourceproject?Thepointofthisrepositoryisthattheresourcesarebeingtargeted.Theorganizationoftheresourcesissuchthattheusercaneasilyfindtheth
_路漫漫其修远·2020-07-08 06:08

大数据学习必须掌握的五大核心技术有哪些？

大数据技术的体系庞大且复杂，基础的技术包含数据的采集、数据预处理、分布式存储、NoSQL数据库、数据仓库、机器学习、并行计算、可视化等各种技术范畴和不同的技术层面。首先给出一个通用化的大数据处理框架，主要分为下面几个方面：数据采集与预处理、数据存储、数据清洗、数据查询分析和数据可视化。一、数据采集与预处理对于各种来源的数据，包括移动互联网数据、社交网络的数据等，这些结构化和非结构化的海量数据是零散
yoku酱·2020-07-08 05:45

克隆虚拟机的相关配置【大数据学习起步阶段】

我们事先从他人或自己已经配置好的上边克隆一个配置完好的虚拟机，开启虚拟机，然后就要对虚拟机进行如下配置，供以后使用。第一步：vi/etc/udev/rules.d/70-persistent-net.rules目的：修改IP地址更改三处内容：1>删除第一个画圈部分；dd(快捷键）2>复制第二个画圈部分；鼠标右键，复制3>将第三个地方的1改为0；shift+$直接来到末尾，进入编辑模式，更改；第二步
哥格·2020-07-08 03:35

大数据学习系列（七）Hadoop伪分布式项目及环境搭建

一、环境准备1.准备一台虚拟机虚拟机安装请移步另一篇博客：https://blog.csdn.net/qq_40825301/article/details/1052144402.配置ip:我配置的ip为：192.168.40.33，保证能访问外网3.配置hostname:eleven-24.配置hosts：192.168.40.33eleven-25.关闭防火墙，避免后期发生问题找不到原因二、环
番茄滚蛋·2020-07-08 01:25

大数据学习系列（十）Hadoop2.X搭建HA（高可用）分布式集群

2.此环境是在大数据学习系列（八）Hadoop1.X全分布式项目及环境搭建的基础上进行搭建的，所以需先准备好那个环境，包括IPhostshostname配置，hadoopjdk的安装及配置等。
番茄滚蛋·2020-07-08 01:53

大数据学习系列（八）Hadoop1.X全分布式项目及环境搭建

一、环境准备1.准备四台虚拟机，虚拟机安装及克隆，配置ip请移步另一篇博客：https://blog.csdn.net/qq_40825301/article/details/1052144402.每台虚拟机修改hostname，我四台虚拟机配置的是eleven-2,eleven-3,eleven-4,eleven-5.命令：vi/etc/sysconfig/network编辑后保存：3.每台虚拟
番茄滚蛋·2020-07-08 01:53

大数据学习系列（九）Hadoop1.X痛点分析及Hadoop2.X提出的解决方案

一、Hadoop1.X痛点分析上篇博客搭建了hadoop1.x的全分布式集群项目，角色及角色之间的关系如下图：搭建完成后会发现有明显的问题，该集群只有一台服务器位namenode角色，而在整个hadoop系统中，namenode的作用和责任又如此之大，如果namenode节点挂掉了，那么就意味着整个hadoop系统挂掉，因为所有的文件上传及管理操作及计算操作都是通过client(客户端)去请求na
番茄滚蛋·2020-07-08 01:53

22.大数据学习之旅——scala手把手带你入门

Scala介绍Scala介绍官方网址：http://www.scala-lang.org官网对scala的介绍：Scala既是面向对象的语言，也是面向函数的语言。scala可以为你在做大量代码重用和扩展是提供优雅的层次结构，并可以通过高阶函数来实现这样的目标。（高阶函数是函数式编程里的特性之一，允许函数作为参数传递，也允许函数作为返回值来返回）Scala创始人MartinOdersky马丁·奥德斯
零零天·2020-07-08 00:17

java开发师不能不知道的10个大数据 的工具和框架

分享之前我还是要推荐下我自己创建的大数据学习资料分享群710219868备注风火这是全国最大的大数据学习交流的地方，2000人聚集，不管你是小白还是大牛，
风火数据·2020-07-07 23:45

大数据学习之路8-NAMENODE元数据管理机制

1.namenode的元数据放在内存加磁盘中。为什么要放在内存中？因为客户端经常要做一些操作。那么namenode放在内存中是什么东西？是一颗树，这个树其实就是一个对象。我们可以估计一下这个对象的大小。每记录一个块，就要耗费大概150Byte。假如我们存10个块，就是1.5k，存10000个块就是1.5M,再扩大1000倍就是1.5G。这里只是namenode的大小，如果一个块128M则整个文件将
爱米酱·2020-07-07 23:49

985毕业大佬打造大数据学习路线

先来了解一下什么是大数据？一种规模大到在获取，存储，管理，分析方面大大超出了传统大数据的软件工具能力范围的数据集合，（数据多到爆表PB级别）数据将到达PB或者PB级别以上，从而带来的数据存储，管理，分析方面的一些新的解决方案，这些新的解决方案都属于数据的范畴，大数据其实说的不是一门技术，而是说的是数据到达这个级别以后我们对这些级别的数据，对于这些量级的数据，进行存储，管理，分析，的解决方案跟传统的
大数据基础入门教程·2020-07-07 17:54

智慧交通车辆管理实现车辆出现的时间段和卡口

packagecom.hpe.traffic.skynetimportjava.sql.
MKing1994·2020-07-07 17:09

2019版云计算大数据学习路线图(含大纲+视频+工具+书籍+面试)

一、2019新版大数据学习路线图---每阶段能力培养及可掌握的能力二、2019新版大数据学习路线图---每阶段学习大纲及各阶段知识点三、2019新版大数据学习路线图---每阶段课程设置背景四、2019新版大数据学习路线图
Hekliu·2020-07-07 14:13

零基础学习大数据就业好吗，如何快速实现就业？

文章来源：加米谷大数据学习大数据，很多人最初都是跟风而来，对于行业没有基本的了解，对于未来的就业情况也没有清晰的认识，只是凭着一腔热情，想先学学大数据。
huifeideyugo123·2020-07-07 10:29

大数据学习（一） Linux学习

•新建虚拟机安装系统设定3个盘符，第一个为引导盘，第二个为内存占用盘，第三个为使用盘。设置IP地址1.–vi/etc/sysconfig/network-scripts/ifcfg-eth0•用#注释MAC地址•ONBOOT=yes•BOOTPROTO=static•IPADDR=192.168.1.250•NETMASK=255.255.255.0•GATEWAY=192.168.1.2•DNS
hpukevin·2020-07-07 09:38

2.5 Linux(Ubuntu18.04)安装数据库PostgreSQL

2.5Linux(Ubuntu18.04)安装数据库PostgreSQL“卜算子·大数据”一个开源、成体系的大数据学习教程。
王小雷-多面手·2020-07-07 07:52

大数据学习-Java JVM垃圾回收机制

一、概述：本文作为大数据基础的Java部分，上一篇说明了Linux的常用命令，今天学习了Java的高级特性，我们关注与Java的内存管理的机制，也就是垃圾是如何回收的俗称GC问题，这里用《深入理解Java虚拟机》的要解决的问题作为概述，解决三个问题：哪些内存需要回收？线程公有的部分，一般是Java堆和方法区，两个算法判断是否需要回收引用计数法和可达性分析算法（也称跟搜索法）什么时候回收？Java堆
慕久久·2020-07-07 06:22

大数据学习笔记之项目（二）：离线平台部署

文章目录离线平台部署项目开发流程项目调研项目需求分析1.3、方案设计1.3.1、概要设计1.3.2、详细设计编码实现1.4.1、单元测试1.4.2、集成测试1.4.3、压力测试1.4.4、用户测试二、大数据常用应用2.1、数据出售2.2、数据分析2.2.1、百度统计2.2.2、友盟2.2.3、其他统计分析组织2.3、搜索引擎2.3.1、solr2.3.2、luence2.3.3、luence&so
Leesin Dong·2020-07-07 06:20

超融合市场的战争远未结束，谁将最终胜出？

再回顾最近几年以来，DELLEMC、Cisco、HPE这些大厂商们挥舞着收购的大棒，将市场上数得着名号的超融合初创公司一并收入囊中。基于这些情况，或许大部分人会认同超融合市场格局已定。但真的会如此吗？
bigouzhe4719·2020-07-07 04:00

从边缘到云端的网络新体验，Aruba CX下一代交换平台重磅发布

2019年12月18日，HewlettPackardEnterprise公司（纽约证券交易所代码：HPE）旗下公司Aruba在中国宣布，公司正在通过引入新一代交换产品和软件的创新来改变网络规则，旨在满足当今现代企业园区
高科技网·2020-07-07 01:27

谁是最近三年全球服务器市场最大的赢家？ 你想不到

是HPE、Dell、IBM、Cisco这些巨头，还是Lenovo、Huawei、Inspur这些新贵？
大数网·2020-07-07 01:50

[大数据学习研究] 4. Zookeeper-分布式服务的协同管理神器

本来这一节想写Hadoop的分布式高可用环境的搭建，写到一半，发现还是有必要先介绍一下ZooKeeper这个东西。ZooKeeper理念介绍ZooKeeper是为分布式应用来提供协同服务的，而且ZooKeeper本身也是分布式的，由分布在至少三台机器上，这几台机器形成一个Quorum，就像一个剧团一样。这个团里有个团长，就是leader的角色，其他的是follower。这个剧团里的每个人脑子里都记
weixin_30951743·2020-07-06 19:57

大数据学习(十)mapjoin reducejoin

目的我们一开始有两个数据，一个是学生表另一个是选课表注：实际情况中学生表是一个比较小的表，二选课表是大表我们通过mapreduce程序实现将选课表中的学号换成姓名。得到新的数据mapjoin目录结构这一次并不需要用到reduce阶段，但是在reducejoin中会使用。我们先看相对简单的mapjoin。先看代码mapClasspackagemapJoin;importorg.apache.comm
Braylon1002·2020-07-06 15:45

大数据学习之Linux基础

大数据学习之Linux基础自定义Linux虚拟机安装网络配置1.node1网络配置2.通过快照克隆虚拟机3.配置其他三个节点虚拟机Linux简单命令shell命令运行原理图1.关机与重启2.判断命令的命令
zjh246890·2020-07-06 13:39

#大数据和云计算机技术社区#博客精选（2017）

#大数据和云计算技术社区#希望通过坚持定期分享能帮助同学在大数据学习道路上尽一份微博之力。大数据和云计算技术周报（第8期）:NoSQL特辑大数据和云计
大数据和云计算技术·2020-07-06 11:50

大数据学习路线（完整详细版）

java(Javase,javaweb)Linux(shell,高并发架构,lucene,solr)Hadoop(Hadoop,HDFS,Mapreduce,yarn,hive,hbase,sqoop,zookeeper,flume)机器学习(R,mahout)Storm(Storm,kafka,redis)Spark(scala,spark,sparkcore,sparksql,sparkstr
xinyuan_java·2020-07-06 09:26
上一页 19 20 21 22 23 24 25 26 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他