HPE大数据学习

大数据学习之路----HDFS与Eclipse的搭建----集群外提交

使用Eclipse来充当client来对集群中的文件进行上传下载一、环境搭建就像搭建java环境变量一样，在我的电脑>>>属性>>>高级系统设置>>>环境变量中可以看到有之前我们配置的系统变量JAVA_HOME,同样我们首先配置HADOOP_HOME第二我们要配置HADOOP_USER_NAME这里的名字一定要和虚拟机管理员的名字一致第三就是要修改Path在下面加入%HADOOP_HOME%\bi
十五亿程序员的希望·2020-09-13 22:32

大数据学习之路----Scala语言学习（类、方法、对象、继承、特质）

类、方法、对象、继承、特质Scala的类与Java、C++的类比起来更简洁，学完之后你会更爱Scala！！！1.1.类1.1.1.类的定义packagecn.bw.class_demo/**在Scala中，类并不用声明为public类型的。Scala源文件中可以包含多个类，所有这些类都具有共有可见性。*/classPerson{//用val修饰的变量是可读属性，有getter但没有setter（相
十五亿程序员的希望·2020-09-13 22:01

大数据学习之路-----JSch

JSch是JavaSecureChannel的缩写。JSch是一个SSH2的纯Java实现。它允许你连接到一个SSH服务器，并且可以使用端口转发，X11转发，文件传输等，当然你也可以集成它的功能到你自己的应用程序。本文只介绍如何使用JSch实现的SFTP功能。SFTP是SecureFileTransferProtocol的缩写，安全文件传送协议。可以为传输文件提供一种安全的加密方法。SFTP为SS
十五亿程序员的希望·2020-09-13 22:01

大数据学习之路----Scala语言学习（类型转换、判断、循环、元组、数组、集合）

一、类型转换Scala的类型转换分为三种:隐式转换、强制类型转换、值类型和字符串类型的转换1.隐式转换隐式转换又称为自动类型转换，当Scala程序在进行赋值或者运算的时候，精度小的类型自动转换为精度大的类型，这个就是自动类型转换例：vara:Int=‘a’、vard:Double=100注意：1)有多种类型进行混合运算时,系统首先将所有的类型,转换成精度最大的那种数据类型,然后再进行计算例：4.5
十五亿程序员的希望·2020-09-13 22:00

大数据学习第三课之hdfs的java客户端IO流和简单Util的文件操作（以idea展示，eclipse为辅）

方法一：第一种（在eclipse中，主要讲解环境）先进行依赖包引入，代码操作看方法二。导包（在java中的jar包）流程如此下：导入这两个包,这里就演示的包，common相同。先导入这第三个还有它lib第三方依赖包的全部：点击打开就导入了，下面也是。这里就是导入成功了（hdfs和hdfsbao包一样的，举个例子，我这里是hdfs，名字随便取）：方法二（一）：IO流的操作（idea中）首先就是建一个
一片程序的天空·2020-09-13 22:47

大数据学习笔记之Storm（一）：Storm

一Storm概述1.1离线计算是什么？离线计算：批量获取数据、批量传输数据、周期性批量计算数据、数据展示代表技术：Sqoop批量导入数据、HDFS批量存储数据、MapReduce批量计算数据、Hive批量计算数据1.2流式计算是什么流式计算：数据实时产生、数据实时传输、数据实时计算、实时展示代表技术：Flume实时获取数据、Kafka实时数据存储、Storm/JStorm实时数据计算、Redis实
Leesin Dong·2020-09-13 18:38

新华三开启计算新格局

鉴于组成这家公司的杭州华三通信技术有限公司和紫光华山科技有限公司（HPE在中国的服务器、存储和技术服务业务），原本在市场就具有极高的品牌知名度和市场号召力，人们有理由对这家公司寄予厚望。
weixin_33892359·2020-09-13 18:12

ESXI开启snmp协议方法

公司用VMware做虚拟化，15+HPE服务器做集群，现需要用zabbix监控其状态，于是想通过打开主机的snmp协议来采集数据，监控其状态，注意其数据是ESXI系统返回的。
weixin_30325793·2020-09-13 18:06

专访|HPE测试中心总监徐盛：测试新思维-DevOps，持续测试，更敏捷，更快速

2016年7月22日，「HPE&msup软件技术开放日」将在上海浦东新区,张江高科技园区纳贤路799号科荣大厦小楼2楼举办，msup携手HPE揭秘全球测试中心背后的12条技术实践。
weixin_34064653·2020-09-13 13:37

HPE以88亿美元向Micro Focus出售大部分软件业务

9月7日，HPE称已经同意以88亿美元的价格将其软件业务出售给英国公司MicroFocus。HPE股东将获得这家联合公司50.1%的股权，但HPE并没有控股权益。
weixin_34059951·2020-09-13 13:05

肖俊：HPE IT 的DevOps 实践分享

本篇文章来自于HPE和msup共同举办的技术开放日HPE测试技术总监肖俊的分享，由壹佰案例整理编辑。一、DevOps含义解析这是DevOps的趋势图。
weixin_33859231·2020-09-13 13:24

大数据学习笔记1

Hadoop学习笔记本文是关于在环境搭建过程中我个人遇到的问题的记录，所以并没有具体过程，过程大家可以自行在网上找，我也是在网上找的，并没有太大的区别。1.版本问题本人用的环境是：jdk1.8hadoop2.7.1zookeeper3.4.6hbase1.1.2其中，hadoop1.x和2.x差别非常大，并不通用，因此1.x的教程对于2.x来说基本上完全没有参考价值，当然如果深入到框架和原理，那肯
ruirui610·2020-09-13 12:37

徐盛：软件测试新趋势从超人时代到智慧测试时代

本篇文章来自于HPE和msup共同举办的技术开放日HPE测试中心总监徐盛的分享，由壹佰案例整理编辑。
Top100case-msup·2020-09-13 11:01

hpe故障_HPE和MapR：Hadoop过多，云不足

hpe故障云扼杀了Hadoop三位一体的命运-Cloudera，Hortonworks和MapR-相同的云可能不会使HPE成功，后者最近收购了MapR的业务资产。
cxq8989·2020-09-13 11:29

HPE和MapR：Hadoop过多，云不足

云扼杀了Hadoop三位一体的命运-Cloudera，Hortonworks和MapR-相同的云可能不会使HPE成功，后者最近收购了MapR的业务资产。
cxt70571·2020-09-13 11:29

HPE + MapR：Hadoop 过多，云 反而不足

云扼杀了Hadoop三位一体的命运——Cloudera，Hortonworks和MapR——相同的云可能不会使HPE成功，后者最近收购了MapR的业务资产。
cxq8989·2020-09-13 11:29

活动报名 |HPE慧与(原惠普)12月10日Devops公开课--敏捷之旅2017 北京站：Devops 专场

敏捷之旅2017北京站：Devops专场将于12月10日在HPE慧与（中国）有限公司举行活动时间：12月10日9:30-13:00活动地点：HPE慧与（中国）有限公司（广顺南大街8号院利星行中心A区2层
baktan01·2020-09-13 11:14

HPE 推出容器平台 Ezmeral，向 VMware 与 Red Hat 下战书

昨日HPEnterprise(HPE)宣布推出了专为加速企业数字化转型的软件组合品牌Ezmeral[1]，这个品牌包含了多项产品，包括容器调度与管理平台、AI和数据分析、跨云成本管控、IT自动化和网络安全等
米开朗基杨·2020-09-13 11:23

三驾马车已去，再论Hadoop已是凉凉

还有第三大Hadoop发行版厂商MapR差点破产，幸亏最后被HPE收购。因此，在自媒体上充满了各种说Hadoop凉凉的文章，铺天盖地。
架构师技术联盟·2020-09-13 11:03

这个“警钟”，是HPE带着MapR大数据公司给大家敲的

来自国外媒体纷纷报道了：HPE不知道花了多少钱，买下了这个叫MapR的大数据公司，MapR号称为“下一代Hadoop”而生的大数据技术服务提供商。
阿明观察·2020-09-13 10:43

HPE慧与(原惠普)12月10日Devops免费公开课报名--敏捷之旅2017 北京站：Devops 专场

敏捷之旅2017北京站：Devops专场将于12月10日在HPE慧与（中国）有限公司举行活动时间：12月10日9:30-13:00活动地点：HPE慧与（中国）有限公司（广顺南大街8号院利星行中心A区2层
baktan01·2020-09-13 10:01

重磅 | HPE 宣布收购 MapR！

美国当地时间2019年8月5日，惠普企业（HewlettPackardEnterprises，纽约证券交易所股票代码：HPE）宣布收购MapRTechnologiesInc.的业务资产！
Hadoop技术博文·2020-09-13 10:28

Hadoop 再凉凉，MapR 终被 HPE收购

今天这个谜底终于揭晓了，买家是从惠普分家出去的惠普企业HPE。说实话，这个谜底揭晓的时候，我一点也不吃惊。我私下里和人聊这个话题的时候猜过可能购买的三个公司：IBM，Dell
DevolperFront·2020-09-13 10:08

大数据公司MapR被惠普企业收购，看重竟然不是Hadoop能力

大数据软件公司MapR难以为继，被惠普企业HPE收购。8月6日，惠普企业HPE宣布将收购大数据基础软件企业、Hadoop技术三大巨头之一的MapRTechnologies的资产。
Z1Y492Vn3ZYD9et3B06·2020-09-13 10:59

大数据学习笔记1

一、大数据定义IBM用4V（Volume、Variety、Velocity、Value）来描述大数据所拥有的特点。（1）大容量（Volume），指数据体量巨大；（2）多形式（Variety），指数据类型多样；（3）高速率（Velocity），指数据以非常高的速率产生实时数据；（4）价值密度（Value），指价值密度低的数据为大数据（大数据伴随着从低价值的原始数据中进行深度挖掘和计算，从海量且形式各
q123_xi·2020-09-13 08:08

蓝桥杯练习系统习题-算法提高1

文章推荐精选java等全套学习资源精选java电子图书资源精选大数据学习资源java项目练习精选蓝桥杯练习系统习题-算法提高1题目搜索方式：Ctrl+F—->输入题目名称—>定位到解答.入门训练（详见算法
欧阳思海·2020-09-13 06:55

GSMA公布“与CTIA合作的2019 MWC洛杉矶”的首批细节

10月22至24日展示5G时代的“智联万物”和娱乐；宣布参展企业名单和扩大活动规模新亮点：与会者逾2.2万名，其中超过60%为高管，以及1,000多家企业将参会将参会的知名品牌：亚马逊、思科、爱立信、HPE
sinat_41698914·2020-09-13 02:17

大数据学习笔记之Hadoop环境配置(完全分布式搭建)

先搭一台伪分布式的服务，然后直接克隆2台，一共3台克隆完成后需要更改主机名hostnamectlset-hostname名称在/etc/sysconfig/network-scripts/ifcfg-ens33修改ip映射关系把这个地址改成你设置的地址在/etc/hosts文件中添加服务器地址用上面的操作我们可以搭好3台独立大队伪分布式服务接下来把3台连到一起在hadoop-2.7.3/etc/h
Java璐到底·2020-09-13 00:59

Spark MLlib 之 大规模数据集的相似度计算原理探索

更多内容参考——我的大数据学习之路——xingoo在spark中RowMatrix提供了一种并行计算相似度的思路，下面就来看看其中的奥妙吧！相似度相似度有很多种，每一种适合的场景都不太
weixin_33736048·2020-09-12 20:04

尚硅谷直播课:（韩顺平）2020大数据学习路线图、大数据开发课程笔记

尚硅谷直播课:2020大数据学习路线图,大数据开发链接：https://pan.baidu.com/s/18Feqa_63640xPB0fYJ8Ttg提取码：9bnr(此链接放这只为方便自己查阅，无恶意分享他人劳动成果之意
ningmengshuxiawo·2020-09-12 19:13

2019最新大数据学习路线

在中国，大数据也正迅速成为行业和市场的热点。专注与亚太及中国市场的市场调查机构泛亚咨询发布的调研数据显示，目前出现在各类招聘平台上与数据分析相关的招聘需求比去年同期相比，增长率高达67%；大数据相关高级职位的薪酬与其他同类技术职位相比平均高出43%以上。无论是世界范围内还是在中国，大数据浪潮正在深刻改变着各行各业，而各行各业对大数据人才的需求，以及技术从业者希望跻身大数据高级人才的需求也变得越来越
dfywlme7915·2020-09-12 18:32

2020尚硅谷大数据学习路线【最新版】

文章所有内容转自www.atguigu.com文章内容以尚硅谷官方(http://www.atguigu.com/download.shtml)为准！视频内容来自官网、B站，相关资料可在视频评论区领取。一、Java基础1.Java基础视频教程715集：https://www.bilibili.com/video/BV1Kb411W75N2.MySQL核心技术：https://www.bilibil
思唯李·2020-09-12 18:37

作为一个Android开发者，你迷茫了吗？

在这里我还是要推荐下我自己建的大数据学习交流qq裙：957205962，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享干货（只有大数据开发相关的），包括我自
数据工程师大牛·2020-09-12 15:09

什么条件下 零基础转行学大数据容易成功

大数据学习资料分享群：119599574谈起零基础学习大数据
大数据开发交流·2020-09-12 15:13

法线贴图的原理和实现

本文出自：http://shiba.hpe.sh.cn/jiaoyanzu/wuli/showArticle.aspx?
weixin_30888413·2020-09-12 14:04

大数据学习 ------- Hbase 与hadoop区别 Hbase 与关系型数据库的区别 Hbase特点

Hbase与hadoop的区别？1、HDFS是一个分布式文件系统，存储大量的数据。Hbase是数据库是建立在HDFS之上的2、HDFS不支持单条记录的快速检索，而Hbase检索是最基本的功能3、HDFS提供是一个高延迟的处理,hbase提供了单行记录低延迟的随机访问Hbase与关系型数据库的区别？1Hbase没有事务的支持，hbase存储的数据都是非结构化或者半结构化的数据，而关系型数据库存储的都
Z_Data·2020-09-12 10:46

大数据学习笔记27：MR案例——多输入源处理成绩

文章目录一、提出任务原始成绩数据任务1、整合两个文件的成绩数据任务2、统计每个学生各科平均分二、准备工作1、启动hadoop服务2、上传数据文件到HDFS3、创建Maven项目MultiInScore4、修改pom.xml文件，添加依赖5、创建log4j.properties文件三、完成任务1、创建ScoreRecordReader12、创建ScoreInputFormat13、创建ScoreRe
howard2005·2020-09-12 06:28

Zookeeper知识点总结

本文是大数据学习总结系列第二篇之ZooKeeper，上一篇是hadoopHadoop知识点整理本文是根据《从Paxos到Zookeeper分布式一致性原理与实践》的知识点进行整理总结。
大数据DL·2020-09-12 04:04

利用虚拟机快速搭建大数据学习平台

一.环境准备win7、vmware、centos镜像、crt远程登录软件1.1下载安装Vmware链接：https://pan.baidu.com/s/1_bwt383Y57n-OCrVJ59L8A提取码：7dpo下载完成后出现如下文件：点击VMware-workstation-full-14.1.3-9474260.exe文件进行安装，选择安装目录，输入文件中激活密钥。1.2下载虚拟机镜像下载地
坚持，再坚持一下·2020-09-12 03:59

大数据学习（一）：Hue Server简单介绍

一Hue架构图二Hue支持组件（Huewebserver）Hue支持展示多种组件，目前支持HDFS、Hive、YARN/MapReduce、Oozie、Solr、ZooKeeper以及Spark。Hue是建立在DjangoPython的Web框架上的Web应用程序，采用了MTV(模型M-模板T-视图V)的软件设计模式。（DjangoPython是开放源代码的Web应用框架。）Hue由“Superv
猪笨是念来过倒·2020-09-12 02:02

大数据学习40：Flume metric 注解

启动flume监控的一种方式：flume-ngagent\--namea1\--conf$FLUME_HOME/conf\--conf-file$FLUME_HOME/conf/exec-memory-hdfs-partition.conf\-Dflume.root.logger=INFO,console\-Dflume.monitoring.type=http\-Dflume.monitorin
月魂_123123·2020-09-12 02:15

大数据学习39：ElasticSearch 常用查询2

ES常用查询21、子条件查询：特定字段查询所指特定值Querycontext在查询中，除了判断文档是否满足查询条件外，ES还会计算一个_score来标识匹配程度。旨在判断目标文档和查询条件匹配的有多好。常用查询：(1)、全文本查询：针对文本类型数据#模糊匹配1POST127.0.0.1:9200/book/_search{"query":{"match":{"author":"wxk"}}}#模糊
月魂_123123·2020-09-12 02:15

大数据学习38：ElasticSearch 基础和常用命令-增删改查

基础概念集群和节点索引：含有相同属性的文档集合，索引通过名字识别，小写英文字母命名，不能中划线数字等类似database分片：每个索引都有多个分片，每个分片是一个Lucene索引好处：提高io读写效率分片只能在创建索引的时候指定，后期不能修改备份：拷贝一份分片就完成了分片的备份好处：当主分片不可用，备份即可顶替备份可以查询，可以分摊压力备份可以动态修改类型：索引可以定义一个或多个类型，文档必须属于
月魂_123123·2020-09-12 02:15

大数据学习11：Maven编译报错以及解决方法，配置aliyun库

一、场景在用maven对hadoop，spark等进行源码编译的时候，经常会遇到编译报错。以下为一些解决办法。二、报错与分析排查：[ERROR]Failedtoexecutegoalorg.apache.maven.plugins:maven-remote-resources-plugin:1.5:process(default)onprojectspark-yarn_2.11:Failedtor
月魂_123123·2020-09-12 02:14

服务器显卡直通和GPU问题分析

显卡适配关系服务器作为比较特殊的设备，和普通PC不同，支持的显卡型号有限，以下为我从HPE官网找到的显卡适配关系，与其说是显卡，不如说是GPU，更偏向于计算，适合搞AI（所以一开始有朋友问我是不要开始搞大数据或者人工智能了
Danileaf_Guo·2020-09-11 23:29

大数据学习之路97-kafka直连方式（spark streaming 整合kafka 0.10版本）

我们之前SparkStreaming整合Kafka的时候用的是傻瓜式的方式-----createStream,但是这种方式的效率很低。而且在kafka0.10版本之后就不再提供了。接下来我们使用Kafka直连的方式，这种方式其实是调用Kafka底层的消费数据的API,我们知道，越底层的东西效率也就越高。使用之前的方式是要连接到zookeeper的，而现在的方式则不需要。代码如下：packageco
爱米酱·2020-09-11 22:27

Flink从入门到放弃(入门篇1)-Flink是什么

图片显示不了，戳这里：github.com/wangzhiwubi…插个广告全网唯一一个从0开始帮助Java开发者转做大数据领域的公众号~公众号大数据技术与架构或者搜索import_bigdata关注，大数据学习路线最新更新
weixin_33770878·2020-09-11 17:21

在大数据学习中Hadoop和Spark哪个更好就业？

一提到大数据，人们就会想到Hadoop，然而，最近又有个Spark似乎成了后起之秀，也变得很火，似乎比Hadoop更具优势，更有前景，那么，想要学习大数据的学员就要问了，在大数据学习中Hadoop和Spark
大数据开发交流·2020-09-11 16:32

大数据学习之Flink——11侧输出流 Side Output

1.为什么需要SideStream在处理一个数据源时，往往需要将该源中的不同类型的数据做分割处理，如果使用filter算子对数据源进行筛选分割的话，势必会造成数据流的多次复制，造成不必要的性能浪费；flink中的侧输出就是将数据流进行分割，而不对流进行复制的一种分流机制。flink的侧输出的另一个作用就是对延时迟到的数据进行处理，这样就可以不必丢弃迟到的数据2.如何使用SideStream要使用S
Jiang锋时刻·2020-09-11 14:33

大数据处理框架的类型、比较和选择

在这里我还是要推荐下我自己建的大数据学习交流qq裙：522189307，裙里都是学大数据开发的，如果你正在学习大数据
深夜女的程序员敲代码·2020-09-11 12:45
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他