大数据hadoop

大数据hadoop入门之hadoop家族产品详解

阅读更多大数据这个词也许几年前你听着还会觉得陌生，但我相信你现在听到hadoop这个词的时候你应该都会觉得“熟悉”！越来越发现身边从事hadoop开发或者是正在学习hadoop的人变多了。作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐怕就已经足够让新手头疼。如果每一个发行版hadoop都可以做到像大快DKHadoop那样把各种环境搭建集成到一起，一次安装搞定所有，那对于
adnb34g·2018-12-26 15:00

大数据hadoop入门之hadoop家族产品详解

阅读更多大数据这个词也许几年前你听着还会觉得陌生，但我相信你现在听到hadoop这个词的时候你应该都会觉得“熟悉”！越来越发现身边从事hadoop开发或者是正在学习hadoop的人变多了。作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐怕就已经足够让新手头疼。如果每一个发行版hadoop都可以做到像大快DKHadoop那样把各种环境搭建集成到一起，一次安装搞定所有，那对于
adnb34g·2018-12-26 15:00

大数据Hadoop核心知识入门学习注意事项

今天来介绍新手学习hadoop的入门注意事项。这篇文章一来谈谈hadoop核心知识学习。首先hadoop分为hadoop1.X和hadoop2.X，并且还有hadoop生态系统，那么下面我们以hadoop2.x为例进行详细介绍：Hadoop的核心是mapreduce和hdfs。我还是要推荐下我自己创建的大数据资料分享群142973723，这是大数据学习交流的地方，不管你是小白还是大牛，小编都欢迎，
qq_43713878·2018-12-16 13:23

大数据Hadoop之HDFS模块《二》

上篇我们介绍了hdfs的一些概念和优缺点那么我们这篇便来说说hdfs的读写流程和一些常用的命令：《一》读写流程一、hdfs读流程（下载文件）1）client向namenode发出下载请求，namenode查询元数据信息，找到文件块所在的datanode，返回给client。2）client从返回的datanode中选择（就近原则，再随机）一个，请求下载。3）datanode开始传输数据给clent
Forever_ck·2018-11-24 09:05

大数据Hadoop之HDFS模块《》

相信看到这篇文章的对于Hadoop已经有了一点的理解，那么咱们废话少说，直接进入正题。**《一》HDFS的概念**先来看一个问题：什么是HDFS？它有什么用？**HDFS**，一个高可靠、高容错、高吞吐量，适合大规模数据集应用的分布式文件存储系统。所谓分布式，就是指将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性
Forever_ck·2018-11-23 16:34

大数据hadoop 面试经典题

1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂)2.hadoop的namenode宕机,怎么解决先分析宕机后的损失，宕机后直接导致client无法访问，内存中的元数据丢失，但是硬盘中的元数据应该还存在，如果只是节点挂了，重启即可，如果是机器挂了，重启机器后看节点是否能重启，不能重启就要找到原因修复了。但是最终的解决方案应该是在设计集
gongpulin·2018-11-19 15:00

《Cloudera hadoop大数据平台实战指南》此书2019年1月已上市

全书系统介绍了大数据的相关知识，全书共十八章（宋立桓老师撰写第一章到第十二章、陈建平撰写第十三章到第十八章），从大数据概述、Clouderahadoop平台的安装部署、并对大数据hadoop组件分别进行介绍
lihuansong·2018-11-14 20:48

零基础学习hadoop开发先明白这层关系

零基础学习hadoop开发先明白这层关系大数据hadoop无疑是当前互联网领域受关注热度最高的词之一，大数据技术的应用正在潜移默化中对我们的生活和工作产生巨大的改变。
本宫没空1·2018-11-06 09:15

大数据hadoop入门之hadoop家族详解

大数据这个词也许几年前你听着还会觉得陌生，但我相信你现在听到hadoop这个词的时候你应该都会觉得“熟悉”！越来越发现身边从事hadoop开发或者是正在学习hadoop的人变多了。作为一个hadoop入门级的新手，你会觉得哪些地方很难呢？运行环境的搭建恐怕就已经足够让新手头疼。如果每一个发行版hadoop都可以做到像大快DKHadoop那样把各种环境搭建集成到一起，一次安装搞定所有，那对于新手来说
首席数据师·2018-10-25 21:31

大数据Hadoop面试题整理

2018.10.221.抽象类与接口的区别？1.语法层面上的区别1）抽象类可以提供成员方法的实现细节，而接口中只能存在publicabstract方法；2）抽象类中的成员变量可以是各种类型的，而接口中的成员变量只能是publicstaticfinal类型的；3）接口中不能含有静态代码块以及静态方法，而抽象类可以有静态代码块和静态方法；4）一个类只能继承一个抽象类，而一个类却可以实现多个接口。2.设
大数据-刘耀文·2018-10-25 11:12

大数据 Hadoop介绍、配置与使用

大数据基础概念大数据Centos基础大数据Shell基础大数据ZooKeeper大数据Hadoop介绍、配置与使用大数据Hadoop之HDFS大数据MapReduce大数据Hive大数据Yarn大数据MapReduce
Notzuonotdied·2018-09-15 17:09

大数据 Shell基础

前言大数据基础概念大数据Centos基础大数据Shell基础大数据ZooKeeper大数据Hadoop介绍、配置与使用大数据Hadoop之HDFS大数据MapReduce大数据Hive大数据Yarn大数据
Notzuonotdied·2018-09-13 09:28

Python3 Flask框架

学习分享请注明地址：https://blog.csdn.net/Jackie_ZHF/article/details/82592928博主有时间会不定期更新大数据hadoopsparkstorm人工智能方面的博客目录一
Jackie_ZHF·2018-09-10 17:43

大数据Hadoop分布式文件系统HDFS

Hadoop分布式文件系统(HDFS)被设计成适合运行在通用硬件(commodityhardware)上的分布式文件系统。它和现有的分布式文件系统有很多共同点。但同时，它和其他的分布式文件系统的区别也是很明显的。HDFS是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。HDFS放宽了一部分POSIX约束，来实现流式读取文件系统数据的目的
java架构大数据浅析·2018-09-02 16:38

大数据hadoop集群搭建

1.服务器准备本案例使用虚拟机服务器来搭建HADOOP集群，所用软件及版本：Vmware14.0Centos6.764bit2.配置网卡终端输入vi/etc/sysconfig/neywork-scripts/ifcfg-eth0输入IP地址，子网掩码，网卡，域名服务器3.测试网卡配置是否正确重启网络服务输入servicenetworkrestart输入pingwww.baidu.com如果能pi
amin_hui·2018-08-19 17:51

数据转换工具Sqoop学习笔记

（导入导出是相对于HDFS）1.大数据Hadoop2.x协作.框架的功能2.Sqoop使用要点（核心）及企业版本讲解所以我们就使用CDH的发行版本，而不使用apache的。
无籽西瓜吃吗·2018-07-15 22:41

基于Hadoop离线大数据分析平台项目实战

其中数据分析主要依据大数据Hadoop生态系统常
小灯笼·2018-07-03 12:00

基于Hadoop离线大数据分析平台项目实战

其中数据分析主要依据大数据Hadoop生态系统常
小灯笼·2018-07-03 12:00

大数据Hadoop+Hive+Hbase的部署

1.基础环境的准备1.1准确4台服务器，尽量不要安装中文环境。1.2服务器的静态的IP的设置1.3系统安装的centos6.51.4所用的软件版本如下：jdk-7u79-linux-x64.tar.gzzookeeper-3.4.6.tar.gzhadoop-2.5.1-x64.tar.gzapache-hive-1.2.1-bin.tar.gzhbase-0.98.15-hadoop2-bin.
IT影风·2018-06-29 12:16

大数据Hadoop集群搭建

大数据Hadoop集群搭建一、环境服务器配置：CPU型号：Intel(R)Xeon(R)[email protected]核数：16内存：64GB操作系统版本：CentOSLinuxrelease7.5.1804
898009427·2018-05-30 14:43

zookeeper集群管理(1) zookeeper集群部署

zookeeper是一个分布式(集群)应用程序协调系统，具有分布式以及开源的特性，也是大数据hadoop生态中的一个基础服务，但不去不止用于hadoop系统。
毛小威·2018-05-22 20:03

hadoop的简介与伪分布的搭建

一：大数据hadoop简介二：hadoop的伪分布安装三：运行wordcount测试四：hadoop常用端口号五：hadoop的四大模块包含六：启动脚本：一：大数据hadoop简介hadoop简介：开源软件
flyfish225·2018-04-10 10:02

大数据Hadoop的基础知识与入门

随着大数据与云计算的应用十分广泛，在这里写一下我对大数据的基本认识与了解；一、大数据是啥？1.（1）举例子：商品推荐问题（1）、大量订单如何存储（2）、大量的订单如何计算（2）天气预报问题（1）、大量天气数据如何存储（2）、大量天气数据如何计算2.核心问题数据的存储与数据的计算3、Hadoop要解决的问题就是上面两个问题4.IBM提出大数据的定义5个v，就是关于数据量大单词二、如何学习大数据Had
baishimingbaishiming·2018-03-17 21:55

hive与hbase

最近在学习和整理大数据hadoop的资料时，突然发现一个简单又复杂的问题：hive与hbase是什么关系？怎么区分？
zx8167107·2018-02-11 14:27

《大数据Hadoop高性能企业专家实战视频课程》笔记

一、课程大纲课程目录：第1章课程大纲介绍12分钟1节1-1课程大纲介绍[免费观看]12:21第2章大数据的基础介绍20分钟1节2-1大数据的基础介绍[免费观看]20:52第3章大数据带来的影响24分钟2节3-11-云计算介绍[免费观看]13:343-22-物联网及3者关系10:46第4章ClouderaManager安装配置13分钟2节4-11-CentOS6.5_64位操作系统安装和配置05:0
JaxHIn·2018-01-27 17:56

大数据Hadoop之YARN

YARN概述YARN架构伪分布式下YARN配置文件的修改启动YARN启动YARN的过程中可能出现的问题停止YARN提交MapReduce作业到YARN上运行1.YARN概述全称：YetAnotherResourceNegotiator（另一种资源协调者）资源调度框架2.YARN架构1）ResourceManager:RM整个集群同一时间提供服务的RM只有一个，负责集群资源的统一管理和调度处理客户端
chao2016·2018-01-21 11:00

百万英雄类答题游戏的程序员打开方式

最近知识答题类的app应用和网站都很火所以机器人多了，，百度度秘、搜狗小汪等Python发挥了很大作用《百万英雄》《冲顶大会》《头脑王者》《一站到底》《芝士超人》《黄金十秒》《百万赢家》大数据Hadoop
天府云创·2018-01-12 14:23

大数据hadoop 面试经典题

1.在Hadoop中定义的主要公用InputFormat中，默认是哪一个？（A）A、TextInputFormatB、KeyValueInputFormatC、SequenceFileInputFormat1.下面哪个程序负责HDFS数据存储？（C）A.NameNodeB.JobTrackerC.DataNodeD.SecondaryNameNodeE.tasktracker2.HDFS中的blo
YYDU_666·2018-01-11 18:34

大数据Hadoop之HDFS

1.HDFS概述2.HDFS架构3.伪分布式下：HDFS配置文件的修改4.启动HDFS5.启动HDFS的过程中可能出现的问题6.停止HDFS7.HDFSshell的常用命令8.JavaAPI操作HDFS文件1.HDFS概述全称：HadoopDistributedFileSystem（Hadoop分布式文件系统）HDFS优点数据冗余、硬件容错处理流式的数据访问适合存储大文件可构建在廉价机器上HDFS
chao2016·2018-01-10 09:51

大数据Hadoop之环境搭建

1.环境参数2.下载地址3.相关的Linux操作4.Hadoop配置文件的修改5.下一步：进行HDFS配置1.环境参数编程语言：JAVALinux环境：Centos6.4Hadoop版本：CDH（hadoop-2.6.0-cdh5.7.0）2.下载地址JAVAJDK（版本：jdk-7u79-linux-x64）http://www.downza.cn/tags/jdk-7u79-linux-x64
chao2016·2018-01-07 22:30

全Hadoop2.x版本安装套路（以Hadoop2.6.0为例）

引言本人是一枚大学生，初探大数据Hadoop安装套路，详细描述安装过程及其我所认知的步骤因果，作为一段时间学习的成果，也希望能与大家一起交流。
chanson_22·2018-01-07 20:28

大数据学习系列之八----- Hadoop、Spark、HBase、Hive搭建环境遇到的错误以及解决方法

前言在搭建大数据Hadoop相关的环境时候，遇到很多了很多错误。我是个喜欢做笔记的人，这些错误基本都记载，并且将解决办法也写上了。因此写成博客，希望能够帮助那些搭建大数据环境的人解决问题。
虚无境·2018-01-07 19:24

大数据学习系列之八----- Hadoop、Spark、HBase、Hive搭建环境遇到的错误以及解决方法

前言在搭建大数据Hadoop相关的环境时候，遇到很多了很多错误。我是个喜欢做笔记的人，这些错误基本都记载，并且将解决办法也写上了。因此写成博客，希望能够帮助那些搭建大数据环境的人解决问题。
虚无境·2018-01-07 19:00

CDH5.7.2-Hadoop集群CentOS7下的搭建(离线安装)

CDH5.7.2-Hadoop集群CentOS7下的搭建(离线安装)标签：cdh大数据hadoopcentos安装转之blog.csdn.net/shawnhu007/article/details/52579204
yangxuan14·2017-12-15 10:42

大数据hadoop 面试经典题

1.从前到后从你教育背景(学过哪些课)到各个项目你负责的模块,问的很细(本以为他是物理学博士,但是所有的技术都懂)2.hadoop的namenode宕机,怎么解决先分析宕机后的损失，宕机后直接导致client无法访问，内存中的元数据丢失，但是硬盘中的元数据应该还存在，如果只是节点挂了，重启即可，如果是机器挂了，重启机器后看节点是否能重启，不能重启就要找到原因修复了。但是最终的解决方案应该是在设计集
首席撩妹指导官·2017-11-10 14:57

改做人工智能之前，90%的人都没能给自己定位

就在笔者还在读研的时候，大家都在议论：Java还是C++更好就业的问题、移动互联网时代正在到来、安卓还是iOS开发，当然也有更前沿的大数据Hadoop与Spark等技术的横行。
技术 · 杂谈·2017-10-31 00:00

500G JAVA视频网盘分享 (JEECG开源社区)

500GJAVA视频网盘分享(JEECG开源社区)[涵盖从java入门到深入架构，Linux、云计算、分布式、大数据Hadoop、ios、Android、互联网技术应有尽有]JEECG开源社区秉承开源宗旨
A心无旁骛·2017-06-05 09:33

新课程上线：Hadoop 2.x（六） 使用Avro实现序列化

购买大数据Hadoop课程套餐，享八五折优惠!!
collen7788·2017-04-29 17:23

大数据Hadoop

一、Linux基础课程1.Vmware虚拟机的介绍2.Vmware虚拟机的安装3.Vmware虚拟机的配置4.CentOS6.5版本下载5.CentOS6.5系统安装6.虚拟机通信配置7.Linux连接工具-Xshell简介8.系统常用配置讲解9.Linux系统简介10.目录简介11.帮助文档操作12.文件目录操作13.用户和组管理14.文件权限管理15.软件包管理16.系统命令管理17.VI-V
平平同学爱学习·2017-04-06 16:04

Step by Step 实现基于 Cloudera 5.8.2 的企业级安全大数据平台 - 前言

为了节省浏览器前的你的宝贵时间，这篇文集适合以下的读者：熟悉大数据Hadoop生态，具备一定Shell脚本能力、Linux系统知识的；熟悉ClouderaManager本身或有一定了解，希望对ClouderaManager
大数据之心·2017-02-17 00:12

hadoop与spark学习记录（一）

大数据hadoop与spark学习记录（一）大数据初学者，在网上小象学院查看了一个有关《大数据Hadoop与Spark学习经验》的视频，以下为其中的学习笔记。
_飞奔的蜗牛_·2016-12-11 21:13

大数据Hadoop基础

1简介Hadoop的系统环境是：Linux或者Unix。Hadoop有两个核心服务模块：DFS和YARN1.1DFS（存储）对于存储Hadoop提供了HDFS分布式文件系统（HadoopDistributedFileSystem，简称HDFS）。分布式文件系统吧文件分布存储到多个计算机节点上，很多的计算机节点构成了计算机集群；分布式文件系统由计算机集群中的多个节点构成，节点分为两类，一类叫“主节点
fengfeng2861285642·2016-11-03 23:52

Hadoop常见问题

本文摘自简书，gk4030的文章《个人总结：在大数据hadoop路上跳过的坑》环境说明：CentOS-6.4-x86_64-bin-DVD1.isohadoop-2.4.1.tar.gzhbase-0.98.3
Lee_Sung·2016-11-03 18:48

Hadoop常见问题

本文摘自简书，gk4030的文章《个人总结：在大数据hadoop路上跳过的坑》环境说明：CentOS-6.4-x86_64-bin-DVD1.isohadoop-2.4.1.tar.gzhbase-0.98.3
SungLee_1992·2016-11-03 18:00

大数据Hadoop快速入门

1、Hadoop生态概况Hadoop是一个由Apache基金会所开发的分布式系统集成架构，用户可以在不了解分布式底层细节情况下，开发分布式程序，充分利用集群的威力来进行高速运算与存储，具有可靠、高效、可伸缩的特点Hadoop的核心是YARN,HDFS,Mapreduce,常用模块架构如下2、HDFS源自谷歌的GFS论文，发表于2013年10月，HDFS是GFS的克隆版，HDFS是Hadoop体系中
hellojackyleon·2016-10-29 16:19

大数据Hadoop之HDFS认识

源自Google的GFS（Google分布式文件系统）论文，分布式文件系统（HDFS）是GFS的克隆版。HDFS负责数据文件的存储，可让多机器上分享存储空间，让实际上通过网络来访问文件的动作，用户就像是访问本地磁盘一样便捷。即使HDFS集群中某些节点脱机，整体来说系统仍然可以持续运作而不会有数据丢失。HDFS提供了一个低成本、高可靠、高容错、高性能的分布式文件系统。1.低成本主要体现在搭建HDFS
悟成·2016-10-27 15:02

大数据hadoop 面试经典题

1.在Hadoop中定义的主要公用InputFormat中，默认是哪一个？（A）A、TextInputFormatB、KeyValueInputFormatC、SequenceFileInputFormat1.下面哪个程序负责HDFS数据存储？（C）A.NameNodeB.JobTrackerC.DataNodeD.SecondaryNameNodeE.tasktracker2.HDFS中的blo
秉寒CHO·2016-10-14 22:58

Hadoop 2.X 从入门到精通系列视频课程套餐

购买大数据Hadoop课程套餐，享八五折优惠!!
collen7788·2016-08-07 13:28

500 G JAVA视频网盘分享(Jeecg社区)

500GJAVA视频网盘分享(Jeecg社区)[涵盖从java入门到深入架构，Linux、云计算、分布式、大数据Hadoop、ios、Android、互联网技术应有尽有]Jeecg社区秉承开源宗旨，分享社区
gz153016·2016-04-12 08:00

成都大数据Hadoop与Spark技术培训班

成都大数据Hadoop与Spark技术培训班中国信息化培训中心特推出了大数据技术架构及应用实战课程培训班，通过专业的大数据Hadoop与Spark技术架构体系与业界真实案例来全面提升大数据工程师、开发设计人员的工作水平
weixin_34129145·2016-04-11 21:00
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他