hadoop学习资料

Hadoop2.7.6+Mysql5.7+Hive2.3.2+zookeeper3.4.6+kafka2.11+Hbase1.4.9+Sqoop1.4.7+Kylin2.4单机伪分布式安装及官方案例测

#################################################################最新消息：关于spark和Hudi的安装部署文档，本人已经写完，连接：Hadoop2.7.6
运维道上奔跑者·2024-02-04 05:43

程序员编程的10个实用技巧

小编是一个有着5年工作经验的java程序员，对于java，自己有做资料的整合，一个完整学习java的路线，学习资料和工具，我的jav
小宇java·2024-02-04 04:59

囤积知识也是一种病？原来这样可以治疗信息松鼠病！

朋友赠送了10G的学习资料课程，看起来真的好棒，先收藏起来再说！感觉自己做的PPT真烂，别人做的PPT怎么那么好，赶紧去报个课程，先报名再说！别人都去学写作了，我也赶紧去报个课程，学个文案写作吧！
阿云双双·2024-02-04 04:19

IT30知识星球—业务职能版块

说明：300份+干货资料全部存放在我的“知识星球中”，欢迎朋友们安装知识星球APP(付费社区)并领取140MB的内部学习资料，谢谢大家。
CIO40岁·2024-02-04 04:20

每周一译8:工場に飯を食わせてもらっていることを忘れるな。（别忘了是工厂现场养活了间接部门）

这也是我们部门特意翻译成中文每周一次早会上的学习资料。内容选自于日文原版《トヨタが「現場」でずっと繰り返してきた言葉》若松義人别忘了是工厂现场养活了公司的间接部门。
何春阳lilyamane·2024-02-04 02:59

2021-07-02

Hadoop集群构建配主机名vi/etc/sysconfig/networkNETWORKING=yesHOSTNAME=hadoop012.配置IP映射vi/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4
谢尔比比·2024-02-04 02:40

结束语_从困惑到启动

附，部分网络学习资料《计算机网络*自顶向下方法》《TCP/IP详解*卷一》左耳
【随风飘流】·2024-02-04 01:26

#教育增长圈#操盘手训练营第3期—赵峻—Day2—教育行业摸底

+绘本盒子一、营销模型1、模型框架：0元亲子课—99元月课训练营—1988元年课2、入口流量：朋友圈，公众号，微信群转发，合伙人分销体系3、流量转化动作A：识别二维码进微信群—引流加老师微信号发放免费学习资料
赵峻_3689·2024-02-03 22:25

hadoop、spark、flink集群修改默认ssh端口号

大数据集群在实际搭建过程中，其默认ssh端口不一定都是22，这时需要根据各自的配置文件进行适配。ssh端口号默认为22，以centos7.x为例，可以在/etc/ssh/sshd_config中进行修改，如下示例将22改为22222：#IfyouwanttochangetheportonaSELinuxsystem,youhavetotell#SELinuxaboutthischange.#sem
0X码上链·2024-02-03 21:12

Zookeeper集群安装

简介ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。
万总有点菜·2024-02-03 21:14

2019-10-08 大数据开发进阶之路

市场需要的水平熟练掌握Linux、SQL与HiveSQL掌握Hadoop生态主流技术，如HDFS/MapRedunce/Yarn/HBase/Flume等掌握Spark生态核心技术，如Spark架构/RDD
红瓦李·2024-02-03 20:39

Hadoop框架下MapReduce中的map个数如何控制

一个job的map阶段并行度由客户端在提交job时决定客户端对map阶段并行度的规划基本逻辑为：一、将待处理的文件进行逻辑切片（根据处理数据文件的大小，划分多个split），然后每一个split分配一个maptask并行处理实例二、具体切片规划是由FileInputFormat实现类的getSplits()方法完成切分规则如下：1.简单地按照文件的内容长度进行切片2.切片大小默认是datanode
piziyang12138·2024-02-03 20:13

每天学习进步一点点

慈光溪流学习资料发布2020年10月26日1、戒除邪淫，迎来最美丽最风光的自己https://mp.weixin.qq.com/s/MVUw3TbWVi6mF5AFMnb5Qw2、可怜！
b34351769eef·2024-02-03 17:12

Hadoop MapReduce 各阶段理解

Hadoop的MapReduce是一个很经典的分布式并行计算框架，一直对各个阶段的具体含义有些模糊。花时间看了下stackoverflow上的理解，记录一下。
phusFuNs·2024-02-03 16:10

阿里云服务器2核16G、4核32G、8核64G配置最新收费标准及活动价格

2核16G、8核64G、4核32G配置的云服务器处理器与内存比为1:8，这种配比的云服务器一般适用于数据分析与挖掘，Hadoop、Spark集群和数据库，缓存等内存密集型场景，因此，多为企业级用户选择，
阿里云最新优惠和活动汇总·2024-02-03 15:07

hadoop2.0之环境搭建详细流程

1、在安装hadoop2.0之前，需要准备好以下软件（如下图1）图1：然后将这两个软件共享到centos上（如下图2红箭头指向和图3红箭头指向所示）在vm这上面有个虚拟机，点击虚拟机后有个硬件和选项，点选项
hhf_Engineer·2024-02-03 14:51

[WPF学习资料] WPF简介

WindowsPresentationFoundation(WPF)是下一代显示系统，用于生成能带给用户震撼视觉体验的Windows客户端应用程序。使用WPF，可以创建广泛的独立应用程序以及浏览器承载的应用程序。WPF的核心是一个与分辨率无关并且基于向量的呈现引擎，旨在利用现代图形硬件的优势。WPF通过一整套应用程序开发功能扩展了这个核心，这些功能包括可扩展应用程序标记语言(XAML)、控件、数据
weixin_33856370·2024-02-03 14:07

hadoop使用公平调度器

数据量不大，做离线一个晚上就能轻松调度完，那时候使用的hadoop自带的调度器，容量调度器。但默认配置没有改，就会发生什么！root主leaf下面只有default。
向他一样rap·2024-02-03 13:22

基于springboot+vue的阿博图书馆管理系统(前后端分离)

博主主页：猫头鹰源码博主简介：Java领域优质创作者、CSDN博客专家、公司架构师、全网粉丝5万+、专注Java技术领域和毕业设计项目实战主要内容：毕业设计(Javaweb项目|小程序等)、简历模板、学习资料
猫头鹰源码(同名B站)·2024-02-03 12:09

晓兰的成功日记20210306

电脑里的英语资料与学习资料终于得到了分类归档，也做了清理，以前是看见资料就存起来，实际应用的少。今天整理的原则就是当前需要就保留，其余全部删除。根据精力和时间来看，我学不了那么多，就不必保留。
吕晓兰·2024-02-03 11:07

【数据开发】pyspark入门与RDD编程

spark与pyspark的关系spark是一种计算引擎，类似于hadoop架构下mapreduce，与mapr
小哈里·2024-02-03 08:58

（四）hive的搭建2

1.元数据服务的方式1.1编辑hive-site.xmlsudovihive-site.xml在文件最后增加以下内容hive.metastore.uristhrift://hadoop-master:90831.2
调试大师·2024-02-03 08:18

（三）hadoop之hive的搭建1

下载访问官方网站https://hive.apache.org/点击downloads点击Downloadareleasenow!点击https://dlcdn.apache.org/hive/选择最新的稳定版复制最新的url在linux执行下载命令wgethttps://dlcdn.apache.org/hive/hive-3.1.3/apache-hive-3.1.3-bin.tar.gz2.
调试大师·2024-02-03 08:48

hadoop 50070 无法访问问题解决汇总

解决办法1：[root@djt002hadoop]#vi/etc/selinux/config改为：SELINUX=disabled解决办法2：查看你的$HADOOP_HOME/etc/hadoop下的
無法複制·2024-02-03 08:13

Hadoop：学习HDFS，看完这篇就够了！

HDFS（HadoopDistributedFileSystem）是ApacheHadoop生态系统中的分布式文件系统，用于存储和处理大规模数据集。
爱写代码的July·2024-02-03 08:09

Hadoop：HDFS学习巩固——基础习题及编程实战

一HDFS选择题1.对HDFS通信协议的理解错误的是？A.客户端与数据节点的交互是通过RPC（RemoteProcedureCall）来实现的B.HDFS通信协议都是构建在IoT协议基础之上的C.名称节点和数据节点之间则使用数据节点协议进行交互D.客户端通过一个可配置的端口向名称节点主动发起TCP连接，并使用客户端协议与名称节点进行交互BHDFS通信协议构建在TCP/IP协议基础之上2.HDFS的
爱写代码的July·2024-02-03 08:09

hadoop 3.x 案例5:Flink SQL运行报错

文章目录一.问题描述二.解决方案参考:一.问题描述启动yarnsession后，运行FlinkSQL，报错。命令:--启动yarn-session/home/flink-1.15.2/bin/yarn-session.sh-d--在yarnsession模式下启动flinksql/home/flink-1.15.2/bin/sql-client.shembedded-syarn-session--
只是甲·2024-02-03 06:31

迎接新的小伙伴

2.学习资料。先讲总括，再讲细节，可以穿插平时的注意要点3.总结。一是先好好消化材料，牢牢掌握报考政策。二是结合每日的电话咨询，逐步加深对政
每一天都来过·2024-02-03 01:07

apache hadoop 2.4.0 64bit 在windows8.1下直接安装指南（无需虚拟机和cygwin）

工作需要，要开始搞hadoop了，又是大数据，自己感觉大数据、云，只是ERP、SOAP风潮之后与智能地球一起诞生的概念炒作。不过Apache是个神奇的组织，Java如果没有它也不会现在如火中天。
夜魔009·2024-02-03 00:56

SpringBoot+Vue项目线上教学平台

MYSQL5.7使用框架:springboot+vueJDK版本：jdk1.8前言介绍本系统地描绘了整个网上线上教学平台的设计与实现，主要实现的功能有以下几点：管理员；首页、个人中心、学员管理、资料类型管理、学习资料管理
一季春秋·2024-02-03 00:16

Hadoop生态圈-组件介绍

Hadoop是目前应用最为广泛的分布式大数据处理框架，其具备可靠、高效、可伸缩等特点。Hadoop的核心组件是HDFS、MapReduce。
苏尔伯特·2024-02-03 00:19

失眠碎碎念

晚上睡觉前想着明天早起要做的事情，学英语，遛狗锻炼，阅读，写东西，还有上午要找学习资料，开始学习拍照剪辑小红书运营，等等，结果越想越兴奋，越想越焦虑，导致此刻我仍然没有困意。不知道大家是不是也会这
德大力·2024-02-03 00:45

测试环境搭建整套大数据系统（一：基础配置，修改hostname，hosts，免密，时间同步）

vim/etc/hostnamexdso-hadoop-test-001vim/etc/hosts192.168.50.60xdso-hadoop-test-001192.168.50.61xdso-ha
宇智波云·2024-02-03 00:15

搭建hadoop单机环境

hadoop笔记sbin:一些启动脚本【服务端的serverbin】logs:存放hadoop相关日志bin:客户端的脚本etc:hadoop相关的配置文件格式化文件系统配置免密码登录ssh-keygen-trsa-P
.Passion·2024-02-02 23:12

Hadoop单机环境搭建

Hadoop单机环境搭建一、jdk环境二、IP地址和主机名映射三、生成公私钥授权四、下载解压Hadoop五、配置Hadoop环境变量六、修改Hadoop配置文件七、关闭防火墙八、初始化九、启动十、Yarn
三暮辰·2024-02-02 23:42

docker搭建单机hadoop

docker搭建单机hadoop前言一、docker是什么？二、hadoop是什么？
阿桔是只猫·2024-02-02 23:41

手把手教Hadoop环境搭建，学不会你咬我～

之前后台小伙伴私信我想了解hadoop的单机环境安装，以方便用于hadoop学习，今天给大家安排上了，废话不多说，直接上干货。
程序IT圈·2024-02-02 23:11

hadoop单机模式搭建

1.新建虚拟机给虚拟机命名，选择存放路径接着指定磁盘大小，因为我们不止搭建单机模式还要搭建伪分布模式，这里我们选择80G这里会看到创建虚拟机完成，我们点击自定义硬件，选择合适的内存，处理器，还有映像文件，这里我们用不到声卡和打印机可以给他移除根据自己电脑配置选择合适的，这里我们选择完之后是这样的然后我们开启虚拟机
H6666W·2024-02-02 23:10

HADOOP_MAPRED_HOME=${full path of your hadoop distribution directory}

场景在Hadoop3.13的YARN上运行MapReduce报错信息终端界面提示FAILED:ExecutionError,returncode2fromorg.apache.hadoop.hive.ql.exec.mr.MapRedTask
小基基o_O·2024-02-02 23:10

单机搭建hadoop环境（包括hdfs、yarn、hive）

单机可以搭建伪分布式hadoop环境，用来测试和开发使用，hadoop包括：hdfs服务器yarn服务器，yarn的前提是hdfs服务器，在前面两个的基础上，课可以搭建hive服务器，不过hive不属于
howard_shooter·2024-02-02 23:39

基于springboot+vue的旅游管理系统(前后端分离)

博主主页：猫头鹰源码博主简介：Java领域优质创作者、CSDN博客专家、公司架构师、全网粉丝5万+、专注Java技术领域和毕业设计项目实战主要内容：毕业设计(Javaweb项目|小程序等)、简历模板、学习资料
猫头鹰源码(同名B站)·2024-02-02 23:06

Hadopp未授权访问导致RCE

前言：Hadoop是一个开源的分布式计算框架，用于处理大规模数据集的存储和处理。
安鸾彭于晏·2024-02-02 22:27

基于语雀的白嫖博客

在这之后一直在使用语雀记录各种学习资料，感觉非常的方便，还支持数学公式、思维导图、插入PDF、代码高亮等功能。
kadog·2024-02-02 21:40

Python3中真真假假True、False、None等含义详解

Python中的真假有着更加广阔的含义范围，Python会把所有的空数据结构视为假，比如[](空列表)、{}（空集合）、''（空字符串）等，而与之相反的非空数据结构即为真学习Python中的小伙伴，需要学习资料的话
A遇上方知友·2024-02-02 20:25

6月11日第二十八次早课（sqoop）

主要用于在Hadoop与RDBMS间进行数据的传递2.sqoop分为哪两个分支，各最新版本是什么?
ly稻草·2024-02-02 19:55

深度学习的开源分布式框架Deeplearning4j

该框架基本上是由Hadoop和Spark集成的分布式深度学习库组成的。在Hadoop和Spark的帮助下，我们可以轻松地分发模型和大数据集，并运行
weixin_43106248·2024-02-02 19:13

Linux配置jdk8错误：/usr/libexec/grepconf.sh: line 5: grep: command not found 导致Linux基础命令无法使用

shell窗口或者重启Linux的时候，又出现了找不到命令的错误，一直在查资料，类似的exportxxx命令都可以临时解决问题，却在根源上解决不了问题1.打开.bash_profile文件[`root@hadoop000
独恋彼岸花·2024-02-02 18:30

Hive和Hbase的各自适用场景

一、区别：Hbase：Hadoopdatabase的简称，也就是基于Hadoop数据库，是一种NoSQL数据库，主要适用于海量明细数据（十亿、百亿）的随机实时查询，如日志明细、交易清单、轨迹行为等。
yoku酱·2024-02-02 17:36

日语学习：关于日语学习方法的总结

对于初学者想更轻松的学好日语，这里给大家准备了一套系统学习教程资源，日语学习扣裙：前三位是539，中间三位是六七八，最后三位是101，带你飞速学好日语,你想要的日语学习资料这都有！
池仙大师x·2024-02-02 15:18

Hadoop原理

Hadoop框架分布式文件存储-HDFS即Hadoop内提供分布式数据存储的文件系统分布式计算框架-MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件
我走之後·2024-02-02 14:25
上一页 11 12 13 14 15 16 17 18 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他