E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop那些事
No.2大数据入门 | 环境搭建:jdk1.8安装及环境配置
上一篇文章我们安装了虚拟机以及linux操作系统,接下来就要安装在操作系统上运作的大数据核心
hadoop
分布式系统基础架构!
滚滚红尘_8133
·
2024-02-08 11:43
Hadoop
多次格式化后如何解决
产生原因我们在配置
hadoop
中的hdfs时,会设置元数据的存储位置,如图所示要想解决此问题,先停止所有启动的服务stop-all.sh然后删除上图画出来的配置文件,这里三台机器都要删,最后进入
hadoop
(((φ(◎ロ◎;)φ)))牵丝戏安
·
2024-02-08 11:50
笔记
Hadoop
云计算
hadoop
hdfs
无常与永恒
活着的每一天都应是新鲜的图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App人们总认为某些事情不会发生在自己身上,其实,
那些事
离自己很近。
黄二先生
·
2024-02-08 10:18
滚雪球学 Python 之作用域下的 global 和 nonlocal 关键字
@[toc](滚雪球学Python第二轮)已完成的文章清单滚雪球学Python第二轮开启,进阶之路,列表与元组
那些事
儿说完列表说字典,说完字典说集合,滚雪球学Python关于Python中的字符串,我在补充两点
梦想橡皮擦
·
2024-02-08 10:37
2021-11-24
一,今天的感受是什么呢,有什么改变,做成了
那些事
情今天的感受是,我在一点点改变着我自己,还是我非常清晰的,能够够看到自己的改变,比如,和别人说话文字的精简,一句话表达出来,都体现着我的高价值,现在这是我在练习的部分我意识到自己需要有自己的框架
恬静520
·
2024-02-08 10:36
CentOS 7搭建
Hadoop
伪分布模式
配置文件:链接:https://pan.baidu.com/s/1rYvnxbyqXOG1DjI63dxbAw提取码:6e1l复制这段内容后打开百度网盘手机App,操作更方便哦1.1修改IP地址在虚拟机的命令行中输入下面的命令,修改网卡的配置文件vi/etc/sysconfig/network-scripts/ifcfg-ens33配置以下信息TYPE=Ethernet#类型为以太网BOOTPRO
clevercondy
·
2024-02-08 09:52
hadoop
linux
centos
【食品安全宣传】炎炎夏日,说说食品安全的
那些事
儿!
尚俭崇信守护阳光下的盘中餐食品安全宣传周俭以养德、诚信为本是中华民族的传统美德保障食品安全更需要尚俭崇信、德法并举1.什么是食品质量安全?食品质量安全是指食品质量状况对食用者健康、安全的保证程度。包括三方面内容:一是食品的污染导致的质量安全问题。例:生物性污染、化学性污染、物理性污染等。二是食品工业技术发展所带来的质量安全问题。如:食品添加剂、食品生产配剂、介质以及辐射食品、转基因食品等。三是滥用
8c417cd58818
·
2024-02-08 09:52
[tf]中的name_scope和variable_scope以及变量重用的
那些事
特性:两个都会给tf.Variable创建的变量加上命名前缀,但是tf.name_scope不会给tf.get_varibale创建的变量加上命名前缀,tf.variable_scope会给tf.get_variable创建的变量加上命名前缀,这么做是与这两个方法的作用有关的。name_scope的作用是为了在tensorboard中有折叠的层次化显示组件,不至于所有组件都糊在一起,比如我们有一个
VanJordan
·
2024-02-08 08:33
2018-07-14
复制/etc/skel目录为/home/tuser1改权限2、编辑/etc/group文件,添加组
hadoop
。
啊鑫007
·
2024-02-08 08:56
iPad 选购指南
后面有时间的话我也会给大家讲讲苹果二手产品的
那些事
儿,比如:有锁机,配置机,扩容机,硬解机,官换机有什么区别哪些可以碰哪些不能碰?二手卖家常说的充新,靓机,小花机,大花机,档口是什么意思?
Grit_王祎
·
2024-02-08 08:40
Python有趣|数据可视化
那些事
(二)
pyecharts可视化上文我们使用了Excel可视化,绘制了一个伪《经济学人》图表,这种方法在一定程度上解决了pandas的缺陷:不美观,功能不强大。但其操作起来复杂,手残党表示最不喜欢这种操作了。所以本节将讲解一个Python第三方库(pyecharts),可以完美解决这些问题。现在公众号很多数据分析文章的图片,都是用其绘制的,最主要的原因就是:操作简单图表美观图表类型多样这个是pyechar
罗罗攀
·
2024-02-08 08:39
Hadoop
生态漏洞修复记录
Hadoop
常用端口介绍HDFSNameNode50070dfs.namenode.http-addresshttp服务的端口50470dfs.namenode.https-addresshttps服务的端口
不会吐丝的蜘蛛侠。
·
2024-02-08 08:30
hadoop
大数据
分布式
Hadoop
2.7配置
core-site.xmlfs.defaultFShdfs://bigdata/ha.zookeeper.quorum192.168.56.70:2181,192.168.56.71:2181,192.168.56.72:2181-->
hadoop
.tmp.dir
不会吐丝的蜘蛛侠。
·
2024-02-08 08:59
Hadoop
hadoop
大数据
hdfs
hive2.3.2配置(带kerberos)
hive-env.shexport
HADOOP
_HEAPSIZE=2048export
HADOOP
_CLIENT_OPTS="-Xmx2g-Xms2g-Djava.net.preferIPv4Stack
不会吐丝的蜘蛛侠。
·
2024-02-08 08:59
Hadoop
hive
hadoop
大数据
高性能hbase配置
hbase-env.shexport
HADOOP
_HOME=/export/
hadoop
export
HADOOP
_CONF_DIR=/export/common/
hadoop
/confexportJAVA_HOME
不会吐丝的蜘蛛侠。
·
2024-02-08 08:59
Hadoop
hbase
数据库
大数据
HDFS执行balance报错:hdfs balance java.io.IOException: Another Balancer is running.. Exiting
现象:1、大数据
Hadoop
集群,HDFS扩容后,为了使各节点数据均衡,执行balance操作。2、启动hdfsbalance时,一直出现其他的balance在执行中,其实并没有执行。
不会吐丝的蜘蛛侠。
·
2024-02-08 08:29
Hadoop
hdfs
hadoop
java
大数据问题:
Hadoop
的web页面无法访问logs
HTTPERROR403Problemaccessing/logs/.Reason:Useryarnisunauthorizedtoaccessthispage.PoweredbyJetty://分析:1、有的说是权限问题,但是并没有用yarn用户启动
Hadoop
不会吐丝的蜘蛛侠。
·
2024-02-08 08:28
Hadoop
hadoop
hadoop
调优-hdfs配置优化
dfs.permissions.enabledtruedfs.namenode.handler.count90dfs.ha.automatic-failover.enabledtrue其它优化:dfs.hosts/export/
hadoop
不会吐丝的蜘蛛侠。
·
2024-02-08 08:28
Hadoop
hadoop
hdfs
big
data
spark运行失败The directory item limit of /spark_dir/spark_eventLogs is exceeded: limit=1048576 items=104
报错:org.apache.
hadoop
.ipc.RemoteException(org.apache.
hadoop
.hdfs.protocol.FSLimitException$MaxDirectoryItemsExceededException
不会吐丝的蜘蛛侠。
·
2024-02-08 08:58
Hadoop
spark
hadoop
hdfs
grafana+prometheus+hiveserver2(jmx_exporter+metrics)
文件开启metricshive.server2.metrics.enabledtruehive.service.metrics.codahale.reporter.classesorg.apache.
hadoop
.hive.common.metrics.metrics2
不会吐丝的蜘蛛侠。
·
2024-02-08 08:24
hive
Hadoop
grafana
prometheus
hive监控
jmx_exporter
hive_metrics
hadoop
学习笔记
下载安装伪分布式:1.国内源下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/
hadoop
/common/Indexof/apache/
hadoop
/commonhttps
草琳情
·
2024-02-08 08:54
hadoop
学习
笔记
日更教会我的
那些事
来参加日更已经13天了。从开始日更到现在,我发现我学习、改变了不少。日更教会了我什么呢?首先是让我养成了好习惯。从日更开始,我每天一睁眼就意识到有任务。可能是我平时生活、工作没有太大压力,所以我反而喜欢这种有些许压力的生活。于是我开始留心观察我的日常,我的亲友、同事等,也从中发现了不少以前未发现的事情,有了新的感悟,也让我了解人生和生活。同时也因为日更,让我暂时出现的灵感和感悟在一次次的丢失中,慢
xingyun2021
·
2024-02-08 07:15
flink on yarn
Per-JobCluster模式flinkrunflinkrunapplication-tyarn-application配置任务退出时保留Checkpoint从外部checkpoint恢复应用资料使用安装完
hadoop
3.3.4
枪枪枪
·
2024-02-08 07:46
flink
大数据
hadoop
Mac 安装多版本 protoc / protobuf
)brew安装brewinstallprotobuf#查看安装目录$whichprotoc/opt/homebrew/bin/protoc#2)配置环境变量vim~/.zshrc#protoc(for
hadoop
大数据王小皮
·
2024-02-08 07:26
操作配置
macos
sqoop导入数据到hdfs
Sqoop是apache旗下的一款”
Hadoop
和关系数据库之间传输数据”的工具导入数据:将MySQL,Oracle导入数据到
Hadoop
的HDFS、HIVE、HBASE等数据存储系统导出数据:从
Hadoop
鲲鹏猿
·
2024-02-08 06:40
hdfs
sqoop
hadoop
Hadoop
之环境配置
1.安装环境ubuntu2.安装jdk3.安装
Hadoop
1.在安装ubuntu时需要注意安装ubuntu创建用户,等待时间比较长,大家需要有点耐心。
鲲鹏猿
·
2024-02-08 06:39
big
data
数据库
数据库架构
说说相亲的
那些事
儿
今天就跟大家吐糟一下相亲的
那些事
儿。爱情本来是天时地利人和的事儿,可他们因为生活压力大,都急着匆匆赶路。相亲如果遇上直男,基本上没有什么话题可聊,基本上就是几句对话:你平时喜欢什么啊?
三心二意的家伙
·
2024-02-08 06:59
数据采集工具Sqoop、Datax、Flume、Canal
libcpmysql-connector-java-5.1.10.jar/sqoop-install-path/lib重命名文件并配置文件mvsqoop-env-template.shsqoop-env.sh#添加环境变量export
HADOOP
_COMMON_HOME
yue-verdure
·
2024-02-08 06:08
大数据
sqoop
flume
大数据
阿里云
大数据系列—数据迁移(Sqoop,Flume,DataX)对比学习(stage3)
个人大数据技术栈:DataX,Sqoop,
Hadoop
,Hive,Spark,Flink,Hbase,Kafka,Kettle,Azkaban,Airflow,Tableau…个人在学习领域:Python
道-闇影
·
2024-02-08 06:07
big
data
大数据
sqoop
flume
Zookeeper搭建集群步骤
[
hadoop
@note1~]$cat/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4
qq_22019789
·
2024-02-08 06:37
zookeeper
java
MapReduce的类型与格式
MapReduce的类型
Hadoop
的MapReduce中,map函数和reduce函数遵循如下格式:map:(k1,v1)--->list(k2,v2)combiner:(k2,list(v2))--
Vechace
·
2024-02-08 05:31
【原创文集】特殊考验“疫情防控”,时代使命“脱贫攻坚”
接下来,让我来分享一些有关脱贫攻坚战的
那些事
,坚信战“疫”必将胜利,脱贫攻坚志在必得。贯彻落实“两会”理念,奋力攻克两场硬仗。今年的“两会”,因受疫情的影响而延期举行。但也正是非常时期的“
19小教理
·
2024-02-08 05:53
时光易逝
令我们念念不忘的,也许并不是
那些事
和人,而是我们逝去的梦想和激情。——桐华请相信,那些偷偷溜走的时光,催老了我们的容颜,却丰盈了我们的人生。
瑾儿19
·
2024-02-08 04:26
Spark安装(Yarn模式)
一、解压链接:https://pan.baidu.com/s/1O8u1SEuLOQv2Yietea_Uxg提取码:mb4htar-zxvf/opt/software/spark-3.0.3-bin-
hadoop
3.2
莫噶
·
2024-02-08 04:44
搭建
spark
大数据
分布式
Hadoop
搭建(完全分布式)
bigdata-masterbigdata-slave1bigdata-salve2NameNodeNodeManagerNodeManagerSecondaryNameNodeDataNodeDataNodeResourceManagerNodeManagerDataNode目录一、jdk安装:二、
hadoop
莫噶
·
2024-02-08 04:14
搭建
分布式
hadoop
大数据
现成
Hadoop
安装和配置,图文手把手交你
为了可以更加快速的可以使用
Hadoop
,便写了这篇文章,想尝试自己配置一下的可以参考从零开始配置
Hadoop
,图文手把手教你,定位错误资源1.两台已经配置好的
hadoop
2.xshell+Vmware链接
叫我小唐就好了
·
2024-02-08 03:56
一些好玩的事
hadoop
大数据
分布式
课程设计
运维
高脂血症患者该怎么吃?
今天继续解读《你的病是吃出来的2》,去看看血脂
那些事
。很多人都认为吃进去的脂肪多,血液中移动的脂肪就会多,肚子上的脂肪自然也多,这是真的吗?科学研究发现,人肚子上的脂肪主要是碳水化合物摄入过多造成的。
小尾巴0907
·
2024-02-08 01:43
实习
那些事
1
从六月份写了的第一篇文章,时隔两个月,我又出现了。其实我不觉得自己是个文采有多好的人,之所以写是我觉得非常适合小白,我想怎么写就怎么写,与其说我把当成了一个软件,不如说我把他当成了我的日记本,每天记录着生活的点点滴滴。疫情当下,其实很多行业都特别难做,我大学的专业是国际商务,简单来说就是做外贸的,一出校园(去年12月份)我就开始疯狂地找工作实习,我去的那家公司是我面试的第一家,面试完的当天我就决定
小娄呀
·
2024-02-08 01:51
日更教会我的
那些事
(三)
荀子曰:“不积跬步无以至千里,不积小流无以成江海。”生活中,一些细小的习惯,看似不经意,实则力量无穷。好的习惯,能成就一个人,坏的习惯,足以毁掉一个人。长期坚持好的习惯,足以改变你的一生。古人言:“合抱之木,生于毫末;九层之台,起于垒土;千里之行,始于足下。”一分耕耘一分收获。你付出多少努力,决定你会收到多少成功。在日更打卡中,开始的时候好难,总觉得每天要发表的内容都会让你有种绞尽脑汁的压力。当你
香草芬芳
·
2024-02-08 01:27
时光带不走的记忆
人生的旅途,就是一场梦,那些人
那些事
,终究还是被时光打磨的不成样子。然后我们也会渐渐遗忘过去,那些人
那些事
那段时光。我曾经清醒的想过,青春里,无论外表如何打扮的光鲜华丽
月下良缘
·
2024-02-08 00:43
Spark Standalone 集群配置
ApacheMesos-一个通用的集群管理器,也可以运行
Hadoop
MapReduce和服务应用程序。(已弃用)
Hadoop
YARN-Hado
董可伦
·
2024-02-07 23:01
Spark
spark
大数据
分布式
| 我用180天转行新媒体运营
那些事
我曾经在很多地方看到“转行新媒体运营很后悔”类型的文章,打开却常是一些似是而非的内容。今天不做标题党,只想认真分享,180天,0经验大学生转行做新媒体运营,我挺后悔的。但若是给我一次重新转行的机会,我还是会做出同样的选择。以下我就简单分享自己转行新媒体运营的经历来分析我为什么会感到后悔,主要从新媒体运营难点切入。分为以下三点:大学生转行新媒体运营难点1:有冲突大学生转行新媒体运营难点2:技能多大学
洲洲吖_
·
2024-02-07 23:52
和人不能相亲的
那些事
儿
(关于头痛)今天下午好端端地头痛起来,就像无形中有人往你脑门钉了一颗钉子进来,越想拔出去越能感到脑皮层撕裂的抗拒。我不喜欢生病,尤其是咳嗽和头痛。因为他妈的一发作,就很难好起来。你要有十足的耐心和它周旋,做什么都要忍受有只手挠你的心。你还不能有半点不开心,否则受苦的只能是你和身边人。而事实上,人很少能看到自己的不开心,但不开心的五官却能使看到它的人不开心。比如医生,这个常年看病的职业者,从充满温情
追一苇渡江
·
2024-02-07 23:21
人生如梦
别人常说人生如梦那时的我太小不懂是真是假我也难分每天睡觉就爱做梦直到慢慢长大成人才懂人们说的是真都说人生如梦似梦非梦叫人朦都说人生如梦好梦坏梦都由心生整天活的浑浑噩噩不停的在浪费青春每天眼睛一闭一睁生活就像是在做梦人世间的
那些事
儿谁能够说的准都说人生如梦你说是梦不是梦都说人生如梦谁来帮我解解梦马全得二零一七年九月二十二
恒翊
·
2024-02-07 23:18
没有女人的男人们:阻碍男女关系的“盲点”
其实男女之间的
那些事
儿,说了几千年了,还是说不清楚。作为女性,其实很想知道,在男人看来,女人到底是什么样的一种存在?这本书由六篇短篇组成,从男人的视角谈了男人对待女人、对待爱情、对待性的一些问题。
当归姑娘2017
·
2024-02-07 23:17
凭什么中国原生沙鳅比不过外来的苦力泥鳅?我支持美丽的国产沙鳅
看官请坐好,请哗仔说说宠物鱼
那些事
儿~本文适合
哗仔说鱼
·
2024-02-07 22:39
Hadoop
系统应用之Zookeeper分布式集群部署
一、Zoopkeeper安装包下载安装【Zookeeper版本型号为3.4.10】1.下载Zookeeper安装包(地址)https://archive.apache.org/dist/zookeeper/zookeeper-3.4.10/2.上传安装包(SecureCRT&FX)通过软件FX将安装包上传到linux系统的/export/software/目录下3.解压Zookeeper安装包执行
-牧心-
·
2024-02-07 22:31
分布式
hadoop
java-zookeeper
《秦朝县城
那些事
》故事大纲|陪伴营·秦汉
《秦朝县城
那些事
》讲述了千年前,秦朝迁陵县一段时间里发生的故
是阿若啊
·
2024-02-07 21:54
Hadoop
| 集群配置(一)使用Shell脚本解决完全分布式集群节点之间的文件传输问题 | scp命令 | rsync命令
文章目录参考资料一、前言二、rsync远程同步工具三、使用shell编写分发脚本四、总结参考资料视频链接Linuxscp命令一、前言在
Hadoop
完全分布式集群环境下,里面的各个节点都是通过SSH免密登陆连接的
「已注销」
·
2024-02-07 21:20
#
大数据原理与应用
hadoop
分布式
linux
关于考试作弊
那些事
儿
现在大家都知道考试不能作弊,并且作弊已经列入法律,会判刑。说的倒是挺严肃,但是说真的,又有几个老师和学生去戳穿那些作弊的人呢?我不知道现在小学、初中老师怎么管的,但是我知道高中会考和大学考试作弊的人比比皆是。就会考而言,我几年前经历过,我知道不少学生会考的时候作弊的手段简直五花八门。有的把手机放鞋里,有的拿两个手机(上交一个,手里拿一个),有的把小抄写在小纸片上藏在袖子里、鞋里,更有甚者把小抄写在
十方星
·
2024-02-07 21:18
上一页
11
12
13
14
15
16
17
18
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他