hadoop那些事

2021-02-08

站在三尺讲台上还是聊聊“支点”那些事比较靠谱！课堂上，抛出一个问题，让学生进行活动，有的时候就是因为缺乏合适的“支点”，导致学生思考问题不够透彻，不够深刻，浮于表面，迁移不畅。
莫道来日方长·2024-02-08 15:40

职场的那些事-和领导发生争吵怎么办（二）

昨天下午的时候D接到开户银行的电话，说按照央行要求，需要我公司提供一些资料，准备齐全后需要送到银行柜台。B领导按要求准备好资料后，对D说，待会银行打电话过来，你就送到银行吧。D在休产假前一直负责我们公司的银行对接业务，后来因为生孩子，她的工作有一部分转接给了E，但银行预留的联系人还是D，这次银行也是直接给D打的电话，并且在公司职位上她依然没变，只是工作内容上有些变化。D听到B领导这样安排工作后，愣
Hey锦·2024-02-08 15:11

深入理解Spark的前世今生

Spark，是一种通用的大数据计算框架，正如传统大数据技术Hadoop的MapReduce、Hive引擎，以及Storm流式实时计算引擎等。
闲云野鹤~~~·2024-02-08 14:01

配置集群时间同步

配置集群时间同步:1.时间服务器配置(必须root用户)检查ntp是否安装[root@hadoop102桌面]#rpm-qa|grepntpntp-4.2.6p5-10.el6.centos.x86_64fontpackages-filesystem
sixleaves·2024-02-08 14:49

院内那些事

连续两天都接诊到两个三十多岁的年轻女性得了乳腺癌。心情不得忧郁起来，感叹生命的脆弱，以前总是觉得癌症离我好远好远。自从发生妈妈的事件后，我才发现在我的生活上，癌症就在我身边。我观察了一下这两位年轻人，一位大概34岁的衣着打扮是非常精致的，而且长得非常漂亮。想必她对待生活也是一丝不苟的。所以生活上难免会委屈自己一下，长期的肝郁就会导致癌症的发生。另外一位是36岁的，身材高大肥胖，皮肤黝黑，不修边幅，
月儿与艾缘·2024-02-08 13:31

SQL在云计算中的新角色：重新定义数据分析

文章目录1.云计算与数据分析的融合2.SQL在云计算中的新角色3.分布式SQL查询引擎4.SQL-on-Hadoop解决方案5.SQL与其他数据分析工具的集成6.实时数据分析与SQL7.SQL在云数据仓库中的角色
程序边界·2024-02-08 13:01

《生娃后，你后悔吗？》

但似乎没人对国家是否开放三胎感兴趣，那不关我们的事，别说高龄产妇问题多了，光是养娃教育那些事，就折腾的人筋疲力尽了。新时代的女性很多都要兼顾家庭与工作，养家糊口不容易啊！
静语一念间·2024-02-08 12:16

No.2大数据入门 | 环境搭建：jdk1.8安装及环境配置

上一篇文章我们安装了虚拟机以及linux操作系统，接下来就要安装在操作系统上运作的大数据核心hadoop分布式系统基础架构！
滚滚红尘_8133·2024-02-08 11:43

Hadoop多次格式化后如何解决

产生原因我们在配置hadoop中的hdfs时，会设置元数据的存储位置，如图所示要想解决此问题，先停止所有启动的服务stop-all.sh然后删除上图画出来的配置文件，这里三台机器都要删，最后进入hadoop
(((φ(◎ロ◎;)φ)))牵丝戏安·2024-02-08 11:50

无常与永恒

活着的每一天都应是新鲜的图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App图片发自App人们总认为某些事情不会发生在自己身上，其实，那些事离自己很近。
黄二先生·2024-02-08 10:18

滚雪球学 Python 之作用域下的 global 和 nonlocal 关键字

@[toc](滚雪球学Python第二轮)已完成的文章清单滚雪球学Python第二轮开启，进阶之路，列表与元组那些事儿说完列表说字典，说完字典说集合，滚雪球学Python关于Python中的字符串，我在补充两点
梦想橡皮擦·2024-02-08 10:37

2021-11-24

一，今天的感受是什么呢，有什么改变，做成了那些事情今天的感受是，我在一点点改变着我自己，还是我非常清晰的，能够够看到自己的改变，比如，和别人说话文字的精简，一句话表达出来，都体现着我的高价值，现在这是我在练习的部分我意识到自己需要有自己的框架
恬静520·2024-02-08 10:36

CentOS 7搭建Hadoop伪分布模式

配置文件：链接：https://pan.baidu.com/s/1rYvnxbyqXOG1DjI63dxbAw提取码：6e1l复制这段内容后打开百度网盘手机App，操作更方便哦1.1修改IP地址在虚拟机的命令行中输入下面的命令，修改网卡的配置文件vi/etc/sysconfig/network-scripts/ifcfg-ens33配置以下信息TYPE=Ethernet#类型为以太网BOOTPRO
clevercondy·2024-02-08 09:52

【食品安全宣传】炎炎夏日，说说食品安全的那些事儿！

尚俭崇信守护阳光下的盘中餐食品安全宣传周俭以养德、诚信为本是中华民族的传统美德保障食品安全更需要尚俭崇信、德法并举1.什么是食品质量安全？食品质量安全是指食品质量状况对食用者健康、安全的保证程度。包括三方面内容：一是食品的污染导致的质量安全问题。例：生物性污染、化学性污染、物理性污染等。二是食品工业技术发展所带来的质量安全问题。如：食品添加剂、食品生产配剂、介质以及辐射食品、转基因食品等。三是滥用
8c417cd58818·2024-02-08 09:52

[tf]中的name_scope和variable_scope以及变量重用的那些事

特性：两个都会给tf.Variable创建的变量加上命名前缀，但是tf.name_scope不会给tf.get_varibale创建的变量加上命名前缀，tf.variable_scope会给tf.get_variable创建的变量加上命名前缀，这么做是与这两个方法的作用有关的。name_scope的作用是为了在tensorboard中有折叠的层次化显示组件，不至于所有组件都糊在一起，比如我们有一个
VanJordan·2024-02-08 08:33

2018-07-14

复制/etc/skel目录为/home/tuser1改权限2、编辑/etc/group文件，添加组hadoop。
啊鑫007·2024-02-08 08:56

iPad 选购指南

后面有时间的话我也会给大家讲讲苹果二手产品的那些事儿，比如：有锁机，配置机，扩容机，硬解机，官换机有什么区别哪些可以碰哪些不能碰？二手卖家常说的充新，靓机，小花机，大花机，档口是什么意思？
Grit_王祎·2024-02-08 08:40

Python有趣|数据可视化那些事（二）

pyecharts可视化上文我们使用了Excel可视化，绘制了一个伪《经济学人》图表，这种方法在一定程度上解决了pandas的缺陷：不美观，功能不强大。但其操作起来复杂，手残党表示最不喜欢这种操作了。所以本节将讲解一个Python第三方库（pyecharts），可以完美解决这些问题。现在公众号很多数据分析文章的图片，都是用其绘制的，最主要的原因就是：操作简单图表美观图表类型多样这个是pyechar
罗罗攀·2024-02-08 08:39

Hadoop生态漏洞修复记录

Hadoop常用端口介绍HDFSNameNode50070dfs.namenode.http-addresshttp服务的端口50470dfs.namenode.https-addresshttps服务的端口
不会吐丝的蜘蛛侠。·2024-02-08 08:30

Hadoop2.7配置

core-site.xmlfs.defaultFShdfs://bigdata/ha.zookeeper.quorum192.168.56.70:2181,192.168.56.71:2181,192.168.56.72:2181-->hadoop.tmp.dir
不会吐丝的蜘蛛侠。·2024-02-08 08:59

hive2.3.2配置(带kerberos)

hive-env.shexportHADOOP_HEAPSIZE=2048exportHADOOP_CLIENT_OPTS="-Xmx2g-Xms2g-Djava.net.preferIPv4Stack
不会吐丝的蜘蛛侠。·2024-02-08 08:59

高性能hbase配置

hbase-env.shexportHADOOP_HOME=/export/hadoopexportHADOOP_CONF_DIR=/export/common/hadoop/confexportJAVA_HOME
不会吐丝的蜘蛛侠。·2024-02-08 08:59

HDFS执行balance报错：hdfs balance java.io.IOException: Another Balancer is running.. Exiting

现象：1、大数据Hadoop集群，HDFS扩容后，为了使各节点数据均衡，执行balance操作。2、启动hdfsbalance时，一直出现其他的balance在执行中，其实并没有执行。
不会吐丝的蜘蛛侠。·2024-02-08 08:29

大数据问题：Hadoop的web页面无法访问logs

HTTPERROR403Problemaccessing/logs/.Reason:Useryarnisunauthorizedtoaccessthispage.PoweredbyJetty://分析：1、有的说是权限问题，但是并没有用yarn用户启动Hadoop
不会吐丝的蜘蛛侠。·2024-02-08 08:28

hadoop调优-hdfs配置优化

dfs.permissions.enabledtruedfs.namenode.handler.count90dfs.ha.automatic-failover.enabledtrue其它优化：dfs.hosts/export/hadoop
不会吐丝的蜘蛛侠。·2024-02-08 08:28

spark运行失败The directory item limit of /spark_dir/spark_eventLogs is exceeded: limit=1048576 items=104

报错：org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.protocol.FSLimitException$MaxDirectoryItemsExceededException
不会吐丝的蜘蛛侠。·2024-02-08 08:58

grafana+prometheus+hiveserver2(jmx_exporter+metrics)

文件开启metricshive.server2.metrics.enabledtruehive.service.metrics.codahale.reporter.classesorg.apache.hadoop.hive.common.metrics.metrics2
不会吐丝的蜘蛛侠。·2024-02-08 08:24

hadoop学习笔记

下载安装伪分布式：1.国内源下载地址：https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/Indexof/apache/hadoop/commonhttps
草琳情·2024-02-08 08:54

日更教会我的那些事

来参加日更已经13天了。从开始日更到现在，我发现我学习、改变了不少。日更教会了我什么呢？首先是让我养成了好习惯。从日更开始，我每天一睁眼就意识到有任务。可能是我平时生活、工作没有太大压力，所以我反而喜欢这种有些许压力的生活。于是我开始留心观察我的日常，我的亲友、同事等，也从中发现了不少以前未发现的事情，有了新的感悟，也让我了解人生和生活。同时也因为日更，让我暂时出现的灵感和感悟在一次次的丢失中，慢
xingyun2021·2024-02-08 07:15

flink on yarn

Per-JobCluster模式flinkrunflinkrunapplication-tyarn-application配置任务退出时保留Checkpoint从外部checkpoint恢复应用资料使用安装完hadoop3.3.4
枪枪枪·2024-02-08 07:46

Mac 安装多版本 protoc / protobuf

)brew安装brewinstallprotobuf#查看安装目录$whichprotoc/opt/homebrew/bin/protoc#2)配置环境变量vim~/.zshrc#protoc(forhadoop
大数据王小皮·2024-02-08 07:26

sqoop导入数据到hdfs

Sqoop是apache旗下的一款”Hadoop和关系数据库之间传输数据”的工具导入数据：将MySQL，Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统导出数据：从Hadoop
鲲鹏猿·2024-02-08 06:40

Hadoop之环境配置

1.安装环境ubuntu2.安装jdk3.安装Hadoop1.在安装ubuntu时需要注意安装ubuntu创建用户，等待时间比较长，大家需要有点耐心。
鲲鹏猿·2024-02-08 06:39

说说相亲的那些事儿

今天就跟大家吐糟一下相亲的那些事儿。爱情本来是天时地利人和的事儿，可他们因为生活压力大，都急着匆匆赶路。相亲如果遇上直男，基本上没有什么话题可聊，基本上就是几句对话：你平时喜欢什么啊？
三心二意的家伙·2024-02-08 06:59

数据采集工具Sqoop、Datax、Flume、Canal

libcpmysql-connector-java-5.1.10.jar/sqoop-install-path/lib重命名文件并配置文件mvsqoop-env-template.shsqoop-env.sh#添加环境变量exportHADOOP_COMMON_HOME
yue-verdure·2024-02-08 06:08

大数据系列—数据迁移(Sqoop,Flume,DataX)对比学习（stage3）

个人大数据技术栈：DataX,Sqoop,Hadoop,Hive,Spark,Flink,Hbase,Kafka,Kettle,Azkaban,Airflow,Tableau…个人在学习领域：Python
道-闇影·2024-02-08 06:07

Zookeeper搭建集群步骤

[hadoop@note1~]$cat/etc/hosts127.0.0.1localhostlocalhost.localdomainlocalhost4localhost4.localdomain4
qq_22019789·2024-02-08 06:37

MapReduce的类型与格式

MapReduce的类型Hadoop的MapReduce中，map函数和reduce函数遵循如下格式：map：(k1,v1)--->list(k2,v2)combiner：（k2,list(v2)）--
Vechace·2024-02-08 05:31

【原创文集】特殊考验“疫情防控”，时代使命“脱贫攻坚”

接下来，让我来分享一些有关脱贫攻坚战的那些事，坚信战“疫”必将胜利，脱贫攻坚志在必得。贯彻落实“两会”理念，奋力攻克两场硬仗。今年的“两会”，因受疫情的影响而延期举行。但也正是非常时期的“
19小教理·2024-02-08 05:53

时光易逝

令我们念念不忘的，也许并不是那些事和人，而是我们逝去的梦想和激情。——桐华请相信，那些偷偷溜走的时光，催老了我们的容颜，却丰盈了我们的人生。
瑾儿19·2024-02-08 04:26

Spark安装（Yarn模式）

一、解压链接：https://pan.baidu.com/s/1O8u1SEuLOQv2Yietea_Uxg提取码：mb4htar-zxvf/opt/software/spark-3.0.3-bin-hadoop3.2
莫噶·2024-02-08 04:44

Hadoop搭建（完全分布式）

bigdata-masterbigdata-slave1bigdata-salve2NameNodeNodeManagerNodeManagerSecondaryNameNodeDataNodeDataNodeResourceManagerNodeManagerDataNode目录一、jdk安装：二、hadoop
莫噶·2024-02-08 04:14

现成Hadoop安装和配置，图文手把手交你

为了可以更加快速的可以使用Hadoop，便写了这篇文章，想尝试自己配置一下的可以参考从零开始配置Hadoop，图文手把手教你，定位错误资源1.两台已经配置好的hadoop2.xshell+Vmware链接
叫我小唐就好了·2024-02-08 03:56

高脂血症患者该怎么吃？

今天继续解读《你的病是吃出来的2》，去看看血脂那些事。很多人都认为吃进去的脂肪多，血液中移动的脂肪就会多，肚子上的脂肪自然也多，这是真的吗？科学研究发现，人肚子上的脂肪主要是碳水化合物摄入过多造成的。
小尾巴0907·2024-02-08 01:43

实习那些事1

从六月份写了的第一篇文章，时隔两个月，我又出现了。其实我不觉得自己是个文采有多好的人，之所以写是我觉得非常适合小白，我想怎么写就怎么写，与其说我把当成了一个软件，不如说我把他当成了我的日记本，每天记录着生活的点点滴滴。疫情当下，其实很多行业都特别难做，我大学的专业是国际商务，简单来说就是做外贸的，一出校园（去年12月份）我就开始疯狂地找工作实习，我去的那家公司是我面试的第一家，面试完的当天我就决定
小娄呀·2024-02-08 01:51

日更教会我的那些事(三)

荀子曰：“不积跬步无以至千里，不积小流无以成江海。”生活中，一些细小的习惯，看似不经意，实则力量无穷。好的习惯，能成就一个人，坏的习惯，足以毁掉一个人。长期坚持好的习惯，足以改变你的一生。古人言:“合抱之木，生于毫末；九层之台，起于垒土；千里之行，始于足下。”一分耕耘一分收获。你付出多少努力，决定你会收到多少成功。在日更打卡中，开始的时候好难，总觉得每天要发表的内容都会让你有种绞尽脑汁的压力。当你
香草芬芳·2024-02-08 01:27

时光带不走的记忆

人生的旅途，就是一场梦，那些人那些事，终究还是被时光打磨的不成样子。然后我们也会渐渐遗忘过去，那些人那些事那段时光。我曾经清醒的想过，青春里，无论外表如何打扮的光鲜华丽
月下良缘·2024-02-08 00:43

Spark Standalone 集群配置

ApacheMesos-一个通用的集群管理器，也可以运行HadoopMapReduce和服务应用程序。（已弃用）HadoopYARN-Hado
董可伦·2024-02-07 23:01

| 我用180天转行新媒体运营那些事

我曾经在很多地方看到“转行新媒体运营很后悔”类型的文章，打开却常是一些似是而非的内容。今天不做标题党，只想认真分享，180天，0经验大学生转行做新媒体运营，我挺后悔的。但若是给我一次重新转行的机会，我还是会做出同样的选择。以下我就简单分享自己转行新媒体运营的经历来分析我为什么会感到后悔，主要从新媒体运营难点切入。分为以下三点：大学生转行新媒体运营难点1：有冲突大学生转行新媒体运营难点2：技能多大学
洲洲吖_·2024-02-07 23:52

和人不能相亲的那些事儿

（关于头痛）今天下午好端端地头痛起来，就像无形中有人往你脑门钉了一颗钉子进来，越想拔出去越能感到脑皮层撕裂的抗拒。我不喜欢生病，尤其是咳嗽和头痛。因为他妈的一发作，就很难好起来。你要有十足的耐心和它周旋，做什么都要忍受有只手挠你的心。你还不能有半点不开心，否则受苦的只能是你和身边人。而事实上，人很少能看到自己的不开心，但不开心的五官却能使看到它的人不开心。比如医生，这个常年看病的职业者，从充满温情
追一苇渡江·2024-02-07 23:21
上一页 18 19 20 21 22 23 24 25 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他