Hadoop权威指南读书笔记第19页

《通往财富自由之路》自序读书笔记

读书笔记《通往财富自由之路》自序作者观点：1）心智是每个人脑子里那个可以不断升级的操作系统2）凡事都是有方法论的，心智升级也一样3）所谓的毒鸡汤，毒是被人放进去的，要么是别人，要么是自己4）知识传递本身不是教育

林鑫瑜·2024-02-19 14:33

《心理治疗基础》读书笔记第14天

存在主义的心理治疗一、存在主义哲学世界有两种基本存在形式：（1）自在的存在，包括所有非意识的存在；（2）自为的存在，指的就是人的意识。自在的存在是被决定的，它谈不上任何自由。自为的存在是自在的存在之否定，实际上是无物或非物，即意识。意识的语音是自由，它的词汇是客观世界的形形色色，它的语法是责任。二、存在主义的心理病理学和治疗理念神经症病人困境的根源在于，不接受自己，不愿意面对自己的错误、缺点或不完

临清NLP李新·2024-02-19 14:58

随笔——学习反思

这段时间对于读书输出有一种压力，感觉会耗费我更多的精力，所以坚持了不过都简化成了读书笔记式，对于各种活动，也减少了参与度，不过结果是，我好像也没有学习多少。

春梅cm·2024-02-19 14:48

《认知觉醒》读书笔记3：阅读之后的写作更重要

高中的时候，老师一直让我们养成些读书笔记的习惯，那时我是很抗拒的。心想看书就看书嘛，搞这么麻烦干什么。不过随着阅读量越来越多，我发现很多以前阅读的内容都或多或少的遗忘掉了。

倾倒啤酒·2024-02-19 14:11

Quick introduction to Apache Spark

Spark使用Hadoop的客户端库来

Liam_ml·2024-02-19 13:29

Hadoop Shuffle

Whentherearemultiplereducers,themaptaskspartitiontheiroutput,eachcreatingonepartitionforeachreducetask.Therecanbemanykeys(andtheirassociatedvalues)ineachpartition,buttherecordsforeverykeyareallinasing

SharlotteZZZ·2024-02-19 13:22

Flink 细粒度滑动窗口性能优化

大数据技术AIFlink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料118篇原创内容公众号1、概述1.1细粒度滑动的影响当使用细粒度的滑动窗口（窗口长度远远大于滑动步长）时，

hyunbar·2024-02-19 13:39

【大数据面试题】006介绍一下Parquet存储格式的优势

同时一般查询使用时不会使用所有列，而是只用到几列，所以查询速度会更快压缩比例高因为是列式存储，所以可以对同一类型的一段做压缩，压缩比例高支持的平台和框架多在Hadoop,Spark,Presto,Python

Jiweilai1·2024-02-19 13:34

Gordon的读书笔记～登天之梯

上半年花了两个月的时间，突击读完了中信出版社出版的《耶路撒冷三千年》，零零碎碎做了一些笔记，偶遇一书虫同僚，拿出来与其交流，探讨了近3小时，感受就是自己完全不能系统地讲明白此书，还好同僚解答，帮我了解到雅典王朝、罗马帝国的历史，故准备重读一遍，不适宜这次分享。于是乎，找了一本学术性很强的通俗读物，《登天之梯》（重庆大学出版社）与大家交流。这是一本关于儿童心理学方面的书，通过学习，在书中找出了作者在

Gordon会看不爱写·2024-02-19 13:58

2021年12月26日读书笔记

今日阅读1小时，总计1812小时，第1753日阅读《社会学的基本概念》在三个典型的共产主义团体当中，经济之外的动机扮演着重大的角色（参见第二六节）。在此领域之外，实际进行的劳动（此处指一般意义上的劳动）若要达到计算可能性的最适状态，则必须符合以下三大条件：1.最高的劳务适应性，2.最高的劳动熟练，3.最高的劳动欲望。1.以肉体暴力或其他不利的方式进行的直接威胁，2.当表现不能令人满意时，有失去职务

龙套哥萨克海龙·2024-02-19 13:21

Sqoop 入门基础

简介Sqoop（SQLtoHadoop）是一个开源工具，用于在关系型数据库和Hadoop之间传输数据。

香菜的开发日记·2024-02-19 13:17

焦点日记day311|《生命的真相》读书笔记11

灯塔读书会·世界读书月活动第14天【书名】生命的真相【作者】徐秋秋【分享人】小菲【阅读日期】2022年5月2日【阅读页码】137-168第四章重建自我第四节【阅读感悟】身体也是我们的心灵地图任何不为人知不便对外呈现的心理问题都通过身体找到了宣泄的窗口。我们在成长过程中所遭遇的痛苦忽视贬低虐待等不愉快的心灵体验或早或吃或深或浅都会体现在身体上。所有的心理问题都沉淀在身体的记忆里并通过各种身体的不适症

人啊认识你自己·2024-02-19 13:10

《青少年家庭治疗》第八章读书笔记@静静（十八）

一、阅读范围：完成第八章二、读书笔记（一）中年时期的转变治疗师开始被青少年治疗工作吸引的原因是：这项工作能让他们呈现更多的情绪，展现更多的YOU默，也在自我暴露中表现得更有弹性。

爱娃的三宝妈·2024-02-19 13:38

hadoop硬件配置高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。500字节一个块假设我们有5000个平均大小为20GB的文件并且使用默认的分布式文件系统分块大小（64MB）同时副本因子为3，5000*20GB=102400000M=97T那么NameNode需要保存5千万个分块的信息，这些分块的大小加上文件系统的开销总共需要1.5GB的内存。但是一

xcagy·2024-02-19 13:07

读书笔记

多闻天王--读书人的保护神伊毕鸠鲁：人一定要开心，要对自己的欲望进行最低层面的估计，将自己的欲望分为必然实现快感（必然实现的有益的快感和有害的快感），和非必然实现快感，------除了吃进去的和看进去的书，其余都是扯淡，O(∩_∩)O~但是一定要追寻快乐，这是伊壁鸠鲁式的道德观，而这在中世纪是被否定。因其享乐。中世纪是------节欲的Usenotthatyoumaynotwish,wishnot

羽一兰·2024-02-19 13:22

你拥有的那些，正在毁掉你

《精准努力》读书笔记在《精准努力》这本书中，作者讲给我们讲了这么一个故事：一位富有智慧的老师，想向自己的学生解释，为什么有些人会过着平庸又普通的生活。

王碧雅·2024-02-19 13:49

D034+7组姜姜+《写作这回事：创作生涯回忆录》读书笔记

今天读了《写作这回事:创作生涯回忆录》这本书的论写作部分，作者说如果你想成为一个作家就要多读，多写。这两件事真的非常重要，在我看来即使不想成为一个作家也要多读，多写。读书是输入，写作是输出，写作不一定就要成为作家，写作是我们思想的表达，学会写文章可以提升我们的逻辑思维，对我们的工作，生活都有很大的帮助。写作是输出，输出如果没有输入支撑是一件非常痛苦的事情，去年我刚开始学习写作时，因为输入不够，真的

土豆姜姜·2024-02-19 13:00

王阳明问答语录《传习录》读书笔记摘录【读书笔记20】

王阳明问答语录《传习录》读书笔记摘录【读书笔记20】1、率性是“诚者”事，所谓“自诚明，谓之性”也。修道是“诚之者”事，所谓“自明诚，谓之教”也。圣人率性而行即是道。

爱玲姐说说·2024-02-19 12:08

D067天＋7组一步之姚＋《高效能人士的7个习惯》读书笔记

今天阅读的是《高效能人士的七个习惯》中，第五、六章，印象最深的是“要事第一”。当我看到“要事第一”这个原则，本能的反应就是在工作领域上，努力去探索、发现并确定自己的“要事”。怎么样去区别、发现自己的“第一要事”呢？这个“要事第一”主要体现在时间管理的四个象限中，第二象限“重要但不紧急”的事务，类似“计划、建立关系、休闲、预防性措施、明确新的发展机会”。而且，在书中，作者介绍了一个高效能的秘诀“授权

一步之姚_9292·2024-02-19 12:52

读书笔记之《故宫日历》（三）

今年的春节假期我打算从腊月二十六放到正月十一，那《故宫日历》上是什么样子呢？巧得很，腊月二十六刚好是大寒，这一天的日历上写着“一候鸡始乳”。说的是，大寒是大部分地区一年中最寒冷的时候，但是母鸡已经感知到春天的气息，开始孕育小鸡了！正月十一，放假的最后一天，正好是立春。这一天，东风开始解冻。一年之计在于春，在春风中开始新一轮工作，多么好的兆头啊！这期间还有一个特殊的日子，那就是大年三十除夕夜，日历上

小熊susan·2024-02-19 12:50

2021-03-15潘卫英焦点解决网络初级第19期坚持分享第192天

《建构解决之道》读书笔记分享（185）第三篇：焦点解决短期治疗于危机干预与情绪困扰的应用——在危机中人们往往展现了比原先被认定还要多的资源与力量。

紫印·2024-02-19 12:14

读书笔记《日日滋养 365天爱自己的生活良方》

《日日滋养365天爱自己的生活良方》作者：周一妍爱自己，是终生浪漫的开始。——【英】奥斯卡。王尔德拿起这本书的时候，是在书屋一排排书架中，因它暖白色书皮上圆圆的字迹《日日滋养365天爱自己的生活良方》，翻开这本书的时候，被开篇熟悉又久违的词意漫卷——“爱自己，是终生浪漫的开始。”1、重拾秩序的勇气在断舍离中开启无休止的自我探索，在重拾秩序中确认真实的自我。家是自己的一个小能量场，每个小物件的取舍标

那天熙时已往昔·2024-02-19 12:01

【大数据】HADOOP-YARN-ContainerExecutor容器启动器详解

在NodeManager中，有三种运行Container的方式，它们分别是:DefaultContainerExecutorLinuxContainerExecutorDockerContainerExecutor从它们的名字中，我们就能看得出来，默认情况下，一定使用的是DefaultContainerExecutor。而一般情况下，DefaultContainerExecutor也确实能够满足我

笑起来贼好看·2024-02-19 11:38

学习篇-Hadoop-YARN-环境搭建

文章目录一、Hadoop-YARN-环境搭建一、Hadoop-YARN-环境搭建官网参考：https://hadoop.apache.org/docs/stable/hadoop-project-dist

东东爱编码·2024-02-19 11:08

【大数据】HADOOP-Yarn集群界面UI指标项详解（建议收藏哦）

目录首页（Cluster）节点信息SchedulerMetrics：集群调度信息节点信息详解（Nodes）应用列表信息（applications）队列详情页（Scheduler）指标详细说明（非常重要）首页（Cluster）集群监控信息指标详解AppsSubmitted：已提交的应用AppsCompleted：已完成的应用AppsRunning：正在运行的应用ContainersRunning：正

笑起来贼好看·2024-02-19 11:08

Hadoop-Yarn-NodeManager都做了什么

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、上下文在我的博客中已经简要的分析了NodeManager

隔着天花板看星星·2024-02-19 11:00

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。

BigBigFlower·2024-02-19 11:56

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode

万里长江雪·2024-02-19 11:58

hadoop-2.7.4-nodemanager无法启动问题解决方案

近期新配了hadoop-274版本的集群，发现有一个小问题，DataNode无法顺利启动。

半肉哥·2024-02-19 11:27

hadoop-yarn资源分配介绍-以及推荐常用优化参数

如果有什么不正确的欢迎大家一起交流学习~Yarn前言作为Hadoop2.x的一部分，YARN采用MapReduce中的资源管理功能并对其进行打包，以便新引擎可以使用它们。

Winhole·2024-02-19 11:26

Hadoop-Yarn-NodeManager如何计算Linux系统上的资源信息

NodeResourceMonitorImpl）时只是提了下SysInfoLinux，下面我们展开讲下SysInfoLinux是用于计算Linux系统上的资源信息的插件二、SysInfoLinux源码packageorg.apache.hadoop.util

隔着天花板看星星·2024-02-19 11:48

node命令yarn --version指向了java

问题描述本地安装了java、hadoop和nodejs，并配置了环境变量，但是hadoop的bin目录下存在yarn命令，所以使用nodejs的yarn命令启动项目会出现找不到类，此时键入yarn-version

码学弟·2024-02-19 11:43

企业级大数据安全架构（一）平台安全隐患

1缺乏统一的访问控制机制大数据平台由Hadoop生态体系众多组件组成，而每个组件都会提供相应的WebUI界面和RESTful接口，例如Nam

·2024-02-19 11:48

【读书札记129】《后现代课程观》读书笔记

《后现代课程观》笔记6/第一章:笛卡尔和牛顿的世界观三、牛顿稳定的宇宙观1.牛顿关于自然及其规律的形而上学观：自然在简单对称的统一性之中是美丽的；暗含于这一对称性之中的是适用于数学描述的必要的、线性的、因果的关系。自然是简单的又是可观察的。2.牛顿形而上学的真正“独特性”并不在于他的理论自身而在于我们视其为宇宙的“自然”规律而予以毫无保留地接受。我们视混沌的或复杂的秩序、不确定性、转变、内部指导和

宁超群·2024-02-19 11:52

20200724《怎样做小学老师》读书笔记（第八天）

谈谈学校里的惩罚“学校里必须用惩罚吗？如其要用，应该怎样用法？”我以为惩罚这一件事，在学校里面最好是不要用。从理想上说起来，学校如果办得完美，自然就用不到惩罚；但是学校不容易办得完美，惩罚一事，也就不能废除了。现在个人觉得惩罚在原则上须：一、教儿童明了规则的意义新生入校之初，教师就应该把学校规则作详细的解释，使他们晓得什么应当做，什么不应当做。学生对于规则的意义既然明白，那自然就不会去犯了。二、使

在水一方198158·2024-02-19 11:13

读书笔记15

图片发自App【约定】一百本书，一书一图。第45本@爱的馈赠14一书一图开启美好的一天[咖啡]图片发自App图片发自App图片发自App图片发自App图片发自App一下午的公益分享后去书店接宝贝，公交车上人很多，几乎没地方站也似乎下不去车，一位姐姐让我把手里的花先给她拿着，我们相视一笑。到了书店，下扶梯的时候，对面扶梯上的姐姐朝我暖暖的笑了，我也朝她暖暖的笑了，那一刻的擦肩而过是那样温暖难忘，让我

娜般美好·2024-02-19 11:27

怎样通过集体使个性全面发展——暑假读书笔记（七）

今天读到苏霍姆林斯基《给教师的建议》中“怎样通过集体使个性全面发展”感觉与学校一直开展的社团活动不谋而合。人是一个不可分割的整体，只在自己的班级中想发展每个人不同的个性、满足每个学生的爱好，基本上是实现不了的，所以我们学校及时开展社团活动。学生根据自己的兴趣爱好选择喜欢的活动。通过对社团活动的观察，我发现班级有些学习上不是优秀的学生在譬如舞蹈、武术、跳绳、画画……等个个方面有着卓越的表现。这些在学

水寨镇姬磨小学董洁珍·2024-02-19 11:36

MapReduce

MapReduce定义mapReduce是一个分布式运算程序的编程框架，是用户开发基于hadoop的数据分析应用的核心框架。

诺冰1314·2024-02-19 10:46

Hive入门，Hive是什么？

它是建立在Hadoop生态系统之上的，利用Hadoop的分布式存储和计算能力来处理和分析数据。

JayGboy·2024-02-19 10:31

读书笔记：《你若温和坚定，余生皆是欢喜》

一、标题：你若温和坚定，余生皆是欢喜二、选题（价值观、中心思想）：一颗柔软心，是触目生活的可贵品质，也是让生命更坚韧的大智慧。三、结构：层层递进1、林清玄的话引出论题，“在坚硬的世界，做个柔软的人”2、柔软是善良。3、温和是家庭最好的语言。4、唯有柔软，才能更坚韧。5、温和带来人生喜乐四、开头及切入点：1、引入：通过林青玄的话引出主题2、切入点：坚硬的生活里做柔软的人，是生命的大智慧。五、素材：第

Alynn333·2024-02-19 10:50

《干法》第三章读书笔记

三高的力量三高指的是高要求高标准高目标。每个人多多少少都做过“白日梦”，或者另一个代名词叫做梦想，梦想之所以称为梦想，是因为它难以实现，遥不可及。一次听书里有一句话说自律都没有怎么谈优秀，自律是优秀的原点，对自己三高也是梦想的原点啊！三高都没有，何来梦想只说呢？相信相信的力量稻盛和夫说每个人都有实现梦想的巨大潜力，对自己的梦想朝思暮想，念念不忘，在潜意识里输入它一定会实现，带上三高相信它会实现，一

0195c668b6a7·2024-02-15 10:34

2021.10.29晨间日记

今天是什么日子起床：六点就寝：十二点天气：晴心情：开心的纪念日：普普通通的一天任务清单昨日完成的任务，最重要的三件事：001读书语音打卡视频、电子读书笔记输出002简笔画绘画003和玥玥语音通话，清理卡点

在成长的娟娟·2024-02-15 10:39

《生き甲斐一日本人的生活哲学：让你每天充满意义和喜悦》读书笔记

作者：(日)三桥由香里2020.06.05前言：如果每件事都讲究缘份,那么每一本读到的书也是因缘份来到眼前。前天下班后，脚步不觉然地就走到商场走进了书店,然后遇到了这本精致小巧的书，并在一小时的时间内便读完了．因为这场缘份.那一天更美丽了呢。生き甲斐,读作Ikigai,日本文化中的一个词,意为生命的价值和意义.人们会在以下场景使用这个词:我对……感,觉到了Ikigai。当……时，我感觉到了ikig

睡梦中的灵子·2024-02-15 10:33

Hive on Spark配置

pwd=66663、将Spark安装包通过xftp上传到/opt/software安装部署Spark1、解压spark-3.3.1-bin-without-hadoop.tgz进入安装包所在目录cd/opt

在下区区俗物·2024-02-15 10:51

配置hive on spark

hdfsdfs-mkdir/spark-jarshdfsdfs-put/opt/spark/jars/*/spark-jars2、修改hive-site.xml文件，添加如下配置：spark.yarn.jarshdfs://hadoop

空白格2519·2024-02-15 10:51

hive on spark配置经验

常规配置配置完，开启hadoop，开启spark（如果在hdfs上上传了纯净版的spark则不需要开启），开启hive注：当前节点一定要是namenode的active节点，因为hadoop长时间不用namenode

小五冲冲冲·2024-02-15 10:21

读书笔记-困难谈话，不要因为害怕争吵而回避谈话

最近年终考核结算，出现很多不同异见，有不少团队经理都向我诉说，和不同意见的下属沟通困难，自己本来想好好讲话，但最后经常会争吵升级，问能不能HR或者老板出面去解决；有不少读者也和我诉说，在年度沟通时，公司HR或直线经理不可理喻，自己付出远大于回报，非常失望，实在不想为这些破事吵，准备年后离职。我们都愿意听到支持，更愿意与那些跟我们意见一致的人交谈，更愿意听到能支撑自己观点的反馈。别人的不认同让人痛苦

黒儿苗·2024-02-15 10:55

D49- 《思考，快与慢》读书笔记分享

今天晚上去吃小龙虾，一不小心已经23点半了，来不及新写文章，好在还有我自己以前写的读书笔记可以分享给你们。里面有当时的阅读日期，我也就不删除啦，希望这篇读书笔记还有对你有价值。

奚晓乔·2024-02-15 09:05

读书笔记《知行合一王阳明》 06

十行采集：1.王阳明在龙场悟道的“格物致知”是心学的基调，他后来提“知行合一”“存天理去人欲”则是探索模式。1520年，他提出“致良知”，由此成为王阳明心学的灵魂。2.“致良知”就是“格物致知”里的“致知”，其运行原理就是按良知的本能（能分是非善恶）指引去为人处世。致我心的良知于万事万物上，万事万物就得到了天理。3.你的那点良知，正是你自己的行为准则。你的意念所到之处，正确的就知道正确，错误的就知

和弦夜光杯·2024-02-15 09:59

《整本书阅读的六项核心技术》读书笔记（一）

今天我阅读了《整本书阅读的六项核心技术》的第一章——核心技术一：构建阅读战略。一、整本书阅读：何以必要？邓彤老师说，大多数老师在教学中习惯于“垂直型”思维方式。这种思维方式的特点是：从一个起点出发，不断深入下去。这种思维方式的弱点是：只管过程，不问起点。如果我们思考的起点本身就有错误，那么后面的过程就可能毫无意义。因此，我们的教学需要战略思维。这种战略思维，是一种横向思维：在思维开始前，不着急深入

野草r·2024-02-15 09:17

推荐频道

Hadoop权威指南读书笔记