hive读书笔记第110页

物理机本地和集群部署Spark

文档查看地址：https://spark.apache.org/docs/3.1.3/3）下载地址：https://spark.apache.org/downloads.htmlhttps://archive.apache.org

DIY……·2024-01-14 07:43

《许三观卖血记》——读书笔记

一本二百多页的小说，以前看见这个名字，想读，觉得许三观会是一个被生活逼迫，命运特别悲惨的人。看了书后，觉得只有一小部分这样的感觉。书中前半部分写许三观怎么知道卖血赚钱，怎么第一次卖血，卖血之后娶媳妇这些。让我感觉许三观怎么有点像阿Q，有些情节明明很悲惨，比如被抄家，被骂等，却没有让人可怜的感觉！我甚至读前边在想，许三观是不是脑子有问题。直到描写到荒年那一部分，家里三个孩子饿的只能吃稀饭。许三观过生

阿广啊·2024-01-14 07:43

物理机搭建单节点Flume

flumeFlume官网地址：http://flume.apache.org/文档查看地址：http://flume.apache.org/FlumeUserGuide.html下载地址：http://archive.apache.org

DIY……·2024-01-14 07:43

hivesql小技巧

hivesql日志、执行计划怎么看/用DAG图，看多少个stage，每个stage的执行内容，mr任务，执行顺序，过滤条件，是否有按预期做数据裁剪如何判断长尾通过执行日志，查看卡住的任务，记录数、数据量远大于其它的任务

时光赠予·2024-01-14 07:40

单机物理机部署Datax

一、概述DataX是阿里巴巴开源的一个异构数据源离线同步工具，致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能

DIY……·2024-01-14 07:34

2023年1月19日读书笔记

今日阅读1小时，总计2205小时，第2136日阅读《晚期帝制中国的科举文化史》晚期帝制中国的科举考试之所以在变动不居的情况下仍能保持运转，一个重要的客观条件就是王朝统治者对科举的改良和改革始终保持关切。19世纪初，很多文士都陷入到汉学、宋学之争中，其中一些人开始呼吁将两者融会贯通，形成一种汉宋兼备的经学混合体。包世臣认为科举考试本来的目的是吸引人才加入政府的文官体系。但是事实正好相反，科举注重的却

龙套哥萨克海龙·2024-01-14 07:48

【数据开发】HiveSQL 临时表&分步执行（with, as ）与时间函数（时间戳unix_timestamp）

1、分步执行（with…as…）HiveSQL中的WITH…AS…语句可以用于分步执行，即将一个大的查询语句拆分成多个小的查询语句，每个小的查询语句都可以使用WITH…AS…语句定义一个临时表，然后在后面的查询语句中使用这些临时表

小哈里·2024-01-14 07:51

《勇气再出发》

最近一段时间，虽然没有来得及写读书笔记，但是每天的读书一直持续不断着，其实当时选择坚持读书，就是选择了坚持。

南和038胡媛媛·2024-01-14 07:58

读书笔记四：到底怎样才算好文章

好文章的标准有五点：1.提供新知，创造价值。阅读是读者的自我完善，他需要从你的文字中汲取他身上本来没有的东西。新知的“知”代表知识、认知，但新知也不局限于新知识、新认知，它也可以是新方法、新资料、新故事、新视角等。2.信息量大且密度高。判断文章好坏最重要的是信息量和信息密度。你写了1千字，但废话连篇，真正有用的东西只有200字，你能说这篇1千字的文章短吗？不短，它太长了，它应该删到200字。你写了

傾桐·2024-01-14 07:34

anoconda 安装报错

nsis.pyExtract:_system_path.pyOutputfolder:D:\anoconda........................解决办法：网址：Indexof/anaconda/archive

ISDF-工软未来·2024-01-14 07:15

Hive数据定义（2）

hive数据定义是hive的基础知识，所包含的知识点有：数据仓库的创建、数据仓库的查询、数据仓库的修改、数据仓库的删除、表的创建、表的删除、内部表、外部表、分区表、桶表、表的修改、视图。

冬瓜的编程笔记·2024-01-14 06:25

2022年10月2日读书笔记

今日阅读1小时，总计2099小时，第2030日阅读《历史的细节》希克索斯人用战车击溃了埃及军队，并征服了整个埃及。在埃及人学会并驾着战车作战后，希克索斯人作为“外来统治者”，很快就被逐出埃及，时在公元前1570年。在后来的历史中，战车为埃及增添了无限荣耀。有了快速移动的战车，埃及军队开始对抗赫梯。埃及战车兵使用弓箭，而赫梯战车兵用长矛，弓箭可以先发制人，因此，有着更久战车历史的赫梯人反倒很怕后起的

龙套哥萨克海龙·2024-01-14 06:24

数仓搭建——DWD层

1.2get_json_object函数使用数据[{"name":"大郎","sex":"男","age":"25"},{"name":"西门庆","sex":"男","age":"47"}]取出第一个json对象hive

丝丝呀·2024-01-14 06:10

如何给Ubuntu系统清理垃圾

在终端输入：du-h/var/cache/apt/archives回车之后我们就可以看到安装包所占用的空间了。若只是想删除已经卸载过的安装包，命令为：sudoapt-getaut

星辰引路-Lefan·2024-01-14 06:35

【读书笔记53】《反脆弱》：培养反脆弱性，有必要先清除脆弱性

今天开始共读第六卷《否定法》。世界上有许多东西都没有名称，无法直接描述，无法用人类的语言捕捉，或者用我们狭隘的理想理念来理解，但我们知道它们。几乎我们身边所有重要的东西都很难用语言来形容——事实上，越强大的事物，越是难以用语言进行描述。这一卷就是告诉我们，如果我们不能准确地表达某个事物，我们至少可以描述它不是什么。“否定法”所关注的就是无法直接用语言描述的事物。杠铃模式背后的逻辑告诉我们，如果要培

娟娟成长记·2024-01-14 06:05

《一年顶十年》读书笔记❶

看到作者自序的时候被震惊了，作者这是以光速升级。在第一部打基础之“时间”作者从9个方面来阐述。图片来自于书中插图✅从定义时间开始，告诉我们要做时间的投资人；✅为自己的时间定价（如果为自己的时间定价能定什么价位？出售什么能力？面对什么人群？）；✅拒绝，懂得拒绝，然后去利用好自己的时间；✅高效时间，找到自己的高效时间，在高效时间段做高效的事（我之前的高效时间是在晚上，但后来总是会遇上外部因素干扰和其它

曹鑫x·2024-01-14 05:36

《少有人走的路：心智成熟的旅程》读后感

斯科特派克读书时长：尚未计算读书目的及感受：这是我第二次读这本书，我第一次读的时候是2021.9.12写的读后感，说实话，没有什么特别的感触，但是这次阅读，多了一点的感受，读到自律的时候，我迫切的写下了读书笔记

从21年9月11日起·2024-01-14 05:07

一目了然、不被误解：制作商务文本的原则——《精准表达》读书笔记（4）

第5章制作商务文本的能力——制作书面资料的步骤在提交方案时，把自己想表达的东西总结成书面形式是一个非常重要的过程。提交方案并非只是针对提交方案时在场的人所做的行动。一般而言，由于商务文本会被大家长期阅读，因此除非有意不留证据，否则就需要认真总结出易于理解的商务文本，达到充分表述意见、不被他人误解的效果。制作商务文本的过程，该过程大致分为5个步骤：1.制作文字信息制作文字信息是指在制作商务文本时，把

金台望道·2024-01-14 05:54

Hive命令行运行SQL将数据保存到本地如何去除日志信息

1.场景分析先有需求需要查询hive数仓数据并将结果保存到本地，但是在操作过程中总会有日志信息和表头信息一起保存到本地，不符合业务需要，那如何才能解决该问题呢？

tuoluzhe8521·2024-01-14 05:01

《为【真学】而教——优化课堂的18条建议》(读书笔记三)

#摘#真学，依据一定的标准和学生的获得来衡量假学盛行，真学难觅。真学发生了没有，谁说了算？只要是好课，必然有真学；只有好课，才有真学。反之亦然。课上的好与否，真学发生了没有谁说了算，常有的情形是，谁的权利大谁说了算，谁有权威谁说了算。这些都是科层制管理和权威膜拜之下的产物，有违“实践是检验真理的唯一标准”这一真理观。应为我们所反对和摒弃。#思#在我们学校，听课、组织教研是常有的事。但每位领导几乎都

凝涵·2024-01-14 05:08

《什么是最好的父母》-读书笔记

今天在非凡精读馆听到这本书叫《什么是最好的父母》什么是最好的父母呢？套用书中的一句话就是，孩子是有个性的，父母也是有个性的，因此，什么是最好的父母无法真正的定义。但是，这本书从头到尾我觉得都在阐释一个问题，就是要根据孩子的年龄，根据孩子的个性，采取不同的引导教育方式。就像作者说的一句话，养育孩子是件有意思的事。很多时候家长都爱给孩子，贴标签，比如这个是不听话的小孩，晚上不睡觉，白天爱吵闹，跟弟弟也

赵权威·2024-01-14 04:35

《人生效率手册》

---2018年第三篇读书笔记+心得“为什么听过很多道理，仍然过不好这一生？”这个问题太普遍了，所以我们才成为了普通人的一份子。本周这本书，对于大部分人而言，我想会有着醍醐灌顶的警示作用。

若熹·2024-01-14 04:07

【读书笔记】网空态势感知理论与模型（十）

网络安全的认知科学：一个推进社会-网络系统研究的框架1.引言网空安全理念、策略和操作的核心是对抗性的规则，对于攻击方来说，这个规则会推动一个威胁去夺取重要数据或文件的所有权。2.网空安全作为一个跨学科的超系统，其中的转化性工作既可以是本地的，又可以是分布式的。网络安全是以人员为中心的，需要“人在环中”式的处理过程，基于变化的上下文环境驱动，必须通过基于问题的学习法来处理和解决。网络安全是一个具有挑

xian_wwq·2024-01-14 04:49

【问题记录】【Unity打包iOS】bitcode bundle could not be generated because xxx was built without full bitcode

报错：打包Archive的时候报错：ld:warning:arm64functionnot4-bytealigned:_unwind_testerfrom/Users/xxx/xxx/xxx/Libraries

hiasyou·2024-01-14 04:42

《精简写作》读书笔记

[美]罗伊·彼得·克拉克著黄筠译这是一本关于写作技巧的书籍，大约在10年前，我拟了一份报告给公司领导审阅。通常情况下，我的报告不会给比我高出我也不知道多少职级的大领导。领导看完后，问：“你是工科毕业的吧？”“是的。”我回答，同时也知道自己的文字有多糗了。3年前，我神使鬼差地想做键盘侠，以提高自己写作水平。2年前，加入了007不写就出局，每7天写一篇文章。没有老师教授的状况下要提高写作水平，非常困难

苏耀勇·2024-01-14 04:40

D036+6组翠香+《被讨厌的勇气》读书笔记

被讨厌的勇气本周阅读另一本书《被讨厌的勇气》，作者是日本人岸见一郎。本书在豆瓣上的评论是8.8分。这是一本集既有哲学又讲心理学的一本书，值得好好一读！书中讲到了阿德勒心理学不是死板的学问，而是要理解人性的真理和目标。它改变了其他心理学推广的“原因论”，认为一切都是“目的论”，如果我们一直依赖原因论，就会永远止步不前。书中讲到一个故事，一位多年躲在自己的房间中闭门不出的男子。他非常害怕到房间外面去，

羽禾子·2024-01-14 04:57

http://www.cnblogs.com/procoder/archive/2012/03/27/Windows-8-First-Try.html

原文：http://www.cnblogs.com/procoder/archive/2012/03/27/Windows-8-First-Try.htmlWindows8Metroapp开发初体验前言随着

macrohasdefined·2024-01-14 04:58

SpringBoot项目创建错误集锦

1.1.29]oftheApacheTomcatNativelibraryisinstalled,whileTomcatrequiresversion[1.2.34]解决方案去官网http://archive.apache.org

lcx_defender·2024-01-14 03:27

ffmpeg_sample解读_encode_audio

title:ffmpeg_sample解读_encode_audiodate:2020-10-2310:15:02tags:[读书笔记]typora-copy-images-to:.

刘佳阔·2024-01-14 02:43

《奈飞文化手册》读书笔记

Netflix是一家会员制的流媒体播放平台，因其在流媒体领域的创新而声名雀起，成立于1997年，曾经是在线DVD及蓝光租赁提供商，后来成为网络流媒体服务商，凭借高端自制美剧和突破性的排片播放冲击了传统电视平台的优势。2013年Netflix出品的《纸牌屋》更是被推上全球瞩目的风口浪尖，随后高质量的剧集成为它的优势。奈飞在管理领域成为网红，是因为几年前一份被蜂拥下载的100多页的企业文化PPT，如今

宛若蕙质兰心·2024-01-14 02:23

读书笔记：《高效能人士的7个习惯》第八章知彼解己

读书笔记：《高效能人士的7个习惯》第八章知彼解己图片发自App有效人际交流的关键：知彼解己1.努力去了解对方2.争取让对方了解你这一章也很简短但值得反复阅读。

智美更登·2024-01-14 02:37

读书笔记：《摆脱疲惫感》

摆脱疲惫感：如何让科学管理你的疲劳与压力精神疲劳产生的原因其实有着其生物学上的机理。由于人体供能最直接的是由ATP提供，即三磷酸腺苷提供。在脂类与糖类被人体吸收后转化为葡萄糖形式，葡萄糖进入血液（也就是血糖），被细胞吸收，在细胞内进行呼吸作用，化学能被部分储存在ATP中。由于ATP是直接功能物质，人体ATP总量在0.2摩尔左右，而人体细胞每天的能量大概需要100-150摩尔。因此，每个ATP分子每

新垣结衣是我老婆拔剑吧·2024-01-14 01:15

《百岁人生》读书笔记

作者：AndrewScott和LyndaGratton，伦敦商学院的经济学教授。本书作者从个人寿命增长这个角度，为我们提供了一个重新审视人生和社会发展趋势的全新视角，并给我们提出了大量建议。其核心内容：人类已全面进入长寿时代，从我们这代人开始，活到100岁将是大概率事件。随着寿命普遍延长，我们的人生格局也将发生巨大改变——过去人们熟悉的“三段式”人生已无法维持，即将崩盘，取而代之的将会是流动性更强

华杰研习社·2024-01-14 00:21

读书II在教学研究与指导中品尝快乐的人生

读徐世贵，秦辉的《教研员工作方法与技能》的读书笔记及心得人们总把教师比喻成“春蚕”、“蜡烛”，来表达他们对教师的赞扬，赞扬教师牺牲了自己，成就了别人。这多少都给人一种悲壮的感觉。

温暖指尖儿·2024-01-14 00:57

读书笔记:《万万没想到:用理工科思维理解世界》4

上网能避免浅薄吗？作者标题可以修改为：我们怎么样有效上网？他告诉读者三层意思：一、作者把需要系统化、深入化思考的阅读称为纯文本阅读，把多链接、碎片化阅读称为超文本阅读。2种阅读方式所使用的大脑区域不同，根据神经学家观测，每天1小时冲浪的新手，大脑会发生物理性变化。二、随着信息载体（竹简、锦帛、纸、计算机、网络）信息传递方式越来越方便，传递成本越节约，就越容易脱离深度。三、重点来了，怎么样避免浅薄？

江南陈墨·2024-01-14 00:05

读书笔记 | 产品经理必懂的技术那点事儿第二节【互联网技术和产品】

互联网技术和产品一、互联网发展史1、基础技术发展期2、PC互联网时代3、移动互联网时代4、人工智能和万物互联时代二、互联网产品发展史1、本地软件：库存管理系统2、web技术：网站、本地搭建机房3、云服务器：软件即服务，无需本地搭建机房4、移动互联网：智能手机和移动网络推进移动端发展三、互联网开源社区和技术1、开源的定义：开放源代码，可以被任何人任何组织以无偿的方式直接使用2、开源社区：GitHub

舟墨·2024-01-14 00:01

《职场晋升101》读书笔记

p1自我管理，【】部分还是挺受用的。【1】简历纂写给HR一个面试你的理由，如何做到的某结果，个人优势与职位要求匹配度。2.厌恶别人会来事，可能是一种自卑的体现。【3】自我介绍强调个人说明书，你的长处短处，别人可以如何配合你工作。4.内向人的沟通方式。【5】思考自己的核心竞争力6.学生思维影响工作，避免埋头单干，学会主动反馈与向上管理。【7】年底跳槽不如破釜沉舟当自己是小白，重新确认是否适合这个工作

写诗的男人不穿裤子·2024-01-14 00:27

大模型学习读书笔记01——大模型基础

大模型学习读书笔记01——大模型基础1、什么是语言模型语言模型评判由一些单词排列组合而成的句子是否更像真正的、自然的句子。

等风来随风飘·2024-01-14 00:41

第8天阅读《为真学而教》读书笔记

今天阅读建议十p75-88。略️感慨。“没有良好的师生关系，优秀的老师相当于普通老师；反之，有了良好的师生关系，普通老师相当于优秀老师”。果不其然，良好师生关系的力量真神奇！想起初为人师第一年，我是急于教学，常常忽略师生关系。现在回想，是对孩子们的一种遗憾。读到《我本差生》，我回想了自己平平无奇的学生生涯，也是老师的鼓励的话语让回忆显得可贵，如今自己也步入教学生涯，是不是也该给学生留下一些温暖的瞬

瑞锦佳梦·2024-01-14 00:29

《非理性的人》读书笔记20

海德格尔3．死亡、焦虑、有限性海德格尔对死亡的分析是《存在与时间》里最有力量又最为著名的章节之一，它用思想显现了文学家托尔斯泰用故事显现出来的真理。死亡的本真意义，即“我要死”，并不是存在于这世上的一个外在的和公众的事实，而是我自己存在的一种内在可能性。问题的实质在于：我随时都可能死，因此，死亡现在就是我的“可能性”。它像是我脚下的一壁悬崖。它也是我的可能性中最极端最绝对的。因此，死亡是各种可能性

还是笑容·2024-01-14 00:50

Shell ETL 操作

删除文件第一行记录，即字段名称处理的文件第一行都是字段名称，我们在文件中的数据导入到数据仓库Hive中时，不需要第一行字段名称，因此，这里在做数据预处理时，删除第一行。

数据小白鼠·2024-01-13 23:54

读书笔记《哲学的慰藉》

这是近年来读的对自己影响最大的一本书。读书可以明理，哪些书可以明理呢？名人传记可以，那里有活生生的生活，以及活生生的生活智慧；故事也可以，可以知道世界上有那么多可能性；介绍科学知识历史知识的书可以，那里就是知识和知识点的集合；但是，最直接的最深刻的，是哲学。而哲学的慰藉这本书，通过苏格拉底，柏拉图，伊壁鸠鲁，蒙田，叔本华，尼采，让我们看哲学家们如何面对不被理解，贫穷和金钱，快乐，缺陷，悲伤，以及痛

余在望·2024-01-13 23:10

《陪孩子走过青春期》：孩子的作业要管吗？

#凯妈读书笔记Day103“不做作业母慈子孝，一做作业鸡飞狗跳”，家有学生，你是不是也对这句话深有体会？我也经历过鸡飞狗跳的日子。可是，我发现，孩子越长大，我们在作业这件事情上能做的就越少。

凯妈不鸡娃·2024-01-13 23:18

2022-6-9晨间日记

二、读书，温习以前所学的知识，写读书笔记。三、运动锻炼，基本上以散步为主。改进：习惯养成：周目标·完成进度每个人都有自己的梦想和追求，按照自己拟定的计划实施中。

645e2ce505ed·2024-01-13 23:27

北野武的小酒馆

下面按照读书笔记的惯例，摘抄如下：（另外，括号里是我的感慨，可以不予理会。）不管你怎么努力都实现不了的梦想，在这个世界上多了去了。（伤心吧！难过吗？世界就是这么残酷。

地上的影子·2024-01-13 22:03

禅与人生读书笔记

是人自己把欲望放大，得不到满足。若没有智慧的引导，很难改变。“天下本无事，庸人自扰之”，所有的烦恼都是想出来。人有思想，有理性，当我们成功后，也会思考人生的深层问题。生命从哪里来？未来的归宿在哪里？我们只是世界一个暂时的过客，什么代表我？我是谁？人活着究竟为了什么？活着的意义是什么？幸福被现代人当作一种物质环境，其实物质只是一个辅助因素。幸福不只是外在的物质条件。常言“知足常乐”，欲望小反而容易满

静Eaven·2024-01-13 22:07

读书笔记1

吾国与吾民——特别理解作者说的中国人爱好此生命。余华活着里面有这样一句人为活着本身而活着。我读这句话的时候高三，那时候我读不懂，觉得作者故意搞字眼，如今毕业三年有余，我愈发觉得余华说的对，生活就是生活，无论生活给予我是悲是喜，亦苦亦欢，我都没有理由不爱他，可能这是我仅有的东西吧。中国人习惯在平常日子里找乐子，哪怕是日出日落都可以从中感受到什么，会有一瞬间心底迸发出的愉悦，就比如我自己，哪怕无所事事

我要喝奶茶·2024-01-13 22:46

hiveSQL任务执行时间过长

在周例会上，发现自己经手过的任务运行时间在忙时长达两个多小时（公开处刑），这里总结下工作中遇到的一些造成任务执行效率低的原因：1、数据量过大比如有分区表，但是多表关联查询的时候没有指定分区，导致全表扫描。（注意on跟where的条）2、产生笛卡尔积优化3、访问API过多有些任务可能涉及到访问外部接口，过多的请求影响到任务执行效率。从业务或者其他方面优化4、从接口层取数前期的数仓设计不合理或者临时性

amberwest·2024-01-13 22:16

黑猴子的家：Hive 分区表注意事项

1、创建二级分区表hive(default)>createtabledept_partition2(deptnoint,dnamestring,locstring)partitionedby(monthstring

黑猴子的家·2024-01-13 21:13

《如何才能不焦虑》读书笔记

无论是在生活中还是在工作中难免会碰到一些束手无情的事情或者是困难，当我们面对这些困难的时候也难免会产生心情烦恼，甚至是焦虑不安，可以说对我们的生活与工作有相当大的影响，这种的产生也可以说是一种负面的情绪，每个人都想避免不要发生但往往最不想发生的终究还是会发生的。今日读了《如何才能不焦虑》这本书籍后书中给了我们一些相关的意见。焦虑产生的原因主要由威胁+关切所组成，那么我就来讲讲我自己的经历吧。在20

萤火虫的秘密·2024-01-13 21:09

推荐频道

hive读书笔记