学习笔记-hadoop 第16页

Hadoop生态圈

是数据分析数据引擎，也是MapReduce模型，支持SQL4.Pig也是一个数据分析引擎，不支持SQL，有自己的PigLatin数据5.Sqoop是数据采集工具，针对关系数据库6.Flume是针对文件等数据的采集7.Hadoop

陈超Terry的技术屋·2024-02-20 19:47

16.用Hadoop命令向CDH集群提交MR作业

Redhat7.2非Kerberos集群CDH5.13，OS为CentOS6.5前置条件CDH集群运行正常本地开发环境与集群网络互通且端口放通16.2示例这里使用的代码是没有加载CDH集群的xml配置的，因为使用hadoop

大勇任卷舒·2024-02-20 19:27

SpringBoot学习笔记总结——动力节点

最近跟着动力节点王鹤老师的视频学到了springboot，看过最细的springboot讲解，初学入门最佳，自己做了笔记分享给大家视频资源：https://www.bilibili.com/video/BV1XQ4y1m7ex1.外部资源properties的几种导入方式1.1使用注解直接在实体类上赋值imageimage.gif1.2通过yaml赋值，在实体类中引用@ConfigurationP

动力节点铁杆粉丝·2024-02-20 19:35

Golang变量-学习笔记

1.为什么需要变量1）一个程序就是一个世界2）变量是程序的基本组成单位不论是使用哪种高级程序语言编写程序，变量都是其程序的基本组成单位。举个栗子：funcgetVal(num1,int,num2,int)(int,int){sum:=num1+num2sub:=num2-num2returnsum,sub}funcmain(){sum,sub:=getVal(30,30)fmt.Println("

超长待机。·2024-02-20 18:50

【YARN】【Apache Hadoop YARN】【架构】

ThefundamentalideaofYARNistosplitupthefunctionalitiesofresourcemanagementandjobscheduling/monitoringintoseparatedaemons.TheideaistohaveaglobalResourceManager(RM)andper-applicationApplicationMaster(AM)

资源存储库·2024-02-20 18:48

HTML学习笔记——08：表单＜form＞

HTML元素表示文档中的一个区域，此区域包含交互控件，用于向Web服务器提交信息。例如：登录页面。作用：搜集不同类型的用户输入，并向服务器传送数据。注意：表单本身并不可见！！！示例：firstname:lastname:多数情况下被用到的表单标签是输入标签（）。一、表单的属性1、action属性action=”要提交到的页面(xxx.html)”表单提交的地址，可以是网站也可以是一个请求处理地址。

ruleslol·2024-02-20 18:39

记一次 Flink 作业启动缓慢

记一次Flink作业启动缓慢背景应用发现，Hadoop集群的hdfs较之前更加缓慢，且离线ELT任务也以前晚半个多小时才能跑完。

卢说·2024-02-20 18:38

【江湖说️学习日记89决策理论】

【江湖说️学习日记89决策理论】[打卡宝宝]：嘿黑~[打卡日期]：2019/02/28[累计坚持]：这是我坚持学习的第89天️[学习内容]：决策理论：如何做出好的决策[学习笔记]：️一、概念：研究人员曾经做过一次调查

栗小蒙·2024-02-20 18:41

IP地址+子网掩码+CIDR学习笔记

目录一、IP地址1、表示方法：2、特殊IP地址二、子网掩码1、判断网络位和主机位2、子网划分三、无分类编址CIDR1、CIDR路由汇聚汇聚规则：汇聚ID：2、最佳路由匹配原则一、IP地址1、表示方法：机器中存放的IP地址是32位二进制代码，为了提高可读性：每8位加入一个空格，提高可读性每8位的二进制数转换为十进制，用点分十进制记法例：10000000000010110000001100011111

Jizhi_Zhang·2024-02-20 17:35

RabbitMQ学习笔记

1消息队列基础1.1同步异步同步调用时效性强拓展性差性能下降级联失败异步调用业务解耦，拓展性强无需等待，性能好故障隔离缓存信息，流量削峰填谷时效性差不确定执行是否成功1.2MQ技术选型2安装2.1安装步骤linux环境，用docker安装下载rabbitmq镜像dockerpullrabbitmq:3.7.15创建容器dockerrun-eRABBITMQ_DEFAULT_USER=admin-e

hhf的博客·2024-02-20 17:53

Spring AOP 笔记

精通Spring4.x企业级应用》学习笔记Aop适合具有横切逻辑的应用场合：性能监测、访问控制、事务管理、日志记录；Aop通过横向抽取机制为这类无法通过纵向继承体系进行抽象的重复性代码提供了解决方案。

里昂_79ce·2024-02-20 17:06

Redis学习笔记

1基础1.1NoSQL特点：非结构化、无关联、非SQL、没有事务或事务不满足ACID特性、内存存储、支持水平扩展1.2Redis概括redis官网：https://redis.io/一个基于内存的键值型NoSQL数据库key-value型单线程，每个命令具备原子性低延迟，速度快（基于内存、IO多路复用、c语言编写）支持数据持久化支持主从/分片集群支持多语言客户端1.3linux系统安装下载redi

hhf的博客·2024-02-20 17:19

JDK1.6API学习笔记(0001)---开篇

准备开始了，你准备好了吗！野马之路！本来想一切都做成最新的呢，后来一想，没什么意义，用现在机器上装的1.6.0版本算了。再一想，不对，开始的时候就妥协，怕这个系列不会超过个位数的文章了，还是努力一下吧。可怜我这老黄牛的网速啊。系统：WindowsXPSP2番茄花园版CPU：古老滴AMD1700+，新来的不要笑哦！内存：一根266的512DDR，一根400的512DDR，加起来是266的1GDDR。

langzitianya·2024-02-20 16:28

Neo4j学习笔记(三) Spring Data Neo4j中可以按方法名自动生成查询逻辑的查询方法

目录一.概述二.方法名元素三.属性表达式四.分页和排序五.TopN的取得一.概述SpringData的Repository接口提供了通过方法名称自动生成查询逻辑的能力。在SpringDataNeo4j中，继承Neo4jRepository接口同样可以获得这种按方法名自动生成查询逻辑的功能。查询的默认深度为1，即查询本节点以及和本节点有直接关系的节点，查询的关系类型为节点实体类(使用@NodeEnt

langzitianya·2024-02-20 16:58

Neo4j学习笔记(四.3) Spring Data Neo4j中连接Neo4j因果集群

一.配置文件Neo4j4.0之前，instance0~instance2都是因果集群里的核心服务器URI=bolt+routing://instance0:7687URIS=bolt+routing://instance1:7687,bolt+routing://instance2:7687Neo4j4.0之后，instance0~instance2都是因果集群里的核心服务器URI=neo4j:/

langzitianya·2024-02-20 16:58

清翔零基础教你学51单片机_个人学习笔记(5)_数码管静态和动态显示

说明本人使用的是清翔的51单片机开发板，如果型号相同最方便，但是如果型号不同也可以参考，因为芯片都是一样的，只是外设不同而已，使用时只需要对照自己的开发板原理图稍微修改下引脚即可。本次笔记对应清翔视频教程的第16、17、18集数码管静态显示和动态显示（理论+编程）一、什么是数码管1.1数码管的构成1位数码管多位数码管数码管内部由8个LED组层，排列成8字形，点亮对应的LED，熄灭其他的LED，即可

BO_S__·2024-02-20 16:47

陈绍斌：与智慧同路，正视未来||心和塾企业家山西研学分享

每次课程陈绍斌都是第一时间把他的学习笔记分享出来，近三万字的学习资料内容，我们会惊讶结构分明的笔记在短短十几分钟就整理出来，对于基础不是十分厚实

孙键_心和塾·2024-02-20 15:56

SQL学习笔记----第二天（学生信息表自增字段的使用）

学生信息表自增字段的使用--目录前言一、MySQL中使用自增字段二、SqlServer中使用自增字段三、Oracle中使用自增字段总结前言我们在设计数据表时，使用自动增长字段可以简化子弹数据的生成，在开发实践中，经常将主键设置为自动增长字段，不同的数据库自动增长字段实现是不同的，下面我们来一起详细了解下一、MySQL中使用自增字段首先了解下怎么在MySQL中创建自增字段，在MySQL中创建自增字段

春眠不觉晓♞·2024-02-20 15:54

大数据Map Reduce (Hadoop) 和 MPP数据库的区别

原理的角度出发,mapreduce其实就是二分查找的一个逆过程,不过因为计算节点有限,所以map和reduce前都预先有一个分区的步骤.二分查找要求数据是排序好的,所以MapReduce之间会有一个shuffle的过程对Map的结果排序.Reduce的输入是排好序的.MR分而治之的策略和数据库行业中另一种数据库MassivelyParallelProcessor即大规模并行处理数据库(典型代表AW

山哥Samuel·2024-02-20 15:05

HarmonyOS移动应用学习笔记——1.初识HarmonyOS

文章目录1.1HarmonyOS简介1.2HarmonyOS架构和安全HarmonyOS架构内核层系统服务层框架层应用层HarmonyOS应用服务智能分发HarmonyOS系统安全正确的人正确的设备正确地使用数据1.3HarmonyOS关键特性硬件互助，资源共享分布式软总线分布式设备虚拟化分布式数据管理分布式任务调度一次开发，多次部署统一OS，弹性部署

WMX_0121·2024-02-20 15:10

【静夜思学习笔记】我们是否都生存在某个角色里？

简介：认清人的本性，理解角色化生存，这是了解人性和如何做产品的重要一课，一起了解一下角色化对我们的影响。集体人格什么是集体？集体其实就是一堆角色。为什么会有角色这么一说，其实是管理的需求。比如说你在家里的角色，可能是爸爸，妈妈，儿子。他有了这些角色。就像是赋予了你一个说明书。相当于给你定义了你要做些什么？为人子，方少时，亲师友，习礼仪。所以我们从小就被驯化成某一种角色。当我们被角色训练好，收敛自我

静夜思007·2024-02-20 14:42

Hadoop 大数据的入门学习

由于所做的银行项目与大数据有关，所以个人学习下hadoop的知识，希望能对大数据有所了解，不喜勿喷，哪里有不对的希望大神指点Hadoop百度百科：Hadoop是一个由Apache基金会所开发的分布式系统基础架构

heybo_zhang·2024-02-20 14:36

学习笔记—独立的损益表

【优胜行动派️❤学习日记】[打卡宝宝]：张雪[打卡日期]：2019/2/21[累计坚持]：这是我坚持学习的第125天[学习内容]：5分钟商学院·独立的损益表[学习笔记]：讲了很久从员工到经理，其最核心的转变

凡小姐_ba36·2024-02-20 14:52

威尔金森功分器基本原理学习笔记

威尔金森功分器基本原理威尔金森功率分配器的功能是将输入信号等分或不等分的分配到各个输出端口，并保持相同输出相位。环形器虽然有类似功能，但威尔金森功率分配器在应用上具有更宽的带宽。微带形功分器的电路结构如图所示，其中，输入端口特性阻抗为Z0Z_0Z0，两段分支微带线电长度为λ/4\lambda/4λ/4，特性阻抗分别为Z02Z_{02}Z02和Z03Z_{03}Z03，终端分别接负载R2R_2R2和

儒雅永缘·2024-02-20 14:13

Kubernetes学习笔记--理解及操作 Kubernetes 对象

本文记录Kubernetes对象在KubernetesAPI的表现形式，以及如何在.yaml格式的文件中表示。Kubernetes对象在Kubernetes系统中，Kubernetes对象是持久化的实体，Kubernetes使用这些实体去表示整个集群的状态，如哪些容器化应用在运行（以及在哪些节点上），可以被应用使用的资源，关于应用运行时表现的策略，比如重启策略、升级策略，以及容错策略等。当操作Ku

木子一酱·2024-02-20 14:05

第四课：《七种开头方式，让读者忍不住想要看下去》学习笔记

以前，我特别爱看悬疑电视剧，一部《神探狄仁杰》的电视剧，就让我反复看了很多次。悬疑剧之所以勾人心魄，就因为剧中有曲折离奇的情节故事。每集电视的开头，总有一个悬念吸引着你一直想要追下去。那么，在人物稿的开头上，又该怎样做，才能让读者忍不住想要看下去呢？好的开头有三个特点：一是让读者好奇；二是让人获得新的知识价值；三是满足读者的八卦心理。为了写出具有以上特点的文章开头，媛媛老师为我们介绍了7种开头方式

覃梅子·2024-02-20 13:11

孙子兵法《军争篇》学习笔记

《军争篇》讲了四个层次的内容第一层提出用兵要“以迂为直”。孙子介绍了行军的特别来强调“以迂为直”的难，但是它又是很重要的用兵之法。第二层孙子重点讲了“形名”，就是战争当中军队的指挥系统。第三层讲了如何治理现场军队的士气。第四层孙子讲了用兵的八条禁忌。军事活动里第一重要的就是等待；第二重要的就是行军。行军的原理是“举军而争利则不及，委军而争利则辎重捐”。全军都冲上去争利的话就到不了。先锋部队先冲上去

你好12388·2024-02-20 13:30

【C++之类和对象篇003】

C++学习笔记---006C++知识类和对象篇1、Date日期类实现1.1、Date.h1.2、Date.cpp1.3、main.cpp2、">"运算符重载3、const成员函数4、取地址及const取地址操作符重载

下课后泡实验室·2024-02-20 13:09

【C++之类和对象篇001】

C++学习笔记---004C++知识类和对象篇1、面向过程和面向对象1.1、面向过程1.2、面向对象2、类的引入3、类的定义3.1、类的两种定义方式4、类的访问限定符及封装4.1、类的访问限定符4.2、

下课后泡实验室·2024-02-20 13:39

【C++之类和对象篇002】

C++学习笔记---005C++知识类和对象篇1、类的6个默认成员函数2、构造函数2.1、构造函数的特性2.2、内置类型和自定义类型2.3、什么是默认构造函数？3、析构函数3.1、什么是析构函数？

下课后泡实验室·2024-02-20 13:03

NodeJS学习笔记（六）中间件 | 跨域

Express中间件业务流程的中间处理环节，必须有输入输出中间件的作用当一个请求到达Express的服务器之后，可以连续调用多个中间件，从而对这次请求进行预处理。格式本质上是一个function函数varexpress=require('express')//导入Express模块varapp=express()//创建服务器app.get('/',function(req,res,next){n

量子喵pgm·2024-02-20 13:58

社交网络学习笔记1——图的基本概念

part1图的分类一、简单图1.1无向图VS有向图无向图：节点之间的边不存在方向，常见的例子有facebook上好友关系、合作发表论文等；在计算机存储中，无法直接表示“无向”这个概念，因此一般通过双向同权图来表示有向图：节点之间的边存在方向，常见例子有打电话(被动呼叫和主动呼叫)、微博上粉丝和博主之间的关系等；在计算机存储中，有向图以双向不同权图来表示，与有向图的区别在于边的权重不一定相同无向图(

一缕阳光lyz·2024-02-20 13:17

php mysql html5_HTML5&CSS3&JavaScript&PHP&MySQL学习笔记

1、在文字间添加一条水平线使用注意该符号不是成对出现的2、用来标记于段落中的较短引用，浏览器会在它之间的语句两端加上双引号。3、可以包含设计者的联系方式或者电话等。P444、链接是由百度一下产生，其中href指定要链接到的地址。P665、如果希望链接网页在新网页中打开，那么需要在第4点中设置target=”_blank”P756、当需要跳转到页面的某个位置时，可使用id属性。P767、新建一个Em

Jakcwin·2024-02-20 13:08

Material Design风格神框架vuetify 学习笔记(五) bar

一.应用栏V-app-barv-app-bar组件通常是站点导航的主要来源。App-bar组件与drawer配合使用，可以在应用程序中提供导航。1.appbar的外观风格(1).内置风格普通appbar紧凑appbar扁平appbar加高appbar(2).指定高度height此外,我们还可以指定高度,此高度会覆盖所有其他高度设定标题(3).圆角风格rounded(4).指定背景图片src2.ap

熊爸天下_56c7·2024-02-20 13:03

Flink理论—Flink架构设计

它集成了所有常见的集群资源管理器，例如HadoopYARN，但也可以设置作为独立集群甚至库运行,例如Spark的StandaloneMode本节概述了Flink架构，并且描述了其主要组件如何交互以执行应用程序和从故障中恢复

不二人生·2024-02-20 12:59

9、内网安全-横向移动&Exchange服务&有账户CVE漏洞&无账户口令爆破

用途：个人学习笔记，有所借鉴，欢迎指正！

++⁠⁠·2024-02-20 12:26

7、内网安全-横向移动&PTH哈希&PTT票据&PTK密匙&Kerberos&密码喷射

用途：个人学习笔记，有所借鉴，欢迎指正目录一、域横向移动-PTH-Mimikatz&NTLM1、Mimikatz2、impacket-at&ps&wmi&smb二、域横向移动-PTK-Mimikatz&

++⁠⁠·2024-02-20 12:25

6、内网安全-横向移动&Wmi&Smb&CrackMapExec&ProxyChains&Impacket

用途：个人学习笔记，有所借鉴，欢迎指正！

++⁠⁠·2024-02-20 12:51

Python Flask高级编程之RESTFul API前后端分离（学习笔记）

Flask-RESTful是一个强大的Python库，用于构建RESTfulAPIs。它建立在Flask框架之上，提供了一套简单易用的工具，可以帮助你快速地创建API接口。Flask-RESTful遵循REST原则，支持常见的HTTP请求方法，如GET、POST、PUT和DELETE，并提供了验证、授权、分页等功能。理解API理解RestfulAPI理解装饰器理解Flask框架使用PythonFl

放风筝的猪·2024-02-20 12:09

通鉴

学习笔记：读通鉴论，王夫之晚年系统史论代表作。研读司马光资治通鉴，结合当时社会现实，总结历史经验，随事阐述自己的见解主张和思想认识。对治乱兴衰作了深入评论。王夫之痛恨明王朝腐败政治，主张改革。

马唐·2024-02-20 11:38

django rest framework 学习笔记2

注意：该文章部分摘抄之百度，仅当做学习笔记供小白使用，若侵权请联系删除！

_pass_·2024-02-20 11:22

从零开始学习Netty - 学习笔记 - NIO基础 - ByteBuffer: 简介和基本操作

NIO基础1.三大组件1.1.Channel&BufferChannel在JavaNIO（NewI/O）中，“Channel”（通道）是一个重要的概念，用于在非阻塞I/O操作中进行数据的传输。JavaNIO提供了一种更为灵活和高效的I/O处理方式，相比于传统的I/O，它具有更好的性能和可扩展性。常见的JavaNIO中的通道类型：FileChannel（文件通道）：用于文件I/O操作的通道，可以在文

花开十里落叶无情·2024-02-20 11:21

【机器学习笔记】14 关联规则

关联规则概述关联规则（AssociationRules）反映一个事物与其他事物之间的相互依存性和关联性。如果两个或者多个事物之间存在一定的关联关系，那么，其中一个事物就能够通过其他事物预测到。关联规则可以看作是一种IF-THEN关系。假设商品A被客户购买，那么在相同的交易ID下，商品B也被客户挑选的机会就被发现了。有没有发生过这样的事：你出去买东西，结果却买了比你计划的多得多的东西？这是一种被称为

RIKI_1·2024-02-20 11:43

学习笔记：机器学习之决策树

0引入决策树是一种归纳式的机器学习算法,可用于分类和回归任务。比如生活中的选男朋友的例子，是否决定将自己托付终生给那个他，就是个二分类问题。考量一个人有很多考量属性，年龄、长相、收入等等。决策树可以帮做做出决策，经过一个个if-then规则后可得到答案。大部分人会首先考虑年龄，认为这是一个首要考虑的指标，年纪太大可能直接Pass了，年龄合适，再继续考量后边的指标。决策树算法就是建立一个模型去帮你做

萌龙如我们·2024-02-20 11:13

【机器学习笔记】13 降维

降维概述维数灾难维数灾难(CurseofDimensionality)：通常是指在涉及到向量的计算的问题中，随着维数的增加，计算量呈指数倍增长的一种现象。在很多机器学习问题中，训练集中的每条数据经常伴随着上千、甚至上万个特征。要处理这所有的特征的话，不仅会让训练非常缓慢，还会极大增加搜寻良好解决方案的困难。这个问题就是我们常说的维数灾难。维数灾难涉及数字分析、抽样、组合、机器学习、数据挖掘和数据库

RIKI_1·2024-02-20 11:13

Android学习笔记

Android是一种廉价而又灵活的智能手机操作系统，它的普及使得人们可以拥有一款更加便捷的智能手机。Android系统的普及，提升了智能手机的使用价值，让人们的生活更加便捷。那么，如何学习Android呢？下面是一篇关于学习Android的文章，希望对初学者有所帮助。一、了解Android的基础知识在学习Android之前，我们需要了解Android系统的特点，包括其组件、运行机制、UI、API等

孙小小白·2024-02-20 11:13

【Azure 架构师学习笔记】- Azure Databricks (8) --UC架构简介

本文属于【Azure架构师学习笔记】系列。本文属于【AzureDatabricks】系列。

發糞塗牆·2024-02-20 11:11

Kafka核心逻辑介绍 | 京东云技术团队

分布式消息系统（kafka2.8.0版本之后接触了对zk的依赖，使用自己的kRaft做集群管理，新增内部主体@metadata存储元数据信息），它的最大的特性就是可以实时的处理大量数据以满足各种需求场景：比如基于hadoop

·2024-02-20 11:54

【机器学习笔记】8 决策树

决策树原理决策树是从训练数据中学习得出一个树状结构的模型。决策树属于判别模型。决策树是一种树状结构，通过做出一系列决策（选择）来对数据进行划分，这类似于针对一系列问题进行选择。决策树的决策过程就是从根节点开始，测试待分类项中对应的特征属性，并按照其值选择输出分支，直到叶子节点，将叶子节点的存放的类别作为决策结果。以下小美相亲的例子就是决策树决策树算法是一种归纳分类算法，它通过对训练集的学习，挖掘出

RIKI_1·2024-02-20 11:39

【Azure 架构师学习笔记】- Azure Databricks (7) --Unity Catalog(UC) 基本概念和组件