学习笔记-hadoop 第20页

微服务—DSL基础语法与RestClient操作

本博客为个人学习笔记，学习网站：黑马程序员SpringCloud2021教程目录DSL语法索引库操作mapping属性创建索引库字段拷贝查询、删除、修改索引库文档操作新增文档查询、删除文档修改文档全量修改增量修改

向上的咸鱼blueblue·2024-02-19 15:00

VS-Code-C＃配置

LoveEmiliaForever·2024-02-19 15:27

单片机学习笔记---AD模数转换&DA数模转换

目录AD模数转换XPT2046.cXPT2046.hmain.cDA数模转换main.c上一篇博客讲了AD/DA转换的工作原理，也介绍了运算放大器的工作原理，这节开始代码演示！AD模数转换新创建一个工程：AD模数转换第一个工程将用到LCD1602和Delay函数，所以首先将我们之前讲过的代码模块添加进来然后创建主程序main.c，XPT2046.c,XPT2046.h文件。开始代码讲解：XPT20

Vera工程师养成记·2024-02-19 15:23

单片机学习笔记---直流电机驱动（PWM）

直流电机介绍直流电机是一种将电能转换为机械能的装置。一般的直流电机有两个电极，当电极正接时，电机正转，当电极反接时，电机反转直流电机主要由永磁体（定子）、线圈（转子）和换向器组成除直流电机外，常见的电机还有步进电机、舵机、无刷电机、空心杯电机等电机驱动电路因为电机是一种功率比较大的负载，如果把它直接接在单片机IO口上，那它肯定是驱动不了的，而且可能会损坏单片机的IO口。所以我们需要在单片机的IO口

Vera工程师养成记·2024-02-19 15:53

单片机学习笔记---LED呼吸灯&直流电机调速

目录LED呼吸灯直流电机调速模型结构波形定时器初始化函数中断函数主程序上一节讲了电机的工作原理，这一节开始代码演示！我们上一篇说Ton的时间长Toff时间短电机会快，Ton的时间短Toff时间长电机会慢并且我们还要保证无论Ton和Toff哪个时间比较长，Ts都得是固定值，因为为了保证周期一定。下面我们先做一个“呼吸灯”感受一下上一篇博客中提到的PWM的意义：LED呼吸灯新创建本节第一个工程：LED

Vera工程师养成记·2024-02-19 15:53

沁恒CH32V30X学习笔记05--串口接收中断和空闲中断组合接收数据

同步异步收发器（USART）**包含3个通用同步异步收发器（USART1/2/3）和5个通用异步收发器（UART4/5/6/7/8）空闲帧，空闲帧是10位或11位高电平，包含停止位。断开帧是10位或11位低电平，后跟着停止位引脚模式配置引脚分配bsp驱动代码bsp_uart_it.c/**bsp_usart_it.c**Created

Car12·2024-02-19 15:20

【大厂AI课学习笔记】【2.2机器学习开发任务实例】（1）搭建一个机器学习模型

今天学习的是，如何搭建一个机器学习模型。主要有以上的步骤：原始数据采集特征工程数据预处理特征提取特征转换（构造）预测识别（模型训练和测试）在实际工作中，特征比模型更重要。数据和特征的选择，已经决定了模型的天花板，模型算法只是去逼近这个上限。在上述的特征工程中：数据预处理，就是去除数据的噪声，例如文本中的错误、不再使用的词语等；特征提取，就是从原始数据中提取一些有效的特征。例如图像分类中，提取边缘、

giszz·2024-02-19 14:43

【大厂AI课学习笔记】【2.2机器学习开发任务实例】（3）数据准备和数据预处理

项目开始，首先要进行数据准备和数据预处理。数据准备的核心是找到这些数据，观察数据的问题。数据预处理就是去掉脏数据。缺失值的处理，格式转换等。延伸学习：在人工智能（AI）的众多工作流程中，数据准备与预处理占据着举足轻重的地位。这两个步骤不仅影响着模型的训练效率和准确性，更是确保AI系统能够在实际应用中发挥效能的基石。一、数据准备数据准备的核心在于找到合适的数据源，并确保这些数据能够充分反映所要解决的

giszz·2024-02-19 14:43

Mybatis(千峰学习笔记)

什么是MyBatis1.MyBatis是一款优秀的持久层框架，它支持定制化SQL，存储过程及高级映射。2.MyBatis避免了几乎所有的JDBC代码和手动设置参数以及获取结果集的工作。3.Mybatis通过XML或注解的方式配置和映射原生信息。Mybatis特点：1.MyBatis可以使用简单的XML或注解来配置和映射原生信息，将接口和Java的POJO映射成数据库中的记录。2.MyBatis提供

2301_78533951·2024-02-19 14:09

Nacos注册中心(黑马学习笔记)

Nacos注册中心国内公司一般都推崇阿里巴巴的技术，比如注册中心，SpringCloudAlibaba也推出了一个名为Nacos的注册中心。1.认识和安装NacosNacos是阿里巴巴的产品，现在是SpringCloud中的一个组件。相比Eureka功能更加丰富，在国内受欢迎程度较高。附：Nacos安装指南1.Windows安装开发阶段采用单机安装即可。1.1.下载安装包在Nacos的GitHub

2301_78533951·2024-02-19 14:09

单片机学习笔记---AD/DA工作原理（含运算放大器的工作原理）

目录AD/DA介绍硬件电路模型硬件电路运算放大器DA原理T型电阻网络DA转换器PWM型DA转换器AD原理逐次逼近型AD转换器AD/DA性能指标XPT2046XPT2046时序AD/DA介绍AD（AnalogtoDigital）：模拟-数字转换，将模拟信号转换为计算机可操作的数字信号。有时候我们也把AD叫做ADC（C是转换器converter的缩写）。比如说模拟电压，单片机是数字信号，数字信号是只有

Vera工程师养成记·2024-02-19 14:39

Eureka注册中心(黑马学习笔记)

Eureka注册中心假如我们的服务提供者user-service部署了多个实例，如图：大家思考几个问题：order-service在发起远程调用的时候，该如何得知user-service实例的ip地址和端口？有多个user-service实例地址，order-service调用时该如何选择？order-service如何得知某个user-service实例是否依然健康，是不是已经宕机？1.Eure

2301_78533951·2024-02-19 14:39

MyBatis-Plus框架(千峰学习笔记)

简介MyBatis-Plus是一个MyBatis的增强工具，在MyBatis的基础上只做增强不做改变，主要作用为简化开发、提高效率。我们的愿景是成为MyBatis最好的搭档，就像魂斗罗中的1P、2P，基友搭配，效率翻倍。特性●无侵入：只做增强不做改变，引入它不会对现有工程产生影响，如丝般顺滑●损耗小：启动即会自动注入基本CURD，性能基本无损耗，直接面向对象操作●强大的CRUD操作：内置通用Map

2301_78533951·2024-02-19 14:36

学习笔记

学习的4个真相：1.学业是孩子的第一份事业2盯着作业（学习）到管理作业（学习）3.要关注学习的行为，又要关注学习的情绪（感受孩子感受的能力）4.学习是提高孩子领导力的过程家长的4个错误：1.喜欢割裂（孩子做作业，家长玩手机），学习是全家人的事；挣钱是全家人的事情。2.喜欢催促（没有具体支持措施。没有良好沟通交流）；3.喜欢干涉，喜欢干涉（孩子做啥都是错的？抹杀孩子自主性。孩子不是叛逆，只是长大了，

快乐老家·2024-02-19 14:38

Django学习笔记教程全解析:初步学习Django模型，初识API,以及Django的后台管理系统（Django全解析，保姆级教程）

把时间用在思考上是最能节省时间的事情。——[美]卡曾斯导言写在前面本文部分内容引用的是Django官方文档，对官方文档进行了解读和理解，对官方文档的部分注释内容进行了翻译，以方便大家的阅读和理解。概述在上一篇文章里，我们学习了Django的数据库以及拓展数据库的使用以及设置项。这篇文章，我们开始学习Django的模型、API以及后台管理系统的知识。在Django里写一个数据库驱动的Web应用的第一

梦断南楼·2024-02-19 14:00

中间件-Nginx学习笔记

目录nginx简介Linux安装Nginxnginx常用命令nginx.conf配置文件nginx反向代理nginx负载均衡nginx动静分离nginx搭建高可用集群高可用配置（主从配置）高可用主从配置文件详解nginx原理nginx简介什么是nginxNginx(enginex)是一个高性能的HTTP和反向代理]web服务器，同时也提供了IMAP/POP3/SMTP服务。Nginx可以作为静态页

笑一笑、·2024-02-19 14:52

nginx学习笔记

1.Nginx简介1.1Nginx概述Nginx("enginex")是一个高性能的HTTP和反向代理服务器,特点是占有内存少，并发能力强，事实上nginx的并发能力确实在同类型的网页服务器中表现较好，中国大陆使用nginx网站用户有：百度、京东、新浪、网易、腾讯、淘宝等1.2Nginx作为web服务器Nginx可以作为静态页面的web服务器，同时还支持CGI协议的动态语言，比如perl、php等

JiuYou2020·2024-02-19 14:20

redis学习笔记

Redis学习笔记文章目录Redis学习笔记一、NoSQL数据库简介1、解决问题2、NoSQL数据库二、Redis6概述和安装1、安装2、注意事项3、Redis使用4、其他介绍三、常用五大数据类型1、Redis

果然君·2024-02-19 14:19

Nginx学习笔记

什么是Nginx一款高性能的http服务器/反向代理服务器，能够支撑5万并发连接，并且cpu、内存资源消耗非常低Nginx能做什么http服务器，做网页静态服务器。虚拟主机，实现一台服务器虚拟出多个网站。可以做反向代理、负载均衡、动静分离。什么是反向代理(1)正向代理在客户端（浏览器）配置代理服务器，通过代理服务器进行互联网访问(2)反向代理客户端只需要将请求发送到反向代理服务器，由反向代理服务器

菜鸟学Java2021·2024-02-19 14:18

Java学习笔记——封装

声明：本文首发于我的个人微信公众号【Java编程社区】，查看更多文章与学习资源请移步我的公众号Java编程社区今天我们来看看面向对象的三大特征之一——封装下来我们从现实生活中的例子来聊聊封装的特性我们日常使用的电脑主机，把CPU、内存、主板等等都封装到机箱里面去。假如没有机箱的话出现什么问题，主机、主板全部都散落在一处，然后开机没有开机按钮，那么需要我们直接操作跳线才能把电脑开启。这样子如果操作不

C语言中文社区·2024-02-19 14:58

Quick introduction to Apache Spark

Spark使用Hadoop的客户端库来

Liam_ml·2024-02-19 13:29

尚硅谷最新Node.js 学习笔记（四）

目录八、express框架8.1、express介绍8.2、express使用express下载express初体验8.3、express路由什么是路由？路由的使用获取请求参数获取路由参数8.4、express响应设置8.5、express中间件什么是中间件？中间件的作用中间件的类型定义全局中间件多个全局中间件定义路由中间件静态资源中间件获取请求体数据body-parser8.6、Router什么

编程抗氧化·2024-02-19 13:12

Hadoop Shuffle

Whentherearemultiplereducers,themaptaskspartitiontheiroutput,eachcreatingonepartitionforeachreducetask.Therecanbemanykeys(andtheirassociatedvalues)ineachpartition,buttherecordsforeverykeyareallinasing

SharlotteZZZ·2024-02-19 13:22

Flink 细粒度滑动窗口性能优化

大数据技术AIFlink/Spark/Hadoop/数仓，数据分析、面试，源码解读等干货学习资料118篇原创内容公众号1、概述1.1细粒度滑动的影响当使用细粒度的滑动窗口（窗口长度远远大于滑动步长）时，

hyunbar·2024-02-19 13:39

【大数据面试题】006介绍一下Parquet存储格式的优势

同时一般查询使用时不会使用所有列，而是只用到几列，所以查询速度会更快压缩比例高因为是列式存储，所以可以对同一类型的一段做压缩，压缩比例高支持的平台和框架多在Hadoop,Spark,Presto,Python

Jiweilai1·2024-02-19 13:34

C#(C Sharp)学习笔记_循环语句【七】

什么是循环语？循环语句是由循环体及循环的终止条件两部分组成的。在不少实际问题中有许多具有规律性的重复操作，因此在程序中就需要重复执行某些语句。一组被重复执行的语句称之为循环体，能否继续重复，决定循环的终止条件。循环结构是在一定条件下反复执行某段程序的流程结构，被反复执行的程序被称为循环体。编程语言中的循环语句大致分为两种：While，For和Dowhile。那么这两种语句的本质区别在哪呢,接下来一

tiamo_16·2024-02-19 13:29

2022-7-31晨间日记

周目标·完成进度完成了《十天塑造孩子学习力》阅读，并整理出十篇学习笔记。学习·信息·阅读参加书恒朗读视频培训、阅读《做一个合格的高中家长》。健康·饮食·锻炼晚饭后散步、节制饮食、营养平衡。人际·家

面前大海·2024-02-19 13:01

Sqoop 入门基础

简介Sqoop（SQLtoHadoop）是一个开源工具，用于在关系型数据库和Hadoop之间传输数据。

香菜的开发日记·2024-02-19 13:17

沁恒CH32V30X学习笔记01--创建工程

资料下载https://www.wch.cn/products/CH32V307.html?下载完成后安装MounRiverStudio(MRS)创建工程修改时钟144Mprintf重定向修改外部晶振频率位置添加自定义文件添加目录

Car12·2024-02-19 13:41

hadoop硬件配置高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。500字节一个块假设我们有5000个平均大小为20GB的文件并且使用默认的分布式文件系统分块大小（64MB）同时副本因子为3，5000*20GB=102400000M=97T那么NameNode需要保存5千万个分块的信息，这些分块的大小加上文件系统的开销总共需要1.5GB的内存。但是一

xcagy·2024-02-19 13:07

《说白伤寒论》学习笔记07

学习笔记07:（1）真水原无味，红尘更养禅。百病唯一药，生存由本能。巳丑之春（2）每一个热型都代表着一个内涵本质，什么热型内部是什么机制。

本能学堂a昨年·2024-02-19 13:39

【鸿蒙系统学习笔记】TypeScript开发语言

一、背景HarmonyOS应用的主要开发语言是ArkTS，它由TypeScript（简称TS）扩展而来，在继承TypeScript语法的基础上进行了一系列优化，使开发者能够以更简洁、更自然的方式开发应用。值得注意的是，TypeScript本身也是由另一门语言JavaScript扩展而来。因此三者的关系如下图所示二、TypeScript2.1、运行环境2.1.1、线上PlaygroundTypeSc

奔跑的露西·2024-02-19 13:29

视觉slam十四讲学习笔记（六）视觉里程计 1

本文关注基于特征点方式的视觉里程计算法。将介绍什么是特征点，如何提取和匹配特征点，以及如何根据配对的特征点估计相机运动。目录前言一、特征点法1特征点2ORB特征FAST关键点BRIEF描述子3特征匹配二、实践：特征提取和匹配三、2D-2D:对极几何1对极约束2本质矩阵3单应矩阵四、实践：对极约束求解相机运动五、三角测量总结前言1.理解图像特征点的意义,并掌握在单幅图像中提取出特征点，及多幅图像中匹

苦瓜汤补钙·2024-02-19 13:54

STM32学习笔记(七) —— DMA传输(MTM)

DMA，全称是DirectMemoryAccess（直接内存访问）。可以在存储器和存储器之间或者外设和存储器之间传输数据，而不需要CPU的干预，这样可以节省CPU的资源，提高工作效率。1.功能框图STM32F103RCT6有两个DMA控制器，需要DMA传输的时候，外设会向DMA发送请求，DMA也会进行应答，随后会进行DMA传输。2.DMA通道两个DMA控制器一共有12个通道（DMA1有7个，DMA

SSS&10&01·2024-02-19 13:23

【大厂AI课学习笔记】【2.1 人工智能项目开发规划与目标】（4）数据准备的流程

今天学习的是数据准备的流程。我们已经知道，数据准备占了AI项目超过一半甚至79%的时间。那么数据准备，都做些什么，有哪些流程。1.数据采集观测数据人工收集调查问卷线上数据库2.数据清洗有缺失的数据有重复的数据有内容错误的数据，例如逻辑错误、格式错误有不需要的数据3.数据标注数据标注即通过分类、画框、标注、注释等，对图片、语音、文本等数据进行处理，标记对象的特征，以作为机器学习标签的过程。4.数据划

giszz·2024-02-19 13:47

Java学习笔记2024/2/16

知识点面向对象题目1（完成）定义手机类，手机有品牌(brand),价格(price)和颜色(color)三个属性，有打电话call()和sendMessage()两个功能。请定义出手机类，类中要有空参、有参构造方法，set/get方法。定义测试类，在主方法中使用空参构造创建对象，使用set方法赋值。调用对象的两个功能，打印效果如下：正在使用价格为3998元黑色的小米手机打电话....正在使用价格为

Angus1648·2024-02-19 12:40

单细胞转录组基础分析六：伪时间分析

本文是参考学习单细胞转录组基础分析六：伪时间分析的学习笔记。可能根据学习情况有所改动。

Seurat_Satija·2024-02-19 12:25

设计模式学习笔记

创建型把对象的创建和使用相分离1工厂方法定义工厂接口和产品接口，但如何创建实际工厂和实际产品被推迟到子类实现，从而使调用方只和抽象工厂与抽象产品打交道调用方尽量持有接口或抽象类，避免持有具体类型的子类，以便工厂方法能随时切换不同的子类返回，却不影响调用方代码。好处：屏蔽创建产品的细节，可能创建新产品，也可能返回缓存//抽象工厂-接口，返回抽象产品NumberpublicinterfaceNumbe

谷谷谷雨·2024-02-19 12:33

设计模式学习笔记 - 学前简述

1.为什么学习设计模式？学习设计模式的原因：应对面试中的设计模式相关问题；写出高质量代码，告别让人吐槽的烂代码；提高复杂代码的设计和开发能力让读源码、学习框架爱事半功倍；为职场发展铺垫。设计模式作为一门与编码、开发有着直接关系的基础知识，是你现在就要开始学习的。早点学习，以后的项目就都可以拿来锻炼，每写一行代码都是对内功的利用和加深，是可以收益整个事业生涯的一个技能。2.如何写出高质量代码，如何评

陈建111·2024-02-19 12:11

C语言入门

内容来自慕课网，个人学习笔记。加上了mtianyan标签标记知识点。

番茄不是西红柿1·2024-02-19 12:00

2023.5.20读《一本万利》学习笔记

菜单决定餐厅的经营命运菜单是连接顾客和商家的桥梁。顾客来到餐厅，第一触点就是和菜单的接触。菜品价格的高与低，还有菜品制作的档次都反应在菜单上。也可以分辨出一家餐厅可解决什么样顾客的需求。它的赢利策略是什么，菜单板块的构架，这些东西都包含在你菜单中。所以菜单在餐厅中起到非常重要的作用。菜单是消费者的第一接触点，也是最早的体验点。世界上米其林餐厅也是根据体验评选出来。一星，值得去造访的餐厅，是同类饮食

34115b87e599·2024-02-19 12:30

【大数据】HADOOP-YARN-ContainerExecutor容器启动器详解

在NodeManager中，有三种运行Container的方式，它们分别是:DefaultContainerExecutorLinuxContainerExecutorDockerContainerExecutor从它们的名字中，我们就能看得出来，默认情况下，一定使用的是DefaultContainerExecutor。而一般情况下，DefaultContainerExecutor也确实能够满足我

笑起来贼好看·2024-02-19 11:38

学习篇-Hadoop-YARN-环境搭建

文章目录一、Hadoop-YARN-环境搭建一、Hadoop-YARN-环境搭建官网参考：https://hadoop.apache.org/docs/stable/hadoop-project-dist

东东爱编码·2024-02-19 11:08

【大数据】HADOOP-Yarn集群界面UI指标项详解（建议收藏哦）

目录首页（Cluster）节点信息SchedulerMetrics：集群调度信息节点信息详解（Nodes）应用列表信息（applications）队列详情页（Scheduler）指标详细说明（非常重要）首页（Cluster）集群监控信息指标详解AppsSubmitted：已提交的应用AppsCompleted：已完成的应用AppsRunning：正在运行的应用ContainersRunning：正

笑起来贼好看·2024-02-19 11:08

Hadoop-Yarn-NodeManager都做了什么

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、上下文在我的博客中已经简要的分析了NodeManager

隔着天花板看星星·2024-02-19 11:00

【2019-04-28】Hadoop分布式文件系统

Hadoop自带HDFS(hadoopdistributefilesystem)。HDFS默认数据块128M。

BigBigFlower·2024-02-19 11:56

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode

万里长江雪·2024-02-19 11:58

hadoop-2.7.4-nodemanager无法启动问题解决方案

近期新配了hadoop-274版本的集群，发现有一个小问题，DataNode无法顺利启动。

半肉哥·2024-02-19 11:27

hadoop-yarn资源分配介绍-以及推荐常用优化参数

如果有什么不正确的欢迎大家一起交流学习~Yarn前言作为Hadoop2.x的一部分，YARN采用MapReduce中的资源管理功能并对其进行打包，以便新引擎可以使用它们。

Winhole·2024-02-19 11:26

Hadoop-Yarn-NodeManager如何计算Linux系统上的资源信息

NodeResourceMonitorImpl）时只是提了下SysInfoLinux，下面我们展开讲下SysInfoLinux是用于计算Linux系统上的资源信息的插件二、SysInfoLinux源码packageorg.apache.hadoop.util

隔着天花板看星星·2024-02-19 11:48

推荐频道

学习笔记-hadoop