Web前段学习笔记

大数据Hadoop/Hive学习笔记一（基础概念）

大数据Hadoop/Hive学习笔记一（基础概念）一，概念介绍：大数据：大数据一般用来描述一种数量庞大，复杂的数据集，传统数据处理应用程序难以应对。
lucky_myj·2024-01-25 09:46

【hudi学习笔记】hudi基础教程-hudi表设计

一.hudi表设计在较高的层次上，用于写Hudi表的组件使用了一种受支持的方式嵌入到ApacheSpark作业中，它会在支持DFS的存储上生成代表Hudi表的一组文件。然后，在具有一定保证的情况下，诸如ApacheSpark、Presto、ApacheHive之类的查询引擎可以查询该表。Hudi表的三个主要组件：1）有序的时间轴元数据。类似于数据库事务日志。2）分层布局的数据文件：实际写入表中的数
菜鸟老胡~·2024-01-25 09:13

【hudi学习笔记】hudi基础教程-Timeline时间轴

一.HudiTimeline（时间轴）Hudi维护着一条对Hudi数据集所有操作的不同Instant组成的Timeline（时间轴），通过时间轴，用户可以轻易的进行增量查询或基于某个历史时间点的查询，这也是Hudi对外提供基于时间点查询的核心能力之一。每条Timeline必须包含零或多个Instant。所有Instant构成了Timeline，Instant在Hudi中被定义为HoodieInst
菜鸟老胡~·2024-01-25 09:43

机器学习笔记02：特征工程

机器学习笔记02：特征工程文章目录机器学习笔记02：特征工程1.特征工程定义2.数据的特征抽取：1.字典特征抽取：2.文本特征抽取：3.tf-df分析问题3.特征预处理1.特征处理的方法：1.数值型数据
fafagege11520·2024-01-25 09:12

Hudi学习笔记4 - Hudi配置之Spark配置

SparkDatasourceConfigs读配置配置项是否必须默认值配置说明as.of.instantYN/A0.9.0版本新增，时间旅行查询从哪儿开始，有两种格式的值：yyyyMMddHHmmss和yyyy-MM-ddHH:mm:ss，如果不指定则从最新的snapshot开始hoodie.file.index.enableNtruehoodie.schema.on.read.enableNfa
一见·2024-01-25 09:40

Hudi学习笔记5 - Hudi配置分析（1）

Hudi官方配置文档：https://hudi.apache.org/docs/configurations，从源码分析可以看到配置项hoodie.payload.ordering.field已经废弃，取而代之的是hoodie.datasource.write.precombine.field。ConfigPropertyConfigProperty聚合了HoodieConfig。//https:
一见·2024-01-25 09:40

Hudi学习笔记2 - Hudi配置

https://hudi.apache.org/docs/configurationsHudi配置分类SparkDatasourceConfigsSparkDatasource的配置。FlinkSqlConfigsFlinkSQLsource/sinkconnectors的配置，如：index.type、write.tasks、write.operation、clean.policy、clean.
一见·2024-01-25 09:39

Hudi学习笔记2 - Hudi配置之FlinkSQL配置

FlinkSqlConfigs配置项是否必须默认值配置说明pathYN/AHudi表的basepath，如果不存在会创建，否则应是一个已初始化成功的hudi表read.end-commitYN/Aread.start-commitYN/Aread.tasksYN/Awrite.tasksYN/Awrite.partition.formatYN/A分区路径格式，仅write.datetime.par
一见·2024-01-25 09:39

Hudi学习笔记1

使用注意从0.10.0版本开始，primaryKey为必须的，不再支持没有主键的表。primaryKey、primaryKey和type均大小写敏感。对于MOR类型的表，preCombineField为必须的。当设置primaryKey、primaryKey或type等hudi配置时，tblproperties优先于options。使用SparkSQL创建hudi表时，默认设置：hoodie.da
一见·2024-01-25 09:09

Hudi学习笔记(一)

大数据发展背景Hudi用于管理分布式文件系统上大型分析数据集存储，支持Spark和Flink整合。它能够是DFS数据集在分钟级时延内支持变更，也支持下游系统对这个数据集的增量处理。学习目标什么是数据湖为什么使用数据湖Hudi基本功能如何编译Hudi源码Hudi与Spark集成管理Hudi中COW和ROW不同类型表功能Hudi的三种查询方式Hudi中不同表数据写入流程数据仓库数据仓库是一个用于存储、
一一|一一一亅·2024-01-25 09:37

Netty学习笔记

Netty应用开发语雀链接1.引言1.1什么是Nettyhttps://netty.io/Nettyisanasynchronousevent-drivennetworkapplicationframeworkforrapiddevelopmentofmaintainablehighperformanceprotocolservers&clients.Netty是一个异步事件驱动的网络应用框架。用
等待花开I·2024-01-25 09:48

RPC学习笔记

RPC学习笔记一、为啥要学？目前企业的后端项目基本是由一个个微服务所构成，而各个服务之间就涉及一个比较关键的问题，也就是网络通信。
Zangjiji·2024-01-25 09:44

MongoDB学习笔记-3、MongoDB权限介绍

MongoDB数据库其安全性并不高，为了防止被一些好心人进行攻击，有效的方法是启用身份验证、不允许远程访问或者添加IP访问限制。1、MongoDB用户与权限管理1.1、常用权限1.2、创建管理用户MongoDB有一个用户管理机制，简单描述为管理用户组，这个组的用户是专门为管理普通用户而设的，暂且称之为管理员。管理员通常没有数据库的读写权限，只有操作用户的权限，我们只需要赋予管理员userAdmin
pbinlog·2024-01-25 09:14

Unity(4)-Quaternion-API学习笔记

b站学习笔记链接：https://www.bilibili.com/video/BV12s411g7gU?
小跳蛙啦啦啦·2024-01-25 08:23

Unity3d学习笔记-Demo实现

这是我在学习Unity3d过程中实现的几个小demo，其中最难实现的功能就是弹弹堂的弹坑效果了，在这里分享给大家。1.3D坦克大战这里的素材可以在AssetStore中找到，场景搭建比较简单。游戏内容我在网上学习的基础上添加了空投道具以及简单的敌人AI的逻辑，除此之外，还实现了单人和双人游戏模式的切换。2.水珠求生这个Demo是大概17年9月份和一个朋友合作做的，我作为程序，他作为策划。在Demo
任西风吹冷月·2024-01-25 08:51

JAVAWEB学习笔记--Day5

目录数据库连接池Druid使用步骤练习：完成游戏品牌数据的增删改查操作数据库连接池数据库连接池简介数据库连接池是个容器，负责分配、管理数据库连接(Connection)它允许应用程序重复使用一个现有的数据库连接，而不是再重新建立一个释放空间超过最大空闲时间的数据库连接来避免因为没有释放数据库连接而引起的数据库连接遗漏好处：资源重用提升系统响应速度避免数据库连接遗漏数据库连接池实现标准接口：Data
深-忆·2024-01-25 08:51

Unity Shader入门精要学习笔记 - 第15章 使用噪声

转载自冯乐乐的《UnityShader入门精要》消融效果消融效果常见于游戏中的角色死亡、地图烧毁等效果。这这些效果中，消融往往从不同的区域开始，并向看似随机的方向扩张，最后整个物体都将消失不见。我们将学习如何在Unity中实现这种效果。效果如下图所示。要实现上图中的效果，原理非常简单，概括来说就是噪声纹理+透明度测试。我们使用对噪声纹理采样的结果和某个控制消融程度的阈值比较，如果小于阈值，就使用c
锐萌瑞·2024-01-25 08:21

2021-05-18 unity学习笔记（1.整理-2）

目录C语言基础一：初识MonoBehaviour1-1.C语言基础1-2.脚本的创建与调试（Debug.Log）1-3.脚本的生命周期-voidAwake()voidStart()voidUpdate()voidFixedUpdate()1-4.变量的声明与使用：-1.常用变量、值类型、引用类型-2.FindGamePbject获取场景实例-（即用脚本自动获取到物体）-3.数据类型：值类型、引用类
打断你的狗腿·2024-01-25 08:20

简单的unity练习----打地鼠 学习笔记

打地鼠是一款非常简单的小游戏，但是它能让我们熟悉unity的大部分操作。创建并导入素材首先创建一个unity2D工程，并导入所有素材，将素材拖入scene窗口，依据maincarema的范围调整素材大小出现地鼠创建一个空物体gameobject，用于加载create地鼠代码，利用random.range来产生随机数，使地鼠在九个位置随机产生usingUnityEngine;publicclassc
afrecon·2024-01-25 08:50

unity学习笔记02--导入资源

学习目标:1、导入assertstore的资源2、导入本地音频，视频和图片资源3、导入模型，材质和动画一、导入assertstore资源unity商店为游戏开发者提供资源下载和购买的功能，而游戏的资源制作者也允许在商店上出售自己的unity资源商品。导入商店的资源步骤相对简单常见。1、使用联网的计算机，打开unity软件，单击菜单栏的window选项，选择assertstore进入商店。2、用户登
huang11055·2024-01-25 08:50

unity学习笔记----游戏练习05

一、阳光的收集和搜集动画开发1.收集阳光的思路：当鼠标点击到阳光的时候，就可以进行收集了。可以通过为添加一个碰撞器来检测CircleCollider2D编写脚本：在SunManager中写一个增加阳光的方法//增加阳光publicvoidAddSubSun(intPoint){sunPoint+=Point;UpdataSunPointText();}这里需要注意的是，由于地面也有碰撞器，他会优先
2301_79022588·2024-01-25 08:48

unity学习笔记----游戏练习06

一、豌豆射手的子弹控制创建脚本单独控制子弹的运动用transform来控制移动voidUpdate(){transform.Translate(Vector3.right*speed*Time.deltaTime);}创建一个控制子弹速度的方法，方便速度的控制privatevoidSetSpeed(floatspeet){this.speed=speet;}回到控制豌豆射手的脚本中，当调用他的射击
2301_79022588·2024-01-25 08:47

《WEB安全从入门到放弃》学习笔记1

《WEB安全从入门到放弃》学习笔记1暴力破解概述连续性尝试+字典+自动化暴力破解原理和测试流程1确认登录接口的脆弱性确认目标是否存在暴力破解的漏洞。
weixin_45635352·2024-01-25 08:30

web安全学习笔记【05】——反弹Shell、正反向连接

思维导图#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&反向&负载均衡等-----------------------------------1、APP架构-封装&原生态&H5&flutter等2、小程序架构-Web&H5&JS&VUE框架等------------------------------
Sarahie·2024-01-25 08:29

web安全学习笔记【10】——数据包分析

基础[1][2][3][4]入门-HTTP数据包&Postman构造&请求方法&请求头修改&状态码判断[5][6][7]#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&反向&负载均衡等-----------------------------------1、APP架构-封装&原生态&H5&flutte
Sarahie·2024-01-25 08:29

网站搭建学习笔记【04】——app、小程序篇

思维导图#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&反向&负载均衡等-----------------------------------1、APP架构-封装&原生态&H5&flutter等2、小程序架构-Web&H5&JS&VUE框架等#章节点应用架构：Web/APP/云应用/小程序/负载均衡等
Sarahie·2024-01-25 08:59

web安全学习笔记【08】——算法1

思维导图在最后#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&反向&负载均衡等-----------------------------------1、APP架构-封装&原生态&H5&flutter等2、小程序架构-Web&H5&JS&VUE框架等---------------------------
Sarahie·2024-01-25 08:59

网站搭建学习笔记【02】

#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&静态&负载均衡等#章节点应用架构：Web/APP/云应用/三方服务/负载均衡等安全产品：CDN/WAF/IDS/IPS/蜜罐/防火墙/杀毒等渗透命令：文件上传下载/端口服务/Shell反弹等抓包技术：HTTP/TCP/UDP/ICMP/DNS/封包/代理
Sarahie·2024-01-25 08:59

网站搭建学习笔记【03】

思维导图#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&反向&负载均衡等#章节点应用架构：Web/APP/云应用/三方服务/负载均衡等安全产品：CDN/WAF/IDS/IPS/蜜罐/防火墙/杀毒等渗透命令：文件上传下载/端口服务/Shell反弹等抓包技术：HTTP/TCP/UDP/ICMP/DNS/封
Sarahie·2024-01-25 08:28

计算机网络自顶向下方法学习笔记—————第一章：概述

Chapter1:roadmap目录Chapter1:roadmap一：导论（1）什么是通信网络？（2）为什么需要协议（Protocal）二：Internet结构组成（1）网络边缘（Networkedge）：（2）接入网（accessnetwork），物理媒介：（3）网络核心（Networkcore）：三：网络边缘（Networkedge）（1）客户/服务器模式（Client/ServerMode
kan不见未来·2024-01-25 08:26

WEB安全学习笔记

基础入门1.基础入门——基础概念域名什么是域名域名（英语：DomainName），又称网域，是由一串用点分隔的名字组成的Internet上某一台计算机或计算机组的名称，用于在数据传输时对计算机的定位标识（有时也指地理位置）由于IP地址具有不方便记忆并且不能显示地址组织的名称和性质等缺点，人们设计出了域名，并通过网域名称系统（DNS，DomainNameSystem）来将域名和IP地址相互映射，使人
小陈要努力学·2024-01-25 08:53

web安全学习笔记【09】——算法2

基础[1]入门-算法逆向&散列对称非对称&JS源码逆向&AES&DES&RSA&SHA#知识点：1、Web常规-系统&中间件&数据库&源码等2、Web其他-前后端&软件&Docker&分配站等3、Web拓展-CDN&WAF&OSS&反向&负载均衡等-----------------------------------1、APP架构-封装&原生态&H5&flutter等2、小程序架构-Web&H5&
Sarahie·2024-01-25 08:20

linux设备驱动开发学习笔记

linux设备驱动分类5.1.4.1、驱动分类(1)分3类：字符设备驱动、块设备驱动、网络设备驱动(2)分类原则：设备本身读写操作的特征差异5.1.4.2、三类驱动程序详细对比分析(1)字符设备，准确的说应该叫“字节设备”，软件操作设备时是以字节为单位进行的。典型的如LCD、串口、LED、蜂鸣器、触摸屏······(2)块设备，块设备是相对于字符设备定义的，块设备被软件操作时是以块（多个字节构成的
江洋之道·2024-01-25 08:07

FreeRTOS调试用函数学习笔记

1.获取任务堆栈最大使用深度UBaseType_tuxTaskGetStackHighWaterMark(TaskHandle_txTask);任务的堆栈空间会随着任务执行以及中断处理而增长或缩小。该函数可以返回任务启动后的最小剩余堆栈空间。换句话说，可以间接估算出一个任务最多需要多少堆栈空间。在文件FreeRTOSConfig.h中，宏INCLUDE_uxTaskGetStackHighWate
sscb0521·2024-01-25 08:37

【软件测试】学习笔记-Nginx 在系统架构中的作用

本篇文章你探讨Nginx在应用架构中的作用，并从性能测试角度看如何利用Nginx数据统计用户访问量。Nginx重要的两个概念代理首先要来解释一下什么是代理，正向代理和反向代理是什么意思？各自作用是什么？不少同学经常听到这些名词，但往往分不清楚具体区别是什么。什么是代理？举个例子，比如你很想到某公司去做测试，对方公司的测试主管并不认识你，你也不知道这位测试主管的联系方式，但是你的朋友小王认识，他帮你
码农丁丁·2024-01-25 08:30

《如何画好架构图》学习笔记

看了一堂《如何画好架构图》的公开课，结合网上的资料与经验做一些思考总结。文中的例子和图片大多是从课程中摘录的。1.4R架构定义4R架构定义其实是软件架构定义经过归纳提炼后的简称。软件架构定义：软件架构是指软件系统的顶层（Rank）结构。它定义了系统由哪些角色（Role）组成，并描述了角色的关系（Relation）和运作规则（Rule）。关键词为Rank、Role、Relation、Rule，所以简
程序猿 M·2024-01-25 07:59

sheng的学习笔记-神经网络

基础知识基础知识-什么是分类问题分类问题是根据已有数据，判断结果是正的还是负的（1或者0）,比如：•根据肿瘤大小，判断肿瘤是良性的还是恶性的•根据客户交易行为，判断是否是恶意用户•根据邮件情况，判断是否垃圾邮件下图：横坐标是肿瘤大小，纵坐标：是肿瘤的可能性，可能性大于50%，结果是1（恶性），小于50%结果是0（良性），下图中最右边的那个，体积很大，是恶性的可能性非常大肿瘤有70%可能性是恶性，3
coldstarry·2024-01-25 07:50

golang学习笔记——面试题 使用 3 个协程顺序打印 cat、dog、fish 各 100 次

文章目录面试题使用3个协程顺序打印cat、dog、fish各100次拓展第一种方法第二种方法参考资料面试题使用3个协程顺序打印cat、dog、fish各100次编程题：3个函数分别打印cat、dog、fish，要求每个函数都要起一个goroutine，按照cat、dog、fish顺序打印在屏幕上100次。packagemainimport("fmt""sync")//面试题：每个函数起一个goro
怪我冷i·2024-01-25 07:19

全覆盖规划算法学习笔记-------

ROS全覆盖规划算法通过对比提供的ROS全覆盖规划算法：确定BoustrophedonPlanner和Grid-basedLocalEnergyMinimizationPlanner具备过程应用价值，这里选择后者进行重点研究。参考：官网ipa_room_exploration-ROSWikiIndoorCoveragePathPlanning:Survey,Implementation,Analy
大风吹~~~~~·2024-01-25 07:49

GEO数据挖掘学习笔记二

学习教程来源于《手把手教你GEO数据库差异基因分析》本次学习笔记内容为通过GEO2R在线工具进行差异基因分析通过了解，个人觉得这个方法相比R语言的优势是更普适性，以及更加“傻瓜”，方便学不明白R语言的同学
slim_zhang·2024-01-25 06:30

学习笔记（子安老师买房笔记0）

声明以下内容来自子安的分享。子安介绍：子安买房笔记投资俱乐部、鲜橙公寓创始人；100套真实购买房产案例，旗下管理公寓近千套；从0到1房产投资践行者，五年时间资产翻100倍；富爸爸财商观念，国内落地第一人；六年银行信贷从业经验；通过国家理财规划师&美国注册财务策划师认证。本节思维框架前言买房计划月薪5000元买房案例总结前言大家好，我是子安。我曾经跟所有人一样有一份稳定的工作。上着班，领着稳定的收入
兜兜_d084·2024-01-25 05:24

python转C++格式学习笔记

我是主写python的，但是感觉算法上想精进的话，还是得用c++写，所以笔记主要记录的是c++与python不太一样的地方，听的是y总的算法基础课，结合y总的讲义，白框里面是自己的理解，大家取精华，去糟粕头文件include/主要包含cin和cout基本输入输出流include/主要包含scanf和printf输入输出函数数据规模大时，scanf和printf的速度远比cin和cout速度快，但我
大学生编程地·2024-01-25 05:32

Day9学习记录

超开心：)由于c语言知识的学习笔记大量代码截图所以今天的就不放了（戳手手）以及今天的作业终于达标了！
好好编码·2024-01-25 03:11

字节跳动内部前端学习笔记在互联网上火了，在Github标星33K+，完整版开放下载

一、入门前端三剑客1、HTMLhtml学起来还是挺简单的，无论你是否有编程基础，我觉得都可以快速入门，对于新手，我推荐找个入门的视频看一下，然后跟着视频打代码就可以了，入门教程随便在网上找个免费的视频就可以了，随便搜索「html入门」即可，或者看菜鸟教程的一个入门教程也行。看完视频，也可以看一下文字版的教程，不知道大家有没有看过阮一峰写过的教程，我觉得他写的教程都很棒，所以这里我也推荐下大家看一下
书苏·2024-01-25 03:29

erlang （Lists 操作模块）学习笔记(三)

suffix1>lists:suffix([1,2,3],[1,2,3,4]).false2>lists:suffix([2,3,4],[1,2,3,4]). true如果List1是List2的后缀，则返回true，否则返回false。sum3>lists:sum([1,2,3,4]).      10返回List中元素的总和。takewhile4>lists:takewhile(fun(X)-
夲撻鲎龇·2024-01-25 03:30

《印光法师文钞》千日读书会之《复永嘉某居士书二、三、四、五、六、七、八》学习笔记

敦伦尽分，闲邪存诚，诸恶莫作，众善奉行。世有真儒，方有真僧。念佛人以事修为本。此全体是凡夫生死结业心，何尝有任运随缘，自乐天真之意。净土法门，修有专圆。恐中下人以业杂致心难归一，故示其专修也。恐上根人行堕一偏，致福慧不能称性圆满，故示其圆修也。若知无我，烦恼何生。万境本闲，唯心自闹。心若不生，境自如如。朝山即是朝心。岂菩萨唯在普陀，不遍界以应感乎哉。良以菩萨之心,犹如虚空,无所不遍。但以众生在迷,
妙手柯楠·2024-01-25 03:28

python 常用内建模块之requests

python学习笔记，特做记录，分享给大家，希望对大家有所帮助。安装requests1.pip安装requests如果安装了Anaconda，requests就已经可用了。
Swift社区·2024-01-25 02:55

独立损益表-学习笔记

[学习笔记]：讲了很久从员工到经理，其最核心的转变，是从“用自己的大脑，指挥自己的双手”完成任务，到“用自己的大脑，影响别人的大脑，然后别人的大脑，再指挥别人的双手”完成任务。
歆_0f3f·2024-01-25 02:13

《薛兆丰的经济学课》第二十三讲学习笔记

第023讲|谁用得好就归谁科斯说：我们不应该把问题看作一方伤害另外一方，而应该把问题看作是双方都在争用稀缺的资源。薛老师在这一讲继续告诉我们一个冰冷冷的现实，我们以为应该属于我们所有的，不一定是属于我们的，而是『谁用得好就归谁』。在这个通过一部有网络的智能手机可以搞定一切的时代，我们在网络上留下了大量的数据，我们很难去讨论这样好或者不好，但是不得不承认，我们每个人在互联网中其实是接近于『裸』的状态
阿亮的学习笔记·2024-01-25 01:57

将文件以指定格式存储~BMP~C的实现~FAT32格式

参考：BMP文件学习笔记（一）：C/C++语言实现.bmp文件读写_c++写入bmp-CSDN博客U盘到底用什么格式好？FAT32、NTFS还是exFAT？
NoNoUnknow·2024-01-25 01:29
上一页 64 65 66 67 68 69 70 71 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他