E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
clickhouse源码分析
【Hadoop】使用Scala与Spark连接
ClickHouse
进行数据处理
风不懂不懂得叶的梦月不听不听闻窗里琴声意难穷水不见不曾见绿消红霜不知不知晓将别人怎道珍重落叶有风才敢做一个会飞的梦孤窗有月才敢登高在夜里从容桃花有水才怕身是客身是客此景不能久TieYann(铁阳)、薄彩生《不知晓》在大数据分析和处理领域,ApacheSpark是一个广泛使用的高性能、通用的计算框架,而
ClickHouse
音乐学家方大刚
·
2024-03-26 09:56
Scala
Hadoop
hadoop
scala
spark
nginx upstream server主动健康监测模块添加https检测功能【上】
1缘起 前面的《nginxupstreamserver主动健康检测模块ngx_http_upstream_check_module使用和
源码分析
》系列已经分析了ngx_http_upstream_check_module
码农心语
·
2024-03-26 05:50
nginx学习
c++开发
LINUX
nginx
https
运维
健康检测
upstream
proxy
ClickHouse
副本节点数据损坏恢复
参考链接:https://blog.csdn.net/qq_42082701/article/details/127771766参考链接:https://kb.altinity.com/altinity-kb-setup-and-maintenance/suspiciously-many-broken-parts/#背景CK配置为1分片2副本#配置参数,这里我们将max_suspicious_br
旺仔_牛奶
·
2024-03-20 03:42
ClickHouse
clickhouse
数据库
java
[Django 0-1] Core.Checks 模块
Checks
源码分析
Django的checks模块提供了一系列的检查函数,用于检查Django项目的配置是否正确。文件结构.
sHlsy1995
·
2024-03-17 14:20
Django
源码学习
django
python
开源数据库 OpenGauss 的 SQL 解析
源码分析
开源数据库OpenGauss的SQL解析
源码分析
openGauss数据库体系概述openGauss是关系型数据库,采用客户端/服务器,单进程多线程架构;支持单机和一主多备部署方式,同时支持备机可读、双机高可用等特性
openGaussMan
·
2024-03-17 05:39
网络
openGauss
数据库
《Docker
源码分析
》作者:孙宏亮
Docker
源码分析
(一):Docker架构http://www.infoq.com/cn/articles/docker-source-code-analysis-part1/
易悠
·
2024-03-16 04:36
云计算
Docker
源码
架构
Docker
「连载」边缘计算(三十一)03-13:边缘部分源码(
源码分析
篇)
(接上篇)启动一个循环处理各种事件m.mainLoop()定义具体如下所示。KubeEdge/edge/pkg/metamanager/msg_processor.gofunc(m*metaManager)mainLoop(){gofunc(){for{ifmsg,err:=m.context.Receive(m.Name());err==nil{...m.process(msg)}else{..
十越科技
·
2024-03-15 18:21
边缘计算
golang
人工智能
深入理解nginx一致性哈希负载均衡模块[下]
上接深入理解nginx一致性哈希负载均衡模块[上]3.
源码分析
nginx的一致性哈希功能是通过ngx_http_upstream_hash_module来提供的,下面来整体通过ngx_http_upstream_hash_module
码农心语
·
2024-03-12 19:10
nginx学习
LINUX
c++开发
nginx
哈希算法
负载均衡
upstream
一致性哈希
ClickHouse
存储引擎之ReplacingMergeTree引擎
一、ReplacingMergeTree作用
ClickHouse
中最常用也是最基础的表引擎为MergeTree,在它的功能上添加特定功能就构成了MergeTree系列引擎。
小枫@码
·
2024-03-10 22:52
大数据运维
clickhouse
DPDK
源码分析
之DPDK技术简介
Cache和内存技术1.Cache一致性多核处理器同时访问同一段cacheline时,会出现写回冲突的情况,操作系统解决这个问题会消耗一部分性能,DPDK采用了两个技术来解决这个问题:对于共享的数据,每个核都定义自己的备份lcore[RTE_MAX_LCORE],这样多核处理事务时只处理自己的部分,lcore[idx]利用单网卡有着多队列的能力,当多核处理同一个网卡的数据包时,进行分队列处理,例如
lingshengxiyou
·
2024-03-09 00:23
c++
linux
DPDK
服务器
linux
c++
dpdk
虚拟机
「连载」边缘计算(二十五)03-05:边缘部分源码(
源码分析
篇)
(接上篇)1)EdgehubConfig初始化具体如下所示。config.InitEdgehubConfig()config.InitEdgehubConfig()函数定义具体如下所示。KubeEdge/edge/pkg/edgehub/config/config.go//InitEdgehubConfiginitedgehubconfigfuncInitEdgehubConfig(){err:=
十越科技
·
2024-03-06 15:38
边缘计算
人工智能
hbase、hive、
clickhouse
对比
,存储单位是Region,底层数据存储使用HDFShive通过driver将sql分解成mapreduce任务元数据需要单独存储到一个关系型数据库,一般是mysql实际数据存储可以是外表,也可以是内表
clickhouse
freshrookie
·
2024-03-05 16:40
hbase
hive
hadoop
GO语言实战十二 标准库 log
log包学习和
源码分析
测试代码packagemainimport("fmt""log")funcinit(){log.SetPrefix("Trace:")log.SetFlags(log.Ldate|
coder~
·
2024-03-05 16:10
go语言实战学习笔记
golang
【Hadoop】在spark读取
clickhouse
中数据
读取
clickhouse
数据库数据importscala.collection.mutable.ArrayBufferimportjava.util.Propertiesimportorg.apache.spark.sql.SaveModeimportorg.apache.spark.sql.SparkSessiondefgetCKJdbcProperties
方大刚233
·
2024-03-03 06:54
Hadoop
Scala
hadoop
spark
clickhouse
深入理解ngx_http_proxy_connect_module模块(下)
目录5.
源码分析
5.1模块的初始化代码5.2请求入口点函数分析5.2.1ngx_http_proxy_connect_post_read_handler5.2.2ngx_http_proxy_connect_handler5.3
码农心语
·
2024-02-29 03:10
nginx学习
LINUX
c++开发
nginx
tengine
proxy_connect
源码分析
SpringBoot2 集成
ClickHouse
实现高性能数据分析
一第一种驱动方式SpringBoo2集成Mybatis-plus以及
ClickHouse
实现增删改查功能。
十点摆码
·
2024-02-28 06:15
大数据
clickhouse
列式数据库
Yandex
高性能分析
高性能查询分析数据库
clickhouse
导入csv
clickhouse
-client--format_csv_delimiter="|"-h10.242.4.77--port10115--query="INSERTINTOusermetric.tb_member_shardSELECT
templarzq
·
2024-02-28 04:12
服务器强制关闭、异常断电等导致
clickhouse
数据损坏Suspiciously many broken parts to remove
文章目录问题现象原因解决其他处理方式单表配置方式命令行方式配置文件方式验证配置是否生效参考问题现象机房断电,服务器重启服务启动后,发现数据写入报错,查看
clickhouse
报错日志关键提示为TOO_MANY_PARTS
坚持是一种态度
·
2024-02-28 01:38
大数据开发
ClickHouse
服务器
clickhouse
运维
max_suspicious
broken_parts
emacs
源码分析
(七)
文章目录`emacs`
源码分析
(七)自己动手把`emacs`的`DEFUN`宏抠出来emacs
源码分析
(七)这DEFUN宏就像胶水一样,它把c代码和emacs-lisp代码给联系起来。
遍地是牛
·
2024-02-27 23:36
emacs
源码分析
emacs
编辑器
c++
ClickHouse
表引擎
表引擎在
ClickHouse
中决定了:数据存储和读取的位置、支持哪些查询方式、能否并发式访问数据、能不能使用索引、是否可以执行多线程请求、数据复制使用的参数,其中MergeTree和Distributed
王百万_
·
2024-02-27 11:21
大数据技术栈
clickhouse
数据库
zookeeper
hive
spark
fusioninsight
大数据
分布式scrapy_redis源码总结,及其架构
RedisSpider的调度队列实现过程及其源码》《scrapy中scrapy_redis分布式内置pipeline源码及其工作原理》《scrapy分布式调度源码及其实现过程》《scrapy分布式Spider
源码分析
及实现过程
Python之战
·
2024-02-27 05:11
读TiDB源码聊设计:浅析HTAP的SQL优化器
版本日期备注1.02024.2.18文章首发本文的的
源码分析
全部基于TiDB6.5来做分析。1.引子如果让你做一个分布式数据库的优化器,面对以下的SQL,你会想到什么好的方法去执行他们呢?
·
2024-02-24 03:52
tidbgo性能优化分布式系统
鸿蒙
源码分析
(十三)
软总线模块中trans_service目录分析总结本文主要总结软总线模块下trans_service目录中个文件的作用和功能,宏观上把握trans_service在鸿蒙系统中发挥的作用。trans_service模块依赖于系统OS提供的网络socket服务,向认证模块提供认证通道管理和认证数据的收发;向业务模块提供session管理和基于session的数据收发功能,并且通过GCM模块的加密功能提
小生叫安辰
·
2024-02-20 22:03
代码标注
harmonyos
华为
分布式软总线
tcp
网络编程
xUtils
源码分析
+ 手写一个IOC注解框架
一、概念说说IOC,控制反转(InversionofControl)。概念的东西不做过多解释,比较典型的做法是使用了反射加注解。我们如果用过xUtils或者ButterKnife对这种形式应该不陌生,这些框架可以减少很多在开发过程当中的刻板代码的书写。而xUtils和ButterKnife的实现方式还不太一样,xUtils全面地使用了反射,而ButterKnife则主要使用了编译时注解轻量级反射。
碧云天EthanLee
·
2024-02-20 21:21
Spring AOP
源码分析
寻找入口Spring的AOP是通过接入BeanPostProcessor后置处理器开始的,它是SpringIOC容器经常使用到的一个特性,这个Bean后置处理器是一个监听器,可以监听容器触发的Bean声明周期事件。后置处理器向容器注册以后,容器中管理的Bean就具备了接收IOC容器事件回调的能力。1、BeanPostProcessor源码publicinterfaceBeanPostProcess
平凡的柚子
·
2024-02-20 21:04
ClickHouse
基础(一)
官网
ClickHouse
release24.1,2024-01-30以毫秒为单位查询数十亿行
ClickHouse
是用于实时应用和分析的最快、资源效率最高的开源数据库。
chinusyan
·
2024-02-20 19:57
BigData
clickhouse
大数据
Android之应用程序的安装过程
源码分析
Package管理服务PackageManagerService在安装一个应用程序的过程中,会对这个应用程序的配置文件AndroidManifest.xml进行解析,以便可以获得它的安装信息。Android系统中每一个应用程序都有一个Linux用户ID,一个应用程序除了拥有一个Linux用户ID之外,还可以拥有若干个Linux用户组ID,以便可以在系统中获得更多的资源访问权限,如读取联系人信息、使
Helloooooworldddddd
·
2024-02-20 19:17
Android
Camera2 createCaptureSession
源码分析
当应用调用CameraManager#openCamera获取到已打开的camera设备后,会调用createCaptureSession方法来完成camerastream创建和stream的相关配置。在createCaptureSession方法中,首先将应用的surfaces信息封装成可跨binder传递的OutputConfiguration对象,然后调用createCaptureSessi
smile_sambery
·
2024-02-20 19:47
Camera
android
Camera2 setRepeatingRequest
源码分析
当createCaptureSession流程执行完成后,应用在回调方法onConfigured就可以获得创建的CameraCaptureSession,接下来就可以调用CameraCaptureSession#setRepeatingRequest来下发camerastream命令获取camera数据。在CameraCaptureSession#setRepeatingRequest流程中,实际
smile_sambery
·
2024-02-20 19:47
Camera
android
Camera2 openCamera
源码分析
在应用申请了camera权限后,camera2应用就可以调用CameraManager#openCamera打开指定的camera设备。在这个方法中,会先调用openCameraForUid添加uid参数,并最终在openCameraDeviceUserAsync方法中完成设备的打开流程。在这个方法中主要完成3件事情:1)创建CameraDeviceImpl,这个类是CameraDevice的实现
smile_sambery
·
2024-02-20 19:16
Camera
android
Camera2 request处理结果上报
源码分析
hal层接收到native传递的camerastreamrequest后,会读取camera数据,然后通过CameraDeviceSession#initialize流程中注册的处理回调上报camera数据结果,具体处理方法为CameraDeviceClient#sProcessCaptureResult。在sProcessCaptureResult方法中,会创建captureresult,并调用
smile_sambery
·
2024-02-20 19:08
Camera
android
JStorm
源码分析
-5.Supervisor
Supervisor用于执行拓扑中指定的组件任务,是实际响应nimubus分配,控制worker运行的程序。1.启动Supervisor启动Supervisor时,只需要输入jstormsupervisorjstorm.py脚本会将supervisor子命令解析为如下命令:java-server-Djstorm.home=/Users/shishengjie/software/jstorm-0.9
史圣杰
·
2024-02-20 17:52
SpringBoot统一功能处理
目录一.拦截器拦截器的实现拦截器的定义注册拦截器登录校验二.DispatcherServlet
源码分析
编辑适配器适配器模式三.统一数据返回格式编辑四.统一异常处理一.拦截器拦截器是Spring框架提供的核心功能之一
Roylelele
·
2024-02-20 17:27
JavaEE
spring
boot
mybatis
spring
后端
Android Binder通信原理--05:Binder驱动分析
本文转载自:Android10.0Binder通信原理(五)-Binder驱动分析本文基于Android10.0
源码分析
(Kernel4.9)1.摘要 本节主要来讲解Android10.0Binder
Darcy1024
·
2024-02-20 14:24
DVWA 靶场之 Brute Force-Low&Medium(前期配置铺垫与渗透方法及
源码分析
)
首先登录DVWA靶场DVWA默认的用户有5个,用户名及密码如下:admin/passwordgordonb/abc1231337/charleypablo/letmeinsmithy/password难度等级设置为low,我们先从最简单的开始来到BruteForce(暴力破解)我们可以输入用户名和密码简单测了几个,回显用户名或密码不正确但是并未对我们输入的内容及次数进行限制,因此直接进行爆破暴力破
Myon⁶
·
2024-02-20 13:13
DVWA靶场
web
暴力破解
burpsuite
web
代理模式
web安全
深入浅出Spring Cloud Netflix - Ribbon
.Ribbon的工作流程4.Ribbon内置的负载均衡策略5.Ribbon负载规则替换(1)新建一个MySelfRule类(2)主启动添加@RibbonClient注解5.RoundRobinRule
源码分析
贫僧洗发爱飘柔
·
2024-02-20 12:49
SpringCloud
ribbon
spring
cloud
java
文件上传漏洞进阶教程/白名单绕过/图片马制作/图片马执行
一、白名单绕过相对于前面的黑名单绕过,白名单更加难以绕过,使用白名单验证相对比较安全,但如果存在可控参数目录,也存在被绕过的风险目录可控%00截断绕过上传upload-labpass11
源码分析
$is_upload
白帽Chen_D
·
2024-02-20 12:18
文件上传漏洞
渗透测试
安全
web安全
STL
源码分析
之vector
一、vector简介vector的数据安排以及操作方式,与array非常相似。两者的唯一差别在于空间的运用的灵活性,array是静态的,一旦配置了就不能改变,而vector是动态空间,随着元素的加入,它的内部机制会自行扩充空间以容纳新元素。vector容器有已使用空间和可用空间,已使用空间是指vector容器的大小,可用空间是指vector容器可容纳的最大数据空间capacity。vector的实
小鱼的编程之路
·
2024-02-20 11:14
STL源码分析
C++基础
大数据
c++
「连载」边缘计算(十七)02-20:边缘部分源码(
源码分析
篇)
(接上篇)EdgeCore之edged下面对EdgeCore组件进行剖析,因为EdgeCore中的功能组件比较多,共包括devicetwin、edged、edgehub、eventbus、edgemesh、metamanager、servicebus和test共8个功能模块。限于篇幅,本文只对edged的具体逻辑以及edged调用容器运行时进行剖析。1.edged的具体逻辑剖析从EdgeCore模
十越科技
·
2024-02-20 10:24
边缘计算
人工智能
「连载」边缘计算(十六)02-19:边缘部分源码(
源码分析
篇)
(接上篇)edgecontroller剖析edgecontroller功能模块启动函数的具体内容如下所示。KubeEdge/cloud/pkg/edgecontroller/controller.go//Startcontrollerfunc(ctl*Controller)Start(c*beehiveContext.Context){varctxcontext.Contextconfig.Con
十越科技
·
2024-02-20 10:53
边缘计算
人工智能
「连载」边缘计算(十五)02-18:边缘部分源码(
源码分析
篇)
(接上篇)ChannelContextstruct定义如下所示。KubeEdge/beehive/pkg/core/context/context.go//ChannelContextisobjectforContextchanneltypeChannelContextstruct{//ConfigFactorygoarchaius.ConfigurationFactorychannelsmap[
十越科技
·
2024-02-20 10:52
边缘计算
人工智能
二百二十三、Kettle——从Hive增量导入到
ClickHouse
(根据day字段判断)
一、目的需要用Kettle从Hive的DWS层库表数据增量同步到
ClickHouse
的ADS层库表中,不过这次的增量判断字段是day字段,不像之前的create_time字段因为day字段需要转换类型,
天地风雷水火山泽
·
2024-02-20 10:20
Kettle
hive
clickhouse
kettle
Spring任务调度@Scheduled的使用以及原理、
源码分析
请直接看原文:【小家Spring】Spring任务调度@Scheduled的使用以及原理、
源码分析
(@EnableScheduling)-腾讯云开发者社区-腾讯云(tencent.com)-------
奋豆来袭
·
2024-02-20 09:11
springboot
java
HashSet
源码分析
HashSet是基于HashMap实现的,底层采用HashMap来保存元素,本篇文章需要在HashMap的基础上进行阅读特点:HashSet是无序的没有索引HashSet将对象存储在key中,且不允许key重复HashSet的Value是固定的HashSet的构造函数privatetransientHashMapmap;privatestaticfinalObjectPRESENT=newObje
gogoingmonkey
·
2024-02-20 09:11
Redisson 如何实现分布式锁
本篇主要是对以下几个方面进行了探索Maven配置RedissonLock简单示例源码中使用到的Redis命令源码中使用到的lua脚本语义
源码分析
Maven配置org.redissonredisson2.2.12com.fasterxml.jacks
不怕天黑_0819
·
2024-02-20 09:42
Spring-webmvc-5.2.3不再支持使用不添加RequestMapping的控制器去处理所有其他控制器未处理的请求
5.1.6中,可以用如下形式处理所有其他controller不匹配的GET请求但在5.2.3中,不再支持,必须要写上@RequestMapping("/**")才可以成功匹配下面是对spring匹配请求的
源码分析
程序员J_
·
2024-02-20 08:38
Clickhouse
学习文档
1.
Clickhouse
介绍
ClickHouse
是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS),使用lz4压缩数据,压缩率高。
梦中情蛋
·
2024-02-20 07:14
SQL
clickhouse
学习
数据库
ClickHouse
学习
ClickHouse
是由C++编写的列式存储数据库(DBMS),主要用来在线分析处理查询(OLTP),能够用Sql查询生成的实时数据分析报告。
与遨游于天地
·
2024-02-20 07:43
clickhouse
学习
数据库
微服务-微服务Nacos配置中心
1.1配置中心架构1.2ConfigClient
源码分析
配置中心核心接口ConfigServicepublicclassConfigServerDemo{publicstaticvoidmain(String
长情知热爱
·
2024-02-20 07:16
微服务
java
运维
多线程基础(二十一):StampedLock
源码分析
1.类结构及其注释1.1类结构StampedLock是在java8中引入的一个新的并发工具,主要为了解决此前java7中Lock实现上的一些问题,如ReentrantReadWriteLock的锁饥饿问题。StampedLock是一个全新的Lock,其内部通过ReadWriteLockView、ReadLockView、writeLockView这三个内部类分别实现了Lock和ReadWriteL
冬天里的懒喵
·
2024-02-20 07:17
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他