E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
hadoop运维
Flink中的SQL Client和SQL Gateway
Flink中的SQLClient和SQLGateway对比目录定义基本原理适用场景主要区别常用
运维
命令示例官方链接正文1.定义SQLClient:FlinkSQLClient是一种用于提交和执行FlinkSQL
BigDataMLApplication
·
2024-03-29 14:20
flink
flink
sql
gateway
springboot集成logback-spring.xml文件
彩色日志日志分debug和error文件输出,方便开发人员
运维
日志限制最大保管天数日志限制总量大小占用量GB日志限制单个文件大小MB日志显示最大保留天数屏蔽没用的日志${CONSOLE_LOG_PATTERN
RT_0114
·
2024-03-29 09:44
SpringBoot
spring
boot
spring
logback
网络安全(黑客)——自学2024
01什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
小言同学喜欢挖漏洞
·
2024-03-29 06:38
web安全
安全
网络
学习
网络安全
信息安全
渗透测试
黑客(网络安全)技术自学30天
01什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
一个迷人的黑客
·
2024-03-29 06:37
web安全
安全
网络
笔记
网络安全
信息安全
渗透测试
自学黑客(网络安全)技术——2024最新
01什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
九九归二
·
2024-03-28 21:26
web安全
安全
学习
笔记
网络
网络安全
信息安全
Azkaban各种类型的Job编写
一、概述原生的Azkaban支持的plugin类型有以下这些:command:Linuxshell命令行任务gobblin:通用数据采集工具
hadoop
Java:运行
hadoop
MR任务java:原生java
__元昊__
·
2024-03-28 21:00
Linux(centos7)部署hive
前提环境:已部署完
hadoop
(HDFS、MapReduce、YARN)1、安装元数据服务MySQL切换root用户#更新密钥rpm--importhttps://repo.mysql.com/RPM-GPG-KEY-mysqL
灯下夜无眠
·
2024-03-28 12:44
Linux
linux
hive
运维
dbeaver
hive客户端
网络安全(黑客技术)—自学
1.网络安全是什么网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
德西德西
·
2024-03-26 22:43
web安全
安全
网络安全
学习
python
开发语言
php
SQL
运维
_Unix下MySQL-8.0.18配置文件示例
SQL
运维
_Unix下MySQL-8.0.18配置文件示例MySQL是一个关系型数据库管理系统,由瑞典MySQLAB公司开发,属于Oracle旗下产品。
Mostcow
·
2024-03-26 17:06
SQL
sql
运维
unix
关于HDP的20道高级
运维
面试题
HDP(HortonworksDataPlatform)的主要组件包括
Hadoop
框架、HDFS、MapReduce、YARN以及
Hadoop
生态系统中的其他关键工具,如Spark、Flink、Hive
编织幻境的妖
·
2024-03-26 15:34
运维
网络安全(黑客技术)—2024自学
1.网络安全是什么网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
德西德西
·
2024-03-26 10:57
开发语言
php
安全
web安全
网络安全
python
网络
【
Hadoop
】使用Scala与Spark连接ClickHouse进行数据处理
风不懂不懂得叶的梦月不听不听闻窗里琴声意难穷水不见不曾见绿消红霜不知不知晓将别人怎道珍重落叶有风才敢做一个会飞的梦孤窗有月才敢登高在夜里从容桃花有水才怕身是客身是客此景不能久TieYann(铁阳)、薄彩生《不知晓》在大数据分析和处理领域,ApacheSpark是一个广泛使用的高性能、通用的计算框架,而ClickHouse作为一个高性能的列式数据库,特别适合在线分析处理(OLAP)。结合Scala语
音乐学家方大刚
·
2024-03-26 09:56
Scala
Hadoop
hadoop
scala
spark
网络安全(黑客)—2024自学笔记
前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
羊村最强沸羊羊
·
2024-03-26 07:23
web安全
笔记
安全
网络安全
网络
python
开发语言
谈谈对前端性能监控的理解和实践
通过前端性能监控,开发者和
运维
团队能够及时发现并解决性能瓶颈,从而提升用户体验和系统稳定性。理解前端性能监控,首先要明确其重要性。在移动互联网时代,用户对网页和应用的响应速度有着极高的要求。
Layla_c
·
2024-03-26 05:20
web
jave
python
前端
Devops-02-Jpom 简而轻的低侵入式在线构建、自动部署、日常
运维
、项目监控软件
Devops-02-Jpom简而轻的低侵入式在线构建、自动部署、日常
运维
、项目监控软件代码质量管理SonarQube-01-入门介绍项目管理平台-01-jira入门介绍缺陷跟踪管理系统,为针对缺陷管理、
老马啸西风
·
2024-03-25 19:08
java
Docker(一):Docker入门教程
在云服务概念兴起之后,Docker的使用场景和范围进一步发展,如今在微服务架构越来越流行的情况下,微服务+Docker的完美组合,更加方便微服务架构
运维
部署落地。
蓝胖子的白日梦丶
·
2024-03-25 09:27
企业数字化转型必读:数据处理是“终极任务”
对于企业来说,在开发体验、开发效率、用户使用体验以及
运维
成本之间寻找平衡,可谓一项“终极任务”——以下是来自不同行业的4个客户案例,一起来看看他们是如何在MDB的帮忙下降本增
MongoDB 数据平台
·
2024-03-24 21:11
mongodb
人工智能
hadoop
配置免密登录
1.生成密钥ssh-keygen-trsa所有节点都要执行2.所有节点执行ssh-copy-id-i~/.ssh/id_rsa.pub用户名1@主机名1ssh-copy-id-i~/.ssh/id_rsa.pub用户名2@主机名2ssh-copy-id-i~/.ssh/id_rsa.pub用户名3@主机名33.目录授权chmod700~/.sshchmod600~/.ssh/authorized_
我干开发那十年
·
2024-03-24 07:25
ssh
服务器
linux
Unix
运维
_Unix下配置PHP-7.x.x和Apache-2.x.x
Unix
运维
_Unix下配置PHP-7.x.x和Apache-2.x.xApacheHTTPServer(简称Apache,音译为:阿帕奇)是Apache软件基金会的一个开放源码的网页服务器。
Mostcow
·
2024-03-22 04:20
Unix
unix
运维
php
网络安全(黑客)—2024自学
1.网络安全是什么网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
德西德西
·
2024-03-20 08:18
web安全
python
网络安全
网络
安全
开发语言
php
【笔记】HDFS基础笔记
启动
hadoop
命令(未配环境变量):进入
hadoop
安装目录输入.
哇咔咔哇咔
·
2024-03-20 04:12
Hadoop
hdfs
笔记
hadoop
大数据
ubuntu
【笔记】Linux常用命令
命令含义cd/home/
hadoop
#把/home/
hadoop
设置为当前目录cd..#返回上一级目录cd~#进入到当前Linux系统登录用户的主目录(或主文件夹)。
哇咔咔哇咔
·
2024-03-20 03:11
Linux
笔记
linux
运维
ubuntu
网络安全(黑客)0基础到精通,看这一篇就够了!
前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
羊村最强沸羊羊
·
2024-03-20 01:39
web安全
安全
网络安全
php
网络
python
开发语言
2024网络安全-自学笔记
前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
羊村最强沸羊羊
·
2024-03-20 01:39
web安全
安全
网络安全
开发语言
php
python
网络
服务维护之crontab定时监测告警
项目维护中服务会不定时的出现异常,比如502、404、101等等,当工作任务繁重时又不能实时监测,而linux的
运维
者,逃脱不了定时任务的命题,最常用和快捷简单的是crontab,在少量机器的情况下,crontab
羽恒
·
2024-03-19 04:38
【Nginx】使用普通用户安装和运行Nginx经验分享
各位做
运维
的小伙伴在日常工作中,可能都会习惯性的使用root超级用户来安装和运行Nginx。
cnskylee
·
2024-03-19 03:11
Nginx
nginx
安全
运维
运维
面试题(网络基础、系统管理)
目录网络基础类1、简述ISO/OSI七层模型的==分层与作用==相关-==TCP/IP四(五)层==模型与作用?2、简述TCP三次握手的过程相关-简述四次挥手的过程3、172.22.141.231/26,该IP位于哪个网段?该网段拥有多少可用IP地址?广播地址是什么?系统管理1、权限优化相关-用户user1,对/testdir目录有写和执行权限时,该目录下的只读文件file1是否可修改和删除?2、
王尼码
·
2024-03-19 03:11
网络
运维
网络协议
考试总结
1.1
运维
人员的重要职责有哪些(3分)1.企业数据不丢失不泄露2.7*24小时不宕机3.提升用户体验1.2绝对路径与相对路径概念和区别是什么?
chloepang
·
2024-03-19 02:57
linux安装单机版spark3.5.0
一、spark介绍是一种通用的大数据计算框架,正如传统大数据技术
Hadoop
的MapReduce、Hive引擎,以及Storm流式实时计算引擎等.Spark主要用于大数据的计算二、spark下载spark3.5.0
爱上雪茄
·
2024-03-17 18:57
大数据
JAVA知识
spark
大数据
分布式
网络安全(黑客技术)—0基础自学
前言一、什么是网络安全网络安全可以基于攻击和防御视角来分类,我们经常听到的“红队”、“渗透测试”等就是研究攻击技术,而“蓝队”、“安全运营”、“安全
运维
”则研究防御技术。
羊村最强沸羊羊
·
2024-03-17 13:49
网络安全
web安全
开发语言
安全
php
python
网络
MySQL数据库管理
MySQL库和表的创建和删除方法掌握MySQL增删改查常见操作掌握MySQL用户权限1.1使用MySQL数据库在熟悉安装及访问MySQL数据库以后,接下来将学习MySQL数据库的基本操作,这也是在服务器
运维
工作工不可或缺的知识
L罗盛
·
2024-03-16 13:50
数据库
mysql
Hadoop
简介
简介大数据简介概述大数据的说法从出现到现在,也经历了十多年时间的发展。而在这十几年的发展过程中,非常多的机构、组织都试图对大数据做出过定义,例如:研究机构Gartner给出了这样的定义:"大数据"是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。再例如根据维基百科的定义,大数据是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。
程序员小郭同学
·
2024-03-16 07:10
hadoop
【项目经验】Redis Sentinel从工程中下线并对业务迁移-进行中
一、背景:某天,接到DBA通知,Redissentinel只支持到3.2.X(这个命题有问题,往下翻,见彩蛋),为节省
运维
成本,提升
运维
效率,决定将工程中使用的Redissentinel下线,都使用Rediscluster
小王师傅66
·
2024-03-16 05:06
Redis
项目实战
redis
sentinel
java
Hive中的NVL函数与COALESCE函数
ReturnsdefaultvalueifvalueisnullelsereturnsvalueExample:>SELECTnvl(null,'bla')FROMsrcLIMIT1;blaFunctionclass:org.apache.
hadoop
.hive.ql.udf.generic.GenericUDFNv
独影月下酌酒
·
2024-03-15 13:13
Hadoop
大数据
hive
hadoop
数据仓库
hive库表占用空间大小的命令
hdfsdfs-du-h/user/hive/warehouse2、按占用空间大小降序排列hdfsdfs-du/user/hive/warehouse/ipms.db|sort-nr3、查某一个分区占用空间大小(单位G)
hadoop
fs-ls
刀鋒偏冷
·
2024-03-15 13:13
hive
hadoop
数据仓库
基于Java的天然气工程
运维
系统(Vue.js+SpringBoot)
目录一、摘要1.1项目介绍1.2项目录屏二、功能模块2.1系统角色分类2.2核心功能2.2.1流程12.2.2流程22.3各角色功能2.3.1系统管理员功能2.3.2用户服务部功能2.3.3分公司(施工单位)功能2.3.3.1技术员角色功能2.3.3.2材料员角色功能2.3.4安全质量部功能2.3.5技术设备部功能2.3.6经营计划部功能2.3.7财务部功能三、研究背景和意义3.1研究背景3.2研
杨荧
·
2024-03-15 10:39
java
运维
vue.js
spring
boot
开源
开发语言
java-ee
03hive数仓安装与基础使用
hiveHive概述Hive是基于
Hadoop
的一个数据仓库工具。
daydayup9527
·
2024-03-14 13:39
hadoop_hive
运维
hadoop
构建轻量级CentOS Docker镜像的实战指南
随着容器技术的迅速发展,Docker已成为现代应用部署和
运维
的标准工具之一。其中,构建自定义的Docker镜像是将应用程序无缝集成到容器化环境的关键步骤。
Evaporator Core
·
2024-03-14 00:51
centos
docker
linux
Mysql
运维
篇(六) 部署MHA--一主二从部署
一路走来,所有遇到的人,帮助过我的、伤害过我的都是朋友,没有一个是敌人。如有侵权,请留言,我及时删除!MAH架构图一、上传MySQL软件1、同步MySQL软件[root@mysql01~]#ls-lrttotal626112-rw-r--r--.1rootroot641127384Jan3015:13mysql-5.7.20-linux-glibc2.12-x86_64.tar.gz-rw----
董乐,快乐的乐!
·
2024-03-13 05:25
运维
HDFS
(一)HDFS简介及其基本概念 HDFS(
Hadoop
DistributedFileSystem)是
hadoop
生态系统的一个重要组成部分,是
hadoop
中的的存储组件,在整个
Hadoop
中的地位非同一般
weixin_51987187
·
2024-03-12 14:32
笔记
大数据
详解乐观锁、悲观锁以及它们各自的应用
转发“详解乐观锁、悲观锁以及它们各自的应用”波波说
运维
为什么需要锁(并发控制)?在多用户环境中,在同一时间可能会有多个用户更新相同的记录,这会产生冲突。这就是著名的并发性问题。
路亚历克斯
·
2024-03-12 10:42
大客户项目管理策略思考
都是根据工作实际内容缺乏信息化总体规划,项目开发建设存在突击性,部分项目时间要求短,属于突击需求大客户面临的问题-自己:1、项目建设时间短,质量不高,项目间各自独立开发,重复开发,复用率低,开发规范差,后期
运维
压力大
guwei666666
·
2024-03-12 02:45
项目实施
大数据
大数据开发(
Hadoop
面试真题-卷二)
大数据开发(
Hadoop
面试真题)1、在大规模数据处理过程中使用编写MapReduce程序存在什么缺点?如何解决这些问题?
Key-Key
·
2024-03-12 02:15
大数据
hadoop
面试
运维
随录实战(14)之docker搭建mysql主从集群(Replication))
1,从官方景镜像中拉取mysql镜像:dockerpullmysql:8.0.24--platformlinux/x86_642,创建master和slave容器:在创建之前先设置网段dockernetworkcreate--subnet=172.20.0.0/24soil_networkmaster:dockerrun-d-p3306:3306--namemysql-master--netsoi
Loren_云淡风轻
·
2024-03-11 19:35
运维
运维
docker
mysql
运维
系列:Docker 配置国内源加速(2023/05/14)
Docker配置国内源加速(2023/05/14)Docker配置国内源加速(2023/05/14)1.修改配置文件2.重启`Docker`服务3.查看是否成功Docker配置国内源加速(2023/05/14)Docker在拉取镜像时使用默认源速度会比较慢,因此需要配置国内镜像源进行加速。下面以Ubunut16.04和Docker20.10.2为例演示Docker配置国内源加速的过程。1.修改配置
坦笑&&life
·
2024-03-11 08:35
运维
运维
docker
容器
1分钟玩转Kafka
Kafka是一种分布式的、基于发布/订阅的消息系统,其极致体验让人欲罢不能,但操心的
运维
、复杂的安全策略、可靠性易用性的缺失、算不上极致的性能发挥、并不丰富的消息服务功能,仍需要使用者付出诸多的背后工作
中间件小哥
·
2024-03-10 21:58
zookeeper 使用
zookeeper介绍zookeeper是一个为分布式应用提供一致性服务的软件,它是开源的
Hadoop
项目中的一个子项目,并且根据google发表的论文来实现的,接下来我们首先来安装使用下这个软件,然后再来探索下其中比较重要一致性算法
SkTj
·
2024-03-10 02:15
Hive SQL 开发指南(三)优化及常见异常
在大数据领域,HiveSQL是一种常用的查询语言,用于在
Hadoop
上进行数据分析和处理。为了确保代码的可读性、维护性和性能,制定一套规范化的HiveSQL开发规范至关重要。
大数据_苡~
·
2024-03-09 14:13
003-数据开发
hive
Hive优化
数据倾斜
Hive常见异常
hive
join
docker-swarm集群管理命令
当前个人负责的项目基本上后端只有一个人,
运维
也比较费时费力。就想着搭建一个集群,对比了k8s、k3s和d
chenzfp
·
2024-03-09 12:39
Docker
docker
java
大数据开发(
Hadoop
面试真题-卷九)
大数据开发(
Hadoop
面试真题)1、Hivecount(distinct)有几个reduce,海量数据会有什么问题?
Key-Key
·
2024-03-09 10:06
大数据
hadoop
面试
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他