E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cassandra集群
Sqoop性能优化:高效数据传输的技巧
高效的数据传输可以减少任务运行时间,减轻
集群
负载,提高整体工作效率。在本文中,将深入探讨Sqoop性能优化的关键技巧,并提供丰富的示例代码,以帮助大家更全面地理解和实施这些技术。
晓之以理的喵~~
·
2024-01-13 07:44
sqoop
sqoop
性能优化
hadoop
使用Sqoop将数据导入Hadoop的详细教程
准备工作在开始之前,确保已经完成以下准备工作:安装并配置好Hadoop
集群
。确保Sqoop已经正确安装并配置。数据源准备示例数据使用MySQL数据库中的一个简单表。首先,确保已经创建了该表
晓之以理的喵~~
·
2024-01-13 07:43
sqoop
hadoop
sqoop
hive
Hadoop分布式
集群
安装
上一篇大数据文章讲解了在单机上搭建Hadoop-Yarn伪分布式
集群
的安装方法,方便大家学习,真实环境不可能只有一台机器,肯定是多节点的
集群
,大单位还会建设很多Hadoop
集群
,比如各个大部门有自己的
集群
鬓戈
·
2024-01-13 07:28
大数据
分布式
hadoop
大数据
Linux 基于 rsync 实现
集群
分发脚本 xsync
一、rsync简介rsync(remotesynchronize)是Liunx/Unix下的一个远程数据同步工具。它可以通过LAN/WAN快速同步多台主机间的文件和目录,并适当利用rsync算法(差分编码)以减少数据的传输。rsync算法并不是每一次都整份传输,而是只传输两个文件的不同部分,因此其传输速度相当快。除此之外,rsync支持拷贝文件、显示目录属性等,并可以选择性的压缩以及递归拷贝。二、
快乐的小三菊
·
2024-01-13 06:33
linux
linux
20、Kubernetes核心技术 - 基于Prometheus和Grafana搭建
集群
监控平台
目录一、概述二、监控平台架构图编辑三、部署Prometheus3.1、Prometheus简介3.2、部署守护进程node-exporter3.3、部署rbac3.4、ConfigMap3.5、Deployment3.6、Service3.7、验证Prometheus四、部署Grafana4.1、Deployment4.2、Service4.3、Ingress4.4、验证Grafana一、概述本文
每天都要进步一点点
·
2024-01-13 06:22
#
Kubernetes
kubernetes
prometheus
grafana
k8s
k8s监控平台
自定义一个对象【minio】
相关文章推荐:对象存储MinIO的简介与部署两种MinIO分布式
集群
部署方式记录一次跨越16个月的minio版本升级与数据迁移MinIO
集群
怎么接入Prometheus监控?
SRE成长记
·
2024-01-13 06:09
存储
k8s&docker
minio
自定义docker镜像
docker镜像
容器
redis夯实之路-哨兵(Sentinel)机制详解
sentinel的主要功能
集群
监控:负责监控redismaster和slave进程是否正常工作消息通知:如果某个redis实例有故障,那么哨兵负责发送消息给管理员故障转移:如果masternode挂掉了
200
·
2024-01-13 06:07
redis
redis
sentinel
数据库
k8s--基础架构--Mixed Version Proxy
应用场景:这在
集群
中存在多个运行不同Kubernetes版本的APIServer时非常有用,例如在长期部署新版本Kubernetes过程中。
IT艺术家-rookie
·
2024-01-13 05:47
k8s与docker容器技术
kubernetes
云原生
kubernetes基础实践之网络
Kubernetes(k8s)是用来搭建服务
集群
的,而k8s只是搭建在有限的物理机或者虚拟机上面,服务器提供的IP是有限的,而k8s
集群
支持分布式服务、支持服务的弹性伸缩,这一切都利用了容器化技术,从以主机为中心的基础架构转移到以容器为中心的基础架构
jerry的技术与思维
·
2024-01-13 05:30
MySQL-简介及安装
1.1开发DBA***1.2运维DBA*****1.2.1初级运维安装、搭建1.2.2中级运维MySQL数据库管理员:用户权限,索引管理,存储引擎,备份恢复,主从,故障处理1.2.3高级运维性能优化,
集群
高可用
zwb_jianshu
·
2024-01-13 05:24
k8s-调度 13
调度器通过kubernetes的watch机制来发现
集群
中新创建且尚未被调度到Node上的Pod。调度器会将发现的每一个未调度的Pod调度到一个合适的Node上来运行。
coco--hui
·
2024-01-13 05:48
kubernetes
容器
云原生
【docker】Docker Stack 详细使用及注意事项
它使得在Swarm
集群
中部署、管理和扩展一组相互关联的服务变得简单。主要用于定义和编排容器化应用的多个服务。
顽石九变
·
2024-01-13 04:26
Docker从入门到精通
docker
容器
docker
stack
【docker】Docker Swarm 核心概念及详细使用
一、什么是DockerSwarmDockerSwarm是Docker的原生
集群
管理工具。它的主要作用是将多个Docker主机集成到一个虚拟的Docker主机中,为Docker容器提供
集群
和调度功能。
顽石九变
·
2024-01-13 04:48
Docker从入门到精通
docker
容器
swarm
多级缓存架构(三)OpenResty Lua缓存
文章目录一、nginx服务二、OpenResty服务1.服务块定义2.配置修改3.Lua程序编写4.总结三、运行四、测试五、高可用
集群
1.openresty2.tomcat通过本文章,可以完成多级缓存架构中的
木子dn
·
2024-01-13 04:14
Server运维
#
多级缓存架构
缓存
架构
openresty
docker
多级缓存架构(四)Redis缓存
文章目录一、Redis服务二、Redis缓存预热1.引入依赖2.handler类实现三、整合Redis缓存四、运行五、测试1.redis缓存预热2.redis缓存命中六、高可用
集群
通过本文章,可以完成多级缓存架构中的
木子dn
·
2024-01-13 04:14
Server运维
#
多级缓存架构
缓存
架构
redis
docker
E往无前|腾讯云大数据ES索引原理剖析及写入性能优化最佳实践
导读本文经过大量案例总结和踩坑复盘,归纳整理了Elastisearch
集群
在写入性能优化方面一些常用的优化技巧和避坑指南。
腾讯云大数据
·
2024-01-13 02:55
大数据
腾讯云
elasticsearch
性能优化
云计算
GraalVM到底是何方神圣?
在一些场景下,
集群
需要做动态扩缩容,这个动作当然是越快越好,不可能请求过来了,花了半天时间
程序一逸
·
2024-01-13 01:36
java
jvm
开发语言
十分钟教你在 K8s 中部署一个前后端应用
好多开发人员,尤其是没接触过k8s的人员对如何在k8s中部署一个前后端应用很模糊,不知如何下手,所以本篇讲一下如何快速在k8s部署一个前后端应用,让大家对k8s有个快速认识前置依赖k8s
集群
,如果没有安装
胖头鱼不吃鱼-
·
2024-01-13 01:15
kubernetes
容器
云原生
weblogic乱码报错解决思路
目录1.
集群
备份weblogic虚拟机快照备份2.查看主节点控制台面板状态3.尝试启动程序失败4.查看162.主节点日志5.发现程序中乱码6.修改乱码名称7.尝试启动,新的报错还是显示乱码8.修改乱码9
大虾别跑
·
2024-01-13 01:07
linux
java
服务器
javascript
2022-03-28
聊聊卓智达公网
集群
通信系统在电力系统的应用坚强智能电网的建立离不开电力通信网的可靠支撑,在突发事件的应急处置过程中,为了保障任务执行人员的通信需求,需装配无线单兵背负系统、摄像机、视频会商终端、对讲机、
公网平台
·
2024-01-13 00:30
容器存储与 K8s 存储卷
云原生存储的两个关键领域:Docker存储卷、K8s存储卷;Docker存储卷:容器服务在单节点的存储组织形式,关注数据存储、容器运行时的相关技术;K8s存储卷:关注容器
集群
的存储编排,从应用使用存储的角度关注存储服务
鲜卑柱石
·
2024-01-13 00:01
kubernetes
k8s 存储卷与数据持久化
1.2K8S服务运行状态无状态服务、普通有状态服务和有状态
集群
小龙加油!!!
·
2024-01-13 00:30
k8s
kubernetes
docker
容器
k8s数据持久化(存储卷)
数据持久化我们知道,Pod是由容器组成的,而容器宕机或停止之后,数据就随之丢了,那么这也就意味着我们在做Kubernetes
集群
的时候就不得不考虑存储的问题,而存储卷就是为了Pod保存数据而生的。
givenchy_yzl
·
2024-01-13 00:56
doker+k8s
时间差异导致数据缺失,如何调整Grafana时间与Prometheus保持同步?
在实际的使用中,有时会遇到这样的问题,k8s
集群
中的时间比真实时间慢,这个时候,在grafana上查看数据面板的时候,可能会出现数据缺失的情况,那么这个问题如何解决呢?
小诸葛的博客
·
2024-01-12 23:14
grafana
prometheus
kubernetes
Hazelcast使用详解
使用介绍主要优缺点应用场景Java使用案例安装部署单节点部署
集群
部署最新版本特性介绍架构设计作为
集群
管理器的使用示例监控管理工具Hazelcast与SpringBoot整合Hazelcast与Vert.x
有梦想的攻城狮
·
2024-01-12 23:30
架构设计
hazelcast
缓存
linux虚拟机环境快速搭建redis5.x版本的主从
集群
总结
原创/朱季谦我在阿里云服务器上曾参与过公司redis
集群
的搭建,但时间久了,都快忘记当时的搭建过程了,故而决定在虚拟机centOS7的环境,自行搭建一套redis5.x版本的
集群
,该版本
集群
的搭建比较方便
朱季谦
·
2024-01-12 23:57
redis
linux
运维
服务器
设置5台SSH互免的虚拟机服务器配置
搭建一套
集群
虚拟机,往往都需要互免设置,过程很简单,避免以后再搭建还得网上搜索,我直接将这一个步骤写成笔记,记录下来,方便后续查阅。
朱季谦
·
2024-01-12 23:24
Linux
ssh
服务器
eclipse
web开源直播通讯平台webtim
但tim的强大并非其通讯模式,而是去中心化的
集群
功能,tim的水平
donnie4w
·
2024-01-12 23:48
Tim分布式IM引擎
实时互动
实时音视频
分布式
去中心化
webtim开源即时通讯平台第三版发布
但tim的强大不仅是其通讯模式,更主要是去中心化的
集群
功能
donnie4w
·
2024-01-12 23:10
Tim分布式IM引擎
开源
实时音视频
去中心化
分布式
实时互动
后端
微服务架构——SpringCloud理论学习
SpringCloud学习记录一、
集群
和分布式1.1什么是
集群
计算机
集群
简称
集群
是一种计算机系统,它通过一组松散集成的计算机软件和/或硬件连接起来高度紧密地协作完成计算工作。
周八营业的代码人
·
2024-01-12 22:51
Spring
Java
分布式
spring
cloud
java
分布式
SpringBootAdmin监控
应用程序可以通过http的方式,或SpringCloud服务发现机制注册到SBA中,然后就可以实现对SpringBoot项目的可视化管理SpringBootAdmin可以监控SpringBoot单机或
集群
项目
大能嘚吧嘚
·
2024-01-12 21:14
微服务
spring
boot
java
spring
如何进行大数据系统测试
MapReduce:作为Hadoop的核心计算框架,它通过将复杂的计算任务分解为“映射”(map)和“归约”(reduce)阶段,在
集群
节点上并行执行。
Feng.Lee
·
2024-01-12 21:41
系统测试
项目管理
测试工具
大数据
NodeLocal DNS介绍及部署应用
NodeLocalDNSCache通过在
集群
节点上运行一个DaemonSet来提高clusterDNS性能和可靠性。处于ClusterFirst的DNS模式下的Pod可以连接到kub
Cloud孙文波
·
2024-01-12 21:03
kubernetes
云原生
kubernetes
NodeLocaldns
RKE部署高可用k8s
集群
+高可用Rancher
部署情况:主机ip服务ngnx172.16.1.109etcdcontrolplaneworkrancherk8s-node01172.16.1.110etcdcontrolplaneworkrancherk8s-node02172.16.1.111etcdcontrolplaneworkrancher#注意nginx主机名没有特殊含义只是主机名起错了。环境准备:#以下是3台主机都需要执行#环境初
alisxwy
·
2024-01-12 21:59
笔记
kubernetes
rancher
运维
基于Ubuntu22.04部署生产级K8S
集群
v1.27(规划和核心组件部署篇)
实操环境基于VMwareWorkstation17pro,采用ubuntu22.04操作系统(有时也提到rhel系列系统),采用kubeadm1.27.4(部分地方提到了1.28)部署和初始化
集群
,采用
沉思的归零者
·
2024-01-12 21:28
云原生
#
Docker
kubernetes
容器
云原生
k8s
集群
配置NodeLocal DNSCache
一、简介当
集群
规模较大时,运行的服务非常多,服务之间的频繁进行大量域名解析,CoreDNS将会承受更大的压力,可能会导致如下影响:延迟增加:有限的coredns服务在解析大量的域名时,会导致解析结果返回慢
CSH056
·
2024-01-12 21:58
kubernetes
容器
云原生
光鉴科技的反卷思维,让科技不再难做
而在最近发布的全球百强科技创新
集群
排名中,中国百强科技创新
集群
数量,也首次跃居世界第一。在资本市场中,自主创新的企业并不受限于所谓「资本寒冬」的桎梏。近期,刚完成2亿元人民币B轮融资的光鉴科技,
智能相对论
·
2024-01-12 21:23
科技
Kubernetes的基本概念和术语--master
MasterKubernetes里的Master指的是
集群
控制节点(相当于整个
集群
的指挥中心),在每个Kubernetes
集群
里都需要有一个Master来负责整个
集群
的管理和控制,基本上Kubernetes
%九思%
·
2024-01-12 21:51
大数据
linux
kubernetes
CentOS安装k8s单机/
集群
及一些命令
目录前言1.安装docker2.安装要求3.准备网络(如果只装单机版可跳过此部)4.准备工作5.安装5.1.配置阿里云yumk8s源5.2安装kubeadm、kubectl和kubelet5.3初始化,只在master执行,子节点不要执行5.3.1一些错误(没有错误直接忽略)5.4使用kubectl工具5.5子节点加入(单机版可忽略)5.6部署CNI网络插件6.扩展前言只针对1.24版本以前的k8
蚕豆的生活
·
2024-01-12 20:24
k8s
安装
linux
centos
kubernetes
linux
云原生
这次在搞不定 Redis
集群
搭建!你来找我~~
Redis
集群
简介下载&安装Redis搭建Redis
集群
手动方式搭建自动方式搭Redis
集群
简介RedisCluster即Redis
集群
,是Redis官方在3.0版本推出的一套分布式存储方案。
码农开花
·
2024-01-12 20:42
中国信通院联合发布《数字孪生城市白皮书(2023年)》
数字孪生城市建设已进入快车道,成为实现城市治理现代化、培育新兴产业
集群
、促进数据要素价值化的重要抓手。2023年12月27日,由中国信息通信研究院(简称“中国信通院”
数字孪生家族
·
2024-01-12 20:33
数字孪生
数字孪生城市
3d
docker-compose一键搭建zookeeper
集群
1、setup.shsetup.sh脚本用来创建本地文件夹,这些文件夹会被挂载到docker容器。#!/bin/bashmkdir-p"$PWD\zoo1\data"mkdir-p"$PWD\zoo1\datalog"mkdir-p"$PWD\zoo2\data"mkdir-p"$PWD\zoo2\datalog"mkdir-p"$PWD\zoo3\data"mkdir-p"$PWD\zoo3\d
南京大学软工研究生
·
2024-01-12 19:24
docker
docker
zookeeper
容器
手把手教你搭建一个Elasticsearch
集群
一、为何要搭建Elasticsearch
集群
凡事都要讲究个为什么。在搭建
集群
之前,我们首先先问一句,为什么我们需要搭建
集群
?它有什么优势呢?
Sql强
·
2024-01-12 19:54
Linux学习笔记——ZooKeeper
集群
安装部署
5.8、ZooKeeper
集群
安装部署5.8.1、简介Zookeeper是一个分布式的、开放源码的分布式应用程序协调服务,是Hadoop和HBase的重要组件。
kxttmx
·
2024-01-12 18:16
linux
学习
zookeeper
用通俗易懂的方式讲解大模型分布式训练并行技术:序列并行
而利用AI
集群
,使深度学习算法更好地从大量数据中高效地训练出性能优良的大模型是分布式机器学习的首要目标。为了实现该目标,一般需要根据硬件资源与数据/模型规模的匹配情况,考虑对计算任务、训
Python算法实战
·
2024-01-12 17:25
大模型理论与实战
大模型
分布式
LLM
多模态
人工智能
模型训练
模型部署
Flink会话
集群
docker-compose一键安装
1、安装docker参考,本人这篇博客:https://blog.csdn.net/taotao_guiwang/article/details/135508643?spm=1001.2014.3001.55012、flink-conf.yamlflink-conf.yaml放在/home/flink/conf/job、/home/flink/conf/task下面,flink-conf.yaml
core512
·
2024-01-12 17:30
虚拟机&容器
实战
其它
flink
大数据
安装
docker
充电站 | 如何实现无人机之间相互通信
目前无人机
集群
仍然是无人机研究中的一大热点,受到国内外广泛的关注和重视。其中,无人机
集群
通信组网系统更是大家关注的重点。
阿木实验室
·
2024-01-12 16:18
无人车
DolphinScheduler伪
集群
部署
一.伪
集群
部署伪
集群
部署目的是在单台机器部署DolphinScheduler服务,该模式下master、worker、apiserver、loggerserver都在同一台机器上。
远方有海,小样不乖
·
2024-01-12 15:36
调度
zookerper
集群
Leader选举
集群
角色Leader处理所有读写请求,有一个Leader.收到写请求,先记录事务日志,然后给Follower节点发送同步数据的请求。
我就是胖着玩玩的
·
2024-01-12 15:05
java
开发语言
zookeeper
Redis info命令生产监控和config配置命令
命令介绍:服务器的各种信息和统计数值#Server:有关Redis服务器的常规信息redis_version:6.2.14#Redis版本redis_mode:standalone#运行模式:单机或者
集群
水宝的滚动歌词
·
2024-01-12 15:34
Redis
redis
上一页
64
65
66
67
68
69
70
71
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他