E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cassandra集群安装
jenkins持续构建k8s服务
jenkins持续构建k8s服务本文默认您已经完成以下步骤:k8s
集群安装
(本司使用rancher部署k8s)jenkins自动化部署工具安装harbor镜像仓库安装一、准备工作1.1自动化部署流程1.2jenkins
易佰菜鸟
·
2023-11-11 10:28
技术文档
kubernetes
docker
jenkins
harbor
gitlab
kubernetes1——k8s
集群安装
部署
目录一、kubernetes二、安装配置k8s1、环境配置2、禁用所有节点的swap分区3、设定dockercgroupdriver为systemd4、配置网桥5、安装6、生成密钥7、harbor中创建k8s项目8、镜像上传到仓库9、初始化10、配置环境变量与kubectl补齐11、安装flannel网络组件12、编写kube-flannel.yml应用配置文件13、节点扩容(其他节点加入集群)1
贾几人要努力
·
2023-11-11 07:00
企业实战系列
运维
docker
kubernetes
Kubeadm安装k8s高可用集群实战
一、
集群安装
网段划分
集群安装
时会涉及到三个网段:宿主机网段:就是安装k8s的服务器Pod网段:k8sPod的网段,相当于容器的IPService网段:k8sservice网段,service用于集群容器通信
wespten
·
2023-11-09 19:40
Docker
K8s
云原生
CICD
DevOps
kubernetes
运维
linux
7.1 Kubernetes 准备
文章目录1.k8s集群方案2.
集群安装
准备2.1虚拟机准备2.2安装文件上传2.3安装环境初始化脚本工具2.4工作节点3.配置
集群安装
环境3.1启动kubeasz容器3.2设置参数允许离线安装3.3配置免密登录其他服务器
蟑螂恶霸不是恶霸
·
2023-11-09 17:38
零基础入门到就业--JAVA篇
kubernetes
容器
云原生
vagrant安装k8s集群
目录概述安装virtualbox安装vagrant安装gitbash集群架构
集群安装
集群初始化集群测试概述使用vagrant、virtualbox创建。
墨家先生
·
2023-11-09 15:33
k8s
kubernetes
容器
云原生
HBASE2.5.3
集群安装
-大数据学习系列(五)
01-安装HBASE2.5.3集群版本前置:集群规划机器信息Hostnamek8s-masterk8s-node1k8s-node2外网IP106.15.186.55139.196.15.2847.101.63.122内网IP172.25.73.65172.25.73.64172.25.73.66HBASE数据库HBASEYYYPS:这是基于之前hadoop和hive安装好的基础上的1.各机器ho
zhenwudi
·
2023-11-09 08:47
大数据
学习
hbase
Apache Storm 2.5.0
集群安装
与配置
1、下载ApacheStorm2.5.0https://mirrors.tuna.tsinghua.edu.cn/apache/storm/apache-storm-2.5.0/2、准备3台服务器192.168.42.139node1192.168.42.140node1192.168.42.141node23、配置host[root@node1~]#cat/etc/hosts127.0.0.1l
爱上雪茄
·
2023-11-09 08:37
大数据
apache
storm
大数据
flink项目开发-配置jar依赖,连接器,类库
许多应用程序依赖特定的连接器库(如kafka,
cassandra
,等等)。Flink运行应用程序时(在分布式部署,或在IDE中测试),Flink运行时库必须是可用的。Flink核心依赖和应用依赖
大数据徐葳
·
2023-11-09 06:38
flink
flink项目依赖配置
flink
依赖配置
flink
依赖jar配置
Flink 基础 -- 应用开发(项目配置)
至少,应用程序依赖于Flinkapi,此外,还依赖于某些连接器库(如Kafka,
Cassandra
)和第三方依赖,用户需要开发自定义函数来处理数据。1.1开始进行要开始使用Flink应用程序,请使
chinusyan
·
2023-11-09 05:56
BigData
flink
大数据
ElasticSearch7
集群安装
和配置
角色节点名ipmaster,data,voting_onlynode-master01172.28.254.221master,datanode-master02172.28.254.27master,datanode-master03172.28.253.2271、安装Elasticsearch集群elasticsearch文件目录介绍:bin:可执行文件,包括ES启动&安装插件等等config
qianghong000
·
2023-11-08 23:09
elasticsearch
linux
big
data
centos
docker
etcd3+coredns设置域名解析
二、安装etcd使用yum安装,最简化配置,非
集群安装
yuminstall–yetcd修改配置,将/etc/etcd/etcd.conf配置中‘ETCD_LISTEN_CLIENT_URLS’和‘ETCD_ADVE
suiyingday
·
2023-11-08 17:42
etcd
etcd3
coredns
域名解析
SQL学习总结
SQLServer数据库PostgreSQLSQLite(嵌入式数据库)非关系型数据库(NoSQL)Redis(最好的缓存数据库)MongoDB(最好的文档数据库)Elasticsearch(最好的搜索服务)
Cassandra
HBase
Forge_ahead
·
2023-11-08 11:09
Study
数据库
mysql
sql
kafka笔记要点和
集群安装
、消息分组、消费者分组以及与storm的整合机制
kafka笔记1/kafka是一个分布式的消息缓存系统2/kafka集群中的服务器都叫做broker3/kafka有两类客户端,一类叫producer(消息生产者),一类叫做consumer(消息消费者),客户端和broker服务器之间采用tcp协议连接4/kafka中不同业务系统的消息可以通过topic进行区分,而且每一个消息topic都会被分区,以分担消息读写的负载5/每一个分区都可以有多个副
小小哭包
·
2023-11-08 09:04
中间件
kafka
笔记
分布式
storm
集群
Cassandra
介绍(二)
1.8.数据存储(CommitLog、MemTable、SSTable)写请求分别到CommitLog和MemTable,并且MemTable的数据会刷写到磁盘SSTable上.除了写数据,还有索引也会保存到磁盘上.先将数据写到磁盘中的commitlog,同时追加到中内存中的数据结构memtable。这个时候就会返回客户端状态,memtable内容超出指定容量后会被放进将被刷入磁盘的队列(memt
狠情
·
2023-11-08 09:14
数据库
spring
大数据学习之一文学会Spark【Spark知识点总结】
文章目录什么是SparkSpark的特点SparkvsHadoopSpark+HadoopSpark
集群安装
部署Spark
集群安装
部署StandaloneONYARNSpark的工作原理什么是RDDRDD
小崔的技术博客
·
2023-11-08 06:37
大数据学习
大数据
学习
spark
k8s
集群安装
metrics-server
前言环境:k8sv1.22.6centos7.9kubeadm安装的k8s集群Metrics-Server是k8s集群采集监控数据的聚合器,如采集node、pod的cpu、内存等数据,从Kubernetes1.8开始默认使用Metrics-Server采集数据,并通过MetricsAPI的形式提供查询,但是,kubeadm安装的k8s集群默认是没有安装Metrics-Server的,所以我们来安装
MssGuo
·
2023-11-08 02:16
kubernetes
kubernetes
docker
容器
2、k8s
集群安装
1、kubeadmkubeadm是官方社区推出的一个用于快速部署kubernetes集群的工具。这个工具能通过两条指令完成一个kubernetes集群的部署:#创建一个Master节点$kubeadminit#将一个Node节点加入到当前集群中$kubeadmjoin2、前置要求一台或多台机器,操作系统CentOS7.x-86_x64硬件配置:2GB或更多RAM,2个CPU或更多CPU,硬盘30G
myprince003
·
2023-11-08 02:45
k8s&docker
kubernetes
容器
云原生
保姆级k8s
集群安装
教程
作者:liugp出处:https://www.cnblogs.com/liugp/p/16357445.html一、前言二、基础环境部署1)前期准备(所有节点)2)安装容器docker(所有节点)3)配置k8syum源(所有节点)4)将sandbox_image镜像源设置为阿里云google_containers镜像源(所有节点)5)配置containerdcgroup驱动程序systemd(所有
a...Z
·
2023-11-07 05:06
后端
Cassandra
介绍(一)
1.1.概念Apache
Cassandra
是高度可扩展的,高性能的分布式NoSQL数据库。
Cassandra
旨在处理许多商品服务器上的大量数据,提供高可用性而无需担心单点故障。
狠情
·
2023-11-06 23:37
spring
ceph-deploy在线安装ceph(Ubuntu18)
文章目录准备安装出错重来方法安装ceph-deploy配置各节点的静态IP和hosts安装chrony和openssh-server(所有节点)创建有sudo权限的用户(所有节点)免密登陆配置关闭防火墙安装ceph集群创建
集群安装
包初始化
零起跑线
·
2023-11-06 21:04
ceph
ubuntu
linux
ubuntu
ceph
linux
ActiveMQ-5.15基于zookeeper+levelDB的Master-Slave
集群安装
配置
安装目标:服务器tcp链接端口管控台端口集群通信端口192.168.1.11161616816162621192.168.1.11261616816162621192.168.1.11361616816162621前提条件:各服务器安装jre环境(这里装的activemq5.15.9需要jre1.8环境)zookeeper集群环境安装步骤:1增加activemq用户:(分别在192.168.1.1
灯塔kg
·
2023-11-06 05:09
消息队列
activemq
消息队列
hadoop
集群安装
_已搭建好_可直接使用
已经搭建好的三台hadoop集群,下载可直接使用的hadoop完全分布式集群,环境搭建、集群配置已完成。学自尚硅谷_大海哥(集群资源会放在文章末尾的百度网盘链接中,可直接下载使用,有71.3个G)下好之后用VMwareWorkstationPro打开该文件夹密码为:2435huang4a4!(用户名和密码可自行修改)登入到虚拟机主页面后,我们需要打开虚拟机终端进行以下操作:(1)修改克隆虚拟机的静
hys_guff
·
2023-11-06 05:15
大数据开发学习
hadoop
java
linux
大数据
分布式
python
hdfs
kafka
集群安装
部署(最详细 zookeeper+kafka+生产者消费者验证)
目录Kafka集群规划一.Zookeeper集群准备1.下载2.解压并修改目录名称3.创建data和dataLog目录4.创建myid文件5.修改配置文件zoo.cfg6.赋权7.把修改的zookeeper目录复制到另外两个节点上8.启动和测试集群9.故障排查二.安装Kafka1.下载2.解压3.修改配置文件4.将kafka目录分发到另外两台服务器上5.启动集群6.验证Kafka集群规划Zooke
BoomLee
·
2023-11-05 23:53
kafka
大数据
kafka
zookeeper
使用Hadoop命令行执行jar包详解(生成jar、将文件上传到dfs、执行命令、下载dfs文件至本地)
中使用Hadoop伪分布模式开发配置及简单程序示例(Linux下)2、使用Hadoop命令行执行jar包详解(生成jar、将文件上传到dfs、执行命令、下载dfs文件至本地)3、Hadoop完全分布式
集群安装
及配置
nana-li
·
2023-11-05 20:20
Hadoop
hadoop
jar包执行
dfs文件上传
dfs文件下载
K8S知识点(四)
(1)环境搭建-
集群安装
查看所需镜像定义下载镜像循环下载镜像:下载完成之后:查看一下镜像,名字也已经改成了k8s的名字集群初始化只在master节点上运行,出现sucessfully表示成功,提示要运行几条命令
喵俺第一专栏
·
2023-11-05 18:03
#
kubernetes
容器
云原生
minio之
集群安装
docker版
一、环境介绍采用两台linux机器,安装集群版本minio。docker安装的minio集群,可以使用文件夹代替磁盘,原生安装minio集群数据目录必须使用空的整块磁盘。集群版本也使用的纠删码维护数据,保证了数据备份(虽然只是在文件夹中),单机版本不会使用纠删码。生产环境建议还是使用一个数据目录一块磁盘。机器IP数据目录192.168.75.124/data1/data2192.168.75.12
神云瑟瑟
·
2023-11-05 15:14
minio
docker
容器
minio
集群
Kafka实战:集群SSL加密认证和配置(最新版kafka-2.4.0)
请公众号留言;如果您觉得“大数据开发运维架构”对你有帮助,欢迎转发朋友圈从微信公众号拷贝过来,格式有些错乱,建议直接去公众号阅读一、概述:Kafka集群的安装配置请参考我的上一篇文章:Kafka入门:
集群安装
部署
大数据开发运维架构
·
2023-11-04 01:22
flink
集群安装
教程
首先准备三台linux机器,一种一台作为JobManager,两台作为TaskManager1、官方下载地址。选择需要的版本号2、我选择的是最新版1.14.0,scala版本是2.12最新版本3、可以使用wget下载wgethttps://www.apache.org/dyn/closer.lua/flink/flink-1.14.4/flink-1.14.4-bin-scala_2.12.tgz
亮亮同學
·
2023-11-03 03:21
linux
java开发
大数据
java
flink
linux
Cassandra
Java堆外内存排查经历全记录
背景最近准备上线
cassandra
这个产品,同事在做一些小规格ECS(8G)的压测。压测时候比较容易触发OOMKiller,把
cassandra
进程干掉。
银河系李老幺
·
2023-11-02 06:25
java
堆外内存
查看
liunx实战应用~redis安装
今天在写毕设的时候,突然想在毕设项目中增加缓存这个东西,来减轻数据库的压力,就简单的研究了下redis的单独安装与
集群安装
,本项目只是在一个云服务器上安装用到的是本地的东西。
胖琪的升级之路
·
2023-11-01 22:59
redis
liunx-聊天室
redis
数据库
centos
应用
云服务器
mac 配置 k8s 开发环境(安装go、docker、kubectl、minikube、kind,配置 goland)
brew命令使用安装go1.mac环境brew安装安装很简单配置环境变量**参考**首先明确环境变量的含义配置GOROOT和GOPATH配置goland2.linux环境脚本安装golang安装自用k8s
集群安装
oceanweave
·
2023-11-01 11:16
Kubernetes学习笔记
环境配置
golang
docker
kubernetes
联邦
集群安装
准备工作总结:联邦必须依托一套主的K8S集群,无法将联邦的控制平面独立出来联邦参加实质上可以理解为数据库的主从同步,在V2版本中支持同步的类型有(ConfigMap,Deployment,Ingress,Jobs,Namespace,Secret,ServiceAccount,Service,CRD准备两套k8s集群1、安装helmv3,使其安装kubefedwgethttps://get.hel
朱溪江
·
2023-11-01 07:17
k3s安装使用
文章目录k3s单机安装报错:1.container-selinux软件包版本不匹配的问题验证安装是否成功【TODO】
集群安装
:AutoK3skubectl连接1.本机访问2.远程机器访问部署KubernetesDashboardv2.71
xyc1211
·
2023-11-01 02:14
服务器部署
云原生
服务器
linux
k8s
RocketMq
集群安装
&整合Springboot
目录一、RocketMQ介绍二、名词解释三、安装安装方式准备工作传统方式搭建RocketMQ集群四、整合Springboot一、RocketMQ介绍RocketMQ是一款分布式消息中间件,最初是由阿里巴巴消息中间件团队研发并大规模应用于生产系统,满足线上海量消息堆积的需求,在2016年底捐赠给Apache开源基金会成为孵化项目,经过不到一年时间正式成为了Apache顶级项目;早期阿里曾经基于Act
熟透的蜗牛
·
2023-11-01 00:43
MQ消息中间件
spring
boot
java
Rocketmq
消息中间件
docker consul
consulConsul的作用Consul-template概述registrator的作用(自动发现)实验部署部署consul服务器拖入安装包并安装查看集群信息通过httpapi获取集群信息容器服务自动加入consul
集群安装
LINGYUEMM
·
2023-10-31 22:56
五个向量搜索中的难题,以及我们在
Cassandra
中如何解决它们
由于检索增强生成(RAG)如FLARE帮助LLMs加入最新的、定制的信息同时避免幻觉,所以向量搜索是生成性AI工具的关键组成部分。同时,向量搜索是一个功能,而不是一个产品-您需要查询与您其他数据相关的向量,而不是孤立地查询,您不应该需要构建一个流水线来同步其余的数据与一个向量存储。2023年,向量搜索产品和项目经历了爆炸式的增长,选择其中的一个变得极为困难。在研究这些选项时,您需要考虑以下难题以及
沃趣数据库管理平台
·
2023-10-31 16:06
向量数据库
技术专栏
数据库
图搜索
云原生
云计算
TiDB
集群安装
安装TiDBTiDB需要安装TiKV,RocksDB,PD等软件。环境Ubuntu14.04.4(64bit)编译二进制文件二进制程序如tidb-server,tikv-server,pd-server都可以在一台主机上编译后分发到其它主机上去,只要保持主机环境基本一致即可。而RocksDB是编译成动态库文件,在不同主机上共享比较麻烦(甚至无法共享?),所以建议每台放置TiKV组件的主机上都进行一
hiekay
·
2023-10-31 04:09
k8s-01. k8s
集群安装
k8s-01.k8s
集群安装
个人学习安装笔记内容来自视频教程尚硅谷k8s教程1.安装环境准备(所有节点)准备了三台测试服务器,centos7(适用于ubuntu,差异点已另外说明)1.1修改服务器主机名
董不懂22
·
2023-10-30 23:34
k8s
kubernetes
docker
容器
kubeadm 部署 k8s 集群
172.27.0.13)2C/4Gk8s-masterCentOS7.9(172.27.0.10)2C/4Gk8s-work1CentOS7.9(172.27.0.11)2C/4Gk8s-work2注:这是演示k8s
集群安装
的实验环境
云计算-Security
·
2023-10-30 23:01
云原生
k8s
kubernetes
docker
devops
容器
windows平台使用Docker搭建分布式Spark 与 hadoop集群
若不关心具体搭建过程,只想运行分布式集群,请直接前往3.2开始(本人已上传镜像至服务器)续前节windows平台使用Docker搭建分布式hadoop
集群安装
分布式Spark篇1.运行windows平台使用
CMCST
·
2023-10-30 18:10
spark
BigData学习日志
hadoop
spark
分布式
CentOS7.9环境Mongodb详细的
集群安装
分片+副本
前言官方文档:https://www.mongodb.com/docs/(可以参考)一,安装说明1.1环境说明1、首先确定部署的环境,确定下服务器的端口,一般默认是22的端口;2、操作系统Centos7.9;3、数据库mongodb-linux-x86_64-rhel70-4.2.18。1.2集群介绍先了解几个概念:路由,分片、分本机、配置服务的等。架构图如下:mongos,数据库集群请求的入口,
msh6453
·
2023-10-30 12:58
mongodb
数据库
nosql
centos
Redis(2)集群redis-cluster & redis主从同步
redis-cluster&redis主从同步Redis(3)内存回收原理,及内存过期淘汰策略详解Redis(4)阿里云-开发规范Redis(5)n种妙用,不仅仅是缓存阿里云redis集群公网访问和cluster
集群安装
设计原则和初衷性能
大神,快来碗里
·
2023-10-30 12:08
redis
redis
redis-cluster
redis主从同步
大数据笔记-关于
Cassandra
的删除问题
Cassandra
是Facebook开源的一个NoSQL数据库,它除了具备一般的NoSQL分布式数据库特点以外,最大的一个特点是去中心化架构设计,这和HadoopHDFS/HBase等不一样,比如HDFS
鬓戈
·
2023-10-30 06:48
大数据
大数据
笔记
TiDB安装简介
文章目录一、TiDB概述1、简介2、OLAP和OLTP3、与MySQL兼容性二、架构三、安装1、本地版安装2、单机版
集群安装
2.1概述2.2安装2.3访问集群3、配置文件地址四、使用方式1、基础SQL2
ha_lydms
·
2023-10-30 06:34
大数据
tidb
数据库
大数据
巧用 Prometheus 监控 Kubernetes 集群所有组件的证书
虽然提供了运维友好的向导式操作界面,简化了Kubernetes的运维操作,但它还是建立在底层Kubernetes之上的,Kubernetes默认的证书有效期都是一年,即使使用KubeKey[1]这样的
集群安装
利器也不能改变这个结果
米开朗基杨
·
2023-10-29 21:30
运维
github
kubernetes
项目管理
分布式存储
Kong API网关使用笔记
背景Kong是基于OpenResty的开源网关,其将API相关信息配置到postgresql或者是
cassandra
。通过lua扩展模块,扩展网关平台的功能。
翘起尾巴的熊
·
2023-10-29 21:46
k8s-
集群安装
1-Kubernetes是什么?1.1常见的云平台IaaS(InfrastructureasaService):基础设施服务,常见平台阿里云。PaaS(platformasaservice):平台即服务,常见平台如新浪云。SaaS(SoftwareasaService):软件即服务,常见平台Office365。Kubernetes(PaaS)是一个可移植的、可扩展的开源平台,用于管理容器化的工作负
guardwhy
·
2023-10-29 19:16
#
K8S
海豚调度器
集群安装
DolphinScheduler(3.1.8)
一、前置准备工作JDK:下载JDK(1.8),安装并配置JAVA_HOME环境变量,并将其下的bin目录追加到PATH环境变量中。如果你的环境中已存在,可以跳过这步。海豚调度器二进制包:下载DolphinScheduler(3.1.8)二进制包数据库:MySQL(5.7)注册中心:ZooKeeper(3.9.0)进程树分析macOS安装pstreeFedora/Red/Hat/CentOS/Ubu
joewdc
·
2023-10-29 18:57
笔记
海豚调度器
K8S
集群安装
与部署(Linux系统)
一、环境说明:CentOS7、三台主机(Master:10.0.0.132、Node1:10.0.0.133、Node2:10.0.0.134)二、准备环境:映射关闭防火墙三、etcd集群配置安装etcd(Master)[root@Master~]#yuminstall-ykubernetes-masteretcdLoadedplugins:fastestmirrorDeterminingfast
Chensay.
·
2023-10-29 06:25
K8S容器管理工具基础
kubernetes
linux
容器
基于
Cassandra
的分布式存储数据一致性算法研究
基于
Cassandra
的分布式存储数据一致性算法研究技术报告目录基于
Cassandra
的分布式存储数据一致性算法研究技术报告一、分布式数据一致性概述1.1CAP定理1.2BASE理论1.3分布式数据服务中的不同一致性级别二
NCU_CS_丶Xin
·
2023-10-29 05:04
Cassandra
分布式
数据一致性
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他