E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
trino集群安装
ceph-deploy在线安装ceph(Ubuntu18)
文章目录准备安装出错重来方法安装ceph-deploy配置各节点的静态IP和hosts安装chrony和openssh-server(所有节点)创建有sudo权限的用户(所有节点)免密登陆配置关闭防火墙安装ceph集群创建
集群安装
包初始化
零起跑线
·
2023-11-06 21:04
ceph
ubuntu
linux
ubuntu
ceph
linux
ActiveMQ-5.15基于zookeeper+levelDB的Master-Slave
集群安装
配置
安装目标:服务器tcp链接端口管控台端口集群通信端口192.168.1.11161616816162621192.168.1.11261616816162621192.168.1.11361616816162621前提条件:各服务器安装jre环境(这里装的activemq5.15.9需要jre1.8环境)zookeeper集群环境安装步骤:1增加activemq用户:(分别在192.168.1.1
灯塔kg
·
2023-11-06 05:09
消息队列
activemq
消息队列
hadoop
集群安装
_已搭建好_可直接使用
已经搭建好的三台hadoop集群,下载可直接使用的hadoop完全分布式集群,环境搭建、集群配置已完成。学自尚硅谷_大海哥(集群资源会放在文章末尾的百度网盘链接中,可直接下载使用,有71.3个G)下好之后用VMwareWorkstationPro打开该文件夹密码为:2435huang4a4!(用户名和密码可自行修改)登入到虚拟机主页面后,我们需要打开虚拟机终端进行以下操作:(1)修改克隆虚拟机的静
hys_guff
·
2023-11-06 05:15
大数据开发学习
hadoop
java
linux
大数据
分布式
python
hdfs
dbeaver 连接
trino
出现Datasource was invalidated
dbeaver连接
trino
出现Datasourcewasinvalidated问题描述,如图所示:连接测试通过,但是无法访问数据库解决1.首先是看自己的dbeaver连接配置是否有问题2.看驱动配置是否
一名正在努力的大数据learner
·
2023-11-06 00:14
数据
大数据
数据库
postgresql
hive
kafka
集群安装
部署(最详细 zookeeper+kafka+生产者消费者验证)
目录Kafka集群规划一.Zookeeper集群准备1.下载2.解压并修改目录名称3.创建data和dataLog目录4.创建myid文件5.修改配置文件zoo.cfg6.赋权7.把修改的zookeeper目录复制到另外两个节点上8.启动和测试集群9.故障排查二.安装Kafka1.下载2.解压3.修改配置文件4.将kafka目录分发到另外两台服务器上5.启动集群6.验证Kafka集群规划Zooke
BoomLee
·
2023-11-05 23:53
kafka
大数据
kafka
zookeeper
使用Hadoop命令行执行jar包详解(生成jar、将文件上传到dfs、执行命令、下载dfs文件至本地)
中使用Hadoop伪分布模式开发配置及简单程序示例(Linux下)2、使用Hadoop命令行执行jar包详解(生成jar、将文件上传到dfs、执行命令、下载dfs文件至本地)3、Hadoop完全分布式
集群安装
及配置
nana-li
·
2023-11-05 20:20
Hadoop
hadoop
jar包执行
dfs文件上传
dfs文件下载
K8S知识点(四)
(1)环境搭建-
集群安装
查看所需镜像定义下载镜像循环下载镜像:下载完成之后:查看一下镜像,名字也已经改成了k8s的名字集群初始化只在master节点上运行,出现sucessfully表示成功,提示要运行几条命令
喵俺第一专栏
·
2023-11-05 18:03
#
kubernetes
容器
云原生
minio之
集群安装
docker版
一、环境介绍采用两台linux机器,安装集群版本minio。docker安装的minio集群,可以使用文件夹代替磁盘,原生安装minio集群数据目录必须使用空的整块磁盘。集群版本也使用的纠删码维护数据,保证了数据备份(虽然只是在文件夹中),单机版本不会使用纠删码。生产环境建议还是使用一个数据目录一块磁盘。机器IP数据目录192.168.75.124/data1/data2192.168.75.12
神云瑟瑟
·
2023-11-05 15:14
minio
docker
容器
minio
集群
《Presto(
Trino
)——The Definitive Guide》CHAPTER 6 Connectors Advanced CHAPTER 7 Connector Examples
Presto(暂译:普雷斯托)系列文章目录-CHAPTER6ConnectorsThisbookprovidesagreatintroductiontoPrestoandteachesyoueverythingyouneedtoknowtostartyoursuccessfulusageofPresto.—DainSundstromandDavidPhillips,CreatorsofthePre
爱学大树锯
·
2023-11-04 06:53
presto
presto
trino
Kafka实战:集群SSL加密认证和配置(最新版kafka-2.4.0)
请公众号留言;如果您觉得“大数据开发运维架构”对你有帮助,欢迎转发朋友圈从微信公众号拷贝过来,格式有些错乱,建议直接去公众号阅读一、概述:Kafka集群的安装配置请参考我的上一篇文章:Kafka入门:
集群安装
部署
大数据开发运维架构
·
2023-11-04 01:22
flink
集群安装
教程
首先准备三台linux机器,一种一台作为JobManager,两台作为TaskManager1、官方下载地址。选择需要的版本号2、我选择的是最新版1.14.0,scala版本是2.12最新版本3、可以使用wget下载wgethttps://www.apache.org/dyn/closer.lua/flink/flink-1.14.4/flink-1.14.4-bin-scala_2.12.tgz
亮亮同學
·
2023-11-03 03:21
linux
java开发
大数据
java
flink
linux
Trino
源码Gitlab CICD单测环境搭建
在中大型公司,由于对
Trino
源码的定制魔改量越来越大,会随着时间推移而增大出现冷门bug的概率,所以需要建立一套自动测试机制,在魔改源码合入主分支时可以自动触发testcase,通过特定单测的执行失败
书忆江南
·
2023-11-03 03:49
Presto
gitlab
ci
presto
trino
单元测试
liunx实战应用~redis安装
今天在写毕设的时候,突然想在毕设项目中增加缓存这个东西,来减轻数据库的压力,就简单的研究了下redis的单独安装与
集群安装
,本项目只是在一个云服务器上安装用到的是本地的东西。
胖琪的升级之路
·
2023-11-01 22:59
redis
liunx-聊天室
redis
数据库
centos
应用
云服务器
mac 配置 k8s 开发环境(安装go、docker、kubectl、minikube、kind,配置 goland)
brew命令使用安装go1.mac环境brew安装安装很简单配置环境变量**参考**首先明确环境变量的含义配置GOROOT和GOPATH配置goland2.linux环境脚本安装golang安装自用k8s
集群安装
oceanweave
·
2023-11-01 11:16
Kubernetes学习笔记
环境配置
golang
docker
kubernetes
联邦
集群安装
准备工作总结:联邦必须依托一套主的K8S集群,无法将联邦的控制平面独立出来联邦参加实质上可以理解为数据库的主从同步,在V2版本中支持同步的类型有(ConfigMap,Deployment,Ingress,Jobs,Namespace,Secret,ServiceAccount,Service,CRD准备两套k8s集群1、安装helmv3,使其安装kubefedwgethttps://get.hel
朱溪江
·
2023-11-01 07:17
k3s安装使用
文章目录k3s单机安装报错:1.container-selinux软件包版本不匹配的问题验证安装是否成功【TODO】
集群安装
:AutoK3skubectl连接1.本机访问2.远程机器访问部署KubernetesDashboardv2.71
xyc1211
·
2023-11-01 02:14
服务器部署
云原生
服务器
linux
k8s
RocketMq
集群安装
&整合Springboot
目录一、RocketMQ介绍二、名词解释三、安装安装方式准备工作传统方式搭建RocketMQ集群四、整合Springboot一、RocketMQ介绍RocketMQ是一款分布式消息中间件,最初是由阿里巴巴消息中间件团队研发并大规模应用于生产系统,满足线上海量消息堆积的需求,在2016年底捐赠给Apache开源基金会成为孵化项目,经过不到一年时间正式成为了Apache顶级项目;早期阿里曾经基于Act
熟透的蜗牛
·
2023-11-01 00:43
MQ消息中间件
spring
boot
java
Rocketmq
消息中间件
docker consul
consulConsul的作用Consul-template概述registrator的作用(自动发现)实验部署部署consul服务器拖入安装包并安装查看集群信息通过httpapi获取集群信息容器服务自动加入consul
集群安装
LINGYUEMM
·
2023-10-31 22:56
TiDB
集群安装
安装TiDBTiDB需要安装TiKV,RocksDB,PD等软件。环境Ubuntu14.04.4(64bit)编译二进制文件二进制程序如tidb-server,tikv-server,pd-server都可以在一台主机上编译后分发到其它主机上去,只要保持主机环境基本一致即可。而RocksDB是编译成动态库文件,在不同主机上共享比较麻烦(甚至无法共享?),所以建议每台放置TiKV组件的主机上都进行一
hiekay
·
2023-10-31 04:09
k8s-01. k8s
集群安装
k8s-01.k8s
集群安装
个人学习安装笔记内容来自视频教程尚硅谷k8s教程1.安装环境准备(所有节点)准备了三台测试服务器,centos7(适用于ubuntu,差异点已另外说明)1.1修改服务器主机名
董不懂22
·
2023-10-30 23:34
k8s
kubernetes
docker
容器
kubeadm 部署 k8s 集群
172.27.0.13)2C/4Gk8s-masterCentOS7.9(172.27.0.10)2C/4Gk8s-work1CentOS7.9(172.27.0.11)2C/4Gk8s-work2注:这是演示k8s
集群安装
的实验环境
云计算-Security
·
2023-10-30 23:01
云原生
k8s
kubernetes
docker
devops
容器
windows平台使用Docker搭建分布式Spark 与 hadoop集群
若不关心具体搭建过程,只想运行分布式集群,请直接前往3.2开始(本人已上传镜像至服务器)续前节windows平台使用Docker搭建分布式hadoop
集群安装
分布式Spark篇1.运行windows平台使用
CMCST
·
2023-10-30 18:10
spark
BigData学习日志
hadoop
spark
分布式
CentOS7.9环境Mongodb详细的
集群安装
分片+副本
前言官方文档:https://www.mongodb.com/docs/(可以参考)一,安装说明1.1环境说明1、首先确定部署的环境,确定下服务器的端口,一般默认是22的端口;2、操作系统Centos7.9;3、数据库mongodb-linux-x86_64-rhel70-4.2.18。1.2集群介绍先了解几个概念:路由,分片、分本机、配置服务的等。架构图如下:mongos,数据库集群请求的入口,
msh6453
·
2023-10-30 12:58
mongodb
数据库
nosql
centos
Redis(2)集群redis-cluster & redis主从同步
redis-cluster&redis主从同步Redis(3)内存回收原理,及内存过期淘汰策略详解Redis(4)阿里云-开发规范Redis(5)n种妙用,不仅仅是缓存阿里云redis集群公网访问和cluster
集群安装
设计原则和初衷性能
大神,快来碗里
·
2023-10-30 12:08
redis
redis
redis-cluster
redis主从同步
TiDB安装简介
文章目录一、TiDB概述1、简介2、OLAP和OLTP3、与MySQL兼容性二、架构三、安装1、本地版安装2、单机版
集群安装
2.1概述2.2安装2.3访问集群3、配置文件地址四、使用方式1、基础SQL2
ha_lydms
·
2023-10-30 06:34
大数据
tidb
数据库
大数据
巧用 Prometheus 监控 Kubernetes 集群所有组件的证书
虽然提供了运维友好的向导式操作界面,简化了Kubernetes的运维操作,但它还是建立在底层Kubernetes之上的,Kubernetes默认的证书有效期都是一年,即使使用KubeKey[1]这样的
集群安装
利器也不能改变这个结果
米开朗基杨
·
2023-10-29 21:30
运维
github
kubernetes
项目管理
分布式存储
k8s-
集群安装
1-Kubernetes是什么?1.1常见的云平台IaaS(InfrastructureasaService):基础设施服务,常见平台阿里云。PaaS(platformasaservice):平台即服务,常见平台如新浪云。SaaS(SoftwareasaService):软件即服务,常见平台Office365。Kubernetes(PaaS)是一个可移植的、可扩展的开源平台,用于管理容器化的工作负
guardwhy
·
2023-10-29 19:16
#
K8S
使用 SQL 的方式查询消息队列数据以及踩坑指南
消息列表点击详情后查看轨迹原理介绍由于Pulsar并没有关系型数据库中表的概念,所有的数据都是存储在Bookkeeper中,为了模拟使用SQL查询的效果Pulsar提供了Presto(现在已经更名为
Trino
架构大数据双料架构师
·
2023-10-29 18:13
sql
数据库
海豚调度器
集群安装
DolphinScheduler(3.1.8)
一、前置准备工作JDK:下载JDK(1.8),安装并配置JAVA_HOME环境变量,并将其下的bin目录追加到PATH环境变量中。如果你的环境中已存在,可以跳过这步。海豚调度器二进制包:下载DolphinScheduler(3.1.8)二进制包数据库:MySQL(5.7)注册中心:ZooKeeper(3.9.0)进程树分析macOS安装pstreeFedora/Red/Hat/CentOS/Ubu
joewdc
·
2023-10-29 18:57
笔记
海豚调度器
K8S
集群安装
与部署(Linux系统)
一、环境说明:CentOS7、三台主机(Master:10.0.0.132、Node1:10.0.0.133、Node2:10.0.0.134)二、准备环境:映射关闭防火墙三、etcd集群配置安装etcd(Master)[root@Master~]#yuminstall-ykubernetes-masteretcdLoadedplugins:fastestmirrorDeterminingfast
Chensay.
·
2023-10-29 06:25
K8S容器管理工具基础
kubernetes
linux
容器
ElasticSearch系列-
集群安装
(docker compose方式)
集群Cluster相关概念集群一个集群就是由一个或多个节点组织在一起,它们共同持有你整个的数据,并一起提供索引和搜索功能。一个集群由一个唯一的名字标识,这个名字默认就是elasticsearch。这个名字是重要的,因为一个节点只能通过指定某个集群的名字,来加入这个集群。节点一个节点是你集群中的一个服务器,作为集群的一部分,它存储你的数据,参与集群的索引和搜索功能。和集群类似,一个节点也是由一个名字
yue_stack
·
2023-10-28 23:32
后端
开源大数据OLAP引擎最佳实践
一、开源OLAP综述二、开源数仓解决方案三、ClickHouse介绍四、StarRocks介绍五、
Trino
介绍六、客户案例01开源OLAP综述如今的开源数据引擎多种多样,不同种类的引擎满足了我们不同的需求
zhisheng_blog
·
2023-10-28 21:59
运维
大数据
分布式
数据库
java
Elasticsearch7.8.1
集群安装
手册
1.部署说明elasticsearch集群规划为三个节点,elasticsearch版本为7.8.12.下载安装包1)下载Elasticsearch7.8.1安装包#cd/opt#wgethttps://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.8.1-linux-x86_64.tar.gz3.Elasticsearc
明算科
·
2023-10-28 08:16
elasticsearch
运维
elasticsearch
hadoop1.2.1+zookeeper-3.4.5+hbase-0.94.1
集群安装
一,环境:1,主机规划:集群中包括3个节点:hadoop01为Master,其余为Salve,节点之间局域网连接,可以相互ping通。机器名称IP地址hadoop01192.168.1.31hadoop02192.168.1.32hadoop03192.168.1.33三个节点上均是CentOS6.3x86_64系统,并且有一个相同的用户hadoop。hadoop01做为master配置NameN
浮生(FS)
·
2023-10-28 07:04
hadoop+Hbase
hadoop集群
分布式应用
zookeeper
hbase
redis-cluster
集群安装
配置及SpringBoot + redis-cluster配置
一、redis-cluster安装环境简述redis-cluster集群模式:三主三从服务器信息:linux-centos7,三台服务器,每台服务器两个redis节点redis版本:redis-7.0.4服务器IP及redis端口:192.168.1.1:7000,192.168.1.1:7001;192.168.1.2:7002,192.168.1.2:7003;192.168.1.3:7004
程序猿vs码农
·
2023-10-27 12:09
redis
spring
boot
数据库
CQ 社区版 V2.5.0 发布 | 开放在线试用、自定义高危操作、新增数据源Phoenix、
Trino
等
本次更新快览:新增数据源:Phoenix、
Trino
新增自定义高危操作数据变更功能新增数据备份、整体事务、消息通知用户管理新增批量操作系统设置新增密码强度设置、短信复核登录、IP访问规则设置……首先带来的第一个好消息
BinTools图尔兹
·
2023-10-27 06:15
版本发布
服务器
运维
数据库
数据管控
数据安全
安全
数据库安全
直播预约 | CQ课堂 社区版V2.5.0新功能操作演示
开放在线体验环境新增数据源:Phoenix、
Trino
新增自定义高危操作数据变更功能新增数据备份、整体事务、消息通知……以上新增功能的操作及正确打开方式就在11月1日晚19:00视频号「BinTools
BinTools图尔兹
·
2023-10-27 06:44
数据库
数据管控
数据安全
安全
kubernates 集群实战-安装K3s集群
安装K3s
集群安装
K3s集群环境准备安装docker主节点安装work节点验证环境安装K3s集群K3S是一种轻量级的Kubernetes发行版,安装和运行只需要一个二进制文件。
东方鲤鱼
·
2023-10-26 06:58
kubernates
1024程序员节
kafka3.X
集群安装
(不使用zookeeper)
参考:【kafka专栏】不用zookeeper怎么安装kafka集群-最新kafka3.0版本一、kafka集群实例角色规划在本专栏的之前的一篇文章《kafka3种zk的替代方案》已经为大家介绍过在kafka3.0种已经可以将zookeeper去掉。上图中黑色代表broker(消息代理服务),褐色/蓝色代表Controller(集群控制器服务)左图(kafka2.0):一个集群所有节点都是brok
zhangjunli
·
2023-10-26 06:08
zookeeper
分布式
kafka
【安装】kafka基础(3):kafka 单机与
集群安装
文章目录一.zookeeper安装1.单节点安装1.1.安装1.2.操作zk2.Zk的
集群安装
二.kafka安装1.单机安装2.kafka
集群安装
一.zookeeper安装kafka是依赖zk的,所以需要安装
roman_日积跬步-终至千里
·
2023-10-26 05:18
kafka
kafka
分布式
db_ha
集群安装
后的自动切换及切换后的判断步骤说明文档
瀚高数据库目录环境文档用途详细信息环境系统平台:Linuxx86-64RedHatEnterpriseLinux7版本:4.5.7文档用途本文档用于指导db_ha
集群安装
后的自动切换及切换后的判断步骤详细信息一
瀚高PG实验室
·
2023-10-25 12:53
HighGo
DB之故障处理
数据库
oracle
k8s
集群安装
部署kafka、zookeeper集群
k8s
集群安装
部署kafka、zookeeper集群注:有状态、可持续换集成redis集群有两种部署方式StatefulSetService&Deployment(每个PV的容量根据自己的机器实际情况改写
辛勤汗水@
·
2023-10-25 06:51
Kubernetes
zookeeper
kafka
kubernetes
zookeeper
kafka
Hadoop伪分布式
集群安装
笔记
系统常用配置文件及含义:1、/etc/inittab用于开机是否选择使用图形界面2、/etc/sysconfig/network-scripes/ifcfg-ens33用于配置ip地址3、/etc/hosts设置IP地址与主机名映射,(类似解析域名)4、/etc/profile用于配置环境变量(用于当前机器全局用户)5、/etc/bashrc配置环境变量只用于当前用户在Hadoop配置文件中Had
quguanghui1998
·
2023-10-24 16:11
Hadoop
Linux环境下Redis 集群部署
Linux环境下Redis集群部署1.单机Redis部署2.Redis集群配置2.1创建redis
集群安装
目录2.2将redis单机部署目录下的redis.confi文件复制到每个目录下2.3修改每个文件夹下的
pageniao
·
2023-10-24 15:46
redis
k8s1.20
集群安装
rook-ceph分布式存储方案
一,什么是rook?官网地址:Ceph.io—HomeRook是一个开源云原生存储编排器,为各种存储解决方案提供平台、框架和支持,以便与云原生环境原生集成。Rook将存储软件转变为自我管理、自我扩展和自我修复的存储服务。它通过自动化部署、引导、配置、预配、缩放、升级、迁移、灾难恢复、监视和资源管理来实现这一点。Rook使用底层云原生容器管理、调度和编排平台提供的设施来履行其职责。Rook利用扩展点
努力的祥子
·
2023-10-24 12:09
Ceph
kubernetes
ceph
分布式
查询性能较
Trino
/Presto 3-10 倍提升!Apache Doris 极速数据湖分析深度解读
从上世纪90年代初BillInmon在《buildingtheDataWarehouse》一书中正式提出数据仓库这一概念,至今已有超过三十年的时间。在最初的概念里,数据仓库被定义为「一个面向主题的、集成的、相对稳定的、反映历史变化的数据集合,用于支持管理决策」,而数据湖最初是为了解决数仓无法存储海量且异构的数据而构建的集中式存储系统。时代的发展与用户数据应用诉求的演进,催生了数据架构的不断革新,也
SelectDB技术团队
·
2023-10-23 22:46
apache
数据库
数据仓库
数据分析
数据挖掘
【200页】CDH安装运维手册
摘要:1.200页CDH大数据集群运维手册2.内容涵盖大数据
集群安装
、节点管理、用户管理、资源管理和安全管理目录1.ClouderaManager使用【1】2.配置安装源【2】2.1.配置Linux源【
大数据研习社
·
2023-10-21 18:14
大数据实战精英+架构师
hadoop
big
data
大数据
手把手教你搭建Kafka(带SASL认证)+ELK集群 - 三 Kafka
集群安装
接上一篇手把手教你搭建Kafka(带SASL认证)+ELK集群-二https://blog.csdn.net/lwlfox/article/details/119801897部署Kafka创建kafka用户useraddkafka将kafka_2.13-2.8.0.tgz文件上传到服务器并解压到/data目录中tar-zxvfkafka_2.13-2.8.0.tgz-C/data/&&chown-
一直学下去
·
2023-10-20 13:36
Linux
Kafka
ELK
SASL
Zookeeper
集群安装
Zookeeper
集群安装
3.1集群操作3.1.1⭐
集群安装
3.1.2⭐选举机制3.1.3ZooKeeper集群脚本3.2客户端命令操作集群3.2.1命令行语法3.2.2znode节点数据信息3.2.3
coolcoo1cool
·
2023-10-20 06:40
Zookeeper
zookeeper集群安装
zookeeper选举机制
zookeeper客户端API
Kafka_2.10-0.10.0.0安装配置文档
Kafka
集群安装
指南该文档是建立在已经安装好JAVAJDK的基础上,并且设置好$JAVA_HOME环境变量。
打怪的蚂蚁
·
2023-10-19 19:53
大数据环境
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他