E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
Cassandra集群安装
thingsboard规则引擎统计频率调整
最近将Thingsbaord的数据库模式转换为pgsql+
cassandra
后,惊奇发现thingsboard一直以很高的频率一直进行规则引擎的统计,这就让我压力山大了,想要寻找到调整的地方,经过寻找和不断的实验终于发现最高位置了
Persistence is gold
·
2024-01-11 15:21
数据库
RDD 特性——RDD 的分区和 Shuffle
Shuffle的原理分区的作用RDD使用分区来分布式并行处理数据,并且要做到尽量少的在不同的Executor之间使用网络交换数据,所以当使用RDD读取数据的时候,会尽量的在物理上靠近数据源,比如说在读取
Cassandra
我像影子一样
·
2024-01-10 16:14
Spark
大数据
spark
大数据
Flink
集群安装
部署(Standalone,Yarn模式)
目录一.环境准备二.Flink
集群安装
步骤三.FlinkOnYarn一.环境准备需要提前安装配置JDK,Hadoop二.Flink
集群安装
步骤1.下载安装包下载地址:Indexof/dist/flink
MJK祺
·
2024-01-10 12:03
大数据
hadoop
flink
kafka KRaft 集群搭建
kafkaKRaft
集群安装
包下载https://downloads.apache.org/kafka/3.6.1/kafka_2.13-3.6.1.tgzkafka集群构建好后的数据目录结构[root
liao__ran
·
2024-01-10 11:07
运维
kafka
分布式
日志系统一(elasticsearch+filebeat+logstash+kibana)
目录一、es集群部署安装java环境部署es
集群安装
IK分词器插件二、filebeat安装(docker方式)三、logstash部署四、kibana部署背景:因业务需求需要将nginx、java、ingress
`Liar`
·
2024-01-10 11:25
elasticsearch
大数据
搜索引擎
redis详解
RDBMS:关系型数据库系统Oracle、DB2、PostgreSQL、MySQL、SQLServer...NoSQL:非关系型数据库,又包含四种流派键值存储Memcache、Redis列式存储Hbase、
Cassandra
蒜泥不辣
·
2024-01-10 11:18
redis
数据库
缓存
zookeeper安装和配置
今天来简单介绍一下zookeeper的
集群安装
。
为爱放弃一切
·
2024-01-09 19:44
常见技术选型
MQRocketMQ,RabbitMQ,Kafka,ActiveMQNoSQLRedis,Memcache分布式计算Blink,Storm,SparkDB关系型TiDB,MySQL,MongoDB,
Cassandra
KVLevelDB
独处人
·
2024-01-09 14:46
Kafka集群部署
文章目录一、实例配置二、zookeeper
集群安装
三、kafka
集群安装
四、验证没有提示,所有机器都执行在kafka集群中引入zookeeper,主要是为了管理kafka集群的broker。
real向往
·
2024-01-09 08:55
Kafka
kafka
集群
Elasticsearch集群搭建、优化及实践
文章目录一、Elasticsearch集群1、Elasticsearch集群概念2、Elasticsearch
集群安装
3、安装Kibana4、测试集群状态二、Elasticsearch优化1、磁盘选择2
帅得真的是无敌了
·
2024-01-08 23:28
分布式
Linux部署安装
elasticsearch
搜索引擎
大数据
ElasticSearch学习笔记-
集群安装
部署
集群版本:elasticsearch-2.4.6.tar.gz集群节点:centos.master192.168.10.10centos.slave1192.168.10.11centos.slave2192.168.10.12配置文件elasticsearch.yml:cluster.name:elasticsearchnode.name:masternode.master:truenode.d
人生偌只如初见
·
2024-01-07 13:56
ElasticSearch
ElasticSearch
【Java处理百万级数据的高效方法了解】
1.2分布式存储考虑使用分布式数据库(如HBase、
Cassandra
)或存储系统(如HadoopDistri
無飞
·
2024-01-07 12:21
java
开发语言
es
集群安装
及优化
es主节点192.168.23.100es节点192.168.23.101192.168.23.1021.安装主节点1.去官网下载es的yum包官网下载地址https://www.elastic.co/cn/downloads/elasticsearch根据自己的需要下载对应的包2.下载好之后把所有的包都传到从节点上,安装[root@localhost~]#ansibleall-mcopy-a's
2201_76119904
·
2024-01-07 08:22
elasticsearch
jenkins
大数据
elk
linux
运维
Elastic Search 8.6.2
集群安装
部署
ElasticSearch8.6.2
集群安装
部署Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎,能够解决不断涌现出的各种用例。
悦睹人生
·
2024-01-06 23:31
大数据相关技术
elasticsearch
搜索引擎
大数据
Redis7.2.3
集群安装
,新增节点,删除节点,分配哈希槽,常见问题
概念:【Redis】高可用之三:集群(cluster)-知乎实操:Redis集群三种模式主从模式优势:主节点可读可写从节点只能读(从节点从主节点同步数据)缺点:当主节点挂掉时,此时只提供读服务,没有写入能力,需要人工切换从节点为主节点哨兵模式优势:基于主从模式基础上,增加哨兵节点实现自动故障转移,解决了主从模式的缺点当主节点故障时,哨兵节点会通过Raft算法将故障主节点下的从节点选举为主节点缺点:
Quan7er
·
2024-01-06 18:48
redis
redis集群
macos
VMware
SuperMap分布式数据库实操
SuperMap分布式数据库实操分布式数据库一、MongoDB1.特点2.使用原理3.数据结构4.单节点部署1.下载2.解压安装3.配置开机自启动5.集群部署5.1主从复制集群5.2副本集
集群安装
部署配置开机自启动
会灭火的程序员
·
2024-01-06 15:42
SuperMap
数据库
数据库
分布式
mongodb
hdfs
hbase
非关系型数据库
键值型【key-value】(代表数据库软件:redis、riak)文档型【document】(代表数据库软件:mongodb,couchdb)列存储【bigtables】(代表数据库软件:hbase、
cassandra
鬼谷子001
·
2024-01-06 09:10
向量数据库调研
MongoDB,Redis,
Cassandra
对象数据库数据存储结构比较复杂的应用场景VersantObjectDatabase,Obj
越吃越胖
·
2024-01-06 04:40
大数据专栏
数据库
向量数据库
数据仓库
深度学习实战第11章代码
安装
cassandra
.cqltypes包查看这个issue。
haithink
·
2024-01-04 20:53
深度学习
人工智能
系统有万亿条消息怎么存储?
下图显示了Discord消息存储的演变过程:MongoDB->
Cassandra
->ScyllaDB第一阶段2015年,Discord的第一个版本建立在单个MongoDB之上。
xwhking
·
2024-01-04 16:23
面试
树莓派
集群安装
K9S
在树莓派上安装完成k3s后看到K9S可以快速解决K3S下的日常问题,而且可以UI展示,很有意思.查找资料后进行安装.一.在树莓派上安装K9S配置当前用户k3s的config文件首先确保当前用户下已经配置了.kube/config,如果没有创建采用下面的方法创建$sudocat/etc/rancher/k3s/k3s.yamlapiVersion:v1clusters:-cluster:certif
forrestsun
·
2024-01-04 16:12
cassandra
备份恢复之incremental backups
Cassandra
incrementalbackups介绍本文会就与
cassandra
备份恢复相关的模块进行系列介绍,大概包括:incrementalbackups;snapshot;nodetool相关
maxwellguo
·
2024-01-03 18:19
深入浅出
Cassandra
:架构与组件解析
Apache
Cassandra
是一个分布式数据库系统,它具有高可扩展性、高可用性和高性能等特点,已经被广泛应用于各种行业。
OpenChat
·
2024-01-03 17:39
大数据
人工智能
语言模型
AI
LLM
Java
Python
架构设计
Agent
RPA
Spark大数据分析与实战笔记(第二章 Spark基础-02)
文章目录每日一句正能量章节概要2.2搭建Spark开发环境2.2.1环境准备2.2.2Spark的部署方式2.2.3Spark
集群安装
部署一、Spark下载二、Spark安装三、环境变量配置2.2.4SparkHA
想你依然心痛
·
2024-01-03 09:14
#
Spark大数据分析与实战
spark
数据分析
笔记
RKE安装k8s及部署高可用rancher
一了解Rancher1推荐架构安装Rancher的方式有两种:单节点安装和高可用
集群安装
。
Michaelwubo
·
2024-01-03 06:30
kubernetes
rancher
容器
DEVOPS架构师 -- 02Kubernetes落地实践之旅
文章目录第二天Kubernetes落地实践之旅纯容器模式的问题容器调度管理平台架构图核心组件工作流程架构设计的几点思考实践--
集群安装
k8s集群主流安装方式对比分析核心组件理解集群资源kubectl的使用实践
FikL-09-19
·
2024-01-02 19:41
DEVOPS架构师
kubernetes
devops
运维
Cassandra
详解
Cassandra
概念Apache
Cassandra
是高度可扩展的,高性能的分布式NoSQL数据库。
Cassandra
旨在处理许多商品服务器上的大量数据,提供高可用性而无需担心单点故障。
武昌库里写JAVA
·
2023-12-31 17:15
高手面试
Cassandra
nosql
Hadoop完全分布式搭建 - 第二章 CentOS
集群安装
配置
CentOS7.6.1080一些其他博主的参考+原创一、准备工作将安装好的CentOS7克隆多两台出来关闭防火墙:systemctlstopfirewalld.service禁用防火墙:systemctldisablefirewalld.service查看防火墙状态firewall-cmd--state重启reboot二、实现三台机器ssh免密登录前提:确保三台机的名称与IP1.修改IP(设置为手
Dehan.Dan
·
2023-12-30 07:29
c#与redis-window下redis
集群安装
第一步:在Redis下载,由于redis(官网https://redis.io/)是在linux上开发出来的,官网上没有下载windows版本的地址,不过github上有,请按照如图所示进行下载。登录redis官网https://redis.io/导航到download页面,并找到下面这段话:WindowsTheRedisprojectdoesnotofficiallysupportWindows
weixin_30446613
·
2023-12-29 19:00
c#
数据库
操作系统
Spring Boot 2.X 实战教程(16)使用NoSQL 技术
16.使用NoSQL技术SpringData提供了其他项目,可帮助您访问各种NoSQL技术,包括:MongoDB,Neo4J,Elasticsearch,Solr,Redis,Gemfire,
Cassandra
大华博客
·
2023-12-28 12:03
k8s二进制部署v1.22.1
2.1hostname2.2hosts2.3swapoff2.4chrony2.5limits2.6ipvs2.7sysctl2.8ssh2.9sources3高可用3.1haproxy3.2keepalived4
集群安装
ch.ran
·
2023-12-28 02:30
k8s
k8s
国产全链路监控工具Skywalking
首先是安装ES的集群环境,这里可以参照我之前的文章Es
集群安装
填坑记然后是
伦文聚
·
2023-12-26 16:01
六:Spark
集群安装
和部署
写在前面:1.我的系统配置:(1)安装一个虚拟机:三个ubuntu16.04系统;(2)Master节点:内存分配2g;Slave1节点:内存分配512MB;Slave2节点:内存分配512MB;2.安装路径:(1)Hadoop2.6.5:/usr/local/;(2)Spark2.6.0:/usr/local/;(3)Scala2.11.7:/usr/;(4)Jdk1.8.0_151:/usr/
玉成226
·
2023-12-26 10:21
spark
es7.13.2
集群安装
失败报错处理
ERROR:[2]bootstrapchecksfailed.Youmustaddressthepointsdescribedinthefollowing[2]linesbeforestartingElasticsearch.bootstrapchecksfailed[1]of[2]:memorylockingrequestedforelasticsearchprocessbutmemoryisn
tebukaopu148
·
2023-12-26 08:11
运维
es
【大数据学习笔记】最全Python连接各种数据库及对应的CRUD操作
我们将逐一解析连接MySQL,SQLServer,Oracle,PostgreSQL,MongoDB,SQLite,DB2,Redis,
Cassandra
,MicrosoftAccess,ElasticSearch
伊达
·
2023-12-25 14:54
大数据
Python
python
mysql
database
sql
简介及windows下安装
Cassandra
图文教程
Cassandra
是一个混合型的非关系的数据库,类似于Google的BigTable。
xinlanzero
·
2023-12-25 08:29
数据库
Cassandra
Windows
Apache
数据结构
log4j
零基础搭建k8s集群(二)- 依赖软件安装
关联文章列表零基础搭建k8s集群(一)-基础准备零基础搭建k8s集群(二)-依赖软件安装零基础搭建k8s集群(三)-提前放行相关的网络端口零基础搭建k8s集群(四)-构建k8s
集群安装
Docker#安装依赖包
不认输的猴
·
2023-12-24 23:54
k8s的探索之路
分布式
高可用
kubernetes
容器
云原生
大数据高级开发工程师——Hadoop学习笔记(1)
文章目录Hadoop基础篇Hadoop
集群安装
环境准备服务器准备设置时钟同步三台虚拟机添加普通用户三台虚拟机定义统一目录三台虚拟机hadoop用户设置免密登录三台虚拟机安装jdkhadoop
集群安装
环境部署规划安装包下载查看
讲文明的喜羊羊拒绝pua
·
2023-12-24 08:53
大数据
大数据
hadoop
hdfs
集群
zookeeper
Pytorch项目,肺癌检测项目之四
#安装图像处理的两个包simpleITK和ipyvolume#安装缓存相关的两个包diskcache和
cassandra
-driverimportgzipfromdiskcacheimportFanoutCache
永远的HelloWorld
·
2023-12-24 05:06
大模型
AI大模型
pytorch
人工智能
python
hadoop 3.3.3
集群安装
部署
前言大数据开发涉及的组件和方向比较多,由于之前项目使用的都是成熟的大数据产品CDH或者HDP,里面封装了多个大数据组件,对于企业而言,无论是体验还是维护都比较友好,但对于开发人员来说,太过于集成,反而不太好了解各个组件具体的配置细节,本篇文章就从hadoop开始来深入探讨。提示:以下案例仅供参考一、hadoop简介hadoop从发布至今,已经更新到第三个大版本,除了从1.0到2.0版本有着非常大的
以茉萱
·
2023-12-24 02:18
hadoop
大数据
分布式
Cassandra
配置详解
在
Cassandra
集群中,每一台节点都需要加入集群,如果名称不一致,则
开发实习生
·
2023-12-23 09:17
大数据运维监控
大数据技术栈
cassandra
1.RocketMQ
集群安装
1、集群部署概述1.1、RocketMQ部署结构图:image.png各部分说明:(1)Producer:生产者(2)Consumer:消费者(3)NameServer:RockerMQ的注册中心,多个实例组成集群,但相互独立,没有信息交换。每个Broker都向所有NameServer实例注册。(4)Broker:负责存储消息、转发消息。1.2、RockerMQ集群部署方式NameServer集群
不断学习的Java码农
·
2023-12-22 22:01
MongoDB之
集群安装
部署与shard操作
近期在设计用户标签系统当中,采用了mongodb作为标签体系的底层主要的存储系统,因此在这里先尝试下有关mongodb的shard方式集群方式安装与测试:一.环境部署:1.1版本:MongoDB版本:mongodb-linux-x86_64-2.6.7jdk版本:version1.71.2相关路径:安装路径:/data/server/mongodb-2.6.7日志路径:/data/data-dir
Michael_Shentu
·
2023-12-22 10:34
mongodb
数据库
ZooKeeper-3.4.9
集群安装
配置及注意事项
ZooKeeper是一个分布式开源框架,提供了协调分布式应用的基本服务,它向外部应用暴露一组通用服务——分布式同步(DistributedSynchronization)、命名服务(NamingService)、集群维护(GroupMaintenance)等,简化分布式应用协调及其管理的难度,提供高性能的分布式服务。ZooKeeper本身可以以Standalone模式安装运行,不过它的长处在于通过
kamereon
·
2023-12-22 09:21
hadoop
REDIS
集群安装
运维调优及常见问题处理
上篇详细阐述了redis集群的安装搭建以及集群监控变更相关运维操作,本篇继续对redis集群调优和常见问题的解决进行介绍。一、集群调优1.1Linux内存内核参数优化:Vm.overcommit_memory参数说明:文件指定了内核针对内存分配的策略,其值可以是0、1、2。0:表示内核将检查是否有足够的可用内存供应用进程使用;如果有足够的可用内存,内存申请允许;否则,内存申请失败,并把错误返回给应
IT巅峰技术
·
2023-12-21 21:04
Redis
中间件
架构师
redis
分布式
zookeeper集群搭建,蹲坑的时间zookeeper学好了
第三章Zookeeper
集群安装
操作3.1
集群安装
3.2配置zookeeper3.3分别启动三台机器的zookeeper。
懒人三十
·
2023-12-21 15:22
中间件/消息中间件/负载
linux系统
云计算
zookeeper
云原生
linux
Kafka
集群安装
部署(自带zookeeper)
•Kafka将消息以topic为单位进行归纳。•将向Kafkatopic发布消息的程序成为producers.•将预订topics并消费消息的程序成为consumer.•Kafka以集群的方式运行,可以由一个或多个服务组成,每个服务叫做一个broker.producers通过网络将消息发送到Kafka集群,集群向消费者提供消息,如下图所示:客户端和服务端通过TCP协议通信。Kafka提供了Java
magic33416563
·
2023-12-21 14:16
kafka
java-zookeeper
zookeeper
mongodb的单机和
集群安装
手册
Mongodb的单机安装1.下载镜像dockerpullmongo:latest2.启动镜像dockerrun-itd--namemongo-p27017:27017mongo--auth3.进入容器dockerexec-itmongo/bin/bash4.进入mongoMongodb#进入mongoshell5.切换到admin数据库useadmin6.创建超级用户db.createUser({
环道逆行者
·
2023-12-21 07:00
mongodb
数据库
【K8s】#1使用kuboard-spray安装K8s集群
配置要求2.2.操作系统兼容性2.3.安装Kuboard-Spray2.4.加载离线资源包2.5.规划并安装集群2.6.安装成功2.7.访问集群3.涉及的命令3.1.linux4.问题汇总Q1:启动离线
集群安装
报错
暴躁的菜鸡
·
2023-12-21 03:21
服务器
容器技术
#
K8s
kubernetes
容器
云原生
kuboard
【安装部署】K8S
集群安装
(kubernetes1.27)
一、前置准备安装部署环境:操作系统:centos7.9k8s版本:kubernetes1.271.1基础设置1、更新centos源sed-e's|^mirrorlist=|#mirrorlist=|g'\-e's|^#baseurl=http://mirror.centos.org/centos|baseurl=https://mirrors.ustc.edu.cn/centos|g'\-i.ba
西攻城狮北
·
2023-12-21 01:12
安装部署
K8S
kubernetes
kubernetes
云原生
k8s
安装
部署
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他