bigdata集群搭建

Redis部署-集群

目录集群数据分片算法哈希求余一致性哈希算法哈希槽分区算法redis集群搭建1.创建目录和配置.2.将上述redis节点.构建成集群3.使用客户端连接集群集群模式下的故障转移流程1.故障判定2.故障迁移集群扩容集群广义上的集群
正经程序猿·2023-12-23 20:00

ceph集群搭建详细教程（ceph-deploy）

ceph-deploy比较适合生产环境，不是用cephadm搭建。相对麻烦一些，但是并不难，细节把握好就行，只是命令多一些而已。实验环境服务器主机public网段IP（对外服务）cluster网段IP（集群通信）角色deploy192.168.2.120用于部署集群、管理集群ceph-node1192.168.2.121192.168.6.135ceph-mon、ceph-mgr、ceph-osd
绝恋96·2023-12-23 17:39

Mysql主从集群搭建——基于docker-compose一键部署

搭建初衷本身自己就是开发这类应用的工作者，一个私有库还是很有必要的。无论是公司项目还是私人项目都可以用到，不用担心忘记同步导致的数据丢失统一管理所有docker应用的数据（如果容器可以连接mysql的话）也方便随时修改数据结构可视化，方便拓展一些容器的功能，比如Halo的代码注意事项所有基础应用都会在统一一个docker公用网络中，要先创建这个网络。我们这边就是创建了一个名为basenetwork
滔涛江水·2023-12-23 00:59

multipass + k3s 搭建本地K3s高可用集群

k3s高可用集群搭建环境开始测试一下大功告成结束k3s高可用集群搭建环境k3s官网最新multipass+hyperv开始创建虚拟网卡外部选择要连接的物理设备网卡名WAN创建虚拟机数据库节点以及负载均衡节点
提醒针线活小助手·2023-12-22 23:10

hyper-v ubuntu 3节点 k8s集群搭建

前奏搭建一主二从的k8s集群，如图所示，准备3台虚拟机。不会创建的同学，可以看我上上篇博客：https://blog.csdn.net/dawnto/article/details/135086252和上篇博客：https://blog.csdn.net/dawnto/article/details/135096182由于测试机器资源有限，将3台虚拟机内存均设置为2048MB，CPU核心均设置为2
metabit·2023-12-22 22:09

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki4·2023-12-22 22:56

推动企业创新与智能化转型企业云盘

这些年来智能变革持续推进，由人工智能（AI）、大数据（BigData）和云计算（CloudComputing）主导的ABC时代持续推动着产业的变革和社会的发展。
lqyanna·2023-12-22 20:16

2019北京国际智慧城市、物联网、大数据博览会

2019北京国际智慧城市、物联网、大数据博览会2019BeijingInternationalSmartCity,InternetofThings,BigDataExpo前言：在国家提倡“一带一路”的大背景下
weixin_34209851·2023-12-22 11:20

2024杭州智博会|杭州国际人工智能,物联网,大数据展览会

2024杭州智博会|杭州国际人工智能,物联网,大数据展览会2024HangzhouInternationalAi,IOT,bigdataExpo时间:2024年4月24-26日地点:杭州国际博览中心近年来
高登先生·2023-12-22 11:48

2024AIOTE智博会 第十五届上海国际智慧城市、物联网、大数据博览会

@TOC2024AIOTE智博会第十五届上海国际智慧城市、物联网、大数据博览会The15thShanghaiInternationalSmartCity,IOT,bigdataExpo时间：2024年03
展会·2023-12-22 11:13

zookeeper集群搭建详细步骤

搭建说明前置环境：实例1实例2实例3IP192.168.11.11192.168.11.12192.168.11.13OScentos7.9centos7.9centos7.9zkzookeeper-3.8.0zookeeper-3.8.0zookeeper-3.8.0javaJDK8JDK8JDK8安装zookeeper集群依赖java环境，请在三台机器上先自行安装JDK。如果java环境已就绪
dnice·2023-12-22 09:53

分布式系统详解--框架（Zookeeper-简介和集群搭建）

分布式系统详解--框架（Zookeeper-简介和集群搭建）一、Zookeeper简介1.1Zookeeper是什么？
JAVA和人工智能·2023-12-22 09:51

Nacos配置管理

Nacos配置管理文章目录Nacos配置管理统一配置管理配置自动刷新多环境配置nacos集群搭建集群结构图搭建集群初始化数据库下载nacos配置Nacos启动nginx反向代理优化统一配置管理com.alibaba.cloudspring-cloud-starter-alibaba-nacos-configspring
shall_zhao·2023-12-22 07:44

Spark在云原生时代的发展

前言在ABC(AI,BigData,Cloud)时代，传统的大数据解决方案和厂商(Cloudera,Hortonworks)略显颓势，而云厂商(AWS,Azure,GCP)和云原生解决方案(DatabricksCloud
Apache Spark中国社区·2023-12-22 07:18

Streaming 101: The world beyond batch

Thisisthefirstpostinatwo-partseriesabouttheevolutionofdataprocessing,withafocusonstreamingsystems,unboundeddatasets,andthefutureofbigdata.Seeparttwo.Also
slivelight·2023-12-21 20:56

GZ033 大数据应用开发赛题第03套

2023年全国职业院校技能大赛赛题第03套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述大数据时代背景下
嘿哈小将·2023-12-21 17:25

2023大数据应用开发赛题第01套

2023年全国职业院校技能大赛赛题第01套赛项名称：大数据应用开发英文名称：BigDataApplicationDevelopment赛项组别：高等职业教育组赛项编号：GZ033背景描述大数据时代背景下
长风有续X·2023-12-21 17:54

linux重新启动集群out,ZooKeeper集群搭建中Connection refused而导致的启动失败

1.前言每一次搭建集群环境都像一次战斗，作战中任何一个细节的出错都会导致严重的后果，所以搭建中所需要做的配置如系统配置、网络配置(防火墙记得关)、用户权限、文件权限还有配置文件等等内容，都必须非常仔细，将失误扼杀在摇篮之中，避免因为粗心或者想要提高速度省下的一分钟，在后面付出几个小时的调试时间，因小失大实在不值，切记核对、核对再核对。今天就来说说在搭建ZooKeeper集群遇到的一个常见的问题Co
纳仁菜菜·2023-12-21 15:57

Zookeeper集群搭建

Zookeeper集群搭建一、机器环境准备准备三台虚拟机，关闭防火墙或开通网络策略保证集群互通，并安装配置jdk即可（jdk环境变量配置应是全局）二、下载地址https://mirrors.tuna.tsinghua.edu.cn
z先生想学习·2023-12-21 15:57

zookeeper 集群搭建

通过VMware，我们安装了三台虚拟机，用来搭建zookeeper集群，虚拟机网络地址如下：hostnameipaddresssubnetmaskgeteway1、master192.168.146.200255.255.255.0192.168.146.22、slave1192.168.146.201255.255.255.0192.168.146.23、slave2192.168.146.20
weixin_34008933·2023-12-21 15:56

Zookeeper集群搭建及错误排除

第一步：安装jdk环境第二步：把zookeeper的压缩包上传到服务器第三步：将zookeeper压缩包解压第四步：创建一个目录[root@localhost~]#mkdir/usr/local/zookeeper-cloud第五步：复制三份zookeeper到刚创建的目录下[root@localhost~]#cp-rzookeeper/usr/local/solr-cloud/zookeeper
小猿猴53·2023-12-21 15:25

ZooKeeper 集群搭建

文章目录ZooKeeper概述选举机制搭建前准备分布式配置分布式安装解压缩并重命名配置环境配置服务器编号配置文件操作集群编写脚本运行脚本搭建过程中常见错误ZooKeeper概述Zookeeper是一个开源的分布式服务协调框架，由Apache软件基金会开发和维护。以下是对Zookeeper的主要概述：设计目标：提供分布式环境中的数据一致性。为分布式应用程序提供协调服务。简化复杂分布式系统的构建和管理
撕得失败的标签·2023-12-21 15:25

Zookeeper集群搭建常见问题

通过命令：ZkServer.shstatus查看zookeeper状态显示以下错误1.Mode:standalonezookeeper处于单机模式，说明此时zookeeper的zoo.cfg文件配置有问题2.Errorcontactingservice.Itisprobablynotrunning.(1)由于我们总共使用三个zookeeper服务器，所以会涉及到zookeeper之间的选举问题因此
Zsx..·2023-12-21 15:53

Linux之zookeeper集群搭建

Linux之zookeeper集群搭建day14此篇内容详细介绍zookeeper集群的搭建，以及萌新路上碰见的花里胡哨的问题，（没错就是我，我把坑一个一个算是踩完了~~必须汇总一下我遇到妖魔鬼怪！）
每日小新·2023-12-21 15:23

zookeeper集群搭建，蹲坑的时间zookeeper学好了

zookeeper学习第一章1.1概述：第二章Zookeeper安装2.1安装前准备2.2配置zookeeper2.3启动操作zookeeper。第三章Zookeeper集群安装操作3.1集群安装3.2配置zookeeper3.3分别启动三台机器的zookeeper。3.4配置参数解读四zookeeper常见错误4.1访问ip:8080出现以下页面4.2KeeperErrorCode=NoNode
懒人三十·2023-12-21 15:22

Zookeeper 集群搭建过程中常见错误

文章目录Mode:standalone启动失败Mode:standalone这通常表示Zookeeper配置为单节点模式，而不是集群模式。需要检查zoo.cfg文件中的配置，确保包含了所有集群节点的信息。启动失败/usr/bin/javaZooKeeperJMXenabledbydefaultUsingconfig:/opt/zookeeper-3.5.7/bin/../conf/zoo.cfgS
撕得失败的标签·2023-12-21 15:50

小白必须知道的 ZooKeeper 知识

如果您已经了解了基础，只想知道如何简单搭建一个集群，可以直接阅读该文章：zookeeper集群搭建那么ZooKeeper是什么呢？ZooKeeper最初由雅虎公司开发，并于2010年成为Apache软
不认输的猴·2023-12-21 14:15

超实用的Kafka集群搭建(有zk版)

前言本文讲述超实用的Kafka集群搭建流程，Kafka2.8以前的集群时依赖于ZooKeeper做服务协调，而2.8开始移除了Zookeeper的依赖（后续会出文章讲解这块的功能情况）。
不认输的猴·2023-12-21 14:43

K8S集群搭建

K8S集群搭建1.基础环境IP节点名称域名规格10.1.2.111k8s-master-1master01.k8s.io4核8G，50G10.1.2.112k8s-master-2master02.k8s.io4
奋斗的昌老师·2023-12-21 10:42

Hadoop集群的搭建（全网最详细，看了就会）

在搭建之前请一定要确保Hadoop集群搭建的前置准备已经完成，详细内容可以参考我的这篇文章。
叶落长街·2023-12-21 08:49

Hadoop集群搭建详细教程

Hadoop环境搭建1.环境准备1.首先创建一台模板机所谓的模板机是进行了一些最基础的配置，比如说进行主机名修改、网络配置、下载一些插件等准备工作。不会创建虚拟机的可以通过Centos7.5安装配置及虚拟机搭建详细教程进行虚拟机创建。1.1网络测试[root@hadoop101~]#pingwww.baiu.com如果ping不通百度，可能是网络配置没有配置好，可以通过配置文件等修改。1.2修改I
百万攻程狮·2023-12-21 08:49

DiseaseMeth 人类疾病相关的甲基化信息数据库

官网地址如下http://bio-bigdata.hrbmu.edu.cn/diseasemeth/在DiseaseMeth数据库中，甲基化数据的类型包括两大类别芯片对于DNA甲基化芯片，除了
生信修炼手册·2023-12-21 07:44

Redis集群搭建与使用 - 整合Spring Boot在实际开发中的应用

Redis集群搭建1.下载和安装Redis首先，从Redis官方网站下载稳定版本的
程序员王也·2023-12-21 07:02

Zookeeper-快速入门、服务搭建、集群搭建教程

官网：https://zookeeper.apache.org/zookeeper常用用途：集群管理，zookeeper作为注册中心，管理服务提供方的ip地址端口号url信息，并在服务消费方请求需要时发送给服务消费方。配置中心（不过一般用阿波罗apollo或者阿里的Nacos来做）多个app中的配置是从zookeeper中拉取配置，而不是一个个去手动修改。消费端从服务端中关注某个ZNode，一旦节
绝恋96·2023-12-21 06:22

Flink高可用集群搭建

部署flink的准备工作flink版本的选择需要考虑hadoop的版本，本集群hadoop的版本为2.7.4,flink的版本为flink-1.7.2-bin-hadoop27-scala_2.11.tgzflink高可用集群需要依赖zookeeper开始安装1.编辑flink的配置文件flink-conf.yaml#这里选择配置主节点jobmanager.rpc.address:node1#Th
NikolasNull·2023-12-20 23:44

spark课程大纲

Spark环境搭建CentosSpark单机版伪分布式模式Spark单机版intelij开发(maven)Spark完全分布式集群搭建Sparkhistoryserver配置使用二种方法实现Spark计算
数据萌新·2023-12-20 22:26

阿里云k8s集群搭建

文章目录一、安装前准备1.环境2.k8s集群规划二、k8s安装1.centos基础设置2.docker安装3.k8s安装3.1添加阿里云yum源3.2安装kubeadm、kubelet、kubectl3.3部署KubernetesMaster3.4加入KubernetesNode3.5部署CNI网络插件3.6测试kubernetes集群一、安装前准备1.环境os：centos7.6docker：v
seeyoutlb·2023-12-20 19:01

Flink SQL填坑记2：Flink和MySQL的Bigdata类型不同导致ClassCastException报错

最近在开发FlinkSQL的时候，需要关联Kafka事实表和MySQL维表，得到的数据写入Phoenix表中，但是其中有个字段，Kafka表、MySQL表和Phoenix表都是BigData类型，但是在实现的时候却报
IT源哥·2023-12-20 17:17

flink kafka

Mac下Kafka安装与启动https://www.jianshu.com/p/a581372f07b4https://github.com/wangzhiwubigdata/God-Of-BigData
夏天_edbf·2023-12-20 11:15

RabbitMQ集群搭建

主备模式：单活，容量对等，可以实现故障转移。使用独立存储时需要借助复制、镜像同步等技术，数据会有延迟、不一致等问题（CAP定律），使用共享存储时就不会有状态同步这个问题。主从模式：一定程度的双活，容量对等，最常见的是读写分离。通常也需要借助复制技术，或者要求上游实现双写来保证节点数据一致。主主模式：两边都可以读写，互为主备。如果两边同时写入很容易冲突，所以通常实现的都是“伪主主模式”，或者说就是主
david161·2023-12-20 08:41

springCould中的Eureka-从小白开始【2】

4.服务8001服务入住eureka❤️❤️❤️5.消费端80入住到eureka❤️❤️❤️6.集群Eureka配置❤️❤️❤️7.将Client发布到eureka集群上❤️❤️❤️8.服务端8002集群搭建
会敲代码的小张·2023-12-20 06:00

hadoop格式化报错

在var/bigdata/hadoop/ha/dfs/jn/下没有mycluster目录增加后就格式化成功了
新鲜氧气·2023-12-20 05:27

hadoop集群搭建之HA模式

1.Hadoop环境变量相关配置1.在node01上创建hadoop安装路径：mkdir/opt/bigdata2.解压hadoop软件包tarxfhadoop-2.6.5.tar.gzmvhadoop
新鲜氧气·2023-12-20 05:27

Hbase2.1 集群搭建

>Hbase在大数据的体系中扮演着DB角色，不得不说是重要的一员，在上一篇，大猪已经给大家演示了[Hadoop3.2集群搭建](https://www.jianshu.com/p/3182aaff918d
kikiki5·2023-12-19 20:39

Hadoop集群搭建 - 解压tar.gz包 - 基于CentOS7 -【连载中】

续上一篇文章：7.Hadoop集群搭建-上传应用/软件-基于CentOS7-【连载中】目录扩展解压文件解压jdk到指定文件夹解压Hadoop到指定文件夹进入到解压后的目录查看是否解压成功扩展说明：以下表格中红色标
AdminLog·2023-12-19 00:58

大数据：简述 Lambda 架构

原文地址：BigData:LambdaArchitectureinanutshell原文作者：TrungAnhDang译文出自：掘金翻译计划本文永久链接：github.com/xitu/gold-m…译者
浪尖聊大数据-浪尖·2023-12-18 22:35

API管理-架构-1-概要设计

为中心的架构RESTAPIUnlessStreamingAPI微服务与APIAPI分类API分层API平台API安全一些必要点Reference前言为了在企业中能够更好的支持Cloud,Mobile,BigData
Xu Kun·2023-12-18 17:25

redis-cluster集群搭建（3主3从），并使用springboot整合

一、集群搭建1.准备3台服务器这里我采用了3台云服务器。
头鼎3根毛·2023-12-18 16:09

Redis集群搭建--cluster三主三从

本文章上接：（Redis主从复制实现--一主二从保姆级搭建https://blog.csdn.net/m0_47136030/article/details/129409955?spm=1001.2014.3001.5502）（Redis哨兵模式搭建https://blog.csdn.net/m0_47136030/article/details/129411742?spm=1001.2014.3
千千CHAN千千·2023-12-18 16:37

Redis5.0集群搭建

Redis集群教程此文重在介绍Redis5.0三主三从集群安装，无复杂难懂的概念，若想深入了解集群原理请参考Redis集群规范。Redis集群介绍RedisCluster提供一种Redis安装方式：数据自动在多个Redis节点间分片。RedisCluster提供一定程度的高可用，在实际的环境中当某些节点失败或者不能通讯的情况下能够继续提供服务。大量节点失败的情况下集群也会停止服务(例如大多数主节点
时间会告诉你答案，但不能重来·2023-12-18 16:37
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他