bigdata集群搭建第26页

Docker安装RabbitMQ集群_亲测成功

先安装DockerCentos7离线安装Docker华为云arm架构安装DockerRabbitMQ集群模式介绍RabbitMQ集群搭建和测试总结_亲测RabbitMQ有三种模式：单机模式，普通集群模式

阿亮说技术·2023-09-12 09:23

EasyExcel导出Excel指定属性列

前端传递需要导出的字段，后端根据前端的字段导出对应字段列的值到Excel1.所需JAR包com.alibabaeasyexcel2.2.72.导出实体类packagecom.bulls.bigdataexport.controller

豆豆·丁·2023-09-11 20:52

(三) Redis集群的搭建

Redis集群搭建主要是按照这篇文章的说明搭建的集群环境，本文也会加入自己遇到的一些坑来说明一下。Redis集群采用了P2P的模式，完全去中心化。

awaa·2023-09-11 17:37

3-2 元学习 Small Sample Learning in Big Data Era 笔记

一、基本信息题目：SmallSampleLearninginBigDataEra 期刊/会议：arXiv 发表时间：2018年引用次数：1二、论文总结2.1研究方向小样本学习综述2.2主要内容

Siberia_·2023-09-11 13:14

第16章服务安全控制

Eclipse_2019·2023-09-11 11:49

linux(centos7)配置SSH免密登录

给三台机器配置主机名映射在Windows系统中修改hosts文件，新增以下内容；192.168.xxx.xxxbigdata_node1192.168.xxx.xxxbigdata_node2192.168

新征程，再出发·2023-09-11 04:04

（二十六）大数据实战——kafka集群之Kraft模式安装与部署

前言本节内容主要介绍kafka3.0版本以后，一种新的kafka集群搭建模式看kraft，在该模式下，kafka高可用不在依赖于zookeeper，用controller节点代替zookeeper，元数据保存在

北溟溟·2023-09-10 20:22

CoE 到底是啥？

老板一直嚷嚷着要建BigDataCoE.听的一脸不理解COE到底是啥？

对酒当歌今夕何夕·2023-09-10 06:42

Kafka集群与消息可靠性

Kafka集群搭建实战使用两台Linux服务器：一台192.68.10.7一台192.168.10.8192.68.10.7的配置信息修改192.168.10.8的配置信息修改Kafka集群原理成员关系与控制器控制器其实就是一个

奔跑的码农小哥·2023-09-10 00:53

redis集群搭建

一.资源准备准备三台机器（能连外网，能相互ping通）172.29.2.10172.29.2.11172.29.2.12分别安装依赖包，关闭防火墙[root@localhostsrc]#systemctldisablefirewalld[root@localhostsrc]#systemctlstopfirewalld[root@localhostredis]#yuminstallgcc-c++[

657455400·2023-09-09 18:38

一键启动hadoop集群

文章目录一键启动Hadoop集群一键启动Hadoop集群输入cd/home/atbigdata/bin，进入bin目录，进行查看是否有自己的编写好的群启动Hadoop集群脚本。

Cocobuhui·2023-09-09 13:49

Flink--2、Flink部署（Yarn集群搭建下的会话模式部署、单作业模式部署、应用模式部署）

星光下的赶路人star的个人主页你必须赢过，才可以说不在乎输赢文章目录1、Flink部署1.1集群角色1.2Flink集群搭建

星光下的赶路人star·2023-09-09 09:18

磐基2.0 部署nacos集群连接磐维1.0数据库

use-nacos-with-kubernetes.htmlKubernetesNacosnacos集群架构https://blog.csdn.net/u013716737/article/details/130966482Nacos高可用集群搭建与使用

七七powerful·2023-09-09 05:26

Hadoop集群搭建

Hadoop集群搭建Hadoop集群简介Hadoop集群包括两个集群：HDFS集群、YARN集群两个集群逻辑上分离、通常物理上在一起两个集群都是标准的主从架构集群HDFS集群（分布式存储）主角色：NameNode

藤藤菜丶·2023-09-09 05:45

BigData-MySQL（LeetCode）

第一题组合两个表表1:Person+-------------+---------+|列名|类型|+-------------+---------+|PersonId|int||FirstName|varchar||LastName|varchar|+-------------+---------+PersonId是上表主键表2:Address+-------------+---------+|列

蜡笔小虎_007·2023-09-09 01:34

Redis Cluster

文章目录一、集群搭建1节点规划2集群启动二、配置一致性1基本分工2更新规则三、Sharding1数据分片分片实现分片特点2slot迁移迁移原因迁移支持集群扩容迁移错误背景现象问题分析验证猜想集群缩容3.

FA-117·2023-09-08 14:42

论文笔记：一分类及其在大数据中的潜在应用综述

0概述论文：Aliteraturereviewonone‑classclassificationanditspotentialapplicationsinbigdata发表：JournalofBigData

HenrySmale·2023-09-08 06:36

信息化发展27

大数据概述大数据（BigData）指无法在

AbelZ_01·2023-09-08 02:57

大数据下的精准营销获客

2012年以后，大数据（bigdata）一词越来越多地被提及，人们用它来描述和定义信息爆炸时代产生的海量数据，并命名与之相关的技术发展与创新。

浪浪的数据侠客·2023-09-08 00:17

redis集群搭建_亲自操作

【redis介绍与安装】Redis是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库，并提供多种语言的API。从2010年3月15日起，Redis的开发工作由VMware主持。从2013年5月开始，Redis的开发由Pivotal赞助。Redis是一个key-value存储系统。和Memcached类似，它支持存储的value类型相对更多，包括st

beyond阿亮·2023-09-07 23:36

Redis监控工具_RedisLive

Redis监控工具_RedisLiveRedis安装请看:MacBook安装Redisredis集群搭建_亲自操作RedisLive安装RedisLive是由python编写的并且开源的图形化监控工具，

阿亮说技术·2023-09-07 23:30

redis cluster集群搭建

集群搭建启动6个redis实例创建6份配置文件mkdirredis-clustercdredis-clustermkdir7001700270038001800280037001文件夹创建配置文件redis.confport7001cluster-enabledyescluster-config-filenodes

bruce128·2023-09-07 22:15

RabbitMQ原理及集群的深入剖析

的组件剖析说一说绑定过程：Exchange类型一些事项一些思考关于持久化RabbitMQ的集群详解RabbitMQ的集群模式一、普通模式：二、镜像模式：消息中间件的比对分析Win8下的RabbitMQ安装RabbitMQ集群搭建生产

芮-凯·2023-09-07 19:50

ELK集群搭建流程（实践可用）

一、概述ELK是一个由三个开源软件工具组成的数据处理和可视化平台，包括Elasticsearch、Logstash和Kibana。这些工具都是由Elastic公司创建和维护的。Elasticsearch是一个分布式的搜索和分析引擎，可以将大量数据存储在一个或多个节点上，支持实时搜索、分析和聚合，提供高性能的全文搜索、复杂查询和分析能力。Logstash是一个数据采集和处理工具，可以将来自各种数据源

7B_coder·2023-09-07 15:23

【区块链 | IPFS】IPFS cluster私有网络集群搭建

对于联盟链的业务中搭建一个私有网络的IPFS集群还是很有必要的，私有网络集群允许IPFS节点只连接到拥有共享密钥的其他对等节点，网络中的节点不响应来自网络外节点的通信。IPFS-Cluster是一个独立的应用程序和一个CLI客户端，它跨一组IPFS守护进程分配、复制和跟踪pin。它使用基于Raft一致性算法来协调存储，将数据集分布到参与节点上。对于我们要将一个peer上的存储同步备份到所有集群上其

区块链（Web3）开发工程师·2023-09-07 09:55

大数据技术之Hadoop：使用命令操作HDFS（四）

文件六、拷贝HDFS文件七、HDFS数据移动操作八、HDFS数据删除操作九、HDFS的其他命令十、hdfsweb查看目录十一、HDFS客户端工具11.1下载插件11.2本地安装Hadoop环境11.3配置BigDataTools

何苏三月·2023-09-07 05:58

基于Zookeeper搭建Kafka高可用集群（实践可用）

目录一、Zookeeper集群搭建1.1下载&解压1.2修改配置1.3标识节点1.4启动集群1.5集群验证二、Kafka集群搭建2.1下载解压2.2拷贝配置文件2.3修改配置2.4启动集群2.5创建测试主题

7B_coder·2023-09-07 05:50

ETCD集群搭建（实践可用）

概述etcd是兼具一致性和高可用性的键值数据库，可以作为保存Kubernetes所有集群数据的后台数据库。-官方网址：Documentationversions|etcd准备cfssl证书生成工具cfssl是一个开源的证书管理工具，使用json文件生成证书.在任意一台服务器上操作，这里选择k8s01wgethttps://pkg.cfssl.org/R1.2/cfssl_linux-amd64wg

7B_coder·2023-09-07 05:49

Nacos配置文件更新+热更新+多环境配置共享+集群搭建

对服务配置文件场景：如果多个服务对应的配置文件都需要更改时，可以利用配置管理，方便对配置文件进行更新，而且是在本地配置前先读取nacos的配置文件，优先级大于本地配置文件配置步骤1.首先在Nacos中的配置列表中增加一个配置文件：文件名字：服务名称+环境+yaml2.然后配置一个bootstrap.yaml，里面是服务的配置信息：（服务名称，Nacos连接地址，环境，extendion拓展的yam

Lailaaaaa·2023-09-07 04:42

HDFS完全分布式集群搭建与配置

HDFS完全分布式集群搭建与配置介绍HDFS前言HDFS的概念和特性整体思路准备工作配置过程三台虚拟机都已经完成的步骤hadoop-env.shyarn-env.shcore-site.xmlhdfs-site.xmlmapred-site.xmlyarn-site.xmlslaves

stupid_gentleman·2023-09-07 00:53

HDFS 集群启动管理界面缺少 DataNode 节点的解决方法

HDFS集群搭建并启动成功，1个NameNode节点和2个DataNode节点也运行正常，可以在各自的虚拟机中用jps命令查看正在运行的Java进程，但是通过http://master:50070/dfshealth.html

da2869237372·2023-09-07 00:51

MySQL——数据库以及数据表的创建

，如果不使用这个参数，则我们在重复创建一个已经存在的数据库的时候就会报错，中断我们的SQL语句的执行：这里我们看到我们同时执行了两条SQL语句，并且都执行成功了，我们的数据库中多出了一个我们自己创建的bigdata

Error_exception_worn·2023-09-06 20:33

第一章、Kubernetes基础之集群搭建（二进制安装）

集群安装基本环境配置10.103.236.201k8s-master01#2C2G40G10.103.236.202k8s-master02#2C2G40G10.103.236.203k8s-master03#2C2G40G10.103.236.236k8s-master-lb#VIP虚IP不占用机器资源#如果不是高可用集群，该IP为Master01的IP10.103.236.204k8s-nod

qq_35302220·2023-09-06 19:46

Centos7 elasticsearch-7.7.0 集群搭建

前言Elasticsearch是一个分布式、RESTful风格的搜索和数据分析引擎，能够解决不断涌现出的各种用例。作为ElasticStack的核心，它集中存储您的数据，帮助您发现意料之中以及意料之外的情况。环境准备软件OS系统IP节点Elasticsearch7.7.0centos710.16.101.27node-1Elasticsearch7.7.0centos710.16.101.28no

安果缘·2023-09-06 17:45

Centos elasticsearch 7.16 集群搭建

官方指引：InstallElasticsearchwithRPM|ElasticsearchGuide[7.16]|Elastic准备3台虚拟机centos7，每个虚拟机挂一块硬盘/esdata。按照官方指引安装挂载硬盘、开防火墙等参考：Centos8常用_leoppeng的专栏-CSDN博客1、rpm--importhttps://artifacts.elastic.co/GPG-KEY-ela

leoppeng·2023-09-06 17:14

什么是 TEE

SabtM,AchemlalM,BouabdallahA.Trustedexecutionenvironment:whatitis,andwhatitisnot[C]//2015IEEETrustcom/BigDataSE

山登绝顶我为峰 3(^v^)3·2023-09-06 14:58

一文学会K8s集群搭建

环境准备节点数量：2台虚拟机centos7硬件配置：master节点内存至少3G（2G后面在master节点初始化集群时会报错，内存不够），node节点可以2G，CPU至少2个，硬盘至少30G网络要求：多个节点之间网络互通，每个节点能访问外网集群规划这两个名称是准备设置的主机名称k8s-masterk8s-node1设置主机名hostnamectlset-hostnamek8s-masterhos

测试小婉·2023-09-06 13:43

基于k8s1.15搭建Flink集群（一）

文章目录1.前言2.实验环境3.集群搭建3.1Yaml配置3.1.1JobManagerYaml配置3.1.2TaskManagerYaml配置3.1.3JobManagerServices配置3.2启动

RivenDong·2023-09-06 10:40

k8s 搭建基于session模式的flink集群

1.flink集群搭建不废话直接上代码，都是基于官网的，在此记录一下Kubernetes|ApacheFlinkflink-configuration-configmap.yamlapiVersion:

Json_Marz·2023-09-06 10:40

Docker部署Redis集群详解【主从复制 + 哨兵模式】

前言注意：该文章不会讲解Redis集群搭建的原理，只讲述如何通过Docker容器快速部署搭建Redis主从+哨兵模式的集群准备工作：一台云服务器or本地虚拟机（CentOS和Ubuntu都可以）安装好Docker

Paraverse_徐志斌·2023-09-06 07:06

storm+mysql集成

使用storm自带的JdbcInsertBolt插入数据maven4.0.0com.sid.bigdatastorm0.0.1jarstormhttp://maven.apache.orgUTF-81.1.1org.apache.stormstorm-core

数据萌新·2023-09-06 05:51

Docker部署Hadoop集群

前几天写了文章“Hadoop集群搭建”之后，一个朋友留言说希望介绍下如何使用Docker部署，这个建议很好，Docker不仅在生产环境威力巨大，对于我们在自己电脑中搭建学习实验环境更是非常便利。

丨程序之道丨·2023-09-06 03:01

大数据技术——hadoop集群搭建出现的问题

出现的问题和解决方案ssh免密出现的问题：解决方法：出现上图的是语法错误，在ssh和-keygen中多了空格，去掉即可2.ssh免密登录出现的问题：ssh登陆报错“WARNING:REMOTEHOSTIDENTIFICATIONHASCHANGED“解决方法：1)通过ssh-keygen密钥工具更新ssh-keygen-f~/.ssh/known_hosts-R远程主机IP地址2)手动清除～/.s

肉肉肉肉肉肉~丸子·2023-09-06 03:46

hadoop集群搭建出现的一些问题总结

为了实现三台主机(masterslave1slave2)间的免密码登录，分别将slave1和slave2的公钥发送给master，然后再将master复制到slave1和slave2ssh-copy-idmaster验证master里面的authorized_keyscat.ssh/authorized_keys这里出现了问题，只有master和slave2的公钥，没有slave1，最后发现是sl

大角牛向前冲_momo·2023-09-06 03:45

Prometheus + grafana 的监控平台部署

一、Prometheus安装tar-zxvfprometheus-2.44.0.linux-amd64.tar.gz-C/opt/module/sudochown-Rbigdata:bigdata/opt

bigdata-rookie·2023-09-05 20:47

spring cloud系列教程第六篇-Eureka集群版

转载请注明1：Eureka执行步骤理解2：集群原理3：Eureka集群搭建4：修改payment和order项目注册到集群中本文是由凯哥(凯哥Java:kagejava)发布的《springcloud系列教程

凯哥Java·2023-09-05 18:04

hadoop 3.3大数据集群搭建系列1-安装hadoop

一.软硬件配置1.1主机配置及规划hostnamehp5hp6hp7ip10.31.1.11910.31.1.12010.31.1.121内存8G8G8GusernamerootrootrootIP主机名功能10.31.1.119hp5NameNodeDataNodeResourceManagerNodeManager10.31.1.120hp6DataNodeNodeManager10.31.1

只是甲·2023-09-05 18:18

HDFS HA 高可用集群搭建详细图文教程

目录一、高可用（HA）的背景知识1.1单点故障1.2如何解决单点故障1.2.1主备集群1.2.2Active、Standby1.2.3高可用1.2.4集群可用性评判标准（x个9）1.3HA系统设计核心问题1.3.1脑裂问题1.3.2数据状态同步问题二、NAMENODE单点故障问题2.1概述2.2解决三、HDFSHA解决方案--QJM3.1QJM—主备切换、脑裂问题解决3.1.1ZKFailover

Stars.Sky·2023-09-05 17:37

HBase 环境搭建

HBase单机环境的搭建这里先进行单机版环境搭建，主要目的是熟悉HBase，实操角度对HBase有简单认识，后面会分享HBase的原理、架构和集群搭建。

44d18503659e·2023-09-05 14:19

Kubernetes v1.25.0集群搭建实战案例(新版本含Docker容器运行时)

k8s1.24之后弃用了docker容器运行时，安装方式上有所不同，网上找到的大多数都是1.24之前的版本。所以把自己搭建的完整过程记录下来供大家参考。一、前言k8s的部署方式有多种kubeadm、kind、minikube、Kubespray、kops等本文介绍官方推荐的kubeadm的方式搭建集群。二、安装步骤1、虚拟机两台（ip按自己的网络环境相应配置）(master/node)iphost

玄明Hanko·2023-09-05 13:36

推荐频道

bigdata集群搭建