集群构架第12页

docker搭建hadoop hdfs完全分布式集群

1制作hadoop镜像参见https://www.cnblogs.com/rmxd/p/12051866.html该博客中只参考制作镜像部分，固定IP及启动集群的部分应该跳过。

shangcunshanfu·2024-02-20 22:08

Redis篇----第八篇

系列文章目录文章目录系列文章目录前言一、是否使用过Redis集群，集群的原理是什么？二、Redis集群方案什么情况下会导致整个集群不可用？三、Redis支持的Java客户端都有哪些？官方推荐用哪个？

数据大魔王·2024-02-20 21:37

Redis篇----第九篇

二、Redis集群的主从复制模型是怎样的？三、Redis集群会有写操作丢失吗？为什么？四、Redis集群之间是如何复制的？五、Redis集群最大节点个数是多少？

数据大魔王·2024-02-20 21:37

Redis-面试题

一、基础1、什么是RedisC语言编写，基于key-value存储的nosql开源内存数据库内存存储、数据结构优化，高性能一般用于应用和数据库之间的分布式缓存中间件提供主从复制+哨兵、集群的方式实现高可用

HBryce24·2024-02-20 21:06

Elasticsearch单机集群搭建

第一步：下载解压官网下载elasticsearch安装包：下载地址创建一个elasticsearch的路径/usr/local/tools/elasticsearch解压tar-xzvfelasticsearch-7.5.0-linux-x86_64.tar.gz重命名mvelasticsearch-7.5.0elasticsearch-7.5.0-node-1创建好三个节点，如下图：image.

dafengyiba·2024-02-20 20:07

hive 的map数和reduce如何确定

主要的决定因素有：input的文件总个数，input的文件大小，集群设置的文件块大小(目前为128M,可在hive中通过setdfs.block.size;命令查看到，该参数不能自定义修改)；2.举例：

Super乐·2024-02-20 20:38

(17)Hive ——MR任务的map与reduce个数由什么决定？

的数量由以下参数决定文件个数文件大小blocksize一般而言，对于每一个输入的文件会有一个mapsplit，每一个分片会开启一个map任务，很容易导致小文件问题（如果不进行小文件合并，极可能导致Hadoop集群资源雪崩

爱吃辣条byte·2024-02-20 20:27

阿里云服务器2核8g配置3M带宽多少钱？如何买更便宜？

2核8G配置的cpu与内存比为1:4，内存资源要高于cpu资源，这种配置多适用于中小型数据库系统、缓存、搜索集群等场景，也适用于与网站应用等场景。

阿里云最新优惠和活动汇总·2024-02-20 19:01

2.13日学习打卡----初学RocketMQ（四）

JavaClassDefaultMQProducer类DefaultMQPushConsumer类Message类MessageExt类二.RocketMQ消费幂消费过程幂等消费速度慢的处理方式三.RocketMQ集群服务集群特点单

中北萌新程序员·2024-02-20 19:43

16.用Hadoop命令向CDH集群提交MR作业

16.1实验环境介绍内容概述环境准备Kerberos环境和非Kerberos集群测试环境Kerberos集群CDH5.11.2，OS为Redhat7.2非Kerberos集群CDH5.13，OS为CentOS6.5

大勇任卷舒·2024-02-20 19:27

记一次 Flink 作业启动缓慢

记一次Flink作业启动缓慢背景应用发现，Hadoop集群的hdfs较之前更加缓慢，且离线ELT任务也以前晚半个多小时才能跑完。

卢说·2024-02-20 18:38

Kafka常用命令汇总(一)

Kafka常用命令汇总:1、列出集群里的所有主题。

秋风暮霞挽红曲_5f60·2024-02-20 18:45

K8s 集群可观测性-数据分流最佳实践

简介在微服务架构下，一个k8s集群中经常会部署多套业务，同时也意味着不同团队、不同角色、不同的业务会在同一集群中，需要将不同业务的数据在不同的空间进行管理和查看。

·2024-02-20 17:26

CentOS7中怎样修改主机名和hosts文件(配置IP和主机名的对应管理)

场景搭建三台CentOS7服务器的集群，需要配置每个服务器的主机名，以及主机名和IP的对应关系。这样互相之间通信就不用借助于IP去唯一标识了。

霸道流氓气质·2024-02-20 17:26

Redis学习笔记

官网：https://redis.io/一个基于内存的键值型NoSQL数据库key-value型单线程，每个命令具备原子性低延迟，速度快（基于内存、IO多路复用、c语言编写）支持数据持久化支持主从/分片集群支持多语言客户端

hhf的博客·2024-02-20 17:19

redis分布式锁实战

如果不同的系统或同一个系统的不同主机之间共享了某个资源时，往往通过互斥来防止彼此干扰;Redis分布式锁的底层实现是利用setnx命令：当已存在key时，则存储时返回失败，否则返回成功；下面是我自己写的redis锁，使用的是redis集群

bijian-bijian·2024-02-20 17:47

OCP的operator——（4）用户任务：使用Operator创建etcd集群

namespace中安装Operator先决条件使用Webconsole从OperatorHub安装删除使用CLI从OperatorHub安装从已安装的Operator创建应用使用Operator创建etcd集群报错从

蓝黑2020·2024-02-20 17:46

OCP的operator——（3）CRD

文章目录了解OperatorCRD使用customresourcedefinition（CRD）来扩展KubernetesAPICRD创建CRD为CRD创建集群角色通过文件创建CR检查CR管理CRD中的资源参考了解

蓝黑2020·2024-02-20 17:15

【Docker】容器集群服务快速编排compose基本用法

compose基本用法一、下载安装卸载官网下载地址(onLinux)：https://docs.docker.com/compose/install/standalone/官网文档介绍地址：https://docs.docker.com/compose/compose-file/compose-file-v3/#下载安装curl-SLhttps://github.com/docker/compos

一直奔跑在路上·2024-02-20 17:12

【Docker】集群容器监控和统计 Portainer基本用法

Portainer是一款轻量级的应用，它提供了图形化界面，用川于方便地管理Docker环境，包括单机环境和集群环境。

一直奔跑在路上·2024-02-20 17:11

solr7集群 springboot_springboot 集成solr

一、版本介绍：jdk1.8tomcat8springboot2.1.3RELEASE(这里有坑,详见下文)solr7.4.0(没有选择最新的版本,是因为项目的boot版本是2.1.3,其对应的solr-solrj.jar版本是7.4.0，为避免出现不可预料不可抗拒不可解决的问题，谨慎选用与之一样版本)二、solr服务器搭建下载1.tomcat8的下载不赘述；2.solr下载：进入solr官网，找历

骑lv上高速·2024-02-20 17:09

ElasticSearch一台机器搭建多节点集群

必须有JDK环境官网下载ES，本文是7.16.2官网下载上传至服务器后，解压tar-xvfelasticsearch-7.16.2-linux-x86_64.tar.gz修改配置elasticsearch.ymlES配置项cluster.name:hanweihuESnode.name:node-1path.data:/opt/software/elasticsearch-7.16.2/datap

imHanweihu·2024-02-20 17:33

用不了tradingview？那自己捣鼓一个属于自己的量化分析平台

该版本是以python搭建web构架

阿岛格·2024-02-20 17:53

项目简介-分布式基础-环境搭建

分布式基础与环境搭建一、项目简介二、分布式基础概念1、微服务2、集群&分布式&节点3、远程调用4、负载均衡5、常见的负载均衡算法6、服务注册/发现&注册中心7、配置中心8、服务熔断&服务降级9、API网关三

南波塞文·2024-02-20 16:10

Springboot+Quartz集群配置

看了一些网上的文章，都不太合我意，集众家之长，来个自己的版本。原理和介绍就不搬来搬去了，直接上代码吧。目录一.POM文件二.application-quartz.properties三.java文件3.1Application3.2QuartzSchedulerConfig配置一下，类名自己随便改3.3StartApplicationListener应用启动时调用一下QuartzTasks添加定时

langzitianya·2024-02-20 16:59

Neo4j学习笔记(四.3) Spring Data Neo4j中连接Neo4j因果集群

一.配置文件Neo4j4.0之前，instance0~instance2都是因果集群里的核心服务器URI=bolt+routing://instance0:7687URIS=bolt+routing:/

langzitianya·2024-02-20 16:58

一次 @Component 不生效的故障排查

事情是这样的，目前的系统跟第三方系统有一个接口交互，对方调用我们的接口，我们会把文件通过FastDfs传到fastdfs文件集群服务器上。

中年老IT·2024-02-20 16:44

Kubernetes学习笔记--理解及操作 Kubernetes 对象

Kubernetes对象在Kubernetes系统中，Kubernetes对象是持久化的实体，Kubernetes使用这些实体去表示整个集群的状态，如哪些容器化应用在运行（以及在哪些节点上），可以被应用使用的资源

木子一酱·2024-02-20 14:05

深入浅出 spring-data-elasticsearch 之 ElasticSearch 架构初探（一）

本文目录一、Elasticsearch基本术语1.1文档(Document)、索引(Index)、类型(Type)文档三要素1.2集群(Cluster)、节点(Node)、分片(Shard)分布式三要素二

Julian Wong·2024-02-20 13:04

Redis面试题及核心知识点讲解

Redis的持久化，集群同步等操作，则由另外的线程来执行。2.redis是单线程，为什么处理这么快？Redis的大部分操作都是在内存中完成。

归来少年Plus·2024-02-20 13:30

艺术的起源学记(三)

一切较高的民族都曾有过一个时期的采用这种生产方式;而且还有好些大大小小的社会集群，至今还未超脱这种原始的生产方式。我们必须很注意这一些社会集群以便认识那些可以找到的最原始的艺术形式。

乐有宬·2024-02-20 13:36

k8s的一些关键信息（归类摘抄，非提炼）

零：举例说明当用户提交一个Deployment对象到Kubernetes集群时，控制平面的APIServer接收到该请求，并将其转发给ControllerManager。

zhyhg·2024-02-20 13:50

k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（三）

ssh-copy-idrke@slaver2[[email protected]]$ssh-copy-idrke@slaver1[[email protected]][email protected].搭建RKE集群为了方便理解

日复一日伐树的熊哥·2024-02-20 13:45

视频生成领域的发展概述:从多级扩散到LLM

虽然它的架构没有披露，但是通过总结现有的视频生成领域可能能对Sora的构架有所理解。在这篇文章中，我们将整理视频生成在最近几年是发展概况，模型的架构是如何发展的，以及现在面临的突出问题。

·2024-02-20 13:11

【k8s概念】一文搞懂k8s核心概念！！！

文章目录1.k8s简介1.1k8s概念1.2作用/功能2.k8s集群搭建方式3.k8s核心组件3.1MasterNode（控制平面组件）3.2WorkerNode4.k8s核心概念4.1容器4.2工作负载

我是小bā吖·2024-02-20 13:04

Spring Cloud灰度发布方案----ribbon框架

自定义路由规则)请移步：https://blog.csdn.net/han949417140/article/details/121420529一、简介1.1不停机部署服务策略介绍蓝绿部署蓝绿部署的模型中包含两个集群

易佰菜鸟·2024-02-20 12:45

成本效能FinOps: Crane 部署

目录一、实验1.环境2.安装kind3.安装Crane二、问题1.脚本安装prometheus报错2.查看集群信息失败3.Helm添加grafana报错4.查看crane资源失败5.prometheus

cronaldo91·2024-02-20 12:44

tomcat通过JAVA_OPTS注入自定义变量 —— 筑梦之路

背景说明tomcat部署的java应用在k8s集群或容器中，想要给tomcat传自定义变量，应该如何实现？

筑梦之路·2024-02-20 12:02

2019-07-15

（5）支持集群模式，高效、稳定。三、数据模型（1）键值对形式。（2）Redis的数据结构类型，指的

HUGOPAN·2024-02-20 12:56

Flink理论—Flink架构设计

它集成了所有常见的集群资源管理器，例如HadoopYARN，但也可以设置作为独立集群甚至库运行,例如Spark的StandaloneMode本节概述了Flink架构，并且描述了其主要组件如何交互以执行应用程序和从故障中恢复

不二人生·2024-02-20 12:59

腾讯 tRPC-Go 教学——（3）微服务间调用

本文我们就来看看腾讯是怎么使用tRPG-Go构建后台微服务集群的。

·2024-02-20 12:39

精彩回顾 | 迅易科技受邀出席腾讯产业集群数字化发展大会

12月26日，“数实融合·产业共进”为主题的2023腾讯产业集群数字化发展大会在佛山圆满落幕。

·2024-02-20 12:35

仅是适合自己的文字

要做一个能帮助别人去创造结果的高层管理者，自己的素能和思维构架，就必须要强大，其实所有的突破和改革，都得从自身开始。很长时间没有外出学习与培

喻凯_d3fb·2024-02-20 12:29

开源大数据集群部署（十）Ranger usersync部署

作者：櫰木rangerusersync部署解压包[[email protected]]#pwd/opt/ranger[[email protected]]#tar-zxvfranger-2.3.0-usersync.tar.gz-C/opt/[[email protected]]#cdranger-2.3.0-usersync修改配置insta

·2024-02-20 12:27

第一件事什么是 Java 虚拟机（JVM）

-这个其实是一个挺逗的事情，说白了，就是基于某个硬件架构，在这个硬件部署了一个操作系统，再构架一层虚拟的操作系统，这个新构架的操作系统就是虚拟机。

FOOLCODE·2024-02-20 12:02

用于将Grafana默认数据库sqlite3迁移到MySQL数据库

背景:grafana默认采用的是sqlite3，当我们要以集群形式部署的时使用mysql较为方便，试了很多sqlite转mysql的方法要么收费,最后放弃。选择自己动手风衣足食。

huainian·2024-02-20 11:21

Kafka核心逻辑介绍 | 京东云技术团队

Kafka是最初由Linkedin公司开发，是一个分布式、支持分区的（partition）、多副本的（replica）分布式消息系统（kafka2.8.0版本之后接触了对zk的依赖，使用自己的kRaft做集群管理

·2024-02-20 11:54

【Azure 架构师学习笔记】- Azure Databricks (7) --Unity Catalog(UC) 基本概念和组件

接上文【Azure架构师学习笔记】-AzureDatabricks(6)-配置UnityCatalog前言在以前的Databricks中，主要由Workspace和集群、SQLWarehouse组成，这两年

發糞塗牆·2024-02-20 10:37

Redis之分布式搭建及使用快速入门

文章目录1、为什么需要用redis集群2、主从复制a、主从复制配置3、可用性保证之哨兵机制(Sentinel)4、redis分布式方案a、客户端Shardingb、代理Proxy之Twemproxyc、

菜鸟编程98K·2024-02-20 10:02

【Redis快速入门】Redis三种集群搭建配置（主从集群、哨兵集群、分片集群）

个人名片：作者简介：一名大三在校生，喜欢AI编程‍❄️个人主页：落798.个人WeChat：hmmwx53️系列专栏：️零基础学Java——小白入门必备重识C语言——复习回顾计算机网络体系———深度详讲HCIP数通工程师-刷题与实战微信小程序开发——实战开发HarmonyOS4.0应用开发实战——实战开发Redis快速入门到精通——实战开发每日一句：我很忙，但我要忙的有意义！欢迎评论点赞收藏加关注

落798.·2024-02-20 10:32

推荐频道

集群构架