集群分布式技术

Spark大数据分析与实战笔记（第二章 Spark基础-06）

文章目录每日一句正能量2.6IDEA开发WordCount程序2.6.1本地模式执行Spark程序2.6.2集群模式执行Spark程序每日一句正能量我们全都要从前辈和同辈学习到一些东西。
想你依然心痛·2024-02-06 07:38

k8s学习-Kubernetes Ingress

我一般以Deployment方式部署到kubernetes集群中
ByteX·2024-02-06 07:37

开源大数据集群部署（十）Ranger usersync部署

作者：櫰木rangerusersync部署解压包[[email protected]]#pwd/opt/ranger[[email protected]]#tar-zxvfranger-2.3.0-usersync.tar.gz-C/opt/[[email protected]]#cdranger-2.3.0-usersync修改配置insta
云掣YUNCHE·2024-02-06 07:05

linux k8s 源码编译及单集群测试

docker在线安装containerd安装二进制安装yum安装修改containder配置文件cnietcdrsyncgo设置golang代理安装CFSSL下载kubernetes代码编译启动本地单节点集群问题
流月up·2024-02-06 06:12

SparkSQL on K8s 在网易传媒的落地实践

网易传媒在2021年成功将SparkSQL部署到了K8s集群，并实现与部分在线业务的混合部署，到目前已经稳定运行了一年多。
wangyishufan·2024-02-06 06:02

Flink on k8s之historyServer

1.FlinkHistoryServer用途HistoryServer可以在Flink作业终止运行（Flink集群关闭）之后，还可以查询已完成作业的统计信息。
卤蛋x001·2024-02-06 06:54

MongoDB分片集群搭建

----前言mongodb分片一般用得比较少，需要较多的服务器，还有三种的角色一般把mongodb的副本集应用得好就足够用了，可搭建多套mongodb复本集mongodb分片技术mongodb副本集可以解决数据备份、读性能的问题，但由于mongodb副本集是每份数据都一模一样的，无法解决数据量过大问题mongodb分片技术能够把数据分成两份存储，假如shijiange.myuser里面有1亿条数据
ZzzkiYoumi·2024-02-06 06:21

MongoDB的分片集群(二) ：mongodb4.x分片集群离线搭建&开启安全认证

相关文章：MongoDB的分片集群(一):基础知识在《MongoDB的分片集群(一):基础知识》中梳理了分片集群的基础知识，本文则记录分片集群的离线搭建，并开启集群的安全认证的过程。
SRE成长记·2024-02-06 06:45

Apache Hadoop

ApacheHadoop_狭义上说，Hadoop指Apache一款java语言开发的开源框架，它的核心组件有：HDFS（分布式文件系统）：解决海量数据存储YARN（作业调度和集群资源管理的框架）：解决资源任务调度
VincentLeon·2024-02-06 05:28

Mysql架构系列——生产常用的高可用部署模式介绍

模式高可用模式GaleraCluster是由Codership开发的MySQL多主集群，包含在MariaDB中，同时支持Perconaxtradb、MySQL，是一个易于使用的高可用解决方案，在数据完整性
吴代庄·2024-02-06 04:34

K8S集群管理平台Rancher（1）：基础入门

文章目录一、Rancher概述1.1什么是Rancher1.2RancherServer功能1.3Rancher架构设计1.4Rancher和下游集群交互1.5Rancher相关文件1.6Rancher
鹤冲天Pro·2024-02-06 04:58

Debian11之Rancher2.7.x安装

前言Rancher为采用容器的团队提供了完整的软件堆栈，解决了跨任何基础设施架构管理多个Kubernetes集群的运维和安全挑战，同时为DevOps团队提供了用于运行容器化工作负载的集成工具。
大能嘚吧嘚·2024-02-06 04:27

EKS集群使用helm安装rancher

一、安装helmcurlhttps://raw.githubusercontent.com/helm/helm/master/scripts/get-helm-3|bash二、安装rancher1.安装rancher命令【我安装默认安装最新版本，实际安装的是rancher:v2.7.9版本】#创建rancher使用的namespacekubectlcreatenamespacecattle-sys
干运维小白·2024-02-06 03:57

K8S之Namespace的介绍和使用

Namespace理论说明Namespace实操创建、查看命名空间使用ResouceQuota对Namespace做资源限额更多ResouceQuota的使用Namespace理论说明命名空间定义K8s支持多个虚拟集群
sissie喵~·2024-02-06 03:39

Spark On Yarn 运行模式

在Spark中，支持4种运行模式：1）Local：开发时使用2）Standalone：是Spark自带的，如果一个集群是Standalone的话，那么就需要在多台机器上同时部署Spark环境3）YARN
bandi4506·2024-02-06 03:02

Centos7.5+Ambari2.7.3+HDP3.1.0.0离线安装

就Ambari的作用来说，就是创建、管理、监视Hadoop集群，但是这里的Hadoop指的是Hadoop整个生态圈（例如Hive，Hbase，Sqoop，Zookeeper等），而并不仅是特指Had
WaiSaa·2024-02-06 02:53

java的热部署/热更新（1）背景

为什么需要热部署现阶段，线上集群的发布采取1.虚拟机/物理机器更新代码的方式，2.docker/k8s环境更新pod的镜像。优点显而易见，一致性好，可靠性高。但是热部署也有自己的优势：快速发布/
define_us·2024-02-06 02:54

微服务监控 - 监控自己的服务

客户端库指标类型Counter（计数器）Gauge（计量器）Histogram（直方图）Summary（摘要）Demo提供metrics接口添加自己的指标小结上一篇讲解了使用Exporter监控Kubernetes集群应用
CatchZeng·2024-02-06 01:43

k8s创建并发布WordPress

⽬的演示如何在KubeSphere中创建应⽤程序（以WordPress为例）并在集群外访问它。任务1：创建密钥创建MySQL密钥环境变量WORDPRESS_DB_PASSWORD是连接到
凌晨里的无聊人·2024-02-06 01:18

k8s 实战1：WordPress搭建

文章目录第一步：部署MariaDB第二步：部署WordPress第三步：映射WordPressPod端口号，让它在集群外可见第四步：创建反向代理的Nginx，让我们的网站对外提供服务WordPress架构图第一步
唐僧骑白马·2024-02-06 01:18

Docker 可视化工具

1、Portainer概念介绍Portainer是一款轻量级的应用，它提供了图形化界面，用于方便地管理Docker环境，包括单机环境和集群环境。
HuaLuLemon·2024-02-06 01:09

Docker Compose

1、概念介绍Docker-Compose是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。
HuaLuLemon·2024-02-06 01:39

薛兆丰《北大经济学课》第九十五讲导图笔记

因为集群产生了规模化，需求者过去，不需要跑其它地方，自己要的东西全部要吧采购到，这就节省了大量额外的时间和精力的成本，集群是非常大的优势。
浪客诗心·2024-02-06 01:09

k8s学习（RKE+k8s+rancher2.x）成长系列之简配版环境搭建（二）

三、简配版集群，适用于demo环境1.集群架构设计主机名角色配置(核数，内存，磁盘)MasterRKE,controlplane,etcd,worker,rancher-master2C8G40GSlaver1controlplane
日复一日伐树的熊哥·2024-02-06 00:29

2.RocketMQ集群搭建与消息发送样例

1.RocketMQ集群搭建1.1各角色介绍mqGroup.png角色NameServer:Broker的管理者。Broker自己去上报NameServer自己的存在Broker：消息的存储者。
lambdaCC·2024-02-06 00:58

Redis入门指南

中间件Redis持久化机制RDB（redisdatabase）AOF（appendonlyfile）命令重复的解决办法穿透、击穿、雪崩Redis事务key过期策略数据淘汰策略Redis分布式锁Redis集群的方案主要有几种主从复制
屈家全·2024-02-05 23:37

RabbitMQ部署指南

从本地加载在课前资料已经提供了镜像包：上传到虚拟机中后，使用命令加载镜像即可：dockerload-imq.tar1.2.安装MQ执行下面的命令来运行MQ容器：–hostnamemq1\单机可不配，但集群则要用
程序员老周666·2024-02-05 23:35

浅析软件测试中的一些常见理论：杀虫剂效应、金字塔模型、缺陷集群性原则、软件测试活动依赖于软件测试背景、软件测试的7大基本原则

这篇文章我主要想记录学习一下在软件测试行业中的一些常见理论效应以做基本了解。一、杀虫剂效应1、杀虫剂效应介绍杀虫剂效应原本指农业中随着农药的普及使用，害虫对农药的抗药性就越来越强，农药就越来越难杀死害虫。在农场里为了对付破坏农作物的害虫，农业专家开发出了对应的杀虫剂，刚开始效果很好，但是随着时间的流逝，害虫适应了杀虫剂，产生了抗药性，这些原有的农药就越来越难杀死害虫，必须设计新型的杀虫剂来对付害虫
sinat_26916241·2024-02-05 23:29

云计算-Docker Compose部署案例

什么是DockerComposeDocker-Compose项目是Docker官方的开源项目，负责实现对Docker容器集群的快速编排。
高高在吗·2024-02-05 22:49

TOMCAT集群部署方案一

1、配置tomcat的server.xml文件在server.xml文件中的host节点下面增加Cluster节点2、在server.xml中修改tomcat的端口例如：tomcat118080tomcat2280803、修改项目中的web.xml文件在web.xml文件中增加节点4、配置nginx需改nginx的nginx.conf#usernobody;worker_processes1;#e
大象也会飞·2024-02-05 22:41

kubeadm离线一键安装K8s集群

文章目录kubeadm离线一键安装K8s集群如何使用验证kubeadm离线一键安装K8s集群前言：安装的K8s版本为1.27.1容器运行时使用的containerd，不是使用docker。
银痕·2024-02-05 22:39

Doris集群部署

二、集群部署2.1整体架构主机1主机2主机3FE（LEADER）FE（FOLLOWER）FE（OBSERVER）BEBEBEBROKERBROKERBROKER注意：生产环境建议FE和BE分开部署2.2
一心猿·2024-02-05 21:34

消息中间件之RocketMQ源码分析(五)

消费进度保存机制消费者启动时会同时启动位点管理器，RocketMQ设计了远程位点管理和本地位点管理两种位点管理方式.集群消费时，位点由客户端提交给Broker保存.广播消费时，位点保存在消费者本地磁盘上
coffee_babe·2024-02-05 20:57

大数据之 ZooKeeper原理及其在Hadoop和HBase中的应用

分布式应用程序可以基于ZooKeeper实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。简介ZooKeep
yangfhit·2024-02-05 20:29

ES节点丢失导致实时数据导入速度特别慢

通过logtash导数据，由于当天入的数据是0备份，节点丢失后，某些shard丢失，导致集群一直处于red状态。节点丢失后，该索引的导入速度直线下降。
YG_9013·2024-02-05 20:26

【华为OD】C卷真题 100%通过 : API集群负载统计 Python代码实现[思路+代码]

C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[思路+代码]-CSDN博客java代码实现：【华为OD】C卷真题100%通过:API集群负载统计Java代码实现[思路
五木大大·2024-02-05 19:28

【华为OD】C卷真题 100%通过 : API集群负载统计 Java代码实现[思路+代码]

JS代码实现：【华为OD】C卷真题100%通过:API集群负载统计JS代码实现[思路+代码]-CSDN博客C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[思路+代码]
五木大大·2024-02-05 19:58

【华为OD】C卷真题 100%通过 : API集群负载统计 C++代码实现[思路+代码]

python代码：【华为OD】C卷真题100%通过:API集群负载统计Python代码实现[思路+代码]-CSDN博客C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[
五木大大·2024-02-05 19:57

【华为OD】C卷真题 100%通过 : API集群负载统计 JS代码实现[思路+代码]

题目描述：某个产品的RESTfulAPI集合部署在服务器集群的多个节点上，近期对客户端访问日志进行了采集，需要统计各个API的访问频次，根据热点信息在服务器节点之间做负载均衡，现在需要实现热点信息统计查询功能
五木大大·2024-02-05 19:57

【华为OD】C卷真题 100%通过 : API集群负载统计 C语言代码实现[思路+代码]

C++代码实现：【华为OD】C卷真题100%通过:API集群负载统计C++代码实现[思路+代码]-CSDN博客java代码实现：【华为OD】C卷真题100%通过:API集群负载统计Java代码实现[思路
五木大大·2024-02-05 19:26

MongoDB 中的分布式集群架构

前言前面我们了解了MongoDB中的索引，事务，锁等知识点。线上使用的MongoDB大部分的场景我们都会考虑使用分布式结构，这里我们来了解一下MongoDB中的分布式架构。粉丝福利，免费领取C/C++开发学习资料包、技术视频/项目代码，1000道大厂面试题，内容包括（C++基础，网络编程，数据库，中间件，后端开发/音视频开发/Qt开发/游戏开发/Linuxn内核等进阶学习资料和最佳学习路线）↓↓↓
程序员老舅·2024-02-05 19:22

Kubernetes基础(十一)-CNI网络插件用法和对比

Kubernetes本身并没有实现自己的容器网络，而是借助CNI标准，通过插件化的方式来集成各种网络插件，实现集群内部网络相互通信。
alden_ygq·2024-02-05 18:05

ES

Cluster：代表一个集群，集群中有多个节点，其中有一个为主节点，这个主节点是可以通过选举产生的，主从节点是对于集群内部来说的。
moonhatred·2024-02-05 18:42

虚拟服务器外部端口什么意思,虚拟服务器外部端口设置

虚拟服务器外部端口设置内容精选换一换在本章节中，您将会把游戏应用部署到CCE云容器引擎中，您需要执行以下操作：创建集群：集群是运行应用的逻辑分组，包含一组云服务器资源，每个节点对应一台云服务器。
寒月潇凌·2024-02-05 18:15

Dubbo实战（一）高速入门

集群容错:提供基于接口方法的透明远程过程调用。包含多协议支持，以及软负载均衡。失败容错。地址路由，动态配置等集群支持。自己主动发现:基于注冊
weixin_30516243·2024-02-05 18:45

Dubbo实战快速入门 （转）

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于注册中心
weixin_30663391·2024-02-05 18:45

Dubbo实战（一）快速入门

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于注册中心
易雪寒·2024-02-05 18:44

Java - Dubbo实战（一）快速入门 小白教程

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于注册中心
恐龙侠·2024-02-05 18:14

Dubbo入门实战（一）

集群容错:提供基于接口方法的透明远程过程调用，包括多协议支持，以及软负载均衡，失败容错，地址路由，动态配置等集群支持。自动发现:基于
正熵·2024-02-05 18:13

cluster.routing.allocation.enable与cluster.routing.rebalance.enable 区别

cluster.routing.allocation.enable和cluster.routing.rebalance.enable参数是有区别的：cluster.routing.allocation.enable设置成none，主要是影响集群中新创建的索引无法进行分片分配
bigdata张凯翔·2024-02-05 17:00
上一页 21 22 23 24 25 26 27 28 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他