hadoop生态集群

Spring Cloud Gateway：现代微服务架构中的API网关解决方案

SpringCloudGateway是Spring生态系统中的一款强大且灵活的API网关解决方案，本文将深入探讨其工作原理、核心功能及应用场景。什么是SpringCloudGateway？
鹿又笑·2024-09-11 13:32

eureka核心操作解析：集群间数据同步、自我保护、三级缓存

1.什么是注册中心？Eureka是springcloud中的一个负责服务注册与发现的组件。遵循着CAP理论中的A(可用性)P(分区容错性)。一个Eureka中分为eurekaserver和eurekaclient。其中eurekaserver是作为服务的注册与发现中心。eurekaclient既可以作为服务的生产者，又可以作为服务的消费者。具体结构如下图：Eureka是一个基于REST（表述性状态
dejavu111·2024-09-11 13:31

ActiveMQ集群、负载均衡、消息回流

文章目录集群配置主备集群SharedFileSystemMasterSlavefailover故障转移协议TransportOptions负载均衡静态网络配置可配置属性URI的几个属性NetworkConnectorProperties
星星都没我亮·2024-09-11 08:00

Hadoop Common 之序列化机制小解

这不过此种序列化虽然跨病态兼容性强，但是因为存储过多的信息，但是传输效率比较低，所以hadoop弃用它。
猫君之上·2024-09-11 08:59

深入理解hadoop(一)----Common的实现----Configuration

一,hadoop的配置管理a,hadoop通过独有的Configuration处理配置信息Configurationconf=newConfiguration();conf.addResource("core-default.xml
maoxiao_jsd·2024-09-11 08:59

消息中间件之ActiveMQ — 07

集群配置官方文档主备集群官方文档MasterSlaveTypeRequirementsProsConsSharedFileSystemMasterSlave共享文件系统，如SAN需要运行多个slave。
筑梦之人·2024-09-11 08:57

ActiveMQ集群下的消息回流功能

"丢失"的消息如果有broker1和broker2通过networkConnector连接，有一个consumer1连接到broker1,一个consumer2连接到broker2，程序往broker1上面发送30条消息，这时consumer2连接到broker2消费消息，当consumer2消费了15条消息时，broker2挂掉了。但是还剩下15条消息在broker2上面，这些消息就好像消息了，
海拉姆·2024-09-11 08:26

宇宙飞船穿越时空？《宇宙编年史-真理之书》说有更好的方法

其一，从能量吸收方式来看，人类处于整个生态链最脆弱的地方，维持
TWVC·2024-09-11 06:57

部署Fabric2.2 集群（使用官方Demo）

我们将一步一步搭建Fabric2.2版本的区块链网络，从0开始搭建服务器环境、到运行官方Demo集群、创建通道、安装合约，以及从零完成基于区块链的农产品溯源项目开发。
明神特烦恼·2024-09-11 05:35

Spark底层逻辑

Spark提供了一个分布式数据处理框架，其底层逻辑基于批处理架构，能够在大规模集群中高效地处理数据。
傲雪凌霜，松柏长青·2024-09-11 04:29

VirtualBox网络设置详解

引言：近期在macbookprom1下研究通过Vagrant配置Vmware、Virtualbox虚拟机搭建K8S集群的问题，碰到虚拟机的网络设置，有许多概念性的东西会困扰到集群网络的搭建，在参考文章的过程碰到一片较好的英文
开心感恩·2024-09-11 03:10

【深入学习Redis丨第三篇】深入详解Redis高可用集群模式

Redis一共4种模式：1、主从复制模式2、(Sentinel)哨兵模式3、(Cluster)集群模式4、代理模式文章目录前言1.**主从模式****1.1简介****1.2工作机制**2.
陈橘又青·2024-09-11 00:04

MySQL-MHA手动切换

环境检查当前数据库集群环境运行状态，包括主从复制状态和SSH能力检查主从复制状态在MHA的manager服务器执行命令：asterha_check_repl--conf={MHA路径}/conf/app.cnf
泰山与水·2024-09-11 00:03

【Redis】Redis 集群搭建与管理: 原理、实现与操作

目录集群(Cluster)基本概念数据分片算法哈希求余⼀致性哈希算法哈希槽分区算法(Redis使⽤)集群搭建(基于docker)第⼀步:创建⽬录和配置第⼆步:编写docker-compose.yml第三步
Hsu琛君珩·2024-09-11 00:02

MIT6.824 课程-MapReduce

MapReduce：在大型集群上简化数据处理概要MapReduce是一种编程模型，它是一种用于处理和生成大型数据集的实现。
余为民同志·2024-09-11 00:31

使用Ansible实现高效服务器配置管理的最佳实践

传统的手动配置方法不仅耗时耗力，而且容易出错，特别是在规模庞大的服务器集群中，配置的一致性难以保证。
范范0825·2024-09-10 23:28

k8s的网络类型

1、k8s三种通信方式1.1pod内部的网络通信pod内部容器的通信，pod创建完成之后，集群会分配pod一个全局的唯一ip地址，所有的容器共享ip地址pod内部可以用本地通信+端口的形式互相通信1.2
QChestnut·2024-09-10 21:40

使用 MongoDB 构建 AI：Patronus 如何自动进行大语言模型评估来增强对生成式 AI 的信心

PatronusAI由MetaAI和MetaRealityLabs的机器学习专家创立，旨在增强企业对生成式AI应用程序的信心，在塑造值得信赖的AI生态方面处于领先地位。
MongoDB 数据平台·2024-09-10 20:01

最新 Kubernetes 常见面试题汇总

它提供了一个可扩展的、高可用的集群，并包含了自动化部署、负载平衡、存储管理、自我修复、自动扩容等功能。2.Kubernetes中的Pod是什么？
闻道☞·2024-09-10 19:26

在自然里的绝美体验 推荐3家国内顶级享受的野奢营地

采用藏区本土化经营模式，以保持周边环境生态系统和藏传佛教文化为首要宗旨。不会因为商业的介入而过度开发他们赖以生存的土地。这里依靠着
蓬皮杜艺术头条·2024-09-10 19:46

hadoop 0.22.0 部署笔记

hbase是部署在hadoop平台上的NOSql数据库，因此在部署hbase之前需要先部署hadoop。
weixin_33701564·2024-09-10 17:41

构建数字产业生态链，共绘数字经济新蓝图

在当今数字化浪潮席卷全球的时代，构建数字产业生态链成为了推动经济发展的关键引擎。数字产业生态链如同一个强大的磁场，吸引着各类创新要素汇聚，共同描绘出数字经济的宏伟新蓝图。
树莓集团·2024-09-10 17:11

Deepspeed 结合huggingface Trainer实现多机分布式训练

1.网络配置-创建overlay共享网络初始化集群，在manager机器上运行:dockerswarminit#输出结果:Swar
ningzhao·2024-09-10 17:38

解决Windows环境下hadoop集群的运行_window运行hadoop,unknown hadoop01(4)

org.apache.hadoophadoop-com
2401_84160087·2024-09-10 16:34

解决Windows环境下hadoop集群的运行_window运行hadoop,unknown hadoop01(3)

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。需要这份系统化资料的朋友，可以戳这里获取一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！xmlns:xsi="http://www.w3.or
2401_84160087·2024-09-10 16:04

dolphinscheduler独立集群部署文档（海豚调度）

一、下载解压服务器内下载（华为云镜像站网址）：wgethttps://mirrors.huaweicloud.com/apache/dolphinscheduler/3.2.0/apache-dolphinscheduler-3.2.0-bin.tar.gz解压：tar-xvfapache-dolphinscheduler-3.2.0-bin.tar.gz改名：mvapache-dolphinsc
灰太狼！！·2024-09-10 16:30

flink独立集群部署

#flink独立集群部署说明安装环境三台服务器47.106.23.1（master）47.112.173.2（worker1）47.115.162.3（worker1）提前装好jdk和ssh,以下操作最好不要用
嘎子吱吱吱吱·2024-09-10 16:28

人工智能与机器学习原理精解【18】

文章目录决策树基础决策树的定义决策树的计算决策树的例子决策树的例题决策树算法一、决策树的算法过程二、决策树的性质Julia中实现框架使用`DecisionTree.jl`使用`MLJ.jl`Julia包的教程一、了解Julia包生态系统二
叶绿先锋·2024-09-10 15:26

linux虚拟机设置静态ip并访问外网

需求：需要用vmware做虚拟机集群，但是前提是保证每个节点的ip固定，而且还要联网。1.先确保你的动态ip状况下可以正常ping通外网，具体怎么配置这里不做详细解释。
却诚Salong·2024-09-10 15:55

2019-07-10

我们要允许别人说痛苦，允许自己的孩子跌倒，允许自己家人的故事流淌，不管这个故事是欢喜的，愤怒的，或者是挫败的，独特性，帮原生态的故事，被接纳被包容，我们发现能从故事中发现宝，故事其实是中医里面的气，太久的故事不说
刘会丽·2024-09-10 15:41

闵奕宸：格局越大，成就越大，生活就越来越顺畅

格局是一个人的精神世界宽广浩瀚程度，指的是一个人高瞻远瞩的眼界；海纳百川的雅量和胸怀；能考虑到大众利益的使命感和责任感；能有一般人不具备的胆识和智慧；能欣然的接受人生最好的礼物，也能坦然接受人生最坏的安排，从不怨天尤人的人生态度
闵奕宸浅谈·2024-09-10 13:54

深入解析HDFS：定义、架构、原理、应用场景及常用命令

引言Hadoop分布式文件系统（HDFS，HadoopDistributedFileSystem）是Hadoop框架的核心组件之一，它提供了高可靠性、高可用性和高吞吐量的大规模数据存储和管理能力。
CloudJourney·2024-09-10 12:39

笔记：润总2022年度演讲

1、跳出同一个能力圈，去提升自己的技能，去寻找新的生态位！在新的生态位、建立自己的竞争优势，你才有机会活得更好！交流、拜访、探索，坚持做难而有价值的事情！2、职场和岗位，思考：变化中的机会在哪里？
罗菊·2024-09-10 11:39

由渔民想到的……

听了渔民的回答，许欣频很是为这些渔民着急，如果海洋的生态系统发生变化，他们不怕连小鱼也抓不到吗？努力的方向错了，即使再努力也是错误的，这时就需要重
幸福的爱·2024-09-10 11:38

Docker部署RocketMQ5.2.0集群

部署架构说明：(1)Producer：生产者(2)Consumer：消费者(3)NameServer：RockerMQ的注册中心，多个实例组成集群，但相互独立，没有信息交换。
egzosn·2024-09-10 10:58

Ansible在CentOS下批量部署Nginx到Kubernetes集群

Ansible作为一种自动化运维工具，可以帮助我们高效地完成各种任务，包括在Kubernetes集群上部署应用。
酱江奖·2024-09-10 10:58

一口气了解大模型相关通识，基础笔记！

一、大模型生态有哪些语言类大模型:GPT-3、GPT-3.5、GPT-4系列模型。
AI小白熊·2024-09-10 08:15

redis基础文档

geo、hyperloglog、bitmap3、redis持久化RDB、AOF4、redis事务操作5、redis实现订阅发布（消息队列）6、redis主从复制7、redis哨兵模式（现在公司中所有的集群都用哨兵模式
Chen__Wu·2024-09-10 08:13

k8s 调度流程和资源管理

如下图所示，画了一个很简单的Kubernetes集群架构，它包括了一个kube-ApiServer，一组webhooks的Controller，以及一个默认的调度器kube-Scheduler，还有两台物理机节点
Cloud孙文波·2024-09-10 08:41

Hadoop的搭建流程

文章目录一、配置IP二、配置主机名三、配置主机映射四、关闭防火墙五、配置免密六、安装jdk1、第一步：2、第二步：3、第三步：4、第四步：5、第五步：七、安装hadoop1、上传2、解压3、重命名4、开始配置环境变量
lzhlizihang·2024-09-10 07:06

hive搭建 -----内嵌模式和本地模式

文章目录一、内嵌模式（使用较少）1、上传、解压、重命名2、配置环境变量3、配置conf下的hive-env.sh4、修改conf下的hive-site.xml5、启动hadoop集群6、给hdfs创建文件夹
lzhlizihang·2024-09-10 07:06

Hadoop之mapreduce -- WrodCount案例以及各种概念

文章目录一、MapReduce的优缺点二、MapReduce案例--WordCount1、导包2、Mapper方法3、Partitioner方法（自定义分区器）4、reducer方法5、driver（main方法）6、Writable（手机流量统计案例的实体类）三、关于片和块1、什么是片，什么是块？2、mapreduce启动多少个MapTask任务？四、MapReduce的原理五、Shuffle过
lzhlizihang·2024-09-10 07:06

听说优秀的人才，都能在这里遇到伯乐！

伯马乐业-5G时代全产业、全生态、全场景的人力资源服务平台古往今来，怀才不遇、壮志难酬者比比皆是。
伯马乐业·2024-09-10 07:40

Kubernetes 架构及部署、调度、状态管理流程简介

它旨在提供“跨主机集群的自动部署、扩展以及运行应用程序容器的平台”。它支持一系列容器工具，包括Docker等。它是当前绝对主流的容器管
啊滑滑蛋·2024-09-10 06:32

redis 主从配置

今天主要内容便是redis主从实现简单的集群，实际上redis的安装配置砸门ttlsa之前就有个文章，废话少说，进入正题吧Redis简介redis是
zfl092005·2024-09-10 06:01

深度图解Redis Cluster原理

不是好的程序员，欢迎微信关注「SH的全栈笔记」前言上文我们聊了基于Sentinel的Redis高可用架构，了解了Redis基于读写分离的主从架构，同时也知道当Redis的master发生故障之后，Sentinel集群是如何执行
SH的全栈笔记·2024-09-10 06:30

Docker搭建MongoDB Replica Set高可用集群+数据丢失&被黑解决+自动备份与恢复脚本+持久化慢查询记录

文章目录引节点规划配置文件创建持久化目录创建并推送证书启动临时容器修改配置文件单节点参考mongod.confdocker-compose.ymlReplicaSet参考mongod.confdocker-compose.yml部署与配置部署集群配置集群验证集群增删节点增加节点删除节点查看节点常用命令重置集群备份数据关闭服务删除持久化数据启动集群配置集群验证集群创建用户验证集群用户管理权限说明创建
秋风お亦冷·2024-09-10 06:55

springboot指定依赖jar版本

，而我们的集群是6.*的版本，试了很多次最后解决问题如下：在父pom的dependencyManagement中添加指定版本就可以了因为！！！
m0_67402235·2024-09-10 05:24

IAAS: IT公司去IOE-Alibaba系统构架解读

从Hadoop到自主研发，技术解读阿里去IOE后的系统架构原地址：......................云计算阿里飞天摘要：从IOE时代，到Hadoop与飞天并行，再到飞天单集群5000节点的实现
wishchin·2024-09-10 04:18

项目架构设计

个技术点服务架构1.LVS：四层负载均衡，将用户分发到不同Nginx服务器上2.Nginx:是一个高性能的HTTP和反向代理的web服务器，用于部署前端应用3.Keepalived:高可用，此处指的是集群
先熬半个月·2024-09-10 04:44
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他