集群微服务阿里云云原生

HDFS是如何存储和管理大数据

以下是HDFS存储和管理大数据的详细机制：一、HDFS架构HDFS采用主从架构，主要包括以下组件：NameNode（主节点）：作为集群的“大脑”，NameNode负责管理文件系统的命名空间，维护文件和目录的元
python资深爱好者·2025-02-26 11:38

Hadoop 基础原理

Hadoop基础原理基本介绍Hadoop的必要性Hadoop核心组件Hadoop生态系统中的附加组件HDFSHDFS集群架构HDFS读写流程HDFS写流程HDFS读流程NameNode持久化机制MapReduce
disgare·2025-02-26 11:38

短视频矩阵服务架构指南

高效微服务架构设计指南技术架构设计在技术架构设计方面，本系统采用了微服务架构，以增强系统的可维护性和扩展性。每个服务都可以独立部署和扩展，从而提高了系统的整体灵活性和响应速度。
李lrh9166·2025-02-26 11:37

Flink-02-flink技术架构及工作原理

Flink组件栈自下而上，分别针对每一层进行解释说明：Deployment该层主要涉及了Flink的部署模式，Flink支持多种部署模式：本地、集群（Standalone/YARN）、云（GCE/EC2
TRX1024·2025-02-26 10:35

本地Oracle数据库复制数据到Apache Hive的Linux服务器集群的分步流程

我们已经有安装ApacheHive的Linux服务器集群，它可以连接到一个OracleRDS数据库，需要在该Linux服务器上安装配置sqoop，然后将OracleRDS数据库中所有的表数据复制到Hive
weixin_30777913·2025-02-26 10:34

Hologres 介绍

Hologres是阿里云提供的一款实时数据分析平台，它结合了数据仓库（DataWarehouse）和流式计算（StreamProcessing）的优势，专为大规模数据分析和实时数据处理而设计。
黄毛火烧雪下·2025-02-26 10:04

Docker 的安全配置与优化（一）

在微服务架构中，每个微服务都可以被封装成一个独立的Docker容器，实现了服务的隔离和独立部署，使得系统的扩展性和维护性得到了极大的提升。同时，在持续集成和持续交付（CI/CD）流程中，Docker
计算机毕设定制辅导-无忧学长·2025-02-26 10:02

rabbitmq 同步策略_数据同步解决方案-canal与rabbitmq

学习目标能够完成canal环境的搭建与数据监控微服务的开发能够完成首页广告缓存更新的功能，掌握OkHttpClient的基本使用方法能够完成商品上架索引库导入数据功能，能够画出流程图和说出实现思路能够完成商品下架索引库删除数据功能
weixin_39996739·2025-02-26 08:51

Zookeeper（73）Zookeeper在微服务架构中的应用是什么？

在微服务架构中，Zookeeper主要用于以下几个关键领域：服务发现：Zookeeper可以帮助微服务实例在启动时注册自己，并让其他服务能够发现并调用这些服务。
辞暮尔尔-烟火年年·2025-02-26 08:18

【微服务】SpringBoot 自定义消息转换器使用详解

目录一、前言二、SpringBoot内容协商介绍2.1什么是内容协商2.2内容协商机制深入理解2.2.1内容协商产生的场景2.3内容协商实现的常用方式2.3.1前置准备2.3.2通过HTTP请求头2.3.2.1操作示例2.3.3通过请求参数三、SpringBoot消息转换器介绍3.1HttpMessageConvertor介绍3.1.1常用的HttpMessageConvertor3.2如何确定使
小码农叔叔·2025-02-26 07:41

Flink集群架构

从本章节开始，我们对flink从它的一个集群的一个架构以及它的一个部署模式着手，去了解flink如何去部署在不同的这样的一个集群的一些资源管理器上面，以及相应的一些原理的一些解析。
流量留·2025-02-26 06:32

宿主机进程挂载到容器内_关于Docker的挂载

底层原理不懂就上手，上手出了问题就懵逼，最近在对接阿里云时遇到Docker存储驱动的神坑，爬了几天爬不出来，最后发现是节点中Docker存储驱动的问题，由此引发此次学习，避免类似问题再次懵逼。
weixin_33389183·2025-02-26 06:00

GaussDB 数据库迁移方案设计与实践

GaussDB（华为云分布式关系型数据库）凭借其高吞吐、强一致性、弹性扩展等特性，成为政企客户替换传统数据库（如MySQL、Oracle）或升级原有GaussDB集群的首选目标。
如清风一般·2025-02-26 05:56

Apache Pinpoint工具介绍

ApachePinpoint：分布式系统性能分析与链路追踪一、Pinpoint简介ApachePinpoint是一个开源的分布式追踪系统，专为微服务架构设计，支持HTTP、RPC、MQTT等协议的调用链追踪
程序员的世界你不懂·2025-02-26 05:55

K8S集群搭建(kubeadm+calico)

准备阶段环境显卡：4060ti系统：ubuntu22.041.安装docker官网安装步骤：#AddDocker'sofficialGPGkey:sudoapt-getupdatesudoapt-getinstallca-certificatescurlsudoinstall-m0755-d/etc/apt/keyringssudocurl-fsSLhttps://download.docker.
·2025-02-26 05:02

什么容错性以及Spark Streaming如何保证容错性

容错系统的关键特性包括负载平衡、集群、冗余、复制和故障转移等。
python资深爱好者·2025-02-26 04:48

大模型是如何蒸馏像Qwen-7B，Llama-3 这种小模型的？

1.Qwen-7B和Llama-3的所属公司Qwen-7B：属于阿里巴巴，是“通义千问”系列的开源模型，由阿里云团队研发。
闫哥大数据·2025-02-26 03:12

使用阿里云OSS密钥配置环境变量

以管理员身份打开CMD命令行setOSS_ACCESS_KEY_ID=你的密钥IDsetOSS_ACCESS_KEY_SECRET=你的密钥密码回车执行之后，输入以下命令setxOSS_ACCESS_KEY_ID"%OSS_ACCESS_KEY_ID%"setxOSS_ACCESS_KEY_SECRET"%OSS_ACCESS_KEY_SECRET%"此时环境变量已经配好了，可以通过以下命令查看是
JokerLLLiu·2025-02-26 00:55

自己搭建远程桌面服务器-RustDesk（小白版），借花献佛

4.准备内容①一个公网服务器（可装Centos7.6或Windows系统）建议使用Centos可以命令部署如果没有服务器，可自行到腾讯云、阿里云申请（一般都会有活动什么年终、双十一、双十二等等，价格不贵
嘻嘻哈哈学编程·2025-02-26 00:50

以太坊DPOS私链搭建--使用gttc,搭建一个可用于性能测试的区块链框架（1）

遇到的一些坑bootnode一直不起作用，所以决定不用它，改用static-nodes.json在阿里云机器上编译gttc系统Ubuntu16.04想把eth服务部署到docker中方便移植，但是gttc
过河卒啦啦啦·2025-02-25 22:35

微服务架构是什么？怎么使用？

微服务架构一.服务架构演变过程1.1单体应用架构所有的功能都在一个项目中1.2集群架构把一个单体项目部署多个，使用nginx进行负载均衡，根据负载均衡策略调用后端服务。
刘zy_9527·2025-02-25 21:34

面试题：SpringCloud的优缺点有哪些

以下是一个适合面试场景的回答模板：SpringCloud的优点微服务生态完善SpringCloud提供了微服务架构中常见的解决方案，如服务注册与发现（Eureka、Consul）、配置中心（SpringCloudConfig
clownAdam·2025-02-25 21:30

架构的演进

作者|许晓斌阿里云高级技术专家传统单体应用架构十多年前主流的应用架构都是单体应用，部署形式就是一台服务器加一个数据库，在这种架构下，运维人员会小心翼翼地维护这台服务器，以保证服务的可用性。
阿里云云原生·2025-02-25 21:00

腾讯云容器与Serverless的融合：探索《2023技术实践精选集》中的创新实践

2023技术实践精选集》中的创新实践引言《2023腾讯云容器和函数计算技术实践精选集》整体评价特色亮点分析Serverless与Kubernetes的融合FinOps在资源配置优化中的应用云监控Barad的云原生实践对云计算领域的贡献和影响阅读体验分享案例的实用性
虎头金猫·2025-02-25 21:28

Spark集群架构

文章目录Spark架构Spark执行任务流程Spark运行环境SparkonYARNSparkStandaloneSpark架构Spark可以运行在YARN上也可以运行Mesos上，无论运行在哪个集群管理架构上
情深不仅李义山·2025-02-25 20:25

四、spark集群架构

spark集群架构官方文档：http://spark.apache.org/docs/latest/cluster-overview.html集群架构我们先看这张图这张图把spark架构拆分成了两块内容
weixin_34411563·2025-02-25 20:54

精选 ES（elasticsearch）添加、修改、查询、删除详细使用语法

es使用简单，支持集群，适用于海量数据的存储、搜索与分析，应用十分广泛。
代码讲故事·2025-02-25 20:54

分布式服务框架 Dubbo

它最早由阿里巴巴开发，现已成为一个开源项目，并且广泛应用于微服务架构中。
·2025-02-25 20:45

Spark集群架构介绍

Spark之YARN介绍一、导语二、Spark及其特性三、Spark架构总览一、导语ApacheSpark(后续简称为Spark)是一款正在点燃大数据世界的开源集群计算框架。
olifchou·2025-02-25 20:23

【邀请函】计算巢：加速软件上云之旅——2024-12-18 见！

阿里云计算巢和云市场致力于为服务商和用户提供高效、便捷、安全的服务使用体验。为了更好地服务软件商业化，我们特举办此次AUG北京站沙龙活动，深入探讨软件上云的趋势，介绍阿里云在商业化软件方面
·2025-02-25 20:44

Spark Standalone集群架构

北风网spark学习笔记SparkStandalone集群架构SparkStandalone集群集群管理器，clustermanager：Master进程，工作节点：Worker进程搭建了一套Hadoop
htfenght·2025-02-25 20:22

Spark----Spark 在不同集群中的架构

Spark注重建立良好的生态系统，它不仅支持多种外部文件存储系统，提供了多种多样的集群运行模式。
XiaodunLP·2025-02-25 20:22

运维实践 | 使用K3S之快速搭建精简版本K8S集群环境，助力开发测试环境!

欢迎关注「WeiyiGeek」点击下方卡片即可关注我哟!设为「星标⭐」每天带你基础入门到全栈实践再到放弃学习！涉及网络安全运维、应用开发、物联网IOT、学习路径、个人感悟等知识“花开堪折直须折，莫待无花空折枝。”作者主页：[https://www.weiyigeek.top]作者博客：[https://blog.weiyigeek.top]作者答疑学习交流群：请关注
全栈工程师修炼指南·2025-02-25 19:17

k8s集群内的pod连接集群外部的mysql， k8s集群内部服务如何连接集群外部mysql？ 一文搞明白

一、为什么不将mysql服务部署到k8s集群中使用呢？1.有状态服务在K8s中的管理比较复杂，特别是持久化存储的问题。
终端行者·2025-02-25 19:17

使用kuboard管理kubernetes集群

官网：https://kuboard.cn/learning/准备一台新的服务并安装docker[root@docker-server~]#dockerrun-d--restart=unless-stopped--name=kuboard-p80:80/tcp-p10081:10081/tcp-eKUBOARD_ENDPOINT="http://192.168.209.176:80"-eKUBOA
终端行者·2025-02-25 19:17

如何添加集群节点与token过期如何重新生成？

Kubernetes集群部署零、版本信息操作系统：CentosStream9、Centos7通过k8s版本：1.26.11.28.2本文档未使用docker,使用containerd从版本1.24开始已经去掉默认对
终端行者·2025-02-25 19:17

docker修改command_只要 8 个步骤，学会这个 Docker 命令终极教程！

花费1-2天的时间来设置Docker集群，或找出导致Docker容器启动失败的代码，你是不是也有过类似的经历？
凶残小龙虾·2025-02-25 18:39

MySQL 主从集群同步延迟问题分析与解决方案

MySQL主从复制（Replication）是构建高可用架构的核心技术，但在实际应用中，主从同步延迟（ReplicationLag）是常见且棘手的问题。延迟会导致从库数据不一致、读请求返回旧数据，甚至引发业务逻辑错误。本文将深入分析延迟原因并提供系统性解决方案，助你彻底优化主从同步性能。一、主从同步延迟的本质主从同步延迟是指从库（Slave）的数据落后于主库（Master）的时间差，通常由以下环节
豪宇刘·2025-02-25 17:35

vmware centos 10 stream boot 安装

vmwarecentos-10streamboot安装1、vmware版本2、阿里云镜像下载地址3、自定义配置3.1windows查看硬件资源3.2更换阿里云软件安装源3.3环境选择3.4附加软件（MinimalInstall
zerozon·2025-02-25 17:31

微服务即时通信系统---（三）框架学习

目录brpcRPC框架核心概念工作原理介绍安装头文件包含和编译时指明库类与接口介绍日志输出类与接口protobuf类与接口Closure类RpcController类服务端类与接口ServerOptions类Server类ClosureGuard类HttpHeader类Controller类客户端类与接口ChannelOptions类Channel类使用同步调用proto文件server端clie
YangZ123123·2025-02-25 16:28

spark程序提交到集群上_Spark集群模式&Spark程序提交

Spark集群模式&Spark程序提交1.集群管理器Spark当前支持三种集群管理方式Standalone—Spark自带的一种集群管理方式，易于构建集群。
毫无特色·2025-02-25 16:25

JUC并发—9.并发安全集合三

CopyOnWriteArrayList2.并发安全的链表队列ConcurrentLinkedQueue3.并发编程中的阻塞队列概述4.JUC的各种阻塞队列介绍5.LinkedBlockingQueue的具体实现原理6.基于两个队列实现的集群同步机制
东阳马生架构·2025-02-25 15:53

Redis原理—3.复制、哨兵和集群

大纲1.Redis使用sync命令实现的复制功能2.Redis使用psync命令实现的复制功能3.Redis主从服务器之间的心跳检测4.从服务器如何实现复制主服务器的(复制的实现)5.Redis的复制拓扑介绍6.Redis主从复制数据延迟的处理7.Redis主从复制的问题8.RedisSentinel和高可用9.Redis如何保存更多的数据10.一个普通Redis服务器的初始化过程11.一个Sen
东阳马生架构·2025-02-25 15:53

基于docker-compose安装spark 1+3及Spark On Yarn模式集群

基于docker-compose安装spark1+3及SparkOnYarn模式集群1、`docker-compose.yml`：2、`spark.env`：此处的样例是参考别人的，之后自己整合一套可以使用的
dh12313012·2025-02-25 15:20

阿里悄悄干了件大事：程序员加班的最后一盏灯终于灭了

那天阿里云突然宣布，把刚刚开源的DeepSeek-R1满血版，直接装进了程序员的饭碗IDEA里。这个叫通义灵码的插件，正在掀起一场静悄悄的办公室革命。一、当’白嫖党’遇上’满血版’隔壁工位的老张已经三
网络安全我来了·2025-02-25 14:14

idea阿里云maven配置

一、下载阿里云setting配置文件百度网盘链接：链接：https://pan.baidu.com/s/1FANQ7WePTZg-2LEgNkEMew提取码：hwtv二、解压文件，移动settings文件将其中的
吃en橙·2025-02-25 13:02

黑马es数据同步mq解决方案

binlog优点:完全解除服务间耦合缺点:开启binlog增加数据库负担、实现复杂度高利用MQ实现mysql与elasticsearch数据同步利用课前资料提供的hotel-admin项目作为酒店管理的微服务
Gungnirss·2025-02-25 13:32

解决 kubeasz 安装k8s集群跨节点pod 无法使用cluster ip通讯问题

问题描述使用kubeasz搭建k8s集群后使用的配置文件#'etcd'clustershouldhaveoddmember(s)(1,3,5,...)
CHEN_RUI_2200·2025-02-25 13:00

从入门到放弃之生产环境基于Kubernetes V1.21.10搭建高可用集群

1.资源规划名称系统配置IP组件k8s-master01CentOS7.94核8G500G存储172.16.97.27kube-apiserverkube-controller-managerkube-scheduleretcdk8s-master02CentOS7.94核8G500G存储172.16.97.28kube-apiserverkube-controller-managerkube-s
收破烂的小白·2025-02-25 12:25

【系统架构设计师-2024上半年真题】案例分析-答案及详解

系统设计与建模）问题1问题2问题3问题4【材料3】（嵌入式）问题1问题2问题3【材料4】（数据库缓存）问题1问题2问题3【材料5】（Web架构）问题1问题2问题3【材料1】（软件架构设计与评估）问题1(7分)简述微服务架构
数据知道·2025-02-25 12:54
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他