Hadoop分布式环境搭建

鸿蒙系统开发适配注意事项

1.了解鸿蒙操作系统的特性：在适配前，深入了解鸿蒙操作系统的特性、架构和支持的功能，包括分布式架构、多设备协同、鸿蒙底层框架等。2.支持分辨率和屏幕尺寸
super_Dev_OP·2024-02-29 12:21

Spark整合hive（保姆级教程）

准备工作：1、需要安装配置好hive，如果不会安装可以跳转到Linux下编写脚本自动安装hive2、需要安装配置好spark，如果不会安装可以跳转到Spark安装与配置（单机版）3、需要安装配置好Hadoop
万家林·2024-02-29 09:47

SpringCloud和SpringBoot的版本依赖该怎么选择

前言SpringCloud是一个基于SpringBoot的微服务框架，用于构建和管理分布式系统的各个组件。
·2024-02-28 15:03

分布式和微服务

分布式和微服务是两个不同的概念。分布式系统是说多个独立的计算机或服务器组成的系统，这些计算机通过网络进行通信和协作，共同完成一个任务或提供一个服务。
你小汁完了·2024-02-28 14:56

Scrapy与分布式开发(1.1)：课程导学

Scrapy与分布式开发：从入门到精通，打造高效爬虫系统课程大纲在这个专栏中，我们将一起探索Scrapy框架的魅力，以及如何通过Scrapy-Redis实现分布式爬虫的开发。
九月镇灵将·2024-02-28 11:23

go环境配置

GO环境搭建:go的环境变量exportGO111MODULE=onexportGOSUMDB=sum.golang.orgexportGOPROXY=https://goproxy.cn,direct
心怀梦想·2024-02-28 08:48

消息队列-kafka

kafka和redis的区别数据类型和用途：Kafka：Kafka是一个分布式消息队列系统，主要用于高吞吐量的消息发布和订阅。它可以用于构建实时流处理应用、日志收集和传输、事件驱动架构等场景。
百晓生612·2024-02-28 08:48

分布式和微服务的联系和区别

1.联系分布式和微服务都是对单体应用功能的拆分2.区别：分布式是将不同的服务部署在不同服务器上微服务可能不是不同服务器此外，分布式是项目部署的层面上的理念，微服务是系统架构上的理念。
Jjjtreasure·2024-02-28 08:18

分布式匹配服

背景分布式匹配服（Distributedmatchmakingserver）是指将游戏的匹配功能分布到多台服务器上，并采用分布式架构实现的服务。
littleschemer·2024-02-28 08:48

Hadoop-Yarn-NodeManager是如何监控容器的

一、源码下载下面是hadoop官方源码下载地址，我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、上下文在我的博客中的ContainerLaunchprepareForLaunch
隔着天花板看星星·2024-02-28 06:15

Alibaba分布式事务组件Seata实战

Alibaba分布式事务组件Seata实战事务本地事务对于操作单一数据库的场景下的事务，ACIO特性是数据库直接支持的分布式事务在分布式情况下，需要的操作资源分布在多个资源服务上，而应用需要保证对于多个资源服务器的数据操作要么全部成功要么全部失败
枫吹过的柚·2024-02-27 19:01

Eureka简介与使用浅析

它是基于REST(RepresentationalStateTransfer)的服务，扮演了服务注册与发现的角色，在分布式系统中尤为重要。
dami_king·2024-02-27 15:57

XGB-12:在 Kubernetes 上进行分布式 XGBoost 训练

通过KubeflowXGBoostTrainingOperator支持在Kubernetes上进行分布式XGBoost训练和批量预测。
uncle_ll·2024-02-27 09:48

分布式scrapy_redis源码总结，及其架构

分布式scrapy的组件源码介绍完了，大致总结一下，相关组件目录如下：《RedisSpider的调度队列实现过程及其源码》《scrapy中scrapy_redis分布式内置pipeline源码及其工作原理
Python之战·2024-02-27 05:11

Java架构师之路四、分布式系统：分布式架构、分布式数据存储、分布式事务、分布式锁、分布式缓存、分布式消息中间件、分布式存储等。

目录分布式架构：分布式数据存储：分布式事务：分布式锁：分布式缓存：分布式消息中间件：分布式存储：Java架构师之路三、网络通信：TCP/IP协议、HTTP协议、RESTfulAPI、WebSocket、
述清-架构师之路·2024-02-27 01:09

分布式场景怎么Join，一文讲解

考虑到我的领域是在处理分库分表或者其他的分区模式，这让我开始不由得联想我们怎么在分布式场景应用这个Join逻辑，对于两个不同库里面的不同表我们是没有办法直接进行Join操作的。
吃胖点儿·2024-02-26 23:07

Jmeter分布式测试必踩坑，全部帮你排雷

在jmeter分布式环境部署上，有很同学都遇到了不少问题，就算是看过安装教程，也会在实际操作的时候一脸懵，经常的状态是就是：眼睛会了手不会。所以我们把大家容易出问题的地方总结出来，一起来看看吧！
测试界媛姐·2024-02-26 23:36

Python+Selenium4环境搭建

很久没有了解自动化了，最近发现项目中沉淀了很多东西，回归测试效率很低，所以必须要考虑构建自动化来提供各个环节的小效率。由于忙于需求以及产品的流程规范，现在对于测试技术方面的研究也相对少了很多。不过不管做什么，做好最重要！自动化几年前研究过一套框架，由于各方面原因一直没有推广起来，也导致我的自动化发展之路还没出生就胎死腹中。现在搞自动化主要是出于团队建设考虑，一方面为了提供测试部门的工作效率，保障产
软件测试媛·2024-02-26 22:05

Raft 算法、分布式 KV 面试汇总

本文选自《从零实现分布式KV》课程的加餐文章。
·2024-02-26 14:59

Xline v0.6.1: 一个用于元数据管理的分布式KV存储

Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。
·2024-02-26 14:57

git的下载、安装和配置

git是分布式管理工具，详细使用可查询相关资料，本文主要描述git的安装以及配置。
南木是南木·2024-02-26 13:01

Kafka入门介绍一

介绍Kafka是一个分布式系统，由服务器和客户端组成，通过高性能TCP网络协议进行通信。它可以部署在本地和云中的裸机硬件、虚拟机和容器上环境。
吴代庄·2024-02-26 07:49

Java面试八股文

OSIvsTCPIP模型2.Java面渣逆袭必看，面试题八股文Java基础、Java集合框架、Java并发编程、JVM、Spring、Redis、MyBatis、MySQL、操作系统、计算机网络、RocketMQ、分布式
翁正存·2024-02-26 05:16

Zookeeper实现分布式锁

Zookeeper实现分布式锁案例在分布式场景下，单机的锁已经无法实现对并发的控制，我们需要专门用分布式锁来在分布式环境下实现对多个进程能够有序的访问资源。
正在绘制中·2024-02-25 23:35

分布式理论

p指分区容忍性具体是指“当部分节点出现消息丢失或者分区故障的时候，分布式系统仍然能够继续运行”，即系统容忍网络出现分区，并且在遇到某节点或网络分区之间网络不可达
背帆·2024-02-25 12:52

【Git-Exception】Git报错：fatal: unable to auto-detect email address

Git是一种分布式版本控制系统，它被广泛使用于软件开发和其他版本控制任务。
·2024-02-25 03:06

Jmeter性能实战之分布式压测

分布式执行原理1、JMeter分布式测试时，选择其中一台作为调度机(master)，其它机器作为执行机(slave)。
咖啡加剁椒。·2024-02-24 16:57

SpringCloud 面试题

2、分布式：专业的事情交给专业的人去做，尽量降低耦合度（就是说每个模块是不受影响的），一个模块你只做一件小事情。3、微服务：微服务化的核心就是将传统的一站式应用,根据业务拆
予她清酒°·2024-02-24 08:24

Eureka/Zookeeper/Nacos实现注册中心区别

Availability（可用性）Partitiontolerance（分区容错性）必然存在在我们集群中，如果某个服务器宕机（故障）：保证数据一致性：一致性(CP)保证服务可用性：可用性AP这个定理的内容是指的是在一个分布式系统中
超级码里喵·2024-02-24 08:24

读TiDB源码聊设计：浅析HTAP的SQL优化器

1.引子如果让你做一个分布式数据库的优化器，面对以下的SQL，你会想到什么好的方法去执行他们呢？
·2024-02-24 03:52

Redis缓存一致性问题(自用记录)

由于现在的系统大多是分布式的，高并发的，redis和传统的数据库，存在数据不一致的问题。
小羊咩恩·2024-02-24 01:16

面试前端性能优化八股文十问十答第一期

⭐1）CDN的概念CDN（ContentDeliveryNetwork，内容分发网络）是一种分布式的网络架构，旨在提高网站内容传输的效率和性能。
程序员小白条·2024-02-23 20:10

JavaWeb之分布式事务规范

J2EE包括了两套规范用来支持分布式事务：一种是JavaTranscationAPI(JTA)，一种是JavaTranscationService(JTS)JTA是一种高层的、与实现无关的、与协议无关的标准
·2024-02-23 15:45

[AIGC] Kafka 消费者的实现原理

每个消费者都属于一个消费者组，消费者组中的多个消费者可以共同消费一个主题，实现分布式消费。每个消费者都会维护自己的偏移量，用于记录已经读取到的消息位置。
程序员三木·2024-02-23 07:24

大数据计算技术秘史（上篇）

单机系统无法存储如此之多的数据，先是过渡到了分库分表这类伪分布式技
·2024-02-22 20:33

flink如何利用checkpoint保证数据状态一致性

flink数据状态一致性1状态一致性级别1.1AT-MOST-ONCE(最多一次)：1.2AT-LEAST-ONCE(至少一次)：1.3EXACTLY-ONCE(精确一次)：1.4分布式快照与至少一次事件传递和重复数据删除的比较
Direction_Wind·2024-02-22 17:37

spring-cloud 使用初谈（一）--服务注册、负载均衡以及断路器

spring-cloud基于spring-boot，spring-boot跟传统的spring项目的区别的就是精简配置‘搭建的框架’更轻便，上手更快2.spring-cloud跟传统项目的区别是前者是分布式后者是单体架构
程序员ken·2024-02-20 23:58

Spring Cloud Neflix Hystrix应用实战详解

Hystrix实战OpenFeign整合Hystrix通常在复杂的分布式系统都存在不同服务之间的调用，OpenFeign作为SpringCloud的远程调用工具默认是已经集成了Hystrix。
NullzzZ·2024-02-20 22:35

基于Docker搭建hdfs分布式实验环境

理论知识DockerDocker是一个开源的应用容器引擎，基于Go语言并遵从Apache2.0协议开源。Docker可以让开发者打包他们的应用以及依赖包到一个轻量级、可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化。容器是完全使用沙箱机制，相互之间不会有任何接口，容器性能开销极低。Docker能够将应用程序与基础架构分开，从而可以快速交付软件。借助Docker，开发者可以与管
dejiedoor·2024-02-20 22:38

docker搭建hadoop hdfs完全分布式集群

1制作hadoop镜像参见https://www.cnblogs.com/rmxd/p/12051866.html该博客中只参考制作镜像部分，固定IP及启动集群的部分应该跳过。
shangcunshanfu·2024-02-20 22:08

基于docker安装HDFS

1.docker一键安装见docker一键安装2.拉取镜像sudodockerpullkiwenlau/hadoop:1.03.下载启动脚本gitclonehttps://github.com/kiwenlau
core512·2024-02-20 22:02

分布式调出单/分布式调入单打开列表没有数据

文章目录分布式调出单/分布式调入单打开列表没有数据分布式调出单/分布式调入单打开列表没有数据分布式调出单/分布式调入单打开列表没有数据，多组织已勾选，销售出库单下查可以查到分布式调出单/分布式调入单是有数据的原因
懒人咖·2024-02-20 22:22

金蝶云星空分步式调出单无法反审核

文章目录金蝶云星空分步式调出单无法反审核金蝶云星空分步式调出单无法反审核解决方案：分布式调出单/分布式调入单不需要人工操作反审核，反审核销售出库单，自动就会撤销了。
懒人咖·2024-02-20 22:22

Doris ——SQL原理解析

2.3逻辑计划2.4物理计划三、DorisSQL解析的总体架构四、Parse阶段五、Analyze阶段六、SinglePlan阶段（生成单机逻辑Plan阶段）七、DistributedPlan计划（生成分布式逻辑阶段
爱吃辣条byte·2024-02-20 22:14

一些关于Java课程学习下来的心得

Python两种语言的我，对于Java的总结基本可以浓缩成：比C语言丰富，但是比Python格式要求高，但是多种语言容易混淆，这次总结作业我将大体按照书本，结合上课习题进行分别总结，课本上基本安装内容之类的环境搭建以及程序设计基础部就不多加赘述
lolo230·2024-02-20 21:11

带入gRPC：分布式链路追踪 gRPC-Opentracing-Zipkin

带入gRPC：分布式链路追踪gRPC+Opentracing+Zipkin原文地址：带入gRPC：分布式链路追踪gRPC+Opentracing+Zipkin项目地址：https://github.com
weixin_34007020·2024-02-20 21:15

grpc了解

grpc是由google开发的一款语言中立、平台中立、开源的RPC系统在grpc中客户端应用可以像调用本地对象一样直接调用另一台不同机器上服务端应用的方法，使得很容易创建分布式应用和服务。
动态一时爽，重构火葬场·2024-02-20 21:43

Redis --- 高级篇

前言：本文问Redis分布式缓存介绍，想要了解其他资源，可以点击昂焱数据（www.ayshuju.com）一、Redis持久化1.1RDB持久化RDB全称RedisDatabaseBackupfile（
大迂居士·2024-02-20 21:08

Redis-面试题

一、基础1、什么是RedisC语言编写，基于key-value存储的nosql开源内存数据库内存存储、数据结构优化，高性能一般用于应用和数据库之间的分布式缓存中间件提供主从复制+哨兵、集群的方式实现高可用
HBryce24·2024-02-20 21:06

Ubuntu22.04.1 C/C++环境搭建

1、更新源updatesudoapt-getupdate2、C/C++开发环境搭建sudoaptinstallbuild-essentialgdb3、查看版本号，检验是否安装成功。
R·熊猫·2024-02-20 20:55
上一页 15 16 17 18 19 20 21 22 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他