hive分布式

深入理解Kafka消费者偏移量管理：如何确保事件已处理

深入理解Kafka消费者偏移量管理：如何确保事件已处理ApacheKafka是一款流行的分布式流处理平台，用于构建高吞吐量的数据管道和实时应用。
heromps·2024-08-25 00:17

Java行之有效的学习方法，Java直播课：Spring Cloud Alibaba Nacos 注册中心

Java是一种简单的，跨平台的，面向对象的，分布式的，解释的，健壮的安全的，结构的中立的，可移植的，性能很优异的多线程的，动态的语言。java编程学习方法有哪些呢?01零基础
HUIYL1·2024-08-24 22:49

PolarDB for PostgreSQL 内核解读 ：HTAP架构介绍

简介：在PolarDB存储计算分离的架构基础上我们研发了基于共享存储的MPP架构步具备了HTAP的能力，对一套TP的数据支持两套执行引擎：单机执行引擎用于处理高并发的OLTP；MPP跨机分布式执行引擎用于复杂的
阿里云云栖号·2024-08-24 20:56

幂等性是什么意思？

在计算机科学中，幂等性是一种非常重要的概念，特别是在设计和实现分布式系统、网络协议和Web服务等领域。
niceLiuSir·2024-08-24 19:19

zookeeper集群安装

java-centos安装java-linux配置java环境变量zookeeper单机安装说明版本选择：apache-zookeeper-3.5.7-bin.tar.gz下载地址：https://archive.apache.org
shuair·2024-08-24 18:13

Ubuntu下部署Hadoop集群+Hive（一）

准备环境：3台Ubuntu服务器（版本20.04），自建的虚拟机也可以；推荐内存：8GB以上；部署也支持Ubuntu20.04以上版本，或是Centos也可以。配置主机Host在三台服务器上添加主机名与IP的映射，以方便在局域网内进行主机间的快速访问和后续的文件配置；配置方法：vi/etc/hosts为方便配置：我的三台主机取名为HadoopMaster、HadoopSlave01、HadoopS
岩屿·2024-08-24 17:41

Hive3：数据随机抽样查询

于是，Hive提供了快速抽样的解决办法，可以快速从大表中随机抽取一些数据供用户查看。二、实操1、基于随机分桶抽样语法SELECT...FROMtblTABLESAMPLE(BU
生产队队长·2024-08-24 17:40

Objective-C中的时光机器：NSKeyedArchiver与NSKeyedUnarchiver的序列化之旅

标题：Objective-C中的时光机器：NSKeyedArchiver与NSKeyedUnarchiver的序列化之旅在Objective-C的世界中，对象序列化是一种将对象状态转换为可以存储或传输的形式的技术
杨哥带你写代码·2024-08-24 17:39

linux下hive指令快使用无介绍版（一）

问题背景平常项目基本都是直接在代码里面执行hiveSql，在linux下操作hive的指令总是忘记，基于此基础，写一个快速使用版的注意事项：默认已安装hive，并配置环境变量语句结尾的分号不能少，这是语法
时间是一种毒药·2024-08-24 17:00

Hadoop 的基本 shell 命令

Hadoop的基本shell命令主要用于与Hadoop分布式文件系统（HDFS）和MapReduce进行交互。
难以触及的高度·2024-08-24 14:22

https://developer.nvidia.com/cuda-toolkit-archive

CUDAToolkitArchive|NVIDIADeveloperhttps://developer.nvidia.com/cuda-toolkit-archive
aiotud·2024-08-24 14:17

Apache Dubbo编程指南系列之Dubbo架构、注解、springboot集成

介绍背景随着互联网的发展，网站应用的规模不断扩大，常规的垂直应用架构已无法应对，分布式服务架构以及流动计算架构势在必行，亟需一个治理系统确保架构有条不紊的演进。
麦田里的守望者··2024-08-24 13:45

【Pyspark-驯化】一文搞懂Pyspark修改hive表描述以及增加列使用技巧

【Pyspark-驯化】一文搞懂Pyspark修改hive表描述以及增加列使用技巧本次修炼方法请往下查看欢迎莅临我的个人主页这里是我工作、学习、实践IT领域、真诚分享踩坑集合，智慧小天地！
算法驯化师·2024-08-24 13:43

【Pyspark-驯化】一文搞懂Pyspark写入hive表的使用技巧

【Pyspark-驯化】一文搞懂Pyspark写入hive表的使用技巧本次修炼方法请往下查看欢迎莅临我的个人主页这里是我工作、学习、实践IT领域、真诚分享踩坑集合，智慧小天地！
算法驯化师·2024-08-24 13:43

基于Hadoop的海量图像检索

Hadoop的海量图像检索文章目录基于Hadoop的海量图像检索摘要第一章引言1.1研究背景1.2研究意义1.3国内外研究现状1.4研究内容与方法1.5论文结构第二章相关技术介绍2.1Hadoop框架2.2分布式存储与计算
usp1994·2024-08-24 13:12

从零到一建设数据中台 - 关键技术汇总

一、数据中台关键技术汇总语言框架：Java、Maven、SpringBoot数据分布式采集：Flume、Sqoop、kettle数据分布式存储：HadoopHDFS离线批处理计算：MapReduce、Spark
我码玄黄·2024-08-24 12:09

当企业受到CC攻击时有哪些解决方案？

网络行业经常会受到各种各样的网络攻击，其中CC攻击是生活中常见的分布式拒绝服务攻击方式之一，主要是用来针对网站的页面，导致服务器无法处理正常用户的访问请求，造成服务不能正常使用，业务中断的情况。
wanhengwangluo·2024-08-24 09:45

Kylin的工作原理及使用分享

1.简介1.1.概述ApacheKylin是一个开源的分布式分析引擎，它最初由eBay开发，并贡献给了开源社区。
丁爸·2024-08-24 07:01

Linux下ETCD安装、配置、命令

1.简介1.1.概述ETCD是一个开源的分布式系统工具，它提供了一个分布式键值存储系统，数据被分布式地存储在多个节点上。
丁爸·2024-08-24 07:01

深入解析：Objective-C中的NSDistributedNotificationCenter分布式通知机制

标题：深入解析：Objective-C中的NSDistributedNotificationCenter分布式通知机制在Objective-C的世界中，NSDistributedNotificationCenter
2401_85743969·2024-08-24 05:16

【RH134知识点问答题】第9章 访问网络附加存储

NFS是一种分布式文件系统协议，主要功能包括：①允许远程计算机通过网络访问共享文件。②实现文件系统在客户端和服务器之间的透明访问。③支持文件的共享、读取和写入，使得多个计算机可以共享相同的文件
是芽芽哩！·2024-08-24 03:38

MongoDB 非关系型数据库

一、起步MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
文i·2024-08-24 02:32

消息中间件：Kafka消息丢失与堆积问题分析与解决方案

消息中间件：Kafka消息丢失与堆积问题分析与解决方案Kafka作为分布式消息系统，广泛应用于实时数据流处理、大数据分析等领域。
upgrador·2024-08-24 02:02

分布式锁：Mysql实现，Redis实现，Zookeeper实现

目录前置知识Mysql实现分布式锁1.get_lock函数Java代码实现：2.forupdate尾缀Java代码实现：3.自己定义锁表Java代码实现：4.时间戳列实现乐观锁Java代码实现：Redis
不止会JS·2024-08-24 02:29

分布式调度 redis scheduler锁的实现参考

scheduler竞争锁注意参数类型和返回值@AutowiredprivateStringRedisTemplateredisTemplate;@AutowiredprivateXfuzzConfigxfuzzConfig;privatevolatilebooleanscheduler=false;@Scheduled(fixedDelay=5*1000,initialDelay=10*1000)
mumu2lili·2024-08-23 20:54

探索分布式编程的未来：eDistantObject——简化你的跨进程通信之旅

探索分布式编程的未来：eDistantObject——简化你的跨进程通信之旅在现代软件开发中，高效且灵活的跨进程通信已成为不可或缺的一部分。
温宝沫Morgan·2024-08-23 19:49

高性能内存对象缓存Memcached原理与部署

案例概述Memcached概述一套开源的高性能分布式内存对象缓存系统所有的数据都存储在内存中支持任意存储类型的数据提高网站的访问速度数据存储方式与数据过期方式数据存储方式：SlabAllocation按组分配内存
Small Cow·2024-08-23 19:16

分布式项目相互依赖，打包报错（找不到依赖问题）

博主最近自己做的一个项目中使用了微服务，并且对每个业务模块进行了划分，分离出来了基础模块，核心模块和通用模块，但是呢，可能博主存在项目依赖不对的情况，在其它业务模块中都引入了通用模块，这个时候，打包就出现一个问题，通用模块中的实体无法在其它业务模块中使用，（打包不通过，编译运行没得问题），于是博主也不想区改变依赖关系，到处找资料，捣鼓了好久，才找到一个解决办法。问题产生的原因是打包的时候，是需要先
雁归来时·2024-08-23 18:39

ELK日志系统

E：ElasticSearch简称ES分布式索引型非关系型数据库存储logstash输出的日志全文检索引擎，保存的格式是json格式L：logstash基于java语言开发的，数据收集引擎。
星殇曦落·2024-08-23 18:08

FastDFS的安装（分布式项目中的图片管理）

分布式项目中我们将图片存放在FastDFS中，也是用它来管理图片的，但是还需要使用Nginx的代理功能才能访问FastDFS中存放的图片（也就是说还要安装Nginx）一、FastDfs的安装（1）安装gcc
菜到极致就是渣·2024-08-23 17:38

Spring Boot 实战：集成 Apache Kafka 及注意事项

引言ApacheKafka是一个分布式流处理平台，广泛应用于构建实时数据管道和流应用。结合SpringBoot的强大功能，开发者可以轻松地构建出高效且易于维护的应用程序。
潘多编程·2024-08-23 15:52

Xcode 14.3 Run、Build、Archive 报错

由于手机升级了iOS16.4，想要真机调试，Xcode也要升级到14.3，于是就升级了一下，结果各种报错。Run、Build报错Filenotfound:/Users/johnson/Downloads/Xcode-beta.app/Contents/Developer/Toolchains/XcodeDefault.xctoolchain/usr/lib/arc/libarclite_iphon
齐云霄霄·2024-08-23 14:31

Ubuntu下部署Hadoop集群+Hive（二）

Hadoop集群搭建准备环境hadoop-3.3.6.tar.gz，jdk-8u421-linux-x64.tar.gz根据自己的使用下载对的hadoop和jdk版本hadoop下载地址：ApacheHadoopJDK下载地址：JavaDownloads|Oracle在3台服务器上的/opt/目录下新建module和software文件夹，其中software文件夹用来存放软件包，module用来
岩屿·2024-08-23 14:46

设计一个登录系统时，分布式如何保证

设计一个分布式登录系统时，需要确保系统的可靠性、安全性和可扩展性。分布式系统的登录功能需要处理用户认证、授权、会话管理等方面，并且要在多个服务器或服务实例之间保持一致。
喝醉的小鲁班·2024-08-23 14:43

springCloud 网关（gateway）配置跨域访问

如果项目是分布式架构，通过网关进行路由转发的，那么项目中如果存在跨域的访问，在每一个项目中单独配置，显示是错误的，我们只需要在网关处进行处理，其它项目都是由网关进行转发的，他们是不会存在跨域访问的（具体为啥
雁归来时·2024-08-23 13:11

Spring Cloud Consul中文文档(Consul和springCloud整合快速上手)

通过几个简单的注释，您可以快速启用和配置应用程序中的常见模式，并使用基于Consul的组件构建大型分布式系统。提供的模式包括服务发现，控制总线和配置。
子酷兒233·2024-08-23 13:06

Git 仓库基本概念和使用方式

Git是一种分布式版本控制系统，它用于跟踪和管理软件开发项目中的代码修改。以下是Git的基本概念和使用方式。
秋の本名·2024-08-23 12:33

ZooKeeper-安装-配置-启动

ZooKeeper：面向分布式应用的分布式协调服务ZooKeeper是一种用于分布式应用程序的分布式开源协调服务。
垃圾宝宝·2024-08-23 12:02

Git 的基本概念和使用方式

Git是一种分布式版本控制系统，可以追踪文件的修改、协调多人协作、管理项目的变更历史等。
vⅤ_Leon·2024-08-23 12:01

【Spring Cloud】Consul

通过几个简单的注解，您可以在应用程序内部快速启用和配置常见模式，并使用基于Consul的组件构建大型分布式系统。提供的模式包括服务发现、控制总线和配置。
程序者王大川·2024-08-23 12:00

分布式 - 主从复制技术详解及时延处理

作者：逍遥Sean简介：一个主修Java的Web网站\游戏服务器后端开发者主页：https://blog.csdn.net/Ureliable觉得博主文章不错的话，可以三连支持一下~如有疑问和建议，请私信或评论留言！主从复制技术详解及时延处理引言一、主从复制的基本概念二、主从复制的工作原理三、主从复制的实现方式1.MySQL主从复制2.PostgreSQL主从复制3.Redis主从复制四、主从复制
逍遥Sean·2024-08-23 09:15

memcache安装和详解

Memcached是一个高性能的分布式内存对象缓存系统，用于减轻数据库负载，加速动态Web应用程序和动态网站。它可以用来缓存数据库查询结果、API调用或者页面渲染结果等，提高数据访问速度和响应性能。
iangyu·2024-08-23 09:12

Eureka 服务发现原理及实践

引言随着微服务架构的普及，服务发现成为了分布式系统中的一个重要组成部分。Eureka是Netflix开源的一款基于REST服务的服务发现组件，主要用于定位服务，以实现云端中间层服务发现和故障转移。
不知名靓仔·2024-08-23 08:38

缓存雪崩解决方案：从基础到高级优化

1.概述在分布式系统中，缓存是一种有效提高系统性能和响应速度的手段。
heromps·2024-08-23 07:05

基于Hadoop平台的电信客服数据的处理与分析④项目实现：任务16：数据采集/消费/存储

Flume：是Cloudera提供的一个高可用的，高可靠的，分布式的海量日志采集、聚合和传输的系统，Flume支持在日志系统中定制各类数据发送方，用于收集数据；同时，Flume提供对数据进行简单处理，并写到各种数据
我非夏日·2024-08-23 06:28

Java中的数据一致性设计与实现

在分布式系统中，数据一致性是至关重要的，因为它确保在系统的不同部分之间数据的准确性和一致性。为了实现数据一致性，我们需要理解和应用不同的一致性模型和技术。
省赚客app开发者·2024-08-23 05:19

Go RPC 和 gRPC 技术详解

引言在分布式系统中，服务之间的通信是非常重要的组成部分。远程过程调用(RPC)是一种广泛使用的通信方式，它允许程序在不同的计算机上执行函数或过程，就像调用本地函数一样。
蒋厚施·2024-08-23 04:13

探索分布式定时任务的新境界：Dcron - 轻盈而稳健的守护者

探索分布式定时任务的新境界：Dcron-轻盈而稳健的守护者dcron轻量分布式定时任务库alightweightdistributedjobschedulerlibrary项目地址:https://gitcode.com
邬稳研Beneficient·2024-08-23 04:43

链路追踪及其常用工具

简介链路追踪（distributedtracing）是指通过记录分布式系统中各个组件之间的调用和传输信息的过程，来跟踪和分析请求在系统中的运行情况和性能问题的技术。
沉墨的夜·2024-08-23 02:31

第30篇 RPC概述

这种技术隐藏了底层网络通信细节，使得分布式系统中的组件能够无缝协作，极大地简化了分布式应用的开发和维护。以下是RPC的详细解释：**基本概念与原理**1.
hummhumm·2024-08-23 02:30
上一页 10 11 12 13 14 15 16 17 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他