apache集群

SpringBoot整合Kafka

安装windows版安装包下载地址：https://kafka.apache.org/downloads下载完毕后得到tgz压缩文件，使用解压缩软件解压缩即可使用，解压后得到如下文件建议使用windows
ITBOY_ITBOX·2024-09-05 15:42

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。在实时数据处理、日志聚合、指标监控、事件驱动架构等场景下，Kafka有着广泛的应用。它的高性能、可扩展性以及丰富的功能使其成为了大数据领域中的重要工具之一。Kafka中发布订阅的对象是topic。用户可以为每类数据创建一个topic，把向
kuuuugua·2024-09-05 15:41

ORACLE之RAC集群常用命令

ORACLE之RAC集群常用命令RAC的守护进程/etc/init.d/init.ohasdRAC的日常管理命令1）节点层2）网络层3）集群层4）应用层节点层olsnodes-n-p-i--这个命令用来显示集群点列表检查集群节点
XiaoHG_CSDN·2024-09-05 13:01

Spark

Spark是一个快速的、通用的集群计算系统，主要用于大规模数据处理。它最早由加州大学伯克利分校的AMPLab开发，并于2010年开源，后来由Apache软件基金会管理。
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

Hadoop-MapReduce机制原理

Reduce阶段步骤：7、MapReduce阶段图1、MapReduce概述  HadoopMapReduce是一个分布式计算框架，用于轻松编写分布式应用程序，这些应用程序以可靠，容错的方式并行处理大型硬件集群
H.S.T不想卷·2024-09-05 11:46

根据xml模板导出excel

依赖5.2.3org.apache.poipoi${poi.version}org.apache.poipoi-ooxml${poi.version}org.apache.poipoi-ooxml-lite
weixin_44877172·2024-09-05 11:45

kafka消费者重复消费同一个topic

场景是sparkstreaming消费kafka数据在这里sparkstream和kafka都是单节点的集群模式。同时起两个不同的groupid的应用，发现会发生后起来的应用消费不到数据。
小琳ai·2024-09-05 10:06

k8s访问外部mysql_Kubernetes连接外部数据源

Kubernetes架构下比较核心的问题是数据如何persistance,虽然提供了Persistentvolumn的方式，但是对于像数据库之类的产品在kubernetes集群环境中运行和管理还是很有难度的
健玮·2024-09-05 08:24

负载均衡的详细说明

当一台服务器的性能达到极限时，我们可以使用服务器集群来提高网站的整体性能。那么，在服务器集群中，需要有一台服务器充当调度者的角色，用户的
submarineas·2024-09-05 08:23

2、mysql-canal-zk-kafka-es数据同步

方案总体介绍：通过zookeeper管理canal和kafka集群,zk本身也做集群配置；通过canal作为mysql的从库实时读取binlog，然后将数据以json格式发送到kafka平台，会有一个专门消费
kobe0429·2024-09-05 08:01

k8s调度器Scheduler

k8s调度器SchedulerKubernetesScheduler（简称k8sScheduler）是Kubernetes集群中的一个核心组件，它负责将Pod调度到合适的Node上运行，以实现集群资源的优化分配和负载均衡
条纹布鲁斯·2024-09-05 07:51

大数据生态圈里的一致性算法

Paxos选举算法Paxos是最先解决拜占庭将军问题的算法，利用过半选举的机制，保证了集群数据副本的一致性（微服务中服务注册与发
宇宙湾·2024-09-05 07:35

学习笔记：服务器的负载均衡

服务器集群•处理业务的服务器组成服务器集群，对外体现为一台逻辑上的服务器，由FW决定如何分配流量给各个服务器。服务器负载均衡技术的一
TKE_yinian·2024-09-05 07:50

centos安装k8s集群（kubeadm方式）

目录前言生产环境部署k8s集群的两种方式服务器初始化、环境准备使用kubeadm安装k8s（本篇讲解使用kubeadm安装k8s）后记-k8s使用外部etcd集群前言环境：centos7.9docker-ce
MssGuo·2024-09-05 07:20

Hbase BulkLoad用法

使用方法导入依赖包compilegroup:'org.apache.spark',name:'spark-sql_2.11',version:'2.3.1.3.0.0.0-1634'compilegroup
kikiki2·2024-09-05 07:29

Kubernetes学习指南：保姆级实操手册05——配置集群HA负载均衡

五、Kubernetes学习指南：保姆级实操手册05——配置集群HA负载均衡简介：Keepalived提供VRRP实现，并允许您配置Linux机器使负载均衡，预防单点故障。
小黑_深呼吸·2024-09-05 07:17

数据分析利器：Java与MySQL构建强大的数据挖掘系统

一、Java在数据分析中的应用1、数据处理和清洗：Java提供了丰富的数据处理和操作库，例如ApacheCommons、Jackson等，可以方便地对各种数据格式进行解析
lizi88888·2024-09-05 05:04

在Vue项目里使用ECharts图标库

ECharts官网地址：https://echarts.apache.org/v4/zh/feature.html一、在Vue项目下安装：npminstallecharts--save二、创建一个Chart.vue
石云升·2024-09-05 03:03

高并发 Nginx + lua是如何抗住的

本篇顺序：1、Nginx如何抗住的高并发，工作模式是怎样的，利用了哪些技术2、常见的IO模型及异步非阻塞IO的优势3、epoll相对于其他模型为何这么强大第一阶段：Nginx不同于Apache的一点就是
邹志全·2024-09-05 01:33

mysql的主从复制延迟问题

mysql的主从复制延迟问题https://blog.csdn.net/qq_41683000/article/details/125436839一主一从，双主双从的mysql集群搭建，在单机应用的时候看起来没有问题
wowocpp·2024-09-05 00:06

Tomcat 部署及优化

一：Tomcat概述1.1：Tomcat介绍免费的、开放源代码的Web应用服务器Apache软件基金会(ApacheSoftwareFoundation)Jakarta项目中的一个核心项目由Apache
NorthHadesFish·2024-09-05 00:33

Seata 分布式事务控制

Seata是阿里巴巴和蚂蚁集团内部开发了分布式事务中间件，用于解决电商、支付、物流等业务场景中应用数据的一致性问题，2023年10月，为了更好的通过社区驱动技术的演进，阿里和蚂蚁集团正式将Seata捐赠给Apache
动物园首领·2024-09-04 22:24

9.2 spark内存管理之 UnifiedMemoryManager

图片来源https://www.ibm.com/developerworks/cn/analytics/library/ba-cn-apache-spark-memory-management/index.html1
GongMeng·2024-09-04 20:46

JMeter 接口自动化测试：以搜索功能为例的实现思路详解

ApacheJMeter是一款广受欢迎的开源性能测试工具，它不仅能够进行负载测试，也支持接口测试。
锦都不二·2024-09-04 19:38

jmeter中上传文件接口，当文件名为中文时出现乱码

1、在jmeter5.1.1中配置上传文件接口，当上传的文件为中文名称时，文件名称会显示乱码如图2、解决方案是需要更换jmeter/lib/ext文件中的ApacheJMeter_http.jar包3、
清冬暖雪·2024-09-04 19:04

k8s——pod详解+harbor镜像拉取（凭据）

k8s——pod详解+harbor镜像拉取（凭据）Pod基础概念在k8s集群中pod的使用方式Pod容器的分类pod中的3种容器底层基础容器pause初始化容器（initcontainers）1）概念2
xinheng233·2024-09-04 18:30

关于Apache Hive 和 Apache Iceberg

ApacheHive和ApacheIceberg都是大数据生态系统中的重要工具，但它们解决的问题和扮演的角色有所不同。
[听得时光枕水眠]·2024-09-04 17:55

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式（如Parquet或ORC）。Hive的表定义和元数据存储在一个外部的关系数据库中，如MySQL，用于跟踪表结构、分区和其他元数据信息。Iceberg:Iceberg设计为一个现代的表格
进击的小白菜·2024-09-04 16:50

kafka集群搭建

Kafka集群搭建一、概念说明它是一个分布式消息系统，由linkedin使用scala编写，用作LinkedIn的活动流（ActivityStream）和运营数据处理管道（Pipeline）的基础。
java皮皮虫·2024-09-04 16:48

Kafka学习

1、kafka集群配置①需要提前配置zookeeper环境②配置环境变量，与Java类似③配置server.properties文件#服务器序号broker.id=numlisteners=PLAINTEXT
nlhkfcdxb·2024-09-04 16:48

kafka单条消息太大引起的线上故障

问题现象1.收到日志异常报警，一个Flink任务写入kafka消息出现了异常，异常消息如下org.apache.flink.streaming.connectors.kafka.FlinkKafkaException
ab342173024·2024-09-04 15:44

SpringBoot后端接收文件转换成Base64保存到数据库

新建一个工具类Base64Utils.javaimportcom.ruoyi.common.utils.StringUtils;importorg.apache.commons.codec.binary.Base64
Sherlock_026·2024-09-04 15:13

多图详解kafka生产者消息发送过程

:fire:《Kafka运维管控平台LogiKM》:fire::pencil2:更强大的管控能力:pencil2::tennis:更高效的问题定位能力:tennis::sunrise:更便捷的集群运维能力
JAVAQXQ·2024-09-04 15:13

kafka ---- producer与broker配置详解以及ack机制详解

一、producer配置1、bootstrap.serverskafkabroker集群的ip列表，格式为：host1:port1,host2:port2,…2、client.id用于追踪消息的源头3、
husterlichf·2024-09-04 15:41

kafka单条消息过大发送失败

生产者发送消息失败，查询报错日志，得到如下输出：Causedby:org.springframework.kafka.KafkaException:Sendfailed;nestedexceptionisorg.apache.kafka.common.errors.RecordTooLargeException
hungteshun·2024-09-04 15:11

【Kubernetes 】k8s常用单词

下面列出了一些Kubernetes中常见的术语及其英文单词、音标（使用国际音标符号）和解释，以及相应的中文翻译：Pod/pɒd/Kubernetes中最小的可创建、可调度的单元，它代表集群中的一个运行实例
划过手的泪滴t·2024-09-04 14:36

spring揭秘-概念以BeanFactory介绍

Paste_Image.pngspring框架为基础,有很多家庭成员,比如(SpringWebFlow,SpringWebServices,SpringSecurity,SpringBatch等等),这些家族成员全部以ApacheLisenceVersion2.0
liangxifeng833·2024-09-04 14:00

Apache Commons Collections

ApacheCommonsCollections是对java.util.Collection的扩展。
kkkkatoq·2024-09-04 14:34

apache配置virtualhost

httpd.conf在80端口后增加ListenListen80Listen8081打开vhost.conf的注释Includeconf/extra/httpd-vhosts.conf增加读写权限注意这里事grantedOptionsIndexesFollowSymLinksAllowOverrideallRequireallgrantedhttpd-vhost.conf除了DocumentRoo
任我笑笑·2024-09-04 14:25

【MySQL数据库管理问答题】第14章 使用 MySQL InnoDB 集群实现高可用性

目录1.结合“体系结构”，请说明你对InnoDB集群的整体认知。2.请对组复制的原理和功能做一个完整的描述，并说明组复制有哪些先决条件和限制。
summer.335·2024-09-04 14:31

Redis：支撑高并发及高可用复杂的缓存架构

这里写目录标题一、企业级Redis集群架构二、（nginx+lua）+redis+ehcache的三级缓存架构三、数据库+缓存双写一致性解决方案四、大key：缓存维度拆分解决方案五、如何提高缓存的命中率一
玉成226·2024-09-04 12:51

基础学习之——Kubernetes

它提供了一个高度可扩展的架构，允许用户在集群中运行和管理大量的容器。
北欧人写代码·2024-09-04 11:44

java.io.InvalidClassException(spark任务运行失败）

背景：客户集群内偶尔会出现java.io.InvalidClassException:org.apache.kudu.spark.kudu.KuduRDD;localclassincompatible:
LATASA·2024-09-04 09:30

Maven构建Spring Boot后端项目的步骤

安装ApacheMaven。你可以从ApacheMaven官网下载并安装最新版本的Maven。创建项
问道飞鱼·2024-09-04 08:26

在springboot项目使用redis

目录单例模式集群模式springboot框架中已经集成了redis，在1.x.x的版本时默认使用的jedis客户端，现在是2.x.x版本默认使用的lettuce客户端在properties文件配置redis
weixin_44953227·2024-09-04 08:55

2022-12-28-PV和PVC简介、使用案例，动静态挂载；

PV：是集群中由kubernetes管理员配置的一个网络存储，一个集群中的
DGFM·2024-09-04 07:47

1. ActiveMQ的生产者,消费者事务

activemq的基本的消息发送操作:packagecom.paic.mq;importorg.apache.activemq.ActiveMQConnectionFactory;importjavax.jms
水无痕simon·2024-09-04 07:51

SpringBoot 依赖之Spring Web

详细介绍SpringWeb依赖的内容：第1章：SpringWeb1.简介功能描述英文:Buildweb,includingRESTful,applicationsusingSpringMVC.UsesApacheTomcatasthedefaultembeddedcontainer
ahauedu·2024-09-04 07:16

IDEA+Springboot+mybaties通过实体类自动建表

1、引入pom依赖com.gitee.sunchenbin.mybatis.actablemybatis-enhance-actable1.0.3com.alibabadruid1.0.18org.apache.commonscommons-lang33.4net.sf.json-libjson-lib
yuanyaunlv·2024-09-04 04:55
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他