搭建Spark分布式集群环境

区块链技术

区块链技术是一种去中心化的数据库技术，透过分布式账本的方式，记录和验证数据的交易和交流。
寂然如故·2024-09-05 15:13

springboot整合kafka

Kafka是一个分布式的发布-订阅消息系统，它可以处理大量数据并提供高吞吐量。在本教程中，我们将使用SpringBoot2.7.2和Kafka2.8.1。
##明天·2024-09-05 15:42

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。
kuuuugua·2024-09-05 15:41

PostgreSQL中空间数据库的搭建

首先，检查是否安装了PostGIS，没装的可以赶紧补上（PostGIS需装在PostgreSQL安装目录下，否则会失败）；然后开始建立空间数据库：右击数据库，建一个新的数据库；2.填好数据库名子（name）和所属者（Owner）的名字；3.点击OK，此时新的数据库建好，接下来做几个操作让它支持空间扩展；4.鼠标点击一下新建的数据库名字，然后在上面的Tools菜单中点开Querytool；5.把下面
chenghu4068·2024-09-05 14:10

FFmpeg的入门实践系列七(滤镜)

AVFilter2.滤镜图AVFilterGraph3.滤镜实例AVFilterContext4.滤镜输入输出参数AVFilterInOut二、使用滤镜加工音视频前期博客FFmpeg的入门实践系列一(环境搭建
星海逐愿·2024-09-05 14:37

深度学习的发展历程

深度学习的起源在机器学习中，我们经常使用两种方式来表示特征：局部表示（LocalRepresentation）和分布式表示（DistributedRepresentation）。
木亦汐丫·2024-09-05 13:00

基于流谱理论的SSL/TLS协议攻击检测方法

随着安全套接层/安全传输层（SSL/TLS）加密协议的广泛使用，针对SSL/TLS协议本身发起的SSL/TLS攻击日益增多，因此通过搭建网络流采集环境，构建了包含4种SSL/TLS攻击网络流与正常网络流的网络流数据集
米朵儿技术屋·2024-09-05 12:57

【AIGC】Whisper语音识别模型概述，应用场景和具体实例及如何本地搭建Whisper语音识别模型？

欢迎大家来到我们的天空如果文章内容对您有所触动，别忘了点赞、关注，收藏！作者简介：我们的天空《头衔》：大厂高级软件测试工程师，阿里云开发者社区专家博主，CSDN人工智能领域新星创作者。《博客》：人工智能，深度学习，机器学习，python，自然语言处理，AIGC等分享。所属的专栏：TensorFlow项目开发实战，人工智能技术主页：我们的天空一、Whisper语音识别模型概述Whisper是由Ope
@我们的天空·2024-09-05 12:27

如何在算家云搭建模型Stable-diffusion-webUI（AI绘画）

二、模型搭建流程1.选择主机和镜像（1）进入算家云的“应用社区”，点击搜索或者找到"stable-diffusion-webui，进入详情页后，点击“创建应用”（2）进入“租用实例”页面之后会自动匹配模型
算家云·2024-09-05 11:51

Spark

Spark是一个快速的、通用的集群计算系统，主要用于大规模数据处理。它最早由加州大学伯克利分校的AMPLab开发，并于2010年开源，后来由Apache软件基金会管理。
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

Spring Cloud开发实战

SpringCloud是当今Java开发行业最为流行的分布式开发架构，使用其可以方便的搭建高可用、高性能、分布式的系统服务架构，本课程基于SpringCloudAlibaba的套件进行了实现架构的完整讲解
yootk·2024-09-05 11:47

GIT代码托管工具

Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。
Rebirth-LSS·2024-09-05 11:16

Hadoop-MapReduce机制原理

MapReduce特点3、MapReduce局限性4、MapTask5、Map阶段步骤：6、Reduce阶段步骤：7、MapReduce阶段图1、MapReduce概述  HadoopMapReduce是一个分布式计算框架
H.S.T不想卷·2024-09-05 11:46

如何在linux上部署zabbix监控工具

搭建服务机1）首先我们先执行sed-i's/SELINUX=enforcing/SELINUX=disabled/'/etc/selinux/config​#然后我们再把防火墙开机自启关掉马上生效systemctldisable
专业白嫖怪·2024-09-05 10:38

kafka消费者重复消费同一个topic

场景是sparkstreaming消费kafka数据在这里sparkstream和kafka都是单节点的集群模式。同时起两个不同的groupid的应用，发现会发生后起来的应用消费不到数据。
小琳ai·2024-09-05 10:06

C语言练习-ATM机实现（函数篇）

目的用函数的方法来实现ATM机的功能代码的逻辑结构搭建框架不做具体的事情。
一只洁_·2024-09-05 09:10

Git核心概念

1.概念Git就是一个典型的分布式版本控制系统，这类系统，客户端不只是提取最新版本的文件快照，而是把代码仓库完整的镜像下来，这样一来，任何一处协同工作用的服务器发生故障，事后都可以用任何一个镜像出来的本地仓库恢复
众愿·2024-09-05 09:34

k8s访问外部mysql_Kubernetes连接外部数据源

Kubernetes架构下比较核心的问题是数据如何persistance,虽然提供了Persistentvolumn的方式，但是对于像数据库之类的产品在kubernetes集群环境中运行和管理还是很有难度的
健玮·2024-09-05 08:24

Git 的基本概念和使用方式

Git是一种分布式版本控制系统，是用于跟踪文件的修改和协作工作的工具。它允许多个开发者同时对同一个代码库进行更改，并能够有效地处理并合并这些更改。
汽车软件工程师001·2024-09-05 08:52

Hbase BulkLoad用法

要导入大量数据，Hbase的BulkLoad是必不可少的，在导入历史数据的时候，我们一般会选择使用BulkLoad方式，我们还可以借助Spark的计算能力将数据快速地导入。
kikiki2·2024-09-05 07:29

速盾：高防 CDN 是一种有效的 DDoS 防御解决方案

在当今数字化时代，网络安全问题日益凸显，尤其是DDoS（分布式拒绝服务）攻击，给企业和个人带来了巨大的损失和困扰。
速盾cdn·2024-09-05 07:17

面试题：什么是DoS、DDoS、DRDoS攻击？

指单一主机对目标服务器进行的拒绝服务攻击；而DDoS（DistributedDenialofService）和DRDoS（DistributedReflectionDenialofService）则是分布式拒绝服务攻击
极客李华·2024-09-05 07:45

云计算与分布式技术-常见云的比较

云南大学软件学院期中报告SchoolofSoftware,YunnanUniversity个人成绩学号姓名成绩学期:2019秋季学期课程名称:云计算任课教师:陆歌皓姓名:学号：年级:完成提交时间：2019年11月4日目录SchoolofSoftware,YunnanUniversity1云计算概念2什么叫做云计算?2云计算定义及分类2根据iiMediaResearch数据挖掘和分析机构所发论文分析
NicolasLearner·2024-09-05 06:13

如何尽早地发现并抵御 DDoS 攻击?

DDoS(DistributedDenialofService)也称之为分布式拒绝服务，指借助于客户/服
德迅云安全-文琪·2024-09-05 06:13

毕业了还是要继续努力呀

慢慢接触了Postman和Jmeter，同事帮忙搭建了环境并把他会的都教给了我们，毕竟他是开发，后面还是得靠自己自学。
小菊花麻麻颗糖·2024-09-05 06:46

奇妙的遇见

永寿村的修车铺旁一夜之间落了一座小房子，它比修车铺整个小了一半又一半，像一个用茅草搭建起的小厕子，也像一个储藏室，简陋而不起眼。小房子旁边还多了一株梅花树。这是阿刚叔的修车铺。
单宇涵·2024-09-05 05:30

探索阿里巴巴的增量数据处理利器：Canal

探索阿里巴巴的增量数据处理利器：Canalcanalalibaba/canal:Canal是由阿里巴巴开源的分布式数据库同步系统，主要用于实现MySQL数据库的日志解析和实时增量数据订阅与消费，广泛应用于数据库变更消息的捕获
费琦栩·2024-09-05 05:37

本地部署Elasticsearch分布式搜索引擎结合内网穿透实现远程搜索

Elasticsearch3.Windows安装Cpolar4.创建Elasticsearch公网访问地址5.远程访问Elasticsearch6.设置固定二级子域名前言本文主要介绍如何在Windows系统安装分布式搜索和分析引擎
E绵绵·2024-09-05 05:36

2021年大厂Java面试题（基础+框架+系统架构+分布式+实战）

Java线程的状态进程和线程的区别，进程间如何通讯，线程间如何通讯HashMap的数据结构是什么？如何实现的。和HashTable，ConcurrentHashMap的区别Cookie和Session的区别索引有什么用？如何建索引？ArrayList是如何实现的，ArrayList和LinkedList的区别？ArrayList如何实现扩容。equals方法实现面向对象线程状态，BLOCKED和W
2401_85195615·2024-09-05 05:04

减掉1.25

身上多余的肉像多余的负担陪伴着我，身体负担和心理负担，投射出来的身体健康和心理健康，以前目标太远大，还没跨出第一步就直接放弃了，就像不合理的绩效方案，没考人就跑完了，给自己三天调节期，让自己有给接纳和习惯的过程，每天进步一小点，搭建自己的健康体系加油
2621d656d73b·2024-09-05 04:46

【60天备战软考高级系统架构设计师——第一天：软件工程概述】

今天，我将从软件工程的基本概念、生命周期模型和工程原则方法论出发，搭建一个软件工程的知识框架，为后续的学习做好准备。
冷风扇666·2024-09-05 04:01

02-Django基本流程

一、Django简介Django是用Python开发的一个免费开源的Web框架，可以用于快速搭建高性能，优雅的网站！初次发布于2005年7月，并于2008年发布了第一个正式版本1.0。
陈small末·2024-09-05 02:46

搭建WebRTC服务器

1、服务组成1、AppRTC房间服务，代码:github.com/webrtc/appr…2、Collider信令服务，AppRTC源码里自带3、CoTurn打洞服务,代码:github.com/coturn/cotu…打包资源：链接:pan.baidu.com/s/1ulx1FVRN…提取码:3e5f2、前期准备1、操作系统：Centos64bits2、Googlewebrtc的服务器Demo：
音视频开发老马·2024-09-05 00:36

mysql的主从复制延迟问题

mysql的主从复制延迟问题https://blog.csdn.net/qq_41683000/article/details/125436839一主一从，双主双从的mysql集群搭建，在单机应用的时候看起来没有问题
wowocpp·2024-09-05 00:06

EMR组件部署指南

本文将详细介绍如何部署EMR的主要组件,包括:JDK1.8ElasticsearchKafkaFlinkZookeeperHBaseHadoopPhoenixScalaSparkHive准备工作所有操作都在
ivwdcwso·2024-09-05 00:05

鸿蒙（HarmonyOS）北向开发知识点记录~

开发技术与特点1.分布式技术：鸿蒙操作系统的一大特色是分布式能力，北向开发可以充分利用这一特性，实现跨设备的应用协同。例如，在手机、平板、智慧屏等设备之间实现数据共享、任务流转和多屏互动。2.
CTrup·2024-09-04 22:56

Seata 分布式事务控制

概述Seata是阿里巴巴和蚂蚁集团内部开发了分布式事务中间件，用于解决电商、支付、物流等业务场景中应用数据的一致性问题，2023年10月，为了更好的通过社区驱动技术的演进，阿里和蚂蚁集团正式将Seata
动物园首领·2024-09-04 22:24

nginx rtmp服务器搭建

参考链接：https://blog.csdn.net/bitcsljl/article/details/125826323
C有点难。·2024-09-04 21:45

9.2 spark内存管理之 UnifiedMemoryManager

图片来源https://www.ibm.com/developerworks/cn/analytics/library/ba-cn-apache-spark-memory-management/index.html1
GongMeng·2024-09-04 20:46

利用Spring Boot实现服务降级与熔断机制

在分布式系统中，服务降级和熔断是保证系统稳定性的重要机制。服务降级是指在系统负载过高或部分服务不可用时，主动降低服务的可用性等级，以释放资源给关键服务。
微赚淘客机器人开发者联盟@聚娃科技·2024-09-04 20:11

Sublime text3+python3配置及插件安装

：http://blog.chargingbunk.cn/微信公众号：rayson_666(Rayson开发分享)个人专研技术方向：微服务方向：springboot,springCloud,Dubbo分布式
raysonfang·2024-09-04 19:23

写作方法

就像村上春树说的：“每天五六个小时枯坐在书桌前，孑然一人面对着电脑显示屏，集中心力，搭建起一个个故事，那需要非同寻常的体力。”
石川河女神·2024-09-04 19:22

如何使用 Pytest 进行测试

二、环境搭建1、安装Pytest：pipinstallpytest安装完成后，可以通过命令行检查是否安装成功：pytest--version2、项目结构：一般来说，项目的测试文件和代码文件可以按照以下结构组织
Itmastergo·2024-09-04 18:29

大数据学习｜理解和对比 Apache Hive 和 Apache Iceberg

文章目录数据模型与存储事务支持性能优化使用场景总结数据模型与存储Hive:Hive使用的是传统的关系型数据模型，数据存储在Hadoop分布式文件系统(HDFS)中，通常是以文本格式（如CSV或TSV）或者二进制格式
进击的小白菜·2024-09-04 16:50

开源语音转文本Speech-to-Text大模型实战之Wav2Vec篇

本文将详细介绍如何利用开源语音转文本大模型进行实战，从模型选择、环境搭建、模型训练到实际应用，带您一步步实现语音转文本功能。
码上飞扬·2024-09-04 16:49

2019-04-23 用Node.js搭建一个静态服务器

用node搭建服务器的步骤第一步引入http模块varhttp=require('http')第二步创建服务器varserver=http.createServer(function(req,res){
E1FANG·2024-09-04 16:28

kafka集群搭建

Kafka集群搭建一、概念说明它是一个分布式消息系统，由linkedin使用scala编写，用作LinkedIn的活动流（ActivityStream）和运营数据处理管道（Pipeline）的基础。
java皮皮虫·2024-09-04 16:48

【微服务】Etcd实现服务器注册和发现|Etcd、Eureka、Consul、Zookeeper 比较

目录Etcd、Eureka、Consul、Zookeeper的比较Etcd服务注册与发现的必要：etcd简介etcd分布式一致性算法etcd应用场景etcd安装服务注册与发现实例(go语言)服务注册的简单实现
bdview·2024-09-04 15:09

开发一个电商API能有多简单！一篇文章告诉你

二、技术选型与环境搭建选择合适的开发语言和框架，例如使用Python的Django或Flask框架。
咸鱼蛋炒饭·2024-09-04 14:07
上一页 9 10 11 12 13 14 15 16 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他