搭建Spark分布式集群环境

配置管理 —— SpringCloud Config

概述Config为分布式系统提供统一的配置管理工具，应用程序在使用过程中可以像使用本地配置一样方便地添加、访问、修改配置中心的配置Config支持将配置存储在配置中心的本地服务器或Git仓库，通常将配置文件集中放置在一个
低吟不作语·2024-09-07 19:00

arm64架构 统信UOS搭建PXE无盘启动Linux系统（麒麟桌面为例）

arm64架构统信UOS搭建PXE无盘启动Linux系统（麒麟桌面为例）搞了好久搞得头疼哎1、准备服务器UOS服务器准备服务IP这里是192.168.1.1001.1、安装程序yuminstall-ydhcptftptftp-serverxinetdnfs-utilsrpcbind2
满满的伤疤·2024-09-07 18:58

中职院校智能物联网应用专业群建设方案

本方案旨在通过构建系统化的课程体系、强化实践教学环节、搭建产学研合作平台，全面提升中职院校智能物联网应用专业群的教
武汉唯众智创·2024-09-07 18:58

Java中的性能调优技巧与工具推荐

Java中的性能调优技巧与工具推荐大家好，我是免费搭建查券返利机器人省钱赚佣金就用微赚淘客系统3.0的小编，也是冬天不穿秋裤，天冷也要风度的程序猿！今天我们来探讨Java中的性能调优技巧与工具推荐。
省赚客APP开发者@聚娃科技·2024-09-07 18:27

Java的Base64加密解密详解

Java的Base64加密解密详解大家好，我是免费搭建查券返利机器人赚佣金就用微赚淘客系统3.0的小编，也是冬天不穿秋裤，天冷也要风度的程序猿！在当今数字化时代，数据的安全性和可传递性变得尤为重要。
微赚淘客系统开发者·2024-09-07 18:25

Python大数据：深入探索Hadoop库的使用

1.简介Hadoop是一个用于分布式处理大量数据的开源框架。尽管Hadoop主要用Java编写，但通过HadoopStreaming，Python程序员也可以利用其强大的数据处理能力。
t0_54coder·2024-09-07 17:22

Java环境搭建指南：从新手到专家的全方位教程！

要开始使用Java进行开发，首先需要搭建Java开发环境，这包括下载并安装JavaDevelopmentKit(JDK)以及配置相应的环境变量。
疾风终究没有归途·2024-09-07 17:15

cephadm搭建ceph文件集群存储

一、基础配置1、配置主机名[root@ecs-cd34~]hostnamectlset-hostnamenode1[root@ecs-cd34~]execbash#主机名生效2、配置hosts解析（根据自己的服务器id修改）cat>>/etc/hosts/etc/docker/daemon.json<
L__liurs·2024-09-07 16:41

Clos Network

而Clos的架构可以用简单的小规模交换机（电话交换机）搭建大型的交换架构。这就是CharlesClos的事迹。
dieyuqi2955·2024-09-07 16:09

先进制造业数字化转型：典型场景存储需求及实践解析

本文将从先进制造企业数字化转型中典型场景的存储需求出发，结合XSKY分布式存储的实际案例，看分布式存储如何帮助企业进行存储转型，满足相关的数据使用需求。01 本地硬盘存储方案的
XSKY星辰天合·2024-09-07 16:08

分布式全闪占比剧增 152%，2023 年企业存储市场报告发布

根据该报告，在2023年软件定义存储的市场占比进一步扩大，分布式全闪的增长尤其亮眼，其市场份额从2022年的7% 剧增到2023年的17.7%，增长了 152%。
XSKY星辰天合·2024-09-07 16:38

ELK架构

优点：搭建简单，易于上手。
小楚同学呀~·2024-09-07 14:57

速盾：没有备案的网站能否接入CDN使用？

CDN作为一个分布式的网络服务器集群，可以将网站的静态资源存储在离用户最近的服务器上，从而加快资源的访问速度。然而，CDN服务提供商在为网站提供CDN服务之前，需要对网站进行一系列的备案手续。
速盾cdn·2024-09-07 13:52

速盾：选购高防cdn时应该注意些什么？

为了保护网站的安全可靠运行，很多企业和个人选择使用高防CDN（ContentDeliveryNetwork）服务来防御DDoS（分布式拒绝服务）攻击等网络威胁。
速盾cdn·2024-09-07 13:52

速盾：CDN原理 CDN技术是什么？

CDN（ContentDeliveryNetwork）是一种通过在全球分布式服务器中存储和分发静态和动态内容的技术。
速盾cdn·2024-09-07 13:52

Kafka，构建TB级异步消息系统

ArrayBlockingQueueLinkedBlockingQueuePriorityBlockingQueue、SynchronousQueue、DelayQueue等2.Kafka入门Kafka简介Kafka是一个分布式的流媒体平台应用
Fern977·2024-09-07 12:15

Apache Flink 替换 Spark Stream的架构与实践( bilibili 案例解读)_streamsparkflink加载udf(1)

bilibili早期使用的引擎是SparkStreaming，后期扩展了Flink，在开发架构中预留了一部分引擎层的扩展。最下层是状态存储
2401_84165953·2024-09-07 12:44

JavaEE(3)

业务分析市场提出需求设计编码测试运维项目搭建步骤1.搭建后端项目2.登录向后端发送请求使用axios发送异步请求在vue项目中安装axios在终端输入npminstallaxios安装更换npm镜像源，
无柳丶先生·2024-09-07 12:14

仿论坛项目--Kafka，构建TB级异步消息系统

Kafka入门•Kafka简介Kafka是一个分布式的流媒体平台。
HUT_Tyne265·2024-09-07 12:14

自然语言处理系列六十一》分布式深度学习实战》TensorFlow深度学习框架

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录自然语言处理系列六十一分布式深度学习实战》
陈敬雷-充电了么-CEO兼CTO·2024-09-07 11:11

图像去噪算法代码c语言,深度学习图像去噪代码

AI开发平台ModelArtsModelArts是面向开发者的一站式AI开发平台，为机器学习与深度学习提供海量数据预处理及半自动化标注、大规模分布式Training、自动化模型生成，及端-边-云模型按需部署能力
weixin_39777018·2024-09-07 11:40

SpringCloud集成ELK

、在logback-spring.xml中添加配置信息（logback-spring.xml在文末）192.168.2.203:4560............192.168.2.203:4560对应搭建的
echola_mendes·2024-09-07 11:07

【LangChain-Chatchat】本地部署模型及搭建个人/企业内部知识库

此学习教程结合本人安装经验主要提供给想学习和本地安装使用LangChain-Chatchat的同学们，该教程如有描述不当或者引用不正确的地方，欢迎指出！后续也会更新如何结合自己系统使用。介绍基于ChatGLM等大语言模型与Langchain等应用框架实现，开源、可离线部署的检索增强生成(RAG)大模型知识库项目。该项目支持开源LLM与Embedding模型，亦可实现全部使用开源模型离线私有部署。与
AI_小站·2024-09-07 11:36

linux搭建ceph集群

linux三节点搭建ceph集群主机IP主机名称172.26.50.75node1172.26.50.112node2172.26.50.228node3ceph-mon，ceph-mgr，ceph-mds
浓黑的daidai·2024-09-07 11:05

linux自动化运维之ansible实战

ansible基础介绍优点-相比于saltatack和puppet，没有客户端，更轻量级-只是一个工具，可以很容易实现分布式拓展-更强的远程执行命令特点-模块化-支持自定义模块，可以用任何语言编写模块-
浓黑的daidai·2024-09-07 11:05

jedis 与 redission 实现分布式锁

本文为博主原创，未经允许不得转载：1.Jedis实现分布式锁2.Redission实现分布式锁为了确保分布式锁可用，至少要保证锁的实现同时满足以下几个条件互斥性：在任意时刻只有一个客户端能持有锁不会死锁
不知言愁·2024-09-07 10:34

ELK7.8部署：Elasticsearch+Logstash+Kibana搭建分布式日志平台

ELK7.8部署：Elasticsearch+Logstash+Kibana搭建分布式日志平台一、前言1、ELK简介2、ELK工作流二、准备工作1、服务器&软件环境说明2、ELK环境准备三、Elasticsearch
_海风_·2024-09-07 10:33

微服务高频热点面试题汇总

知识背景：SpringBoot采用默认配置，帮助我们快速的构建和运行Spring项目：-简化spring初始搭建和开发过程-提供了大量的starter，集成了spring及大量第三方应用的自动配置-允许使用配置文件
骨灰级收藏家·2024-09-07 10:30

Elasticsearch新手入门教程

Elasticsearch入门一.Elasticsearch介绍Elasticsearch是一个分布式、可扩展、实时的搜索与数据分析引擎。
超级英雄吉姆·2024-09-07 09:51

PySpark数据分析基础：PySpark基础功能及DataFrame操作基础语法详解_pyspark rdd

DataFrame.show()使用格式：df.show()df.show(1)+---+---+-------+----------+-------------------+|a|b|c|d|e|+---+---+-------+----------+-------------------+|1|2.0|string1|2000-01-01|2000-01-0112:00:00|+---+---
2401_84187537·2024-09-07 08:47

PySpark数据分析基础：PySpark基础功能及DataFrame操作基础语法详解_pyspark rdd(1)

dfDataFrame[a:bigint,b:double,c:string,d:date,e:timestamp]####通过由元组列表组成的RDD创建rdd=spark.sparkContext.parallelize
2401_84181368·2024-09-07 08:46

PySpark数据分析基础：PySpark基础功能及DataFrame操作基础语法详解_pyspark rdd(2)

轻松切换到pandasAPI和PySparkAPI上下文，无需任何开销。有一个既适用于pandas（测试，较小的数据集）又适用于Spark（分布式数据集）的代码库。
2401_84181403·2024-09-07 08:46

Pyspark DataFrame常用操作函数和示例

针对类型：pyspark.sql.dataframe.DataFrame目录1.打印前几行1.1show()函数1.2take()函数2.读取文件2.1spark.read.csv3.获取某行某列的值(
还是那个同伟伟·2024-09-07 08:15

探索Java中的分布式消息队列与事件总线：架构、实现与最佳实践

引言在现代分布式系统中，消息队列和事件总线已经成为实现松耦合、高扩展性和高可用性架构的关键组件。无论是微服务架构、事件驱动架构，还是实时数据处理，消息队列和事件总线都扮演着至关重要的角色。
๑҉ 晴天·2024-09-07 08:14

测试环境搭建

一、什么是测试环境测试环境，指为了完成软件测试工作所必需的计算机硬件、软件、网络设备、历史数据的总称，简而言之，测试环境=硬件+软件+网络+数据准备+测试工具。硬件：指测试必需的服务器、客户端、网络连接等辅助设备。软件：指测试软件运行时的操作系统、数据库及其他应用软件。网络：指被测软件运行时的网络系统、网络结构以及其他网络设备构成的环境等。数据准备：一般指测试数据的准备。测试数据会在测试用例设计的
框架里的巧克力·2024-09-07 06:00

2022年四川省职业院校技能大赛网络搭建与应用赛项

2022年四川省职业院校技能大赛网络搭建与应用赛项（一）技能要求（总分1000分）网络搭建与应用赛项执委会及专家组2022年06月竞赛说明一、竞赛内容分布“网络搭建与应用”竞赛共分三个部分，其中：第一部分
Beluga·2024-09-07 06:58

Spark概念知识笔记

最近总结了个人的各项能力，发现在大数据这方面几乎没有涉及，因此想补充这方面的知识，丰富自己的知识体系，大数据生态主要包含：Hadoop和Spark两个部分，Spark作用相当于MapReduceMapReduce
kuntoria·2024-09-07 05:21

Apache Storm：入门了解

前言Storm是一个开源的分布式实时计算系统，它能够处理无边界的数据流，类似于Hadoop对于批量数据处理的作用，但是Storm更侧重于实时数据流的处理。
布说在见·2024-09-07 03:43

第十三周作业

一、简述DNS服务器原理，并搭建主-辅服务器1、DNS服务器原理第一步：客户机提出域名解析请求，并将该请求发送给本地的域名服务器；第二步：当本地的域名服务器收到请求后，就先查询本地的缓存，如果有该纪录项
L星Y·2024-09-07 03:40

分布式发号器（2）

目录数据结构最大峰值型最小粒度值型并发机器ID的分配时间同步设计验证性能需求调整时间是否会影响ID产生功能？每4年一次同步润秒会不会影响ID产生功能？数据结构1.最大峰值型：采用秒级有序，秒级时间占用30位，序列号占用20位字段：|`版本`|`类型`|`生成方式`|`秒级时间`|`序列号`|`机器ID`|位数：|*63*|*62*|*60-61*|*40-59*|*10-39*|*0-9*|2.最
lmkbuffon·2024-09-07 03:39

【架构】一款永不重复的高性能分布式发号器，实战nginxpdf

零、基本术语发号器：用于生成唯一流水号（也即俗称的唯一ID）的服务系统，称之为发号器一、技术选型UUID优点：能够保证唯一性缺点：（1）完全的时间数据=>性能比较差、比较长、占用空间大、间接导致数据库性能下降;（2）无序=>导致B+树索引在写的时候会有过多的随机写操作，不会产生有顺序的append操作，而是需要进行insert操作，这将读取整个B+树节点到内存并在插入该条记录后会将整个节点写会磁盘
m0_64867839·2024-09-07 02:39

java分布式开发面试题

正文梳理知识点，是快速提升技术的关键前面讲过，快速提升自己的技术硬实力其实是有方法的。大致就是梳理知识点+夯实基础+进阶深入学习+实战，下面我会一点点跟大家剖析，本文干货满满，大家仔细阅读。梳理知识后，夯实基础乃是刚需：深入进阶学习（28个主流Java知识点“一网打尽”）1、并发编程Java并发编程是整个Java开发体系中最难以理解，但也是最重要的知识点之一，一旦掌握你一定在市场上供不应求。Jav
spring面试题·2024-09-07 02:38

ensp典型中小型企业网搭建(带无线)

摘要该设计规划的是一个公司的网络搭建，采用接入层、核心层、汇聚层三层网络。所有接入层汇聚层交换机运行MSTP和VRRP协议，做冗余备份，保护设备和链路稳定性。运行ospf动态路由协议，方便路由维护。
小王网·2024-09-07 01:03

h5互动游戏开发｜卡牌游戏｜h5游戏搭建开发多少钱

H5互动游戏开发是一种利用HTML5技术进行游戏开发的技术，它可以让开发者使用少量的代码创建出具有高度交互性的网页游戏。随着移动互联网的普及，H5互动游戏开发已经成为了游戏开发领域的重要组成部分。本文将介绍H5互动游戏开发的基本概念、技术难点以及未来发展趋势。游戏开发-联系电话：13642679953（微信同号）一、H5互动游戏开发的基本概念H5互动游戏开发是一种基于Web浏览器的应用程序开发技术
红匣子实力推荐·2024-09-07 01:02

seata环境搭建以及官方示例的坑

1、seataserver搭建（windows）在建seata服务之前请搭建好nacos服务官方的最新的为2.0.0版的，这个版本暂时有些问题，管理分布式事务时会报错。所以建议使用1.8的。
qq_20546587·2024-09-07 01:32

UI 自动化分布式测试 -Docker Selenium Grid

分布式测试SeleniumGrid对于大型项目或者有大量测试用例的项目，单机的测试环境往往无法快速完成所有测试用例的执行，此时自动化测试执行效率将会成为最大的瓶颈，SeleniumGrid可以通过多机的分布式架构允许测试用例并行运行
程序员与诗人·2024-09-07 01:30

Selenium Server 中 Standalone 模式|实现分布式测试、远程驱动浏览器

实现分布式测试|远程驱动浏览器SeleniumServer介绍主要功能Standalone模式概括Standalone模式分布式测试的应用SeleniumServer介绍SeleniumServer是Selenium
cs_mengxi·2024-09-07 01:58

ELK处理 SpringBoot 日志，真实太妙了！

本文带您了解一下开源的实时日志分析平台ELK的搭建及使用。ELK简介ELK是一个开源的实时日志分析平台，它主要由Elasticsearch、Logst
进击的王小二·2024-09-07 00:56

【MA35D1】buildroot 编译使用经验

文章目录芯片介绍Buildroot开发Linux实践环境搭建代码获取编译执行步骤（仅适用于我公司产品）后续有需要更改的输出文件目录芯片介绍NuMicro®MA35D1系列为一颗异核同构的多核心微处理器，
clear code·2024-09-06 23:17

Spring Boot + MinIO 实现文件的分片上传、秒传、续传功能

为了解决这些问题，分片上传、秒传和续传技术应运而生.技术选型SpringBoot：一个快速开发框架，简化了Spring应用的搭建和配置。MinIO：一个高性能的对象存储服务器，支持S3协议。
雨轩智能·2024-09-06 22:43
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他