混合云云存储云计算分布式高性能

【Spark高级应用】使用Spark进行高级数据处理与分析

ApacheSpark作为一种高效的分布式计算框架，凭借其高速、易用、通用和灵活的特点，已经成为大数据处理和分析的首选工具。
爱技术的小伙子·2024-09-06 10:47

EI会议推荐-第二届大数据与数据挖掘国际会议（BDDM 2024）

.com主办方：武汉纺织大学会议时间：2024年12月13日-12月15日会议地点：湖北武汉02征稿主题：包含（但不限于）以下领域：大数据：大数据分析、人工智能、大数据网络技术、大数据搜索算法和系统、分布式和点对点搜索
shiyuankeyan·2024-09-06 08:36

如何通过Docker搭建一个swoft开发环境

Swoft首个基于Swoole原生协程的新时代PHP高性能协程全栈组件化框架，内置协程网络服务器及常用的协程客户端，常驻内存，不依赖传统的PHP-FPM，全异步非阻塞IO实现，以类似于同步客户端的写法实现异步客户端的使用
八重樱。·2024-09-06 08:04

Kafka

Kafka是一个高性能的分布式消息队列系统，最初由LinkedIn开发，后来成为Apache软件基金会的一部分。Kafka设计用于处理大规模的数据流，提供高吞吐量、低延迟的消息传递机制。
傲雪凌霜，松柏长青·2024-09-06 07:57

软考高级架构师/分析师论文【论软件系统架构评估/架构评估方法】

该项目主要为公司混合云平台提供基础设施、中间件、负载均衡、任务管理等功能。我作为该项目的系统架构师，主要负责架构设计、架构评估等工作。
saikey0379·2024-09-06 06:52

英伟达A100算力卡性能及应用

英伟达A100是一款高性能计算卡，基于英伟达Ampere架构，专为数据中心和高性能计算领域设计。
算力资源比较多·2024-09-06 05:16

2024年Python最新Python爬虫教程-新浪微博分布式爬虫分享(2)

Python编辑器：Pycharm；MongoDB管理工具：MongoBooster；Redis管理工具：RedisStudio）爬虫框架使用Scrapy，使用scrapy_redis和Redis实现分布式
2401_84584682·2024-09-06 05:45

Spark MLlib模型训练—聚类算法 K-means

ApacheSpark提供了K-means聚类算法的高效实现，支持大规模数据的分布式计算。本文将详细介绍K-means聚类算法的原理，并结合Spark
不二人生·2024-09-06 04:14

chatgpt赋能python：Python到底能不能转换成C代码？

然而，Python的解释性带来了一定的性能损失，这使得Python在一些高性能应用程序上表现不尽理想。为了解决这个问题，许多人会想到将Python代码转换成C代码。
turensu·2024-09-06 04:10

Java分布式ID生成解决方案

Java分布式ID生成解决方案参考文章：（1）Java分布式ID生成解决方案（2）https://www.cnblogs.com/hxun/p/11451629.html备忘一下。
短期菜鸟·2024-09-06 04:10

Spark的Web界面

Storage-此视图展示了数据如何在RDDs（弹性分布式数据集）之间进行分层存储，以及
静听山水·2024-09-06 04:40

Java 7.1 - 理论 & 算法 & 协议

C：Consistency一致性A：Availability可用性P：Partition分区容错性对于理论计算机科学，CAP定理指出，对于一个分布式系统而言，CAP中的三个只能同时满足两个。
没有韭菜的饺子·2024-09-06 04:39

Java 7.4 - 分布式锁

什么是分布式锁？对于单机多线程，我们使用ReentrantLock这类本地锁来控制多个线程对本地共享资源的访问；而对于分布式系统，我们使用分布式锁来控制多个服务对共享资源的访问。
没有韭菜的饺子·2024-09-06 04:39

Java实战：分布式ID生成方案

在分布式系统的设计与开发过程中，如何生成全局唯一、有序且高可用的ID是一个绕不开的核心问题。尤其是在电商、社交网络、金融交易等领域，ID不仅是业务数据的重要标识，还可能直接影响系统的稳定性和扩展性。
拥抱AI·2024-09-06 04:39

如何用外部程序优化SQL语句中的IN和EXISTS

数据结构IN和EXISTS是SQL中常见的复杂条件，在将SQL（存储过程）转换成库外计算获取高性能时也会面对这些问题。
小黄鸭呀·2024-09-06 04:11

java分布式ID生成组件

1、新建WorkId类packagecom.hua.common.id;importorg.apache.commons.lang3.RandomUtils;importorg.apache.commons.lang3.StringUtils;importjava.net.Inet4Address;importjava.net.UnknownHostException;/***@Deacripti
hong_myth·2024-09-06 03:08

2024国外类脑智能企业汇总

Intel官网:Intel:https://www.intel.com企业介绍:Intel是全球领先的半导体公司，致力于开发高性能计算技术。
细节的温柔·2024-09-06 03:35

Xline v0.2.0: 一个用于元数据管理的分布式KV存储

Xline是一个基于Curp协议的，用于管理元数据的分布式KV存储。现有的分布式KV存储大多采用Raft共识协议，需要两次RTT才能完成一次请求。
达坦科技DatenLord·2024-09-06 03:35

大厂程序员都会的分布式RPC框架，直接无私打包分享，手慢无

一.概述什么是RPC？远程服务调用官方：一种通过网络从远程计算机程序上请求服务，而不需要了解底层网络技术的思想通俗一点：客户端在不知道调用细节的情况下，调用存在于远程计算机上的某个对象，就像调用本地应用程序中的对象一样。市面上常见的rpc框架：dobbo，springCloud，gRPC...那为什么要有RPC，HTTP不好么？因为RPC和HTTP就不是一个层级的东西，所以严格意义上这两个没有可比
卡卡的Java架构笔记·2024-09-06 02:56

JuiceFS 社区版 v1.2 发布，新增企业级权限管理、平滑升级功能

JuiceFS是为云环境设计的分布式文件系统，支持超过10种元数据引擎和30种以上的数据存储引擎。
Juicedata·2024-09-06 01:24

经验笔记：RPC与高性能NIO框架

RPC与高性能NIO框架的经验笔记引言随着互联网技术的发展，分布式系统逐渐成为了现代软件架构的标准之一。
漆黑的莫莫·2024-09-06 01:21

python分布式集群ray_GitHub - Leesire-Python/jd_spider: 两只蠢萌京东的分布式爬虫.

使用scrapy,scrapy-redis,graphite实现的京东分布式爬虫，以mongodb实现底层存储。分布式实现，解决带宽和性能的瓶颈，提高爬取的效率。
weixin_39781930·2024-09-06 00:17

云计算之云数据库

2：性能出色：针对数据库高性能需求，采用高端高性能硬件配置，同时对数据库性能参数做了特定的优化。3：配置简单：轻轻松松1分钟搭建主从等高可用架构。
weixin_34320724·2024-09-06 00:17

推荐开源项目：Fluxter - Elixir连接InfluxDB的高效桥梁

fluxterHigh-performanceandreliableInfluxDBwriterforElixir项目地址:https://gitcode.com/gh_mirrors/fl/fluxter项目介绍Fluxter是一款专为Elixir社区打造的轻量级工具，旨在简化与InfluxDB——高性能的时间序列数据库之间
江奎钰·2024-09-06 00:12

文章汇总 | 2018

12月RIA便签学习法10月财富最好的定义Spark分布式原理及碰到的三个坑在不断解决问题(矛盾)的过程进步9月《韭菜的自我修养》-股票交易是零和游戏吗?
学习之术·2024-09-05 22:27

Spark基础

一.基础1.RDD机制  1.rdd分布式弹性数据集，简单的理解成⼀种数据结构，是spark框架上的通⽤货币。所有算⼦都是基于rdd来执⾏的，不同的场景会有不同的rdd实现类，但是都可以进⾏互相转换。
Tom无敌宇宙猫·2024-09-05 22:26

【研发日记】Matlab/Simulink技能解锁(八)——分布式仿真

文章目录前言背景分布式仿真使用方式分析和应用总结参考资料前言见《【研发日记】Matlab/Simulink技能解锁(三)——在Stateflow编辑窗口Debug》见《【研发日记】Matlab/Simulink
Mr.Cssust·2024-09-05 21:53

Hadoop组件

以下是每个组件的简短介绍：HBase：一个分布式、面向列的NoSQL数据库，基于GoogleBigTable的设计理念构建。
静听山水·2024-09-05 20:14

GBase 8c 分布式核心技术—CDC数据同步

作为一款分布式数据库，GBase8c可轻松实现例如两地三中心架构的集群异地灾备。GBase8c异地灾备集群间的不同节点采用各自对应的高可用部署方式，两地间采用同步或者异步复制的备份方式。
manhuai2022·2024-09-05 19:11

快速搭建本地 Whisper 语音识别大模型

许多人可能觉得在本地环境中运行这样一个大模型过于复杂，但其实，经过正确的指导，你完全可以在自己的计算机上搭建一个高性能的语音识别系统。
码上飞扬·2024-09-05 18:31

分布式架构基础-多线程

分布式架构基础-多线程基本概念进程：程序的一次执行过程线程：一个进程产生的多个线程并发：偏重于多个任务交替执行，可用于一个CPU并行：用于多个CPU同时执行任务高并发：通常考验指标为响应时间、吞吐量、每秒查询效率
猿日记·2024-09-05 18:00

Chiplead奇力LED驱动芯片线性车用AEC-Q100

VAS1085Q是一款高性能、可编程的恒流调节器，专为汽车照明和LED照明应用设计。
Modest1y·2024-09-05 17:56

腾讯，干掉 Redis 项目，正式开源、太牛逼啦

项目简介Tendis是腾讯互娱CROSDBA团队&腾讯云数据库团队自主设计和研发的分布式高性能KV存储数据库，兼容Redis核心数据结构与接口，可提供大容量、低成本、强持久化的数据库能力，适用于兼容Redis
六月·飞雪·2024-09-05 17:53

Apache Spark简介

Spark的核心概念包括：1.RDD（弹性分布式数据集）：RDD是Spark的基本计算单元，它代表了一个可并行操作的分布式对象集合。RDD可以通过加
不知名的小Q·2024-09-05 17:52

区块链技术

区块链技术是一种去中心化的数据库技术，透过分布式账本的方式，记录和验证数据的交易和交流。
寂然如故·2024-09-05 15:13

springboot整合kafka

Kafka是一个分布式的发布-订阅消息系统，它可以处理大量数据并提供高吞吐量。在本教程中，我们将使用SpringBoot2.7.2和Kafka2.8.1。
##明天·2024-09-05 15:42

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。
kuuuugua·2024-09-05 15:41

深度学习的发展历程

深度学习的起源在机器学习中，我们经常使用两种方式来表示特征：局部表示（LocalRepresentation）和分布式表示（DistributedRepresentation）。
木亦汐丫·2024-09-05 13:00

InfluxDB和OpenTSDB两种时序数据库应用场景

InfluxDB概述：InfluxDB是一个开源的高性能时序数据库，专门用于处理大量的时间序列数据。它由InfluxData开发，支持高写入吞吐量和灵活的查询。
CodeMaster_37714848·2024-09-05 12:53

Spark

1.核心概念RDD（ResilientDistributedDataset）：RDD是Spark的核心抽象，表示一个分布式的、不变的集合。它提供了对大数据集的容错机制，支持并行操作。
傲雪凌霜，松柏长青·2024-09-05 11:20

Windows系统下的Spark环境配置

一：Spark的介绍ApacheSpark是一个开源的分布式大数据处理引擎，它提供了一整套开发API，包括流计算和机器学习。
eeee~~·2024-09-05 11:19

Spring Cloud开发实战

SpringCloud是当今Java开发行业最为流行的分布式开发架构，使用其可以方便的搭建高可用、高性能、分布式的系统服务架构，本课程基于SpringCloudAlibaba的套件进行了实现架构的完整讲解
yootk·2024-09-05 11:47

GIT代码托管工具

Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。
Rebirth-LSS·2024-09-05 11:16

Hadoop-MapReduce机制原理

MapReduce特点3、MapReduce局限性4、MapTask5、Map阶段步骤：6、Reduce阶段步骤：7、MapReduce阶段图1、MapReduce概述  HadoopMapReduce是一个分布式计算框架
H.S.T不想卷·2024-09-05 11:46

Unity3D 如何提升游戏运行效率详解

前言在Unity3D中提升游戏运行效率是一个重要的方面，特别是在开发复杂或高性能需求的游戏时。以下将详细探讨几种常见的优化策略，包括技术详解和示例代码（当适用时）。
Clank的游戏栈·2024-09-05 11:14

Git核心概念

1.概念Git就是一个典型的分布式版本控制系统，这类系统，客户端不只是提取最新版本的文件快照，而是把代码仓库完整的镜像下来，这样一来，任何一处协同工作用的服务器发生故障，事后都可以用任何一个镜像出来的本地仓库恢复
众愿·2024-09-05 09:34

Git 的基本概念和使用方式

Git是一种分布式版本控制系统，是用于跟踪文件的修改和协作工作的工具。它允许多个开发者同时对同一个代码库进行更改，并能够有效地处理并合并这些更改。
汽车软件工程师001·2024-09-05 08:52

学习笔记：服务器的负载均衡

更换更高性能的服务器会让之前的服务器造成资源浪费。单纯地增加服务器的数量，则涉及到如何分配流量、服务器间的协同机制等很多复杂的问题。既要考虑成本因素和现实需求，又要兼顾日后的设备升级和扩容。
TKE_yinian·2024-09-05 07:50

华为云服务-运维篇-负载均衡介绍与平台算法使用_华为负载均衡设备(1)

本地负载均衡不需要花费高额成本购置高性能服务器，只需利用现有设备资源,就可有效避免服务器单点故障造成数据流量的损失，通常用来解决数据流量过大、网络负荷过重的问题。
一个射手座的程序媛·2024-09-05 07:19

Kubernetes学习指南：保姆级实操手册05——配置集群HA负载均衡

HAProxy提供可靠、高性能的负载均衡，能与Keepalived完美配合1、配置Keepalive官方文档提供了两种运行方式（此案例使用选项1）：选项1：在操作系统上运行服务选项2：将服务作为静态pod
小黑_深呼吸·2024-09-05 07:17
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他