分布式大数据处理系统第16页

Spring Boot 一个极简且完整的后台框架

先放几张图imageimageimage项目介绍SpringBoot，实现了一个极简单的后台框架image小编提供免费的Java架构学习资料（里面有高可用、高并发、高性能及分布式、Jvm性能调优、Spring

搬砖养女人·2024-08-28 10:33

图数据库之ArangoDB

ArangoDB是一个多模型、开源的分布式数据库，支持文档、图和键值存储三种数据模型。它以其灵活性和强大的查询能力而著称，特别是在需要处理复杂数据关系的场景下。

james二次元·2024-08-28 07:46

知识分享系列三：大数据技术（上）

jinruimeng·2024-08-28 07:43

Django后端架构开发：Django 与 Celery 的深度集成

Celery是一个简单、灵活且可靠的分布式任务队列系统，它支持任务的实时处理和定时任务调度。Celery的工作原理非常简单：它将任务发送到消息队

Switch616·2024-08-28 06:41

如何使用 Redis 实现分布式锁？

分析&回答分布式锁一般有三种实现方式：1.数据库乐观锁；2.基于Redis的分布式锁；3.基于ZooKeeper的分布式锁。

喵呜刷题·2024-08-28 06:37

MongoDB适用场景

MongoDB是一个基于分布式文件存储的开源数据库系统，其主要目标是为WEB应用提供高性能，高可用性和高伸缩性的数据存储解决方案。

Rverdoser·2024-08-28 06:05

观察者模式解析：实现对象间的舞蹈同步！

这样的模式常用于实现事件处理系统、在数据模型和相应的视图之间的同步等。以下是具体介绍：模式组成：主题（Subj

疾风终究没有归途·2024-08-28 05:28

redis作为缓存，mysql的数据如何与redis进行同步呢？双写一致性

.阿里提供cannal中间件，他是一个个服务，可以伪装一个mysql节点，当mysql有更新操作的时候，会监听binlog二进制日志数据，更新到redis缓存当中数据强一致性1.使用的readsson分布式锁

码农汉子·2024-08-28 05:27

大模型企业应用落地系列三》基于大模型的对话式推荐系统》技术架构实现》大数据平台层

注：此文章内容均节选自充电了么创始人，CEO兼CTO陈敬雷老师的新书《自然语言处理原理与实战》（人工智能科学与技术丛书）【陈敬雷编著】【清华大学出版社】文章目录大模型企业应用落地系列三技术架构实现》大数据平台层大模型底座层具体实现大模型推荐技术发展趋势探讨总结大模型企业应用落地系列三技术架构实现

陈敬雷-充电了么-CEO兼CTO·2024-08-28 03:49

淘宝网购省钱技巧分享淘宝怎么买东西更省钱？

很早之前就已经开始实行网购返利，但还是有那么一部分人不愿意相信，戒备心的驱使下网购一直都是原价，但用大数据告诉你淘宝一年返利好几亿，就我本人一个月返利都好几百，特别是在双十一那种电商节的时候返利提现上千很容易

测评君高省·2024-08-28 03:17

vos3000系统，如何防护ddos数据攻击？

分布式拒绝服务（‌‌DDoS）‌攻击是一种通过大量请求拥塞目标服务器的网络资源，‌从而阻止合法用户访问的攻击方式。‌为了有效防御DDoS攻击，‌可以采取以下策略：‌服务器高防ip，这个成本太高不考虑。

wx_jiuyun383838·2024-08-28 02:13

Redis数据结构

Redis数据结构Redis作为内存数据库，被用于分布式缓存首选。作为一个coder，没有想必刚踏入职场第一天就了解了这玩意儿吧。这家伙是个单线程的，但是为什么很快？

lazy_kid·2024-08-28 01:10

当服务器遭受攻击怎么办？

互联网快速发展，各种网络攻击花样繁多，特别是DDoS攻击，DDoS是英文DistributedDenialofService的缩写，意即“分布式拒绝服务”，让人防不胜防，而避免服务器遭受DDoS攻击的最好方式就是接入高防

qq_2383525702·2024-08-28 01:08

直播App遭受抓包后的DDoS与CC攻击防御策略

其中，DDoS（分布式拒绝服务）攻击和CC（ChallengeCollapsar，即HTTP慢速攻击）攻击是两种常见的攻击方式。本文将探讨直播App在遭受抓包后如何有效应对这两种攻击。

群联云防护小杜·2024-08-28 01:08

Eureka原理实践

在分布式系统中，服务之间的相互发现和调用是至关重要的。本文将探讨Eureka的原理、应用场景和实践操作，并通过一个简单的demo来演示其用法。

vvvae1234·2024-08-28 00:29

大数据学习路线基础指南‌

随着信息技术的迅猛发展，‌大数据已成为当今社会的热门话题。‌无论是企业决策、‌市场分析还是科学研究，‌大数据都扮演着举足轻重的角色。‌

一马什么梅一·2024-08-27 23:24

kafka(一)Kafka概述

定义Kafka是一个的基于的（MessageQueue），主要应用于大数据实时处理领域。

万事万物·2024-08-27 23:57

图数据库Neo4j从入门到精通视频教程（含Neo4j+D3.js完整实战项目）

Neo4j+D3.js完整实战项目）课程观看地址：http://www.xuetuwuyou.com/course/302课程出自学途无忧网：http://www.xuetuwuyou.com图数据库是目前大数据领域最火热的方向

菜花小噗噗·2024-08-27 23:23

学习笔记六：ceph介绍以及初始化配置

k8s对接cephceph是一种开源的分布式的存储系统，包含以下几种存储类型：块存储（rbd）文件系统cephfs对象存储分布式存储的优点：Ceph核心组件介绍安装Ceph集群初始化配置Ceph安装源安装基础软件包安装

风车带走过往·2024-08-27 23:49

快速收集信息，Python爬虫教你一招爬取豆瓣Top250信息！

随着科技不断发展，互联网已经进入了大数据时代。我们过去只能通过报刊杂志、电视广播获取到有限的信息，而现在，互联网上的海量数据，让我们享受到了信息自由。

不想秃头的里里·2024-08-27 22:45

并发控制&幂等性

并发控制——概述及并发控制调度分布式高并发系统如何保证对外接口的幂等性？

深浅卡布星·2024-08-27 21:41

5.分布式事务基础理论-BASE理论

BASE理论理解强一致性和最终一致性CAP理论告诉我们一个分布式系统最多只能同时满足一致性（Consistency），可用性（Availability）和分区容错性（Partitiontolerance

LANSHENGYANG·2024-08-27 21:12

分布式ID的生成器——CosId【设计+实现】

CosId简介CosId旨在提供通用、灵活、高性能的分布式ID生成器。

Java爱好狂.·2024-08-27 20:06

node.js-数据流

node.js-数据流概述Node.js中Stream流从流中读取数据写入流管道流链式流概述“数据流”（stream）是处理系统缓存的一种方式。

努力做一只合格的前端攻城狮·2024-08-27 20:05

分享一个基于Spark的招聘数据可视化与分析系统Hadoop大数据源码（源码、调试、LW、开题、PPT）

作者：计算机源码社个人简介：本人八年开发经验，擅长Java、Python、PHP、.NET、Node.js、Android、微信小程序、爬虫、大数据、机器学习等，大家有这一块的问题可以一起交流！

计算机源码社·2024-08-27 20:05

在Python程序中实现分布式进程的教程

@本文来源于公众号：csdn2299，喜欢可以关注公众号程序员学府这篇文章主要介绍了在Python程序中实现分布式进程的教程,在多进程编程中十分有用,示例代码基于Python2.x版本,需要的朋友可以参考下在

程序员牡蛎·2024-08-27 20:34

p2p、分布式，区块链笔记:基于IPFS实现的数据库orbitdb笔记

orbitdborbitdb：Peer-to-PeerDatabasesfortheDecentralizedWeb特性说明特点无服务器、分布式、p2p编程语言JavaScript对其他语言的支持ApythonclientfortheOrbitdbHTTPAPI

FakeOccupational·2024-08-27 20:03

python多进程日志以及分布式日志的实现方式

python日志模块logging支持多线程，但是在多进程下写入日志文件容易出现下面的问题：PermissionError:[WinError32]另一个程序正在使用此文件，进程无法访问。也就是日志文件被占用的情况，原因是多个进程的文件handler对日志文件进行操作产生的。这个问题经常在TimedRotatingFileHandler、RotatingFileHandler中出现。解决办法题主在

互联网架构小马·2024-08-27 20:33

分布式ID-一窥雪花算法的原生实现问题与解决方案（CosId）

分布式ID-雪花算法的问题与方案（CosId）基本原理外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传](https://img-home.csdnimg.cn/images/20230724024159

葵续浅笑·2024-08-27 20:32

Distrii办伴：空间+科技+服务解决企业办公全生命周期需求

随着人工智能、大数据技术的应用场景逐步扩大，更丰富、更落地的企业服务场景将在不远的未来不断涌现。

娱扒小公主·2024-08-27 19:11

我用Ehcache本地缓存把查询性能提升100倍，真香

目录业务背景如何通过缓存优化查询接口基于大数据离线平台进行缓存预热本地缓存框架Ehcache今天给大家来分享一个知识，那就是平时我们开发系统的时候，如何运用Ehcache这款本地缓存框架，把我们的查询性能大幅度提升优化

石杉的架构笔记·2024-08-27 19:26

性能优化笔记二（本地缓存）

注：缓存分类：可以分为内存缓存,硬盘缓存，分布式缓存,项目中常说的本地缓存是内存缓存。2本地缓存使用场景；读取的数据需要满足以下特点2.

风和鱼·2024-08-27 19:24

Java核心技术卷一 - 第 1 章 Java 程序设计概述

Java核心技术卷一-第1章Java程序设计概述概述Java程序设计平台Java“白皮书”的关键术语简单性面向对象分布式健壮性安全性防范的攻击体系结构中立可移植性解释型高性能多线程动态性Javaapplet

IvanYangJz·2024-08-27 19:23

一分钟了解Galaxybase银河图数据库先锋版升级功能！

Galaxybase银河图数据库是一款创邻科技自主研发的商用图数据库，具有高性能、高可用、企业级安全等特性，支持大规模数据查询实时返回，快速挖掘关联关系，发现深层商业洞见，可广泛应用于金融、能源、电信、政企等行业中的大数据分析场景等场景

创邻科技·2024-08-27 18:51

国内首个图计算平台团体标准发布，创邻科技参与编撰

2024年，由中国通信标准协会批准的团体标准《大数据图计算平台技术要求与测试方法》（编号：T/CCSA470—2023）（下称：标准）正式实施。

创邻科技·2024-08-27 18:21

Flink SQL w/ Blink Planner执行流程解析（上篇）

Foreword大数据领域SQL化的风潮方兴未艾(所谓"EverybodyknowsSQL")，Flink自然也不能“免俗”。

码农老K·2024-08-27 17:44

大数据计算-SQL优化手段(CBO)-以Flink为例

文章目录背景理论知识示例结果展示结果解释背景大数据计算中，SQL生成的执行计划第一轮会经过固定规则的优化，第二轮会根据原计划，生成多条结合成本的的执行计划，根据cost进行排序，选出最优的执行计划。

wending-Y·2024-08-27 17:12

（二十）Flink Paimon

数据湖、湖仓一体是当前大数据领域技术发展的重要趋势。

springk·2024-08-27 16:38

Kafka命令详解：从零开始，掌握Kafka集群管理、主题操作与监控的全方位技能，理解每一条命令背后的逻辑与最佳实践

长风清留扬·2024-08-27 16:37

API系统如何解决DDoS攻击

然而，随着网络攻击手段的不断演进，DDoS（分布式拒绝服务攻击）已成为API系统面临的一大威胁。DDoS攻击通过控制大量网络设备向目标系统发送海量非正常的访问请求，从而耗尽系统资源，导致服务不可用。

qq177803623·2024-08-27 14:27

Kubernetes中如何对etcd进行备份和还原

在Kubernetes集群中，etcd是一个分布式键值存储系统，用于保存集群的所有数据。如果etcd数据丢失，整个集群可能会出现严重的问题。因此，定期备份etcd数据是至关重要的。

TechCraft·2024-08-27 14:56

挑战应对：携手共赢的未来——《无限的可能：世界高等教育数字化发展报告（2023）》

面向未来，数字技术在高等教育中的应用呈现新一代互联网强化教育要素新联结、物联网助力打造数字教育新空间、大数据有力支撑精准化教育服务新范式、区块链加速释能学习新评价、生成式人工智能重构教育教学新形态、元宇宙推动形成虚实一体教育新场域等发展趋势

罗思付之技术屋·2024-08-27 14:55

区块链革命：探索Web3如何重塑数字世界

去中心化网络通过分布式节点存储和处理

dingzd95·2024-08-27 14:25

基层医疗云HIS系统源码：云计算、大数据等现代信息技术研发

云HIS源码，基层云HIS系统源码，基层医疗云HIS系统利用云计算、大数据等现代信息技术研发的基层医疗云HIS系统实现了医院信息化从局域网向互联网转型，重新定义医疗卫生信息化建设的理念、构架、功能和运维体系

项目源码库·2024-08-27 14:24

【Tools】区块链技术的应用场景和优势

以下是一些常见的应用场景和优势：金融服务：区块链可以作为分布式账本，实现安全、透明和高效的跨境支付、借贷、证券交易等金融服务，减少中介环节和降低成本。

音乐学家方大刚·2024-08-27 14:21

秋招Java后端开发——非关系型数据库篇（Redis）

分布式架构天生支持分布式存储和计算，能够跨多个

番茄炒西红柿炒蛋·2024-08-27 13:19

如何利用 Pravega 的状态同步器解决分布式一致性问题

Pravega是一个开源的分布式流存储平台。其中，StateSynchronizer组件以stream为基础，对外提供一致性状态共享服务。

混子~·2024-08-27 13:18

探索未来数据流处理的基石 - Pravega开源项目深度解析

探索未来数据流处理的基石-Pravega开源项目深度解析pravegaPravega是一个开源的分布式流处理平台，用于处理大规模实时数据流。-功能：分布式流处理；实时数据处理；高吞吐量；可扩展。

施业任Luna·2024-08-27 13:46

Navicat for MySQL：卓越的跨平台数据库管理开发工具

NavicatforMySQL是一款专为数据库管理员和开发人员设计的强大数据库管理开发工具，支持Mac和Windows操作系统，为用户提供了高效、便捷的数据库操作体验。

平安喜乐616·2024-08-27 13:45

Spark-第六周

1.sparksql运行流程【Spark精讲】一文讲透SparkSQL执行过程_sparksql执行过程-CSDN博客摸鱼大数据——SparkSQL——SparkSQL的运行机制-CSDN博客2.熟练使用

fightingD&W·2024-08-27 12:13

推荐频道

分布式大数据处理系统