分布式zookeeper

Flink知识点概述

flink是什么是一个框架和分布式处理引擎，在无边界和有边界数据流上纪念性有状态的计算主要特性1.批流统一批处理：数据全部访问完成后进行操作有界、持久、大量，适合访问全套记录才能完成的工作，一般用于离线统计流处理
内向仓鼠·2024-02-02 21:39

架构设计内容分享(一百三十七)：架构设计的42个黄金法则

分布式知识。架构知识。架构哲学。意志坚强。但不偏执。善于沟通。但不花言巧语。除此之外，架构师在做方案的时候，有很大的发挥空间。所
之乎者也··2024-02-02 20:57

【K8S】详解容器网络中的overlay、underlay

spm=1001.2014.3001.5502在分布式pod中，K8S上的所有pod默认会从同一平面网络得到全局一个唯一IP地址和一个虚拟网络接口，无论是否都处于一个namespace，各个pod之间都可
带你去吃小豆花·2024-02-02 20:31

Python爬虫代理池

爬虫代理IP池在公司做分布式深网爬虫，搭建了一套稳定的代理池服务，为上千个爬虫提供有效的代理，保证各个爬虫拿到的都是对应网站有效的代理IP，从而保证爬虫快速稳定的运行，当然在公司做的东西不能开源出来。
妄心xyx·2024-02-02 19:34

MongoDB基础认识

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。MongoDB旨在为WEB应用提供可扩展的高性能数据存储解决方案。
蓝白汤姆·2024-02-02 19:39

使用Java实现基于HTTP的分布式系统：让你的应用“四处开花”

在数字世界里，分布式系统就像是一个大家庭，每个成员（即节点）都有自己的任务和职责，共同维护整个家庭的运转。
华科℡云·2024-02-02 19:08

自己搭一个 OSS 服务，和阿里云的一毛一样

我们会用OSS（ObjectStorageService）对象存储服务来存文件，它是支持分布式扩展的，不用担心存储容量问题，而且也好管理。比如阿里云的OSS服务。
神码观察·2024-02-02 19:53

SpringCloud学习

注册中心的核心作用是：服务注册和发现，常见的注册中心：eureka、nocas、zookeeper服务提供者需要把自己的数据，比如ip和端口注册到注册中心服务消费者需要从注册中心中拉去所需要调用的服务提供者的信息服务消费者在获得服务提供者的信息后
GolvenDong·2024-02-02 19:19

Zookeeper概念篇

数据模型：Zookeeper通过分层名称空间来管理数据，和文件系统类型，唯一的不同点是每个znode既可以创建children，同时也可以存储数据。
AStreet·2024-02-02 19:01

深度学习的开源分布式框架Deeplearning4j

该框架基本上是由Hadoop和Spark集成的分布式深度学习库组成的。在Hadoop和Spark的帮助下，我们可以轻松地分发模型和大数据集，并运行
weixin_43106248·2024-02-02 19:13

eureka 和zookeeper 区别 优势

作为服务注册中心，Eureka比Zookeeper好在哪里著名的CAP理论指出，一个分布式系统不可能同时满足C(一致性)、A(可用性)和P(分区容错性)。
音乐与咖啡Bean·2024-02-02 18:43

亚信安慧AntDB：分布式数据库的崛起与挑战

亚信安慧AntDB是国产的分布式数据库，它具备快速发展的潜力。随着互联网技术的迅猛发展，大数据时代的到来，数据库的需求不断增长。
亚信安慧AntDB数据库·2024-02-02 18:03

技术革新与市场需求：探索亚信安慧AntDB的发展之路

AntDB采用分布式架构设计，可以根据业务需求灵活增减节点数量，实现无缝扩容升级，从而满足企业在不同发展阶段的数据管理需求。这种平滑扩展的特性，为企业节省了大量的时间和资
亚信安慧AntDB数据库·2024-02-02 18:03

亚信安慧的AntDB数据库：稳定可靠的保障

作为一种高效可靠的数据库解决方案，AntDB引入了先进的分布式技术和优化算法，使得运营商能够拥有更稳定、更可靠的数据存储和处理能力。
亚信安慧AntDB数据库·2024-02-02 18:03

亚信安慧AntDB探索数据库更多可能

AntDB数据库架构通过引入创新的分布式体系结构，充分利用集群资源，实现数据的高效分布和快速存取。同时，它还具备强大的容错能力和灵活的扩展性，可以根据业务需求进行按需配置和动态调整。
亚信安慧AntDB数据库·2024-02-02 18:00

Linus 在 2007 年 Google Talk 上介绍 Git

可靠高性能分布式内容管理Git之前有很多版本控制软件，但都存在一些问题，尤其
一只大鸽子·2024-02-02 18:21

分布式系统（DS） -- 详解

本文不涉及…1.为什么会有分布式系统（distributedsystem，ds）参考链接–漫谈大数据1.1了解传统系统1.1.1了解计算分布式化刚开始面临一个词法分析的需求，把一个几十K的文件解析下，然后生成一个词频分析的报告
LtMamba·2024-02-02 18:23

分布式文件系统（DFS）-- 详解

1.了解分布式文件系统1.1了解什么是分布式文件系统分布式文件系统（DistributedFileSystem，DFS）是一种计算机文件系统，它将网络上不同计算机的文件系统集成在一起，使得用户就像在自己的本地机器上一样访问和操作文件
LtMamba·2024-02-02 18:23

fastdfs --详解

1.为什么会存在fastdfs参考链接–了解为什么有分布式参考链接–分布式文件系统详解FastDFS是一个开源的轻量级分布式文件系统，主要解决了海量数据存储问题，特别适合以中小文件（建议范围：4KB[storageserverlist
LtMamba·2024-02-02 18:18

Git 指令

Git安装·操作·命令行简介：Git是一个开源的分布式版本控制系统，用于敏捷高效地处理任何或小或大的项目。
花追雨·2024-02-02 18:11

ETCD数据库入门小案例

一、ETCD介绍etcd一个高可用、强一致性的服务发现存储仓库，它是一个高可用，高度一致的分布式键值存储的Key/Value存储系统，内部采用raft协议作为一致性算法。
福海鑫森·2024-02-02 18:06

TiDB 简介

TiDB简介|PingCAPDocsTiDB是PingCAP公司自主设计、研发的开源分布式关系型数据库，是一款同时支持在线事务处理与在线分析处理(HybridTransactionalandAnalyticalProcessing
福海鑫森·2024-02-02 18:06

SpringBoot使用Kafka详解含完整代码

1.前言随着大数据和实时处理需求的增长，Kafka作为一种分布式流处理平台，与SpringBoot的集成变得尤为重要。
孤蓬&听雨·2024-02-02 18:27

An End-to-End Learning-Based Metadata Management Approach for Distributed File Systems——论文阅读

)”局部保持哈希“MultipleSubsetSumProblem(MSSP).”多子集和问题“polynomial-timeapproximationscheme(PTAS)”多项式时间近似方法背景分布式元数据的挑战目前的
妙BOOK言·2024-02-02 18:57

CJFS: Concurrent Journaling for Better Scalability——论文泛读

FAST2023Paper分布式元数据论文汇总问题和挑战重量级的EXT4可扩展性较差，由于日志存在两个限制：日志提交是一个严格的串行活动；日志提交使用原始页缓存条目，而不是其副本，随后任何对正在进行的页缓存条目的访问都将被阻塞
妙BOOK言·2024-02-02 18:57

ConfD: Analyzing Configuration Dependencies of File Systems for Fun and Profit——论文泛读

FAST2023Paper分布式元数据论文汇总问题文件系统在管理数据方面发挥着至关重要的作用。为了满足不同的需求，它们通常支持许多配置参数，例如EXT4有85个参数。
妙BOOK言·2024-02-02 18:57

BetrFS: A Compleat File System for Commodity SSDs——论文阅读

EuroSys2022Paper分布式元数据论文汇总问题在不同的工作负载下，没有单一的Linux文件系统在普通SSD上始终表现良好。
妙BOOK言·2024-02-02 18:27

Chipmunk: Investigating Crash-Consistency in Persistent-Memory File Systems——论文泛读

EuroSys2023Paper分布式元数据论文汇总问题检测PM文件系统关于崩溃一致性的潜在bug。
妙BOOK言·2024-02-02 18:27

分布式元数据论文，阅读笔记（持续更新）

元数据优化论文阅读GUFI:Fast,SecureFileSystemMetadataSearchforBothPrivilegedandUnprivilegedUsersSC2022Paper论文笔记针对元数据查询的优化，通过构建外部元数据索引来加速元数据查询的性能。作者提出以下优化点：将各个底层文件系统的所有元数据汇总，构建统一的基于嵌入式数据库的新索引；在索引中添加多个表便于快速的数据库查询
妙BOOK言·2024-02-02 18:56

TiDedup: A New Distributed Deduplication Architecture for Ceph——论文泛读

ATC2023Paper分布式元数据论文汇总问题Ceph是一个广泛部署的分布式存储系统，Ceph中的集群级去重设计，由于一些缺点难以在生产环境中使用：（1）去重唯一数据会导致过多的元数据消耗；（2）串行层次化机制对前台
妙BOOK言·2024-02-02 18:26

linux下安装flink 1.18

一、flink介绍Flink是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源流处理框架二、flink下载flink下载三、flink配置3.1、配置环境变量exportJAVA_HOME=
爱上雪茄·2024-02-02 17:46

JavaSE基础知识总结（上）

作为一名程序设计人员，常常希望能够有一种语言，它具有令人赏心悦目的语法和利于理解的语义Java白皮书关键术语简单性面向对象分布式健壮性安全性体系结构中立可移植性解释型高性能多线程动态性1、使用命令行工具编译
北纬40度~·2024-02-02 17:13

springboot+JTA简单实现多数据源事务

Springboot+JTA简单实现多数据源事务JTA依赖YML配置DataSourceConfig+Mybatis分包配置db1db2测试JTAJTA，即JavaTransactionAPI，JTA允许应用程序执行分布式事务处理
夕阳西下，断肠人在天涯·2024-02-02 17:10

架构师应知必会的缩写大全

CAPCAP定理指出，任何分布式数据存储都只能提供以下三种保证中的两种：一致性-每次读取都会收到最近的写入或错误。可用性-每个请求都会收到响应。分区容忍度-系统在网络故障时仍能继续运行。
xwhking·2024-02-02 16:25

你还不会使用git吗？

Git是一个分布式版本控制系统，它允许开发者在本地工作并保存他们的更改，然后再将这些更改推送到远程仓库中。
还得是你大哥·2024-02-02 16:18

Docker学习之搭建ActiveMQ消息服务

在生产项目中，很多时候需要消息中间件来进行分布式系统间的通信。它具有低耦合、可靠投递、广播、流量控制、最终一致性等一系列功能。本篇主要介绍A
Java大生·2024-02-02 16:41

京东广告算法架构体系建设--在线模型系统分布式异构计算演变 | 京东零售广告技术团队

一、现状介绍算法策略在广告行业中起着重要的作用，它可以帮助广告主和广告平台更好地理解用户行为和兴趣，从而优化广告投放策略，提高广告点击率和转化率。模型系统作为承载算法策略的载体，目前承载搜索、推荐、首焦、站外等众多广告业务和全链路的深度学习建模，是广告算法算法创新和业务迭代发展的重要基石。架构全景图：1.平台能力：1.高吞吐高并发：百亿PV，百万QPS2.低延迟，高可靠：万亿次预估计算/秒
京东零售技术·2024-02-02 16:08

Git版本管理工具（基础）：这一篇基本能满足Git基本的使用需求了！

Git作用02-使用Git03-Git仓库创建04-Git的三个区域三个区域05-Git文件状态06-Git暂存区使用07-Git回退版本08-删除文件Git01-什么是Git答：他是一个免费开源的，分布式代码版本控制系统
Make It Possible.·2024-02-02 16:03

区块链资产证券化调研整理

分布式账本使各业务操作可以通过智能合约自动执行
RealHarryWang·2024-02-02 15:47

Paxos-->Fast Paxos-->Zookeeper分析

一Paxos算法1.1基本定义算法中的参与者主要分为三个角色，同时每个参与者又可兼领多个角色:⑴、proposer提出提案，提案信息包括提案编号和提议的value;⑵、acceptor收到提案后可以接受(accept)提案;⑶、learner只能"学习"被批准的提案;算法保重一致性的基本语义:⑴、决议(value)只有在被proposers提出后才能被批准(未经批准的决议称为"提案(proposa
Zal哥哥·2024-02-02 15:58

Kafka集群搭建

Kafka集群是把状态保存在Zookeeper中的，首先要搭建Zookeeper集群。
莫噶·2024-02-02 14:30

Kafka 集群搭建

奇数台2、Kafka的安装需要java环境，jdk1.83、Kafka安装包版本：kafka_2.11-0.10.0.1.tar.gz4、假设3台服务器分别为：kafka1、kafka2、kafka32、Zookeeper
那小子、真烦·2024-02-02 14:30

数据库之TiDB基础讲解

文章目录1TiDB1.1引言1.2TiDB介绍1.3系统架构1.3.1TIDBServer1.3.2PDServer1.3.3TIKVServer1.3.4TiKV如何不丢失数据1.3.5分布式事务支持
爱吃牛肉的大老虎·2024-02-02 14:00

Hadoop原理

Hadoop框架分布式文件存储-HDFS即Hadoop内提供分布式数据存储的文件系统分布式计算框架-MapReduce即Hadoop内提供的进行分布式计算的组件分布式资源调度-YARN即Hadoop内提供的进行分布式资源调度的组件
我走之後·2024-02-02 14:25

大数据技术之Hive

ApacheHive概述分布式SQL计算1.以分布式的形式，执行SQL语句，进行数据统计分析2.对数据进行统计分析，SQL是目前最为方便的编程工具。
我走之後·2024-02-02 14:55

史上最全的spark面试题

答：RDD（ResilientDistributedDataset）叫做分布式数据集，是spark中最基本的数据抽象，它代表一个不可变，可分区，里面的元素可以并行计算的集合Dataset：就是一个集合，
@毛毛·2024-02-02 13:12

spark相关面试题总结

答：RDD（ResilientDistributedDataset）叫做分布式数据集，是spark中最基本的数据抽象，它代表一个不可变，可分区，里面的元素可以并行计算的集合Dataset：就是一个集合，
专注于大数据技术栈·2024-02-02 13:39

【livy】Spark Livy深究

、管理spark的解决方案从任何地方提交job使用交互式的Scala、Python语言与远程的spark集群进行通信无需更改代码Livy的运作流程阐述Livy的安装、启动、访问Livy的启动：依次启动zookeeper
小赵要加油·2024-02-02 13:07

Python之PySpark简单应用

读取解析csv数据2.解析计算序列数据map\flatmap三、问题总结1.代码问题2.配置问题一、介绍PySpark是ApacheSpark的PythonAPI，它允许开发人员使用Python编写并运行分布式大数据处理应用程序
陈年小趴菜·2024-02-02 13:37

2023-01-04

捞一下消息队列系列前面两章分别讲了消息队列的基础知识，还有比较常见的问题和常见分布式事务解决方案，那么在实际开发过程中,我们使用频率比较高的消息队列中间件有哪些呢？
敲代码的小强·2024-02-02 13:00
上一页 39 40 41 42 43 44 45 46 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他