元数据存储系统

Redis & RabbitMQ

Redis：轻量级，NoSQL数据库redis是一个key-value存储系统。
tianshuiyimo·2024-02-20 20:24

【Java程序员面试专栏 分布式中间件】Redis 核心面试指引

通过一篇文章串联面试重点，并且帮助加强日常基础知识的理解，全局思维导图如下所示基础概念明确redis的特性、应用场景和数据结构什么是Redis，Redis有哪些应用场景Redis是一个开源的、内存中的数据结构存储系统
存在morning·2024-02-20 18:39

GitHub 数据库 15 年进化史：幕后英雄如何成就 Copilot 传奇

GitHub一直使用MySQL数据库，其中保存了除了git代码仓库以外的其他所有元数据，诸如用户，issue，PR，Gist这些。
·2024-02-20 12:06

Kafka核心逻辑介绍 | 京东云技术团队

是一个分布式、支持分区的（partition）、多副本的（replica）分布式消息系统（kafka2.8.0版本之后接触了对zk的依赖，使用自己的kRaft做集群管理，新增内部主体@metadata存储元数据信息
·2024-02-20 11:54

00.Redis入门

因此，我们需要好好学习它根据Redis官网介绍，Redis是一个开源的基于内存处理的数据结构存储系统，可
airycode·2024-02-20 10:13

一种Hudi on Flink动态同步元数据变化的方法

文章目录一、背景二、官方SchemaEvolution例子三、Flink+Hudi实现SchemaEvolution四、`HoodieFlinkStreamer`流程浅析及扩展方法4.1FlinkKafkaConsumer4.2RowDataToHoodieFunction4.3StreamWriteFunction4.4StreamWriteOperatorCoordinator4.5Compa
0x3E6·2024-02-20 10:30

论文阅读-Hydra: 用于持久内存和RDMA网络的分散文件系统

结合高速RDMA网络，分布式基于PM的存储系统提供了通过紧密耦合PM和RDMA特性来实现存储性能大幅提升的机会。然而，现有的分布式文件系统采用为传统磁盘设计的传统集中式客户端-服务器架构，导致访问延迟
向来痴_·2024-02-20 07:26

微服务----Nacos: 服务注册中心与配置中心

Nacos:服务注册中心与配置中心文章目录Nacos:服务注册中心与配置中心1.认识和安装Nacos2.Nacos的特性服务发现服务健康监测动态配置服务动态DNS服务服务及其元数据管理3.Nacos两大组件
想象中1·2024-02-20 07:53

Flink Catalog 解读与同步 Hudi 表元数据的最佳实践

博主历时三年精心创作的《大数据平台架构与原型实现：数据中台建设实战》一书现已由知名IT图书品牌电子工业出版社博文视点出版发行，点击《重磅推荐：建大数据平台太难了！给我发个工程原型吧！》了解图书详情，京东购书链接：https://item.jd.com/12677623.html，扫描左侧二维码进入京东手机购书页面。在当前的大数据格局中，Spark/Hive/Flink是最为主流的ETL或Strea
　Laurence·2024-02-20 06:28

Zookeeper 集群部署的那些事儿

ZooKeeper本质上是一个分布式的小文件存储系统。提供类似于文件系统目录树方式的数据存储，并且可以对书中的节点进行有效管理。
牧小农·2024-02-20 06:25

怎么用ETL工具实现MQ消息同步

而在一些特定场景下，需要将MQ中的消息同步到数据仓库或其他存储系统中，以便进行更深入的数据分析和挖掘。这时候，ETL工具可以成为实现MQ消息同步的利器。
RestCloud·2024-02-20 06:30

java以及android类加载机制

最终，每一个类都会在方法去保存一份元数据，在堆中创建一个与之对应的Class对象。类的生命周期，经历7个阶段，分别是加载，验证，准备，解析，初始化，使用，卸载。
slience....·2024-02-20 05:39

以内存为核心的开源分布式存储系统

是一个以内存为核心的开源分布式存储系统，也是目前发展最迅速的开源大数据项目之一。
这次靠你了·2024-02-20 05:26

Linux文件操作类命令 touch | stat | cp | scp | alias | mv | dd | cat | head | tail

touch1.创建空文件（只有元数据信息，没有数据段内容）touch1.txt2.对创建或已经存在的文件改变元数据信息的时间记录值-d改变创建时间touch-d202401011.txt-a改变访问时间
Anemia_·2024-02-20 04:46

python pypdf提取PDF元数据

pythoncoding=utf-8importpyPdfimportoptparsefrompyPdfimportPdfFileReader使用getDocumentInfo()函数提取PDF文档所有的元数据
SkTj·2024-02-20 01:38

在windows下安装redis和在docker容器下安装redis

命令添加到PATH2.在docker安装redis(1)无持久化方式(2)有持久化方式(3)自定义redis配置官网：http://redis.ioredis定义：是开源、BSD许可、高级的key-value存储系统
故巷762·2024-02-20 00:42

【工作记录】基于docker+mysql部署单机版nacos2.0.4@20240219

Nacos介绍Nacos是阿里巴巴开源的一款集服务发现、配置管理和服务元数据管理于一身的中间件，主要用于构建云原生应用和微服务架构。
泽济天下·2024-02-19 22:12

GlusterFS：开源分布式文件系统的深度解析与应用场景实践

引言在当今大数据时代背景下，企业对存储系统的容量、性能和可靠性提出了前所未有的挑战。
超逮虾户·2024-02-19 19:20

数据库的读写分离、分库分表（一）

高性能数据库集群：读写分离虽然近十年来各种存储技术飞速发展，但关系数据库由于其ACID的特性和功能强大的SQL查询，目前还是各种业务系统中关键和核心的存储系统，很多场景下高性能的设计最核心的部分就是关系数据库的设计
搬砖的肖傲楠·2024-02-19 18:39

宝塔面板（CentOS7）安装ffmpeg视频切片模块

FFmpeg是用于处理多媒体内容（例如音频，视频，字幕和相关元数据）的库和工具的集合。但是宝塔面板默认是没有安装的，所以我们需要自己编译安装。这里提供2中方法给各位参考，如果有更好的不妨留言交流。
withoutfear·2024-02-19 16:44

mysql锁

表级锁：分为表锁、元数据锁（MDL）、意向锁、AUTO-INC锁表锁：locktablest_studentread;开读锁。l
背帆·2024-02-19 16:57

【Spring源码分析】解析配置类-ConfigurationClassPostProcessor源码分析

阅读此需阅读下面这些博客先【Spring源码分析】Bean的元数据和一些Spring的工具【Spring源码分析】BeanFactory系列接口解读【Spring源码分析】执行流程之非懒加载单例Bean
假正经的小柴·2024-02-19 15:49

MySQL-锁（LOCK）

2.全局锁2.1相关语法2.2特点3.表级锁3.1表锁3.1.1共享读锁（S）3.1.2排它写锁（X）3.2元数据锁（MDL）3.2意向锁（IS、IX）4.行级锁4.1行锁5.死锁5.1死锁检测5.2避免死锁
霸王龙的小胳膊·2024-02-19 14:12

云计算基础-存储虚拟化（深信服aSAN分布式存储）

存储中的基本概念IOPS每秒钟的IOPS数，该指标主要用于评价小块IO性能，体现存储系统的IO延时能力和并发能力。业界一般默认IOPS指的是4K块大小的IO性能，该值
比特微联·2024-02-19 13:19

k8s pod模板、报错解决查看容器日志、端口映射

pod.yml#采用哪种版本apiVersion:v1#采用那种类型kind:Pod#元数据类型metadata:#名称name:myapp-pod#名空间namespace:default#标签labels
无敌锅包肉·2024-02-19 13:14

Django的ORM详解

简单的说，ORM是通过使用描述对象和数据库之间映射的元数据，将程序中的对象自动持久化到关系数据库中。ORM在业务逻辑层和数据库层之间充当了桥梁的作用。1.2ORM由来让我们从O/R开始。
燃灯工作室·2024-02-19 13:22

基于python的分布式爬虫框架_基于scrapy-redis的通用分布式爬虫框架

spiderman基于scrapy-redis的通用分布式爬虫框架目录demo采集效果爬虫元数据cluster模式standalone模式kafka实时采集监控功能自动建表自动生成爬虫代码，只需编写少量代码即可完成分布式爬虫自动存储元数据
summer_ccs·2024-02-19 11:39

Rust 语言学习杂谈 (end) (各种工作中遇到的疑难杂症)

这个过程大致可以分解为以下几个步骤：解析Cargo.toml文件：Cargo首先会读取项目的Cargo.toml文件，这个文件包含了项目的元数据以及依赖信息。解析依赖：Cargo会根据
shimly123456·2024-02-19 11:36

jwt原理

介绍JSONWebToken（缩写JWT）是目前最流行的跨域认证解决方案，它由三部分组成：header、payload与签名image头部header：Header部分是一个JSON对象，描述JWT的元数据
macfee333·2024-02-19 11:34

【软考高级信息系统项目管理师--第五章：信息系统工程下】

作者：“码上有前”文章简介：软考高级–信息系统项目管理师欢迎小伙伴们点赞、收藏⭐、留言第五章：信息系统工程下数据工程十八、数据模型分类十九、数据建模过程二十、数据元数据标准化管理数掘备份数据容灾数据清理步骤数据开发利用二十四
码上有前·2024-02-19 11:40

Pulsar Architecture Overview（架构概述）

目录1、Brokers代理服务器2、Clusters集群3、Metadatastore元数据存储4、Configurationstore配置存储5、Persistentstorage持久化存储（1）ApacheBookKeeper
swadian2008·2024-02-19 10:55

你对MANIFEST.MF这个文件知道多少？

在Java中，MANIFEST.MF文件就是一种用于描述JAR文件中包含的类和资源的清单文件，其中包含了一些元数据信息和属性。至于为什么要将清单文件命名为"MANIFEST
G探险者·2024-02-19 10:47

怎么用ETL工具实现MQ消息同步

而在一些特定场景下，需要将MQ中的消息同步到数据仓库或其他存储系统中，以便进行更深入的数据分析和挖掘。这时候，ETL工具可以成为实现MQ消息同步的利器。
·2024-02-19 10:43

Pulsar-架构与设计

Pulsar架构与设计一、背景和起源二、框架概述1.设计特点2.框架适用场景三、架构图1.Broker2.持久化存储（Persistentstorage）3.Pulsar元数据（Metadatastore
临江蓑笠翁·2024-02-19 10:56

【大数据Hive】hive 表设计常用优化策略

查询原理过程总结2.2普通表结构带来的问题三、hive分区表设计3.1区表结构-分区设计思想3.2操作演示3.2.1创建分区表按照登录日期分区3.2.2开启动态分区按登录日期分区基于分区表查询数据查询先检索元数据查询执行计划四
逆风飞翔的小叔·2024-02-15 10:22

（三十八）大数据实战——Atlas元数据管理平台的部署安装

前言ApacheAtlas是一个开源的数据治理和元数据管理平台，旨在帮助组织有效管理和利用其数据资产。
厉害哥哥吖·2024-02-15 09:09

浅谈高性能缓存架构

单纯依靠存储系统的性能提升不够的，典型的场景有：需要经过复杂运算后得出的数据，存储系统无能为力例如，一个论坛需要在首页展示当前有多少用户同时在线，如果使用MySQL来存储当前用户状态，则每次获取这个总数都要
风清扬鍀师傅·2024-02-15 08:07

Java 常用的 Spring 常用注解

注解和xml都是一种元数据，元数据即解释数据的数据，这就是所谓配置。本文主要罗列Spring|SpringMVC相关注解的简介。
salt丶·2024-02-15 08:23

【制作100个unity游戏之25】3D背包、库存、制作、快捷栏、存储系统、砍伐树木获取资源、随机战利品宝箱3（附带项目源码）

在这第25篇中，我们将探索如何用unity制作一个3D背包、库存、制作、快捷栏、存储系统、砍伐树木获取资源、随机战利品宝箱等功能，我会附带项目源码，以便你更好理解它。
向宇it·2024-02-15 07:31

MySQL实战 | 06/07 简单说说MySQL中的锁

注意点表级锁  表锁元数据锁（MDL：metadatalock）行锁InnoDB的行锁  死锁更新一条记录时具体什么时候用行锁什么时候是表锁OnlineDDL的过程总结锁是计算机协调多个进程或纯线程并发访问某一资源的机制
Jav进阶道路·2024-02-15 05:03

计算机组成原理：存储系统【二】

个人主页：godspeed_lucip系列专栏：计算机组成与原理基础️1Cache概述️1.1局部性原理1.1.1空间局部性1.1.2时间局部性️1.2性能指标1.2.1解释1.2.2例题1.2.3待解决的问题️1.3知识总结️2Cache与主存的映射2.1知识总览2.2全相联映射（随便放）2.2.1要点2.2.2CPU访问主存2.3直接映射（只可以放在固定位置）2.3.1要点2.3.2改进2.3
godspeed_lucip·2024-02-14 22:41

计算机组成原理：存储系统【一】

个人主页：godspeed_lucip系列专栏：计算机组成与原理基础1主存的模型、寻址1.1总览1.2存储器的层次化结构1.3存储器的分类1.3.1按层次1.3.2按照介质1.3.3按照访问方式1.3.4按照信息的可更改性1.3.5按照信息的可保存性1.4存储器的性能指标1.5总结2主存储器的基本构成2.1总览2.2基本的半导体元件2.2.1构成2.2.2读出数据2.2.3写入数据2.2.4示例2
godspeed_lucip·2024-02-14 22:09

低代码平台痛点

1、数据查询性能一直是低代码平台的痛点原来的平台，数据查询时，直接查数据库，现在低代码平台需要先经过元数据解析后，才知道如何查数据库，因此增加了查询的耗时，针对不同的低码平台设计，影响的点还不一样：以salesforce
jljf_hh·2024-02-14 20:30

关于GPU一些笔记（SIMT方面)

GPU组成《计算机组成原理—GPU图形处理器》已经大概说明出GPU一般都是由比CPU多的core组成，而每个core相当于一个单独线程进行计算，并且可以同时触发执行相同的单一指令但是每个计算单元数据不同
Huo的藏经阁·2024-02-14 10:11

学习总结 - swift适配器 为 Hadoop 的存储层增加对 OpenStack Swift 的支持

本文将探讨通过使用其他的存储系统，例如OpenStackSwift对
天地不仁以万物为刍狗·2024-02-14 07:37

计算机组成原理 1 概论

主要内容：◼数值表示与运算方法◼运算器的功能、组成和基本运行原理◼存储器及层次存储系统◼指令系统◼CPU功能、组成和运行原理◼流水线◼系统总线◼输入输出系前置知识C语言程序设计数值逻辑：组合电路、同步电路概念
Sanchez·J·2024-02-14 06:14

论文阅读-Pegasus：通过网络内一致性目录容忍分布式存储中的偏斜工作负载

论文名称：Pegasus:ToleratingSkewedWorkloadsinDistributedStoragewithIn-NetworkCoherenceDirectories摘要高性能分布式存储系统面临着由于偏斜和动态工作负载引起的负载不平衡的挑战
向来痴_·2024-02-14 06:10

京东云StarDB for openGauss实现混合多云场景元数据安全可控

推进产业数字化，构筑数智供应链技术底座，绕不开全球信息技术基础三大件之一的数据库。以技术创新为手段，以满足未来业务需求为目标，京东云自主研发的分布式数据库StarDB在长期的业务实践过程中不断进化，在海量且复杂的大数据场景实现突破，提供卓越的数据库使用体验。基于openGauss产品的高性能、高可用、高智能、高安全四大核心特性，京东云推出了StarDBforopenGauss的商业版本，作为一款基
renxyz·2024-02-14 04:39

【QT+QGIS跨平台编译】之三十九：【Exiv2+Qt跨平台编译】（一套代码、一套框架，跨平台编译）

文件下载三、文件分析四、pro文件4.1exiv2-xmp4.2exiv2lib_int4.3exiv2lib五、编译实践一、Exiv2介绍Exiv2是一个开源的C++库，用于读取、编辑和写入图片和视频文件的元数据
翰墨之道·2024-02-14 03:44

Redis集中管理Session和系统初始化参数详解

Redis是一个开源的、基于内存的键值存储系统，通常用作数据库、缓存或消息传递系统。在Web应用程序中，Redis常用于集中管理Session数据和系统初始化参数。
人生万事须自为，跬步江山即寥廓。·2024-02-14 01:22
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他