元数据存储系统

大规模分布式存储（1）-- 概念、挑战和分类

随着数据的激增，我们已经进入到了一个数据时代，无论是云计算，大数据还是互联网公司的各种应用，其后台存储平台的目标都是要构建低成本、高性能、可扩展、易用的分布式存储系统。
叹了口丶气·2025-01-31 06:23

《大规模分布式存储系统：原理解析与架构实战》读书笔记

《大规模分布式存储系统：原理解析与架构实战》读书笔记1、事务满足ACID特性2、单机存储引擎：哈希存储引擎和B树存储引擎和LSM存储引擎。存储系统的数据模型：文件模型、关系模型和键值模型。
weixin_36908057·2025-01-31 06:52

大规模分布式存储系统：原理解析与架构实战

《大规模分布式存储系统：原理解析与架构实战》是分布式系统领域的经典著作，由阿里巴巴高级技术专家“阿里日照”（OceanBase核心开发人员）撰写，阳振坤、章文嵩、杨卫华、汪源、余锋（褚霸）、赖春波等来自阿里
克终·2025-01-31 05:49

Java中的注解与反射：深入理解getAnnotation(Class＜T＞ annotationClass)方法

Java的注解（Annotation）是一种元数据机制，它允许我们在代码中添加额外的信息，这些信息可以在编译时或运行时被读取和处理。
AllenBright·2025-01-31 05:15

理解Ceph的三种存储方式(块设备、文件系统、对象存储)

前言Ceph是一个开源的、统一的、分布式的存储系统这是我们宣传Ceph时常说的一句话，其中“统一”是说Ceph可以一套存储系统同时提供块设备存储、文件系统存储和对象存储三种存储功能。
118路司机·2025-01-30 17:11

Ceph存储架构详解

，Ceph在一个统一的存储系统中同时提供了对象存储、块存储和文件存储，即Ceph是一个统一存储，能够将企业企业中的三种存储需求统一汇总到一个存
wespten·2025-01-30 17:11

HDFS读写流程

因为namenode维护管理了文件系统的元数据信息，这就造成了不管是读还是写数据都是基于NameNode开始的，也就是说NameNode成为了HDFS访问的唯一入口。
金州饿霸·2025-01-30 14:37

hdfs的读写流程

block，NameNode返回主机列表4、客户端开始和对应的主机建立关联，开始上传第一个block及它的副本5、上传完第一个之后，接着上传剩余的block及副本，上传完成之后，由NameNode更新元数据
披星戴月的蝈蝈·2025-01-30 13:35

阿里巴巴大数据系统体系架构

HBase：一个分布式列存储系统，适合于存储
大连赵哥·2025-01-30 09:34

【Python百日进阶-Web开发-FastAPI】Day806 - FastAPI的查询参数和字符串校验

1.1导入Query二、使用Query作为默认值三、添加更多校验四、添加正则表达式五、默认值六、声明为必需参数七、查询参数列表/多个值7.1具有默认值的查询参数列表/多个值7.2使用list八、声明更多元数据九
岳涛@泰山医院·2025-01-30 00:28

UEC++学习（十六）变量添加中文注释、ui设置中文文本

（一）变量添加中文注释在C++项目中创建变量，并在蓝图中显示变量的英文名同时附带中文注释，可以使用UPROPERTY的ToolTip元数据属性来实现UPROPERTY(EditAnywhere,meta
爆米花煮鸡蛋·2025-01-29 19:10

Hive全面解析精讲

目录一、Hive概述1、定义2、起源3、Hive的优势和特点4、Hive下载安装二、Hive的命令行模式1、Hive命令行模式2、Beenline命令行模式三、Hive的交互模式1、Hive元数据管理1
绿萝蔓蔓绕枝生·2025-01-29 14:03

Hive存储系统全面测试报告

然而，随着数据量的激增和业务需求的多样化，Hive存储系统的功能、性能和安全性面临
蚂蚁质量·2025-01-29 13:27

20250124 Flink中 窗口开始时间和結束時間

这样它就可以增量聚合窗口的元素并且从ProcessWindowFunction`中获得窗口的元数据。你也可
靈臺清明·2025-01-28 19:05

大数据开发的底层逻辑是什么？

数据存储：目的：将收集到的数据存储在可靠且可扩展的存储系统中。方法：使用分布式文
瑰茵·2025-01-28 18:56

C语言实现Berlekamp-Massey算法

这些编码方案在数据传输和存储系统中扮演着重要角色，能够纠正多个错误并检测潜在的错误，从而确保数据的完整性和可靠性。BM算法基本原理BM
belle-de-jour·2025-01-28 12:17

MyBatis-Plus 逆向工程原理及使用指南

逆向工程原理数据库元数据读取：MyBatis-Plus使用JDB
吴冰_hogan·2025-01-28 07:39

K8S中高级存储之PV和PVC

高级存储PV和PVC由于kubernetes支持的存储系统有很多，要求客户全都掌握，显然不现实。为了能够屏蔽底层存储实现的细节，方便用户使用，kubernetes引入PV和PVC两种资源对象。
元气满满的热码式·2025-01-28 00:19

软考高级系统架构设计师系列之：分布式存储技术

软考高级系统架构设计师系列之：分布式存储技术一、分布式存储技术及其实现机制二、分布式存储系统设计中的冗余技术三、常见的缓存工作模式和适应场景四、NOSQL一、分布式存储技术及其实现机制简要说明在分布式存储系统架构设计中所使用的分布式存储技术及其实现机制
快乐骑行^_^·2025-01-27 23:13

HTML `＜head＞` 元素详解

在HTML文档中，元素是一个非常重要的部分，它包含了文档的元数据（metadata）和其他与文档相关的信息。
浪浪山小白兔·2025-01-27 19:17

K8s ❉ 高级存储-PV / PVC详解

由于kubernetes支持的存储系统有很多，要求客户全都掌握，显然不现实。为了能够屏蔽底层存储实现的细节，以便用户使用，kubernetes引用PV和PVC两种资源对象。
wangjie722703·2025-01-27 15:16

ERROR 1872 (HY000): Replica failed to initialize applier metadata structure from the repository

它表示在复制过程中，从存储库初始化应用程序元数据结构时出现了问题。这个错误通常发生在MySQL复制设置中，其中一个从服务器（replica）试图从主服务器（master）获取复制数据时遇到问题。
元气满满的热码式·2025-01-27 10:16

ElasticSearch-文档元数据&乐观并发控制

文档元数据文档的部分更新Update乐观并发控制最近日常工作开发过程中使用到了ES，最近在检索资料的时候翻阅到了ES的官方文档，里面对ES的基础与案例进行了通俗易懂的解释，读下来也有不少收获，所以打算记录一下
互联网民工蒋大钊·2025-01-27 09:41

IndexedDB数据库应用

IndexedDB是一个在浏览器中持久化数据的大型、结构化存储系统。与LocalStorage相比，它允许存储更大量的结构化数据。
小纯洁w·2025-01-27 04:35

freeswtch目录下modules.conf各个模块的介绍【freeswitch版本1.6.8】

mod_avmd：主要用于音频和视频元数据处理，能提取、分析和管理音
狂爱代码的码农·2025-01-26 22:50

Tika（百科介绍）

ApacheTika目录简介支持的文档格式项目历史简介ApacheTika利用现有的解析类库，从不同格式的文档中（例如HTML,PDF,Doc)，侦测和提取出元数据和结构化内容。
索隆·2025-01-26 21:41

Apache Tika 详解

ApacheTika是一个开源的、跨平台的库，专门用于检测、提取和解析多种文件格式的元数据。
王小工·2025-01-26 20:36

hive窗口函数和hive基础使用

.建库并使用createdatabasexxxusexxx2.建表createtablexxxcreateexternaltableifnotexists如果该外部表不存在则创建外部表被删除时只会删除元数据不会删除数据
醉与浮·2025-01-26 13:45

MongoDB中单对象大小超16M的存储方案

它会将大文件分割成多个chunk（默认大小255KB），并存储在两个集合中：fs.files：存储文件的元数据（如文件名、大小、类型等）。f
yuanpan·2025-01-26 11:03

Java中的注解

使用【注解】之前(甚至在使用之后)，【XML】被广泛的应用于描述元数据，得到各大框架的青睐，它以松耦合的方式完成了框架中几乎所有的配置，但是随着项目越来越庞大，【XML】的内容也越来越复杂，一些应用开发人员和架构师发现维护成本变高
RB_VER·2025-01-26 09:46

注解Annontation 详解

它提供了一种安全的类似注释的机制，用来将任何的信息或元数据（metadata）与程序元素（类、方法、成员变量等）进行关联。
宸之元亨利贞·2025-01-26 09:13

元数据驱动的设想

本文永久更新地址:1.背景针对相似结构的表单，为了提高ui自动化编写效率，减少以减少重复工作，设想是否可以设计一个针对neoUI2.0通过元数据驱动的方式适应不同业务对象的测试框架2.设计元数据模型-字段名
吾爱乐享·2025-01-26 00:31

Kimi 阅读助手

Kimi阅读助手Kimi阅读助手Chrome浏览器扩展可总结视频，编辑常用语针对这篇文章提炼以下内容:1.元数据:标题，作者，链接,标签2.作者主张，亮点3.逐层加深理解4.关键术语/概念5.文章内的无用信息
云连山·2025-01-25 14:37

【业界新闻】浪潮高端存储系统技术发展及展望(上篇)

随着计算机技术的发展，实现了数据计算和数据存储的分离，而数据存储由存储系统完成。
nicole-cao·2025-01-25 10:15

python中shutil.copyfile的用法_python shutil.copy()用法

shutil.copyfile(src,dst)：复制文件内容（不包含元数据）从src到dst。DST必须是完整的目标文件名;如果src和dst是同一文件，就会引发错误shutil.Error。
weixin_39678103·2025-01-25 09:01

Hive之数据迁移方案(实测)

文章目录Hive的迁移涉及两个技术点：1.仅迁移元数据2.元数据及Hive数据全量迁移2.1全表迁移2.1.1旧集群2.1.2新集群2.2仅部分分区迁移（主要步骤）2.1.1旧集群2.1.2新集群2.3beeline
南风知我意丿·2025-01-25 06:11

什么是BT种子、迅雷下载链接、磁力链接

‌BT种子、迅雷下载链接、磁力链接是在网络上分享和下载文件时常用的标识方式，它们各自具有不同的特点和用途BT种子（BitTorrent种子）：1.BT种子是一种包含文件元数据的小文件，用于描述要下载的文件或资源
HoRain云小助手·2025-01-25 03:19

【Linux】20.基础IO（2）

文章目录2.理解文件系统2.1inode2.2如何理解目录2.3硬链接2.4软链接2.5硬链接和软链接的区别2.理解文件系统2.1inode我们使用ls-l的时候看到的除了看到文件名，还看到了文件元数据
流星白龙·2025-01-24 21:34

C# 特性（Attributes）详解

特性（Attributes）是C#提供的一种强大的元数据机制，用于在代码中添加描述性信息。它可以附加到程序的各种部分（类、方法、属性、字段等），供运行时或编译时使用。
one996·2025-01-24 16:57

每日论文推荐：我们距离GPT-4V有多远，最接近GPT-4V的开源多模态大模型

元数据概览：标题：HowFarAreWetoGPT-4V?
linxid·2025-01-24 16:50

TiDB架构分析

TiDB有三部分组成：存储层：TiKV计算层：TiDB调度层：PD（PlaceDriver）存储元数据存储层TiKV1）通过range分区算法将数据分成一个个region；2）每个region默认有3个副本
梦江河·2025-01-24 13:36

学习-秒杀系统设计

缓存结构设计在商家创建优惠券模版时,会将其预热到缓存中,并向发送一个定时消息来修改优惠券为已到期状态,同时将优惠券模版Id加入到布隆过滤器中,具体缓存结构如下:采用哈希结构,key:前缀+优惠券模版Id,value:优惠券模版元数据信息
sjsjsbbsbsn·2025-01-24 11:46

centos7 yum命令一直报错Could not retrieve mirrorlist http://mirrorlist.centos.org

centos72024年6月30日之后以停止维护，这导致了你的yum命令无法找到所需的元数据文件解决方案：原文链接：https://blog.csdn.net/weixin_6274
TezzeT·2025-01-24 05:24

认识包管理工具： npm、yarn和pnpm

npm引入了文件和元数据字段，将依赖项列表存储在package.json文件中，并且将下载的文件保存到node_modules文件夹中。
·2025-01-23 22:02

基于MRS-Hudi构建数据湖的典型应用场景介绍

一、传统数据湖存在的问题与挑战传统数据湖解决方案中，常用Hive来构建T+1级别的数据仓库，通过HDFS存储实现海量数据的存储与水平扩容，通过Hive实现元数据的管理以及数据操作的SQL化。
华为云技术精粹·2025-01-23 04:50

CRUD 操作解析科普（SQL、ORM、FastAPI三种方式）

简而言之：CRUD代表Create、Read、Update和DeleteCRUD是计算机科学中用于描述数据库或类似存储系统中基本操作的缩写。
入职啦·2025-01-23 04:18

MySQL、HBase 和 Elasticsearch：特点与区别详解

MySQL、HBase和Elasticsearch是其中三种非常常见的数据存储系统，它们在各自的领域都有着重要的应用。
一休哥助手·2025-01-23 02:36

K8S中Service详解（二）

Service类型Service的资源清单文件：---kind:Service#资源类型apiVersion:v1#资源版本metadata:#元数据name:service#资源名称namespace
元气满满的热码式·2025-01-22 23:40

美团大规模 KV 存储挑战与架构实践 思维导图-java架构

特别是对于KV（键值）存储系统来说，它需要支持快速读写、高效的数据检索以及良好的可扩展性。
用心去追梦·2025-01-22 22:58

Redis 7.0 新特性助力：小红书利用 I/O 多线程模型应对高并发挑战

Redis作为一款轻量级、高性能的键值对存储系统，凭借其独特的特性和不断优化的新版本，成为了小红书应对高并发挑战的得力助手。本文将深入探讨Redis7.0的新特性——I/O多线程模
真想骂*·2025-01-22 19:06
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他