存储方案

数据存储工程解决

1.数据存储方案选择在大规模爬虫系统中，我们常常面临大量数据的存储需求。选择合适的数据存储方案对于系统的性能和可扩展性至关重要
华科℡云·2023-10-17 06:16

Docker持久化存储

基于plugin的Volume，支持第三方的存储方案，比如：NAS，aws。Volume的类型受管理的DataVolume，由docker后台自动创建。不管加不加-v选项，docker都会创
CaiGuangyin·2023-10-14 06:51

MongoDB学习

特性：特性1基于分布式文件存储的开源数据系统2可为web应用提供可扩展高性能的数据存储方案3将数据存储为一个文档，文档类似与jason格式MongoDB结构：MongoDB关系型数据库
Jayss_987·2023-10-13 18:48

VictoriaLogs 要凭什么革了各家日志存储的命

如果大家对时序指标的存储方案有些了解，那大概率会听过VictoriaMetrics，VictoriaMetrics号称Prometheus的升级版，在性能和成本方面也确实做得很好，如果是夜莺新用户，我都是推荐直接使用
夜莺云原生监控·2023-10-13 14:49

【minio学习笔记】

minio学习笔记一、Minio相关介绍1、相关网址2、Minio介绍3、Minio基础概念4、纠删码EC(ErasureCode)5、存储方案二、环境搭建1、单机部署介绍1.1概念1.22单机部署（无纠删码模式
sxsl_lwp·2023-10-13 13:57

Android 轻量级存储方案的前世今生，kotlin处理null异常

sp.edit().putString(“c”,“dmn”).apply();每次调用edit方法都会创建一个Editor对象，造成额外的内存占用。很多设计者会对SharedPreferences进行封装，隐藏掉edit()和commit/apply()调用流程，但往往同时也忽略了Editor.commit/apply()的设计理念和使用场景。如果是复杂的场景，用户可以在多次putXxx方法之后再
m0_66264134·2023-10-12 23:17

远程教育实施方案交流之（一）——课件制作与课程录制篇

2、远程教育平台建设及採购方案篇；3、视频云存储方案篇三篇文章和大家分享交流，不足之处希望大家留言，多多指正。远程教育课程录制的方法随着信息科技的发展而不断变化。2009年曾经。
weixin_30265171·2023-10-12 10:34

mysql的集群和主从的区别

一、Mysqlcluster:share-nothing,分布式节点架构的存储方案，以便于提供容错性和高性能。需要用到mysqlcluster安装包，在集群中的每一个机器上安装。有三个关键概念：Sql
veminhe·2023-10-12 04:15

KafKa存储机制

目录存储机制kafka存储选型Kafka存储方案剖析kafka存储架构设计kafka日志系统架构设计日志目录布局磁盘数据存储可靠性Producer的可靠性保证kafka配置为CP系统kafka配置为AP
Mr.简锋·2023-10-09 16:46

深度解析数据湖存储方案Lakehouse架构

简介：从数据仓库、数据湖的优劣势，湖仓一体架构的应用和优势等多方面深度解析Lakehouse架构。作者：张泊Databricks软件工程师Lakehouse由lake和house两个词组合而成，其中lake代表DeltaLake（数据湖），house代表datawarehouse（数据仓库）。因此，Lakehouse架构就是数据湖和数据仓库的结合。数据仓库和数据湖各自都存在着很多不足，而Lakeh
阿里云云栖号·2023-10-09 08:33

Hbase 概念扫盲

首先，它大部分的时候，依赖于Hadoop的分布式存储方案HDFS，HDFS的设计初衷就是为了方便水平扩展。Hbase依赖于它，将物理数据落户HDFS。
送过快递的码农·2023-10-08 19:01

[C]嵌入式中变量存储方案

#include#defineuint8_t unsignedchar#defineuint16_t unsignedshort#defineuint24_t unsignedint#defineuint32_t unsignedint#defineuint64_t unsignedlonglong//用户自定义变量名字，用于存储typedefenum{  first_run=0,//1字节  h
wabil·2023-10-06 04:40

kafka知识与理解

行不行常识生产者流程zookeeper与kafkakafkabroker的增加和删除broker故障broker重要参数调优副本位置分配消费者消费者offset消费者参数调优重复消费和漏消费全局特殊情况kafka压测存储方案
rookie19_HUST·2023-10-04 23:13

数据持久化方案解析（八） —— UIDocument的数据存储（一）

版本记录版本号时间V1.02019.08.25星期日前言数据的持久化存储是移动端不可避免的一个问题，很多时候的业务逻辑都需要我们进行本地化存储解决和完成，我们可以采用很多持久化存储方案，比如说plist
刀客传奇·2023-09-30 15:23

小米云原生文件存储平台化实践：支撑 AI 训练、大模型、容器平台多项业务

在训练平台的存储方案中，小米曾尝试了多种不同的存储方式，包括Ceph+NFS、HDFS和对象存储挂载等。然而，这些不同的存储方式导致了数据冗余和维护管理成本的增加，同时也带来了扩展性和性能方面的问题。
Juicedata·2023-09-28 21:31

PolarDB-X 存储引擎核心技术 | Lizard 分布式事务系统

PolarDB-X分布式数据库分布式数据库架构关系型数据库作为支撑企业级数据的在线存储方案，发挥了无可替代的作用。
阿里云云栖号·2023-09-28 10:02

CS SD NAND在STM32精英V2开发板的测试-是时候将TF卡换为SD NAND了

比较常见的存储扩展方案是使用TF/SD卡或者EMMC或者RAWNAND,各种方案都有其优缺点,而SDNAND相对于上述方案具备很多优势,是目前嵌入式项目中存储扩展方案的一个非常不错的选择,正好一个项目在选择NAND存储方案
深圳市雷龙发展有限公司·2023-09-27 10:13

基于pytest设计自动化测试框架实战

简介基于pytest实现测试用例收集方案、自定义参数化方案、页面元素定位数据存储方案、测试用例数据存储和维护方案，这样可直接进入到设计编写测试用例业务代码阶段，避免重复设计这些方案以及方案不统一导致维护复杂
hotswwkyo·2023-09-27 09:14

如何测量进程级别或容器级别的 IO 延迟

因为：一些基于网络的的存储方案，如Ceph，天然地有不稳定性SSD/RAINController本身的不稳定性在Linux下，传统地，我们有iostat/sar等等工具可以看系统级、存储设备级的问题。
·2023-09-26 12:22

Neo4j --- 高效率的图遍历操作

1Neo4j存储设计存储管理层的任务是将属性图编码表示为在磁盘上存储的数据格式.虽然不同图数据库的具体存储方案各有差异,但一般认为具有"无索引邻接"特性的图数据库才称为原生图数据库.1.1无索引邻接对于实现了
谁怕平生太急·2023-09-26 06:08

系分 - 案例分析 - 数据库设计（分布式）

分布式）分布式数据库系统透明性分类两阶段提交协议2PC分区分表分库分区技术数据库主从复制NoSQL非关系型数据库与关系型数据库对比类型缓存技术RedisRedis与Memcache对比Redis分布式存储方案
WorkLee·2023-09-25 13:34

数据持久化方案解析（十四） —— 基于Unit Testing的Core Data测试（二）

版本记录版本号时间V1.02020.08.19星期三前言数据的持久化存储是移动端不可避免的一个问题，很多时候的业务逻辑都需要我们进行本地化存储解决和完成，我们可以采用很多持久化存储方案，比如说plist
刀客传奇·2023-09-25 02:54

Android 11 开发者常见问题: 存储 | FAQ・第二期

我们理解许多应用在采取分区存储方案前需要有周密的方案，以便持续
谷歌开发者·2023-09-24 16:00

数据持久化方案解析（十） —— UIDocument的数据存储（三）

版本记录版本号时间V1.02019.08.25星期日前言数据的持久化存储是移动端不可避免的一个问题，很多时候的业务逻辑都需要我们进行本地化存储解决和完成，我们可以采用很多持久化存储方案，比如说plist
刀客传奇·2023-09-24 03:27

深入理解浏览器存储

从刚开始的Cookie存储方案，到现在的WebStorage和indexedDB，本文将主要介绍这三种浏览器存储方式优缺点。Cookie1、Cookie是什么？
蛙哇·2023-09-23 18:30

小米云原生文件存储平台化实践：支撑 AI 训练、大模型、容器平台多项业务

在训练平台的存储方案中，小米曾尝试了多种不同的存储方式，包括Ceph+NFS、HDFS和对象存储挂载等。然而，这些不同的存储方式导致了数据冗余和维护管理成本的增加，同时也带来了扩展性和性能方面的问题。
·2023-09-22 15:12

系统稳定性保障设计总结和思考

一、架构层面不同的系统在不同的业务发展阶段，对系统会有不同的考察指标，进行架构设计和技术选型更多是一种权衡和折中的选择，如何进行存储方案选型？
yangnk42·2023-09-22 00:00

实战开发，使用 Spring Session 与 Spring security 完成网站登录改造！！

上次小黑在文章中介绍了四种分布式一致性Session的实现方式，在这四种中最常用的就是后端集中存储方案，这样即使web应用重启或者扩容，Session都没有丢失的风险。
程序通事·2023-09-21 23:34

Android学习（五）—— 四大组件之Content Provider

本文目录结构：一、内容提供器简介二、数据存储方案三、运行时权限四、访问其他程序中的数据五、创建自己的内容提供器一、内容提供器简介作为四大组件之一，ContentProvider主要用于存储数据和在不同的应用程序之间共享数据
LongSh1z·2023-09-19 02:24

PolarDB-X 存储引擎核心技术 | Lizard 分布式事务系统

PolarDB-X分布式数据库分布式数据库架构关系型数据库作为支撑企业级数据的在线存储方案，发挥了无可替代的作用。
·2023-09-18 15:02

Android 微信高性能日志存储库Xlog的使用

XLog是一个高性能文本存储方案，在真实环境中经受了微信数亿级别的考验，具有很好的稳定性。
氦客·2023-09-18 07:03

量化交易-数据源获取二

存储方案考虑到非离线要求：数据源大而广，适合离线分析，完善的数据补全方式在线要求：数据小而快，为了能最快的获取在线分析要求的数据，在存储的时候应尽量保存最小集，保证数据库查询的效率技术选型：离线数据引擎
未_定·2023-09-17 10:37

alertmanager告警存储方案

背景：由于alertmanager没有历史告警存储功能。在工作中我们可能需要收集历史告警信息进行数据分析，找到系统的瓶颈，从而提高稳定性实现方法：go语言写一个针对alertmanager的webhook程序。收集告警信息进行过滤然后存入es中具体代码如下import("bytes""context""encoding/json""fmt""github.com/elastic/go-elasti
运维开发那些事·2023-09-16 20:09

docker-compose一件部署prometheus生态(新增VM远程存储方案)

一、背景本人多次在生产环境部署，无坑版本。具体配置需要自己调整，该教程只提供快速部署方案背景：由于toG项目大部分是私有化交付的，所以监控软件必须部署在内网。为了减少部署成本，决定采用docker-compose+docker进行一键部署。即使是不懂docker的运维人员，也能通过简单的命令进行部署介绍：普通版本：prometheus+alertmanager+grafana+consul+nod
运维开发那些事·2023-09-16 20:09

Github 29K Star的开源对象存储方案——Minio入门宝典

对象存储不是什么新技术了，但是从来都没有被替代掉。为什么？在这个大数据发展迅速地时代，数据已经不单单是简单的文本数据了，每天有大量的图片，视频数据产生，在短视频火爆的今天，这个数量还在增加。有数据表明，当今世界产生的数据，有80%是非关系型的。那么，对于图片，视频等数据的分析可以说是大数据与人工智能的未来发展方向之一。但是如何存储这些数据呢？商用云方案往往价格昂贵，而传统的大数据解决方案并不能充分
大数据流动·2023-09-16 15:31

Prometheus远程存储方案

默认情况下，Prometheus收集到监控数据之后是存储在本地，在本地查询计算。由于单机容量有限，对于海量数据场景，需要有其他解决方案。最直观的想法就是：既然本地搞不定，那就在远端做一个集群，分治处理。Prometheus本身不提供集群存储能力，可以复用其他时序库方案。时序库挺多的，如果挨个儿去对接比较费劲，于是Prometheus建立了统一的RemoteRead、RemoteWrite接口协议，
seasidezhb·2023-09-16 12:19

汽车ECU软件升级方案介绍

本文将从软件OTA目的，软件下载方式和软件存储方案
钢琴上的汽车软件·2023-09-16 02:50

IOMesh 为 KubeVirt 提供高效稳定的持久化存储支持（附用户实践）

这一版本发布不仅标志着KubeVirt已进化为生产就绪的虚拟机管理解决方案，也为正在使用虚拟化环境的用户提供了更多元的云化转型路线：搭配Kubernetes持久化存储方案，用户可在Kubernetes平台实现虚拟机和容器的统一管理的同时
志凌海纳SmartX·2023-09-15 20:29

K8S部署MinIo

一、集群方式：分布式存储方案MinIO的离线k8s容器化部署，超简单!!!
zhangjunli·2023-09-12 15:45

ClickHouse和Doris超大数据集存储

Doris1.性能2.可靠性3.易用性4.适用场景三.ClickHouse和Doris的比较1.架构2.性能3.可靠性4.易用性5.适用场景四.总结ClickHouse和Doris是两种流行的超大数据集存储方案
我是廖志伟·2023-09-10 09:04

存储方案作为产品——Midgard探索

Midgard是搜索场景下提出的智能化的数据存储方案管理器，本文简要介绍了Midgard
百度Geek说·2023-09-07 16:09

[Linux]文件系统

文章目录[Linux]文件系统了解磁盘结构磁盘的物理结构磁盘存储结构磁盘逻辑结构EXT2文件系统的存储方案inode的具体应用补充细节软硬链接创建软硬链接软硬链接的区别软硬链接的使用
好想写博客·2023-09-07 15:09

前端最能打的本地存储方案

产品的原话就是“要又大又全”。既然存储量大，也要覆盖全多种设备多种浏览器。方案选择既然要存储的数量大，得排除cookielocalStorage，虽然比cookie多，但是同样有上限（5M）左右，备选websql使用简单，存储量大，兼容性差，备选indexDBapi多且繁琐，存储量大、高版本浏览器兼容性较好，备选既然罗列了一些选择，都没有十全十美的，那么有没有一种能够集合这多种方式的插件呢？渐进增
嘴巴嘟嘟·2023-09-07 01:47

Linux（基础IO）

文件描述符文件描述符的分配规则重定向输出重定向原理追加重定向原理输入重定向原理dup2添加重定向功能到minishell缓冲区模拟实现一个缓冲区理解文件系统初识inode磁盘的概念磁盘分区与格式化介绍EXT2文件系统的存储方案软硬链接软链接硬链接文件的三个时间
搬砖狗(●—●)·2023-09-06 14:47

分布式session一致性问题——5种解决方案！

Session一致性解决方案方案一：客户端存储方案二：session复制（Tomcat自带该功能）方案三：session绑定：方案四：后端统一集中存储方案五：基于redis存储session方案（推荐）
zhangkaixuan456·2023-09-03 23:20

Minio笔记

目录1.Minio相关介绍1.1相关网址1.2Minio介绍1.3Minio基础概念1.4纠删码EC(ErasureCode)1.5存储方案2.环境搭建2.1单机部署介绍2.2单机部署（无纠删码模式）2.3
贴地飞行lyh·2023-09-03 11:30

【论坛java项目】第四章 Redis，一站式高性能存储方案：Redis入门、Spring整合Redis、点赞、收到的赞、关注、取消关注、关注列表、粉丝列表、优化登录模块

目录一、Redis入门基础知识String类型hash类型列表无序集合有序集合总结Redis的概念Redis的持久化想要返回有序集合中元素的个数二、Spring整合Redis1、引入依赖2、配置Redis配置文件——application.properties配置类——RedisConfig测试三、点赞为什么用Redis？1、service业务层工具类——RedisKeyUtil点赞——LikeS
-Blue.·2023-09-02 13:20

《分布式技术原理与算法解析》学习笔记Day22

数据分布设计原则在分布式数据存储系统中，做存储方案选型时，一般会考虑以下因素：数据均匀数据稳定节点异构性隔离故障域性能稳定性数据均匀有两重含义：不同存储节点中存储的数据要尽量均衡，避免让某一个或者某几个节点存储压力过大
技术修行者·2023-09-02 02:02

一文了解评估 K8s 原生存储产品需要关注的关键能力

这些业务往往对存储性能和稳定性具有更高的要求，传统存储方案难以充分满足，因此不少用户开始关注更契合K8s环境的K8s原生存储方案。不过，面对不同厂商的K8s原生存储产品，用户应如何进行选型？
志凌海纳SmartX·2023-09-01 05:19

K8s 持久化存储有几种方式？一文了解本地盘/CSI 外接存储/K8s 原生存储的优缺点

随着K8s的普及，存储也成为K8s用户关注的一个重要问题：为了满足不同的场景需求，K8s可以支持基于不同架构的多种存储方案。这些方案间有什么区别？用户应如何选择？
志凌海纳SmartX·2023-09-01 05:44
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他