文件存储

springboot整合minio做文件存储

一,minio介绍MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T不等。MinIO是一个非常轻量的服务,可以很简单的和其他应用的结合，类似NodeJS,Redis或者MySQL。官方文档：MinIO
豆豆的java之旅·2023-12-28 17:38

大数据处理各组件概念及作用

；1.3Kafka集群：消息队列，未避免消息堵塞而将消息由Kafka统一管理，进行消息的接收和发布；1.4爬虫服务器：依据需求定时定向抓取页面数据；二、数据存储：2.1HDFS集群：（1）概念：分布式文件存储系统
p1i2n3g4·2023-12-28 17:11

iOS数据持久化

本地数据存储总共就集中方案：属性列表（plist存储）系统存储（NSUserDefaults）归档序列化存储沙盒存储CoreData存储sqlite3存储属性列表（plist存储）属性列表存储方式又叫plist文件存储
喵洛·2023-12-28 15:56

百度沧海文件存储CFS推出新一代Namespace架构

随着移动互联网、物联网、AI计算等技术和市场的迅速发展，数据规模指数级膨胀，对于分布式文件系统作为大规模数据场景的存储底座提出了更高的要求。已有分布式文件系统解决方案存在着短板，只能适应有限的场景：>>新型分布式文件系统无法承接传统领域内的所有WorkLoad：通过只支持部分POSIX接口来简化系统设计，无法完全兼容POSIX协议。>>传统分布式文件系统无法支持海量小文件场景：为了保证低延迟，元数
大隐隐于野·2023-12-28 15:48

MongoDB

MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
小小橘子皮·2023-12-28 04:25

Hadoop集成对象存储和HDFS磁盘文件存储

1.环境配置1.1版本说明组件版本是否必须其他事项Hadoop3.3.0+是hadoop3.3.0之后原生支持国内主要对象存储Hive3.1.3否实测没有Hive也可以使用sparksql，使用hive更好的管理HDFS数据spark3.3.1是hive和spark整合后，语法为HSQL，自定义函数按照hive使用即可cos未知是说明：由于部分生产日志过大，且需要对近期数据进行分析，HDFS文件存
tuoluzhe8521·2023-12-28 02:38

CentOS7系列之Firewalld防火墙常用命令操作

firewalld特点实现了动态防火墙功能可以通过DBus消息系统与firewalld通信，以请求打开网络端口从而动态管理防火墙规则使用XML文件存储防火墙规则,实现配置持久化。
liyuanjie8521·2023-12-28 00:32

第14章 文件系统

文件系统概念简介inode、简介块索引表、文件控制块FCB简介FAT文件存储格式：（落后）UNIX操作系统中的索引结构——inode将一部分块放在索引表中，如果文件很大，将其他块放在另一个索引表，具体做法是
OneKnifeBackOcean·2023-12-28 00:23

solr入门级部署+连接数据库的简单配置

2.核心源，solr的搜索的文件存储位置，博主感觉可以认为是一个项目。二、使用
DoUbLE_tree·2023-12-27 22:46

数据库基础面试第三弹

MyISAM表格的数据存储在三个文件上：.frm文件存储表结构，.MYD文件存储数据，.MYI文件存储索引。
测试萧十一郎·2023-12-27 19:57

Impala 基于hive的交互式实时分析工具(一) 概念及原理介绍

谷歌旧三篇论文（GFS-分布式文件存储，Bigtable-分布式数据库，Mapreduce-分布式计算）设计目的为了
章云邰·2023-12-27 19:59

D-24操作系统磁盘管理章节

一、磁盘格式化操作（创建文件系统）1.文件系统:用户将数据存储到磁盘中的方式FAT32(单个文件小于4G)NTFS(没有单位文件存储限制)XFS(存储效率更高-数据库)ext3/ext4(存储效率较低)
荆俊玮·2023-12-27 18:11

VMvare虚拟机之文件夹共享与防火墙设置

使用共享文件夹，可以将文件存储在一个中心位置，然后通过网络使其他人能够访问和使用这些文件。在我们的共享文件夹中是拥有两个共享设置，一个是高
Alone秋·2023-12-27 01:03

MongoDB | 基于分布式文件存储的数据库

MongoDB简介MongoDB是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。
M林夕W·2023-12-26 23:26

ffmpeg 解码文件时的时间戳问题

实时流和普通文件1实时流实时流编码时，我们一般不进行b帧编码，但是文件存储时为了减小大小，会增加b帧，实时流只带了I，P帧，那就会好很多2普通文件很多文件带了b帧，所以要使用解码时间去同步，如果使用pts
qianbo_insist·2023-12-26 22:22

vue2、vue3实现用aws s3协议操作minio进行文件存储和读取

亚马逊s3API文档最开始安装了@aws-sdk/client-s3，但是不知道为什么一直报错，所以用了aws-sdk准备工作：需要已经搭建好minio、创建好桶1.vue2安装插件yarnaddaws-sdks3配置varAWS=require("aws-sdk");AWS.config.update({accessKeyId:accessKeyId,secretAccessKey:secret
查查茶茶丸·2023-12-26 19:09

百度下载限速解决办法--pandownload

百度网盘是很多人文件存储下载的必备工具，但由于百度限速，100M的宽带也只给你个十几k或者几百k的下载速度，真心让人受不了。
geene·2023-12-26 16:26

HBase 内核深度剖析

叫：ConcurrentSkipListMap，通过对HBase的源码跟踪我们发现在这些地方使用了它：简单的列了几个，但是观察这几个类所在的模块就可以发现，HBase从客户端，到请求处理，到元数据再到文件存储贯穿
午后的红茶meton·2023-12-26 06:07

Day12总结-2019/08/06

一、文件操作1.数据持久化将数据通过文件存储到硬盘里面。2.操作步骤打开文件->操作文件内容（读、写）->关闭文件。
浩子_唯一号·2023-12-26 04:54

Kafka日志文件存储

日志文件kafka在server.properties配置文件中通过log.dir属性指定了Kafka的日志存储路径核心文件1.log文件实际存储消息的日志文件,大小固定1G(参数log.segment.bytes可配置),写满后就会新增一个新的文件,文件名是第一条消息的偏移量2.index文件以偏移量为索引来记录对应的.log日志文件中的消息偏移量3.timeindex文件以时间戳为索引,用来进
kk_0910·2023-12-25 23:09

MongoDB数据库本地部署并结合内网穿透实现navicat公网访问

创建隧道映射2.3测试随机公网地址远程连接3.配置固定TCP端口地址3.1保留一个固定的公网TCP端口地址3.2配置固定公网TCP端口地址3.3测试固定地址公网远程访问前言MongoDB是一个基于分布式文件存储的数据库
小沈YO.·2023-12-25 23:05

硅谷课堂-公众号云点播 硅谷课堂微服务项目实战笔记

技术栈涉及主流的SpringBoot+SpringCloud微服务架构，综合应用了腾讯云文件存储和视频点播服务；项目涉及到微信公众号开发，包含公众号菜单、公众号消息、微信分享、微信授权、微信支付；项目前端技术栈
帅杰IT大神·2023-12-25 19:37

[MySQL binlog实战] 增量同步与数据搜索～从入门到精通

可以直接跳到应用场景文章目录binlog是什么简介产生方式文件格式`statement``row``mixed`怎么办开启`binlog`查看`binlog`其他查看相关命令运维查看`binlog`设置文件存储格式缓冲区大小的调整方式缓冲区写入文件的时机
程序员三木·2023-12-25 02:29

[MySQL] 二进制文件

文章目录日志文件binlog是什么简介产生方式文件格式`statement``row``mixed`怎么办设置文件存储格式缓冲区大小的调整方式缓冲区写入文件的时机`sync_binlog`日志文件官网https
程序员三木·2023-12-24 18:12

计算机基础：数据库-MongoDb

MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。MongoDB将数据存储为一个文档，数据结构由
joyyi9·2023-12-24 12:13

Hadoop学习笔记（一）分布式文件存储系统 —— HDFS

概念HDFS（HadoopDistributedFileSystem），Hadoop分布式文件系统，用来存超大文件的。HDFS遵循主/从架构，由单个NameNode(NN)和多个DataNode(DN)组成：NameNode:负责执行有关文件系统命名空间的操作，例如打开，关闭、重命名文件和目录等。它同时还负责集群元数据的存储，记录着文件中各个数据块的位置信息。管理员，负责协调。DataNode：负
zhang35·2023-12-24 08:54

GitHub + jsDelivr + PicGo打造免费图床

前言为什么要使用图床  用markdown写文章时经常需要插入一些图片，而现如今通常一篇文章会在各个不同的平台发布，但各个平台的文件存储方式各不相同，无法直接Ctrl+C的方式一键搞定；如果采用本地存储方式
静看枫殇·2023-12-24 03:33

通过python脚本上传本地/远程服务器文件到minio

前言将文件上传到MinIO对象存储后，MinIO会将文件存储为对象(.meta文件)，并为每个对象生成相应的元数据。元数据是描述对象的属性和信息的数据。通常，元数据包括对象的名称、大小、创建日期等。
publicman_·2023-12-24 00:23

讲道理，Hive文件存储与压缩还是挺重要的

压缩和存储1、文件存储格式Hive支持的存储数的格式主要有：TEXTFILE、SEQUENCEFILE、ORC、PARQUET。
看朱成碧_·2023-12-23 22:27

Hive文件存储格式和Hive数据压缩小总结

二、Hive文件存储格式TEXTFILEHive数据表的默认格式，存储方式：行存储。可以使用Gzip压缩算法，但压缩后的文件不支持split。
浪尖聊大数据-浪尖·2023-12-23 22:27

hive文件存储格式及数据压缩

二、Hive文件存储格式TEXTFILEHive数据表的默认格式，存储方式：行存储。
菜梨子不想这么菜！·2023-12-23 22:57

【004hive基础】hive的文件存储格式与压缩

文章目录一.hive的行式存储与列式存储二.存储格式1.TEXTFILE2.ORC格式3.PARQUET格式ing三.Hive压缩格式1.mr支持的压缩格式:2.hive配置压缩的方式:2.1.开启map端的压缩方式:2.2.开启reduce端的压缩方式:四.hive中存储格式和压缩相结合五.hive主流存储格式性能对比1.压缩比比较2.存储文件的查询效率测试一.hive的行式存储与列式存储HIv
roman_日积跬步-终至千里·2023-12-23 22:56

Hive 文件存储格式与数据压缩结合

1压缩比和查询速度对比1）TextFile（1）创建表，存储数据格式为TEXTFILEcreatetablelog_text(track_timestring,urlstring,session_idstring,refererstring,ipstring,end_user_idstring,city_idstring)ROWFORMATDELIMITEDFIELDSTERMINATEDBY'\
北山璎珞·2023-12-23 22:56

Hive文件存储与压缩

压缩和存储1、Hadoop压缩配置1)MR支持的压缩编码压缩格式工具算法文件扩展名是否可切分DEFAULT无DEFAULT.deflate否GzipgzipDEFAULT.gz否bzip2bzip2bzip2.bz2是LZOlzopLZO.lzo否LZ4无LZ4.lz4否Snappy无Snappy.snappy否为了支持多种压缩/解压缩算法，Hadoop引入了编码/解码器，如下表所示压缩格式对应的
新鲜氧气·2023-12-23 22:24

通讯录应用程序开发指南

1)打印菜单(2)联系人信息的声明(3)创建通讯录(4)初始化通讯录2.2功能实现(1)增加联系人(2)显示联系人(3)删除联系人(4)查找联系人(5)修改联系人(6)排序联系人三、通讯录的优化3.1文件存储保存信息到文件中
南风与鱼·2023-12-23 21:18

MongoDB介绍

一、MongoDB介绍1.1mongoDB介绍MongoDB是由C++语言编写的，是一个基于分布式文件存储的开源数据库系统。在高负载的情况下，添加更多的节点，可以保证服务器性能。
Guff_hys·2023-12-23 19:30

深入理解依赖反转原则(DIP)

很显然不是，不然今天就不用讲了先举个例子，我们的应用会依赖很多三方的服务，DB、缓存、文件存储、短信邮件服务等等，拿缓存来说，假如使用的是redis缓存，java应用访问redis一般都会使用Jedis
wb_snail·2023-12-23 19:30

微服务常见的配置中心简介

微服务架构中，常见的配置中心包括以下几种：SpringCloudConfig：SpringCloudConfig是官方推荐的配置中心解决方案，它支持将配置文件存储在Git、SVN等版本控制系统中。
风情客家__·2023-12-23 18:52

如何防止网站对用户进行识别和追踪的？

一、网站如何识别和追踪用户网站识别和追踪用户的方法多种多样，以下是一些常见的追踪方式：1.Cookie追踪：网站使用Cookie或EverCookie文件存储在用
MuLogin_Browser·2023-12-23 12:48

RocketMQ系统性学习-RocketMQ高级特性之消息存储的高效与刷盘策略、Broker 快速读取消息机制

首先是通过对磁盘进行顺序写可以保证高性能的文件存储：随机写速度10KB/s顺序写速度600MB/s（图片来源于网络）文件拷贝利用了零拷贝以及内存映射技术（MMP）通过使用零拷贝减少数据拷贝次数利用内存映射技术
11来了·2023-12-23 00:03

Python tkinter+文件操作 实现学生信息管理系统

选题：学生信息管理系统目录项目介绍流程图自述个人观点运行截图文件结构代码资源项目介绍这个项目主要包含了GUI界面和后台程序，该项目是通过文件存储的方式来保存学生信息的，主要包含的操作有学生信息的增删改查功能
小猪小猪呼噜噜·2023-12-22 22:15

文件上传存储工具

x-file-storagex-file-storage:一行代码将文件存储到本地、FTP、SFTP、WebDAV、谷歌云、阿里云OSS、华为云OBS、七牛云Kodo、腾讯云COS、百度云BOS、又拍云
程序员小刚·2023-12-22 21:23

十种传输大文件的方法或软件，总有一种适合你

许多文件存储服务和
驾驭信息纵横科技·2023-12-22 17:29

flask 之上传与下载

fromflaskimportFlask,render_template,request,send_from_directory,redirect,url_forimportosapp=Flask(__name__)#上传文件存储路径
零时搞学习·2023-12-22 15:55

CEPH篇 块存储、文件存储和对象存储意义和差异及ubuntu20.4下 ceph安装

理解块存储、文件存储和对象存储的应用场景和选择应用场景分布式存储的应用场景相对于其存储接口，现在流行分为三种:对象存储:也就是通常意义的键值存储，其接口就是简单的GET、PUT、DEL和其他扩展，如七牛
管哥-运维·2023-12-22 13:43

【SpringBoot实战】基于阿里云实现文件上传

【SpringBoot实战】基于阿里云实现文件上传在实际项目开发中，不可避免地会使用到阿里云OSS进行文件存储。尽管阿里云有详细的开发文档，但本篇博客的目的是让我们能够用简明的代码快速实现这个功能。
积雨辋川·2023-12-22 12:43

服务器数据恢复-昆腾存储StorNext文件系统下raid5数据恢复案例

服务器数据恢复环境：昆腾某型号存储，StorNext文件存储系统。共有9个分别配置了24块磁盘的磁盘柜，其中8个磁盘柜存放普通数据，1个磁盘柜存放元数据。
北亚数据恢复·2023-12-22 00:40

开展人事档案数字化需要注意什么

这种方式可以提高人事档案的管理效率、减少文件存储空间，方便查询和检索信息，同时减少人为错误和损毁风险。
信创档案管理系统·2023-12-21 22:56

玩转spring ehcache 缓存框架

一、简介Ehcache是一个用Java实现的使用简单，高速，实现线程安全的缓存管理类库，ehcache提供了用内存，磁盘文件存储，以及分布式存储方式等多种灵活的cache管理方案。
LiuM150428·2023-12-21 21:23

（转载）玩转spring ehcache 缓存框架

www.cnblogs.com/zhangzhen894095789/p/6525845.html一、简介Ehcache是一个用Java实现的使用简单，高速，实现线程安全的缓存管理类库，ehcache提供了用内存，磁盘文件存储
七月的空心菜·2023-12-21 21:52
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他