AmazonS3

minio 对象存储 单机部署

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。
Freedom3568·2020-07-30 06:50

国外物联网平台初探（一） ——亚马逊AWS IoT

使用AWSLambda、AmazonKinesis、AmazonS3、AmazonMachineLearning
weixin_33913377·2020-07-29 14:35

Centos7配置MinIO对象存储服务器

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。对象的大小可以从几KB到最大5TB。MinIO服务器足够轻，可以与应用程序
明言·2020-07-29 10:58

官宣！Amazon EMR正式支持Apache Hudi

通过高效管理AmazonS3中数据的布局方式，Hudi允许近乎实时地提取和更新数据。Hudi维护在数据集上所执行的操作的元数据，以确保这些操作的
xleesf·2020-07-28 23:25

DeltaLake 概念

（类似的存储层还有HadoopHDFS，AzureDataLakeStorage，AmazonS3等。）它可以为你的DataLake带来可靠性。
大数据AIRDE·2020-07-28 21:23

AWS基础命令操作

awss3ls列出AWS上的桶awss3lss3://bucket列出桶下的目录及对象awss3lss3://bucket/path列出桶下的path的对象高级别awss3命令还可以方便地管理AmazonS3
WMJGuo·2020-07-28 06:06

spark-各版本特性

0.3SaveOperationsYoucannowsavedistributeddatasetstotheHadoopfilesystem(HDFS),AmazonS3,Hypertable,andanyotherstoragesystemsupportedbyHadoop.Thereareconveniencemethodsforseveralcommonformats
小蜗牛也有梦想·2020-07-28 05:57

如何在Rails项目上使用Active Storage上传图片？

这是一种非常简单但功能强大，可上传文件至云端储存（AmazonS3、谷歌云存储或微软Azure存储）的方式。ActiveStorage
读芯术·2020-07-27 21:41

OpenStack存储相关组件描述

OpenStack存储技术Swift对象存储技术，类似AmazonS3服务，但是提供很强的扩展性，冗余和持久化技术，也兼容S3API。
齐晖·2020-07-27 20:50

对象存储Object，分布式文件存储NAS，分布式块存储（ServerSAN）

差异点\产品ServerSAN分布式NAS分布式对象存储接口协议块（SCSI协议）文件（NFS、CIFS协议）对象（OpenStackSWIFT、AmazonS3）时延较低(<10ms左右)中(10ms
Pierson_Wu·2020-07-27 13:42

Spark（Python）学习（三）

在“.textFile()”括号中可以给出文件系统地址，支持的数据类型可以是：本地文件系统；分布式文件系统HDFS；加载云端文件（如AmazonS3等）。
雨山林稀·2020-07-16 06:23

Fluentd (td-agent) 日志收集系统

目前开源社区已经贡献了下面一些存储插件：MongoDB,Redis,CouchDB,AmazonS3,AmazonSQS,Scribe,0MQ,AMQP,Delayed,Growl等等。
VirusFu·2020-07-15 19:55

从Kubernetes安全地访问AWS服务，告诉你多云场景下如何管理云凭据！

任何应用程序都有需求，也许它需要在AmazonRedshift上运行分析查询，访问存储在AmazonS3存储桶中的数据
CSDN云计算·2020-07-15 17:33

下载文件并使用JavaScript将其压缩在浏览器中

对于每个请求，我们的后端将生成一个报告，将其上传到AmazonS3存储，然后将其URL返回给客户端。由于生成报告需要一些时间，因此将存储输出文件，并且服务器将通过请求参数来缓存其URL。
杜尼卜·2020-07-15 07:34

Amazon RDS 上的 Microsoft SQL Server » 导入和导出 SQL Server 数据库

可以创建本地数据库的完整备份，将该备份存储在AmazonSimpleStorageService(AmazonS3)上，然后将该备份文件还原到运行SQLServer的现有AmazonRDS
weixin_34004750·2020-07-15 04:42

flex项目和组件等

youtube及加密等类库.http://labs.adobe.com/wiki/index.php/ActionScript_3:resources:apis:librariesas3awss3lib与AmazonS3
weixin_30697239·2020-07-15 03:43

RDS - 获取RDS增强监测数据

可以导出至AmazonS3
Chuck_Chen1222·2020-07-14 09:34

AmazonS3文档——对象存储的用法之《存储桶操作》

最近应业务需要，要把保单相关的电话录音进行整理，并逐渐取缔本地硬盘存储的方式，改为AmazonS3云存储。一方面让录音文件的目录结构变得更加统一，有利于维护和查询；另一方面可以保证录音信息不会丢失。
万米高空·2020-07-13 23:05

AWS 数据加密知识点

AmazonS3在将您的数据写入数据中心内的磁盘时会在对象级别上加密这些数据，并在您访问这些数据时为您解密这些数据。只要您验证了您的请求并且拥有访问权限，您访问加密和未加密对象的方式就没有区别。
wangzan18·2020-07-13 16:48

0708 - 今天休息，顺便废了个点子

痛点的出发点是：做外贸的需要在国外的网站上放图片，其中AmazonS3是个不错的空间。
ITJason·2020-07-13 11:27

Spark access s3 exception Bad Request 400

：Exceptioninthread"main"com.amazonaws.services.s3.model.AmazonS3Exception:StatusCode:400,AWSService:AmazonS3
走向自由·2020-07-13 02:56

spark本地读取写入s3文件

1.关于S3，S3N和S3A的区别与联系（wiki:https://wiki.apache.org/hadoop/AmazonS3）S3NativeFileSystem(URIscheme:s3n)AnativefilesystemforreadingandwritingregularfilesonS3
玉羽凌风·2020-07-12 23:32

centOS7在Docker Compose上运行分布式MinIO

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。对象的大小可以从几KB到最大5TB。
冷月秋寒·2020-07-10 22:55

分布式系统的“流言蜚语”

封面来自网络前言你也许用过Redis，Cassandra，AmazonS3,BitTorrent等著名的软件，但是也许你不知道，它们在底层通信时都采用了一个叫做Gossip（流言蜚语）的协议。
Android小安·2020-07-09 10:02

ruby gem 国内镜像。。。 顶一下taobao

由于国内网络原因（你懂的），导致rubygems.org存放在AmazonS3上面的资源文件间歇性连接失败。
sunvince·2020-07-08 06:30

提升Hive操作Amazon S3读写数据的性能

通常通过AmazonS3读取和写入数据的速度也要慢于使用HDFS，即使AmazonS3存储桶与基于AmazonEC2基础架构上运行的Hadoop集群，原因如下：1、在AmazonS3上，重命名是非常昂贵的复制操作
冯立彬·2020-07-07 07:46

组件: Spark core

SparkcancreatedistributeddatasetsfromanyfilestoredintheHadoopdistributedfilesystem(HDFS)orotherstoragesystemssupportedbytheHadoopAPIs(includingyourlocalfilesystem,AmazonS3
并肩走天涯·2020-07-06 23:41

AWS快速上手训练营

下图是AWS的简单介绍AWS.png2.资源AWS注册网址课程学习网站活动内容关键词&概念Region用户数据复制必须通过用户同意之后才会进行AvailablityZone可用区容灾间距高性能网路连接AmazonS3
杨慧莉·2020-07-06 18:08

AWS 数据加密知识点

AmazonS3在将您的数据写入数据中心内的磁盘时会在对象级别上加密这些数据，并在您访问这些数据时为您解密这些数据。只要您验证了您的请求并且拥有访问权限，您访问加密和未加密对象的方式就没有区别。
wzlinux·2020-07-04 23:05

MinIO Docker部署存储服务

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。
开开136·2020-07-04 20:58

应用中的分布式与加密

分布式数据库已经渐渐成为主流应用场景.采用分布式文件系统和分布式数据库的目标主要是解决物理存储空间的限制问题.其次是查询速度问题.当然数据容灾,负载均衡也是必要的选项.现在常见的分布式文件系统有MogileFS,amazons3
iteye_5750·2020-07-04 19:28

spark与hadoop集成详解

1，spark主要用于提高而不是取代hadoop栈，从一开始spark就被设计从hdfs中读取存储数据，类似于其他的存储系统，例如Hbase,AmazonS3等，因此，hadoop用户可以通过结合spark
reylee911·2020-07-04 16:01

5G时代下，如何应对物联网大数据分析的严峻挑战

企业通常将此类数据放在数据湖中，例如AmazonS3，AzureDat
脑洞小开·2020-07-04 07:20

Hadoop及spark框架结构

Hadoop结构框架spark框架Spark各部件介绍SparkCoreSpark生态圈的核心:负责从HDFS,AmazonS3和HBase等持久层读取数据在YARN和Standalone为资源管理器调度
Black_God1·2020-07-04 04:36

第一章 九析带你轻松完爆 MinIO - 一分钟安装使用

它与AmazonS3云存储服务兼容。使用MinIO构建用于机器学习、分析和应用程序负载的
九析·2020-07-03 19:36

RubyGems 镜像 - 淘宝网

由于国内网络原因（你懂的），导致rubygems.org存放在AmazonS3上面的资源文件间歇性连接失败。
happyrabbit456·2020-07-02 02:24

云计算存储之AWS S3 命令行工具s3cmd的安装配置和使用

s3cmd是一款AmazonS3命令行工具。它不仅能上传、下载、同步，还能设置权限，下面是完整的安装使用指南。
RunFromHere·2020-07-01 17:54

go使用MinIO搭建一个文件存储服务器

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。
陳蝈蝈·2020-07-01 11:11

minio分布式存储系列（一）__介绍及开箱使用

它兼容亚马逊S3云存储服务接口，可以理解为是S3的开源版本（亚马逊S3：专为从任意位置存储和检索任意数量的数据而构建的对象存储，官网地址：AmazonS3），非常适合于存储大容量非结构化的数据，例如图片
小脑袋&小胖子·2020-07-01 10:47

StreamSets实战之路（八）-基础篇- StreamSets-Destination类组件使用

StreamSetsDC上的数据输出落地到指定的存储服务或其他服务等Destination类组件主要包含以下：Aerospike//Aerospike数据输出组件，将数据写到Aerospike（分布式KV库）库中AmazonS3
macalzheng·2020-06-30 20:26

MT7628平台上编译移植Amazon S3

最近项目中用到了云存储上传照片和视频片段，用的是AmazonS3。AmazonS3全称是AmazonSimpleStorageService。
浪子--赟·2020-06-30 19:38

EMR 上的 Spark 或 Hive 作业失败并出现 HTTP 503 “Slow Down” AmazonS3Exception

com.amazon.ws.emr.hadoop.fs.shaded.com.amazonaws.services.s3.model.AmazonS3Exception:SlowDown(Service:AmazonS3
玉羽凌风·2020-06-30 16:26

Presto 配置 Hive & Hive的权限

Hive是三个组件的组合：各种格式的数据文件通常存储在Hadoop分布式文件系统（HDFS）或AmazonS3中。有关如何将数据文件映射到架构和表的元数据。
张伯毅·2020-06-30 14:32

rgw报错SignatureDoesNotMatch

一、sdk版本com.amazonawsaws-java-sdk-s31.11.475二、错误信息Service:AmazonS3;StatusCode:403;ErrorCode:SignatureDoesNotMatch
风中情·2020-06-30 07:39

Ruby Gem 慢甚至超时问题

某些时候安装一些rubygem的时候慢,甚至超时.国内网络原因（你懂的）,导致rubygems.org存放在AmazonS3上面的资源文件间歇性连接失败。
xiaobo_duanfei·2020-06-30 00:50

Amazon S3 FOR PHP 使用总结

AmazonSimpleStorageService(AmazonS3),是一个公开的服务，Web应用程序开发人员可以使用它存储数字资产，包括图片、视频、音乐和文档。
d4shman·2020-06-29 21:28

CocoaPod 使用以及提交代码到CocoaPod

安装1）因为CocoaPod基于ruby安装，rubygems.org存放在AmazonS3上面的资源文件间歇性被墙，所以使用淘宝的ruby镜像参考这里：https://ruby.taobao.org$
lanjing·2020-06-29 14:31

参加AWS活动

参加活动时关键词，概念Region：区域AvailabilityZone：1）可用区：（复制）2）容灾间距3）高性能网站链接AmazonS3：给应用程序用IAM是什么？VPC是什么？
KoalaT·2020-06-29 08:55

amazonS3文件管理工具类

/***@authorhuaxu*@create2018/12/10*@since1.0.0*/publicclassAmazonS3Manager{publicstaticfinalLoggerlogger=LoggerFactory.getLogger(AmazonS3Manager.class);privatestaticStringAMAZON_ENDPOINT_URL;privatest
华绪1024·2020-06-28 23:34

Syncany开源共享软件的介绍以及其在linux下的安装

它不同于我们之前使用过的云存储客户端，其特殊之处就在于可以利用FTP,Box.net,AmazonS3,GoogleStorage,IMAP,Picasa,WebDAV,WindowsShare(NetBIOS
weixin_34128839·2020-06-28 12:59
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他