amazonS3

Apache Drill安装测试

可以查询localfiles、HDFS、AmazonS3、HBase、MongoDB、Hive、RDBMS、Kafka、OpenTSDB等数据源的数据。一个SQL查询可以同时查询多个数据源数据。
wangpei1949·2020-08-04 19:42

Tachyon---基于内存的分布式存储系统

此外，Tachyon还能够整合众多现有的存储系统（如AmazonS3,ApacheHDFS,RedHatGlusterFS,OpenStackSwift
行者小朱·2020-08-04 11:38

Tachyon--以内存为核心的开源分布式存储系统

此外，Tachyon还能够整合众多现有的存储系统（如AmazonS3,ApacheHDFS,RedHatGlusterFS,OpenStackSwift
腾讯开发者·2020-08-04 11:53

Apache Hudi + AWS S3 + Athena实战

ApacheHudi在阿里巴巴集团、EMISHealth，LinkNovate，Tathastu.AI，腾讯，Uber内使用，并且由AmazonAWSEMR和Google云平台支持，最近AmazonAthena支持了在AmazonS3
leesf·2020-08-03 19:00

windows下安装gulp-sass编译不过去报错的解决方案;

node-sass的下载请求,而请求的路径是github;具体路径:https://github.com/sass/node-sass/releases进行某个版本下载(针对系统),而github上的资源基本是放在AmazonS3
crper·2020-08-01 11:58

什么？OSS存储你还在用FastDFS？MinIO了解一下！！！

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。对象的大小可以从几KB到最大5TB。
SpringForAll·2020-08-01 10:32

Android 自带浏览器apk下载完成点击没反应

昨天上传apk到Amazons3,结果测试人员使用华为手机自带浏览器下载之后无法安装（android4.1版本）此问题只涉及到部分自带浏览器，并非全部本人使用MacTransmit上传，查看文件头信息Content-Type
Freetofly白·2020-08-01 01:00

机器学习数据集

AmazonAWS公开数据集:包含的通常是大型数据集,可通过AmazonS3访问。这些数据集包括人类基因组项目、CommonCrawl网页语料库、维基百科数据和GoogleBooksNgrams。
lin聪记·2020-07-31 14:25

s3.amazonaws.com 下载资源缓慢的解决办法

有些文件需要从Amazons3服务器去下载，但是不知道什么原因国内下载巨慢，有时候直接提示超时，网上说法不一，但不管怎样我关心的不是这些，我要能下载到资源就行，于是就发现了下面的一个小技巧1、ping下载地址域名
_________MAN·2020-07-30 23:08

[新闻摘录]云计算十年：OpenStack如何占据开源IaaS江湖老大的地位

www.infoq.com/cn/articles/the-aftertaste-and-prospects-of-openstack编者按：AWS（AmazonWebService）开始于2006年3月14日AmazonS3
inter_peng·2020-07-30 19:14

minio 对象存储 单机部署

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。
Freedom3568·2020-07-30 06:50

国外物联网平台初探（一） ——亚马逊AWS IoT

使用AWSLambda、AmazonKinesis、AmazonS3、AmazonMachineLearning
weixin_33913377·2020-07-29 14:35

Centos7配置MinIO对象存储服务器

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。对象的大小可以从几KB到最大5TB。MinIO服务器足够轻，可以与应用程序
明言·2020-07-29 10:58

官宣！Amazon EMR正式支持Apache Hudi

通过高效管理AmazonS3中数据的布局方式，Hudi允许近乎实时地提取和更新数据。Hudi维护在数据集上所执行的操作的元数据，以确保这些操作的
xleesf·2020-07-28 23:25

DeltaLake 概念

（类似的存储层还有HadoopHDFS，AzureDataLakeStorage，AmazonS3等。）它可以为你的DataLake带来可靠性。
大数据AIRDE·2020-07-28 21:23

AWS基础命令操作

awss3ls列出AWS上的桶awss3lss3://bucket列出桶下的目录及对象awss3lss3://bucket/path列出桶下的path的对象高级别awss3命令还可以方便地管理AmazonS3
WMJGuo·2020-07-28 06:06

spark-各版本特性

0.3SaveOperationsYoucannowsavedistributeddatasetstotheHadoopfilesystem(HDFS),AmazonS3,Hypertable,andanyotherstoragesystemsupportedbyHadoop.Thereareconveniencemethodsforseveralcommonformats
小蜗牛也有梦想·2020-07-28 05:57

如何在Rails项目上使用Active Storage上传图片？

这是一种非常简单但功能强大，可上传文件至云端储存（AmazonS3、谷歌云存储或微软Azure存储）的方式。ActiveStorage
读芯术·2020-07-27 21:41

OpenStack存储相关组件描述

OpenStack存储技术Swift对象存储技术，类似AmazonS3服务，但是提供很强的扩展性，冗余和持久化技术，也兼容S3API。
齐晖·2020-07-27 20:50

对象存储Object，分布式文件存储NAS，分布式块存储（ServerSAN）

差异点\产品ServerSAN分布式NAS分布式对象存储接口协议块（SCSI协议）文件（NFS、CIFS协议）对象（OpenStackSWIFT、AmazonS3）时延较低(<10ms左右)中(10ms
Pierson_Wu·2020-07-27 13:42

Spark（Python）学习（三）

在“.textFile()”括号中可以给出文件系统地址，支持的数据类型可以是：本地文件系统；分布式文件系统HDFS；加载云端文件（如AmazonS3等）。
雨山林稀·2020-07-16 06:23

Fluentd (td-agent) 日志收集系统

目前开源社区已经贡献了下面一些存储插件：MongoDB,Redis,CouchDB,AmazonS3,AmazonSQS,Scribe,0MQ,AMQP,Delayed,Growl等等。
VirusFu·2020-07-15 19:55

从Kubernetes安全地访问AWS服务，告诉你多云场景下如何管理云凭据！

任何应用程序都有需求，也许它需要在AmazonRedshift上运行分析查询，访问存储在AmazonS3存储桶中的数据
CSDN云计算·2020-07-15 17:33

下载文件并使用JavaScript将其压缩在浏览器中

对于每个请求，我们的后端将生成一个报告，将其上传到AmazonS3存储，然后将其URL返回给客户端。由于生成报告需要一些时间，因此将存储输出文件，并且服务器将通过请求参数来缓存其URL。
杜尼卜·2020-07-15 07:34

Amazon RDS 上的 Microsoft SQL Server » 导入和导出 SQL Server 数据库

可以创建本地数据库的完整备份，将该备份存储在AmazonSimpleStorageService(AmazonS3)上，然后将该备份文件还原到运行SQLServer的现有AmazonRDS
weixin_34004750·2020-07-15 04:42

flex项目和组件等

youtube及加密等类库.http://labs.adobe.com/wiki/index.php/ActionScript_3:resources:apis:librariesas3awss3lib与AmazonS3
weixin_30697239·2020-07-15 03:43

RDS - 获取RDS增强监测数据

可以导出至AmazonS3
Chuck_Chen1222·2020-07-14 09:34

AmazonS3文档——对象存储的用法之《存储桶操作》

最近应业务需要，要把保单相关的电话录音进行整理，并逐渐取缔本地硬盘存储的方式，改为AmazonS3云存储。一方面让录音文件的目录结构变得更加统一，有利于维护和查询；另一方面可以保证录音信息不会丢失。
万米高空·2020-07-13 23:05

AWS 数据加密知识点

AmazonS3在将您的数据写入数据中心内的磁盘时会在对象级别上加密这些数据，并在您访问这些数据时为您解密这些数据。只要您验证了您的请求并且拥有访问权限，您访问加密和未加密对象的方式就没有区别。
wangzan18·2020-07-13 16:48

0708 - 今天休息，顺便废了个点子

痛点的出发点是：做外贸的需要在国外的网站上放图片，其中AmazonS3是个不错的空间。
ITJason·2020-07-13 11:27

Spark access s3 exception Bad Request 400

：Exceptioninthread"main"com.amazonaws.services.s3.model.AmazonS3Exception:StatusCode:400,AWSService:AmazonS3
走向自由·2020-07-13 02:56

spark本地读取写入s3文件

1.关于S3，S3N和S3A的区别与联系（wiki:https://wiki.apache.org/hadoop/AmazonS3）S3NativeFileSystem(URIscheme:s3n)AnativefilesystemforreadingandwritingregularfilesonS3
玉羽凌风·2020-07-12 23:32

centOS7在Docker Compose上运行分布式MinIO

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。对象的大小可以从几KB到最大5TB。
冷月秋寒·2020-07-10 22:55

分布式系统的“流言蜚语”

封面来自网络前言你也许用过Redis，Cassandra，AmazonS3,BitTorrent等著名的软件，但是也许你不知道，它们在底层通信时都采用了一个叫做Gossip（流言蜚语）的协议。
Android小安·2020-07-09 10:02

ruby gem 国内镜像。。。 顶一下taobao

由于国内网络原因（你懂的），导致rubygems.org存放在AmazonS3上面的资源文件间歇性连接失败。
sunvince·2020-07-08 06:30

提升Hive操作Amazon S3读写数据的性能

通常通过AmazonS3读取和写入数据的速度也要慢于使用HDFS，即使AmazonS3存储桶与基于AmazonEC2基础架构上运行的Hadoop集群，原因如下：1、在AmazonS3上，重命名是非常昂贵的复制操作
冯立彬·2020-07-07 07:46

组件: Spark core

SparkcancreatedistributeddatasetsfromanyfilestoredintheHadoopdistributedfilesystem(HDFS)orotherstoragesystemssupportedbytheHadoopAPIs(includingyourlocalfilesystem,AmazonS3
并肩走天涯·2020-07-06 23:41

AWS快速上手训练营

下图是AWS的简单介绍AWS.png2.资源AWS注册网址课程学习网站活动内容关键词&概念Region用户数据复制必须通过用户同意之后才会进行AvailablityZone可用区容灾间距高性能网路连接AmazonS3
杨慧莉·2020-07-06 18:08

AWS 数据加密知识点

AmazonS3在将您的数据写入数据中心内的磁盘时会在对象级别上加密这些数据，并在您访问这些数据时为您解密这些数据。只要您验证了您的请求并且拥有访问权限，您访问加密和未加密对象的方式就没有区别。
wzlinux·2020-07-04 23:05

MinIO Docker部署存储服务

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。
开开136·2020-07-04 20:58

应用中的分布式与加密

分布式数据库已经渐渐成为主流应用场景.采用分布式文件系统和分布式数据库的目标主要是解决物理存储空间的限制问题.其次是查询速度问题.当然数据容灾,负载均衡也是必要的选项.现在常见的分布式文件系统有MogileFS,amazons3
iteye_5750·2020-07-04 19:28

spark与hadoop集成详解

1，spark主要用于提高而不是取代hadoop栈，从一开始spark就被设计从hdfs中读取存储数据，类似于其他的存储系统，例如Hbase,AmazonS3等，因此，hadoop用户可以通过结合spark
reylee911·2020-07-04 16:01

5G时代下，如何应对物联网大数据分析的严峻挑战

企业通常将此类数据放在数据湖中，例如AmazonS3，AzureDat
脑洞小开·2020-07-04 07:20

Hadoop及spark框架结构

Hadoop结构框架spark框架Spark各部件介绍SparkCoreSpark生态圈的核心:负责从HDFS,AmazonS3和HBase等持久层读取数据在YARN和Standalone为资源管理器调度
Black_God1·2020-07-04 04:36

第一章 九析带你轻松完爆 MinIO - 一分钟安装使用

它与AmazonS3云存储服务兼容。使用MinIO构建用于机器学习、分析和应用程序负载的
九析·2020-07-03 19:36

RubyGems 镜像 - 淘宝网

由于国内网络原因（你懂的），导致rubygems.org存放在AmazonS3上面的资源文件间歇性连接失败。
happyrabbit456·2020-07-02 02:24

云计算存储之AWS S3 命令行工具s3cmd的安装配置和使用

s3cmd是一款AmazonS3命令行工具。它不仅能上传、下载、同步，还能设置权限，下面是完整的安装使用指南。
RunFromHere·2020-07-01 17:54

go使用MinIO搭建一个文件存储服务器

它与AmazonS3云存储服务兼容。它最适合存储非结构化数据，如照片，视频，日志文件，备份和容器/VM映像。
陳蝈蝈·2020-07-01 11:11

minio分布式存储系列（一）__介绍及开箱使用

它兼容亚马逊S3云存储服务接口，可以理解为是S3的开源版本（亚马逊S3：专为从任意位置存储和检索任意数量的数据而构建的对象存储，官网地址：AmazonS3），非常适合于存储大容量非结构化的数据，例如图片
小脑袋&小胖子·2020-07-01 10:47

StreamSets实战之路（八）-基础篇- StreamSets-Destination类组件使用

StreamSetsDC上的数据输出落地到指定的存储服务或其他服务等Destination类组件主要包含以下：Aerospike//Aerospike数据输出组件，将数据写到Aerospike（分布式KV库）库中AmazonS3
macalzheng·2020-06-30 20:26
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他