awss3

Delta Lake基础操作和原理

目录DeltaLake特性maven依赖使用awss3文件系统快速启动基础表操作merge操作deltalake更改现有数据的具体过程delta表schema事务日志delta表文件目录事务日志的一些疑问需要避免的操作
夜飞辰·2019-12-26 14:00

Elasticsearch 如何设置细节权限

我们通过一个AWSLambda程序来备份指定日期的Index文件到AWSS3系统当中，并且处理所有IndexAliases内容。
RomainXie·2019-12-26 07:19

基于AWS S3协议搭建个人云存储服务

相信风靡全球的亚马逊AWSS3的存储云服务大家已经耳熟能详了，如何自己搭建一个私有的S3存储云服务呢？Minio提供对象存储服务，兼容了AWSS3存储协议，用于非结构化的数据存。
Liberalman·2019-12-01 04:02

(minIO) aws sdk for C++

问题描述:需要用C++进行minIO上传和下载，结果发现minIOSDK不支持C++，可以采用awsSDK进行上传和下载，因为minIO是遵循awsS3协议的。
隔壁老韩_19ca·2019-11-30 11:27

AWS数据库配置错误，致时代华纳400万客户数据泄露

由于承包商未能妥善保护亚马逊服务器，导致AWSS3存储上的数据库暴露在互联网上，时代华纳400多万在线客户个人信息遭到泄露。
IT战略家·2019-11-01 12:55

PHP-- AWS S3云存储上传多文件与上传单个文件

首先使用composer在项目中下载aws：composerrequireaws/aws-sdk-php/*   *AWSS3上传文件   *@paramstring$file文件名称   *@returnarray
lxw1844912514·2019-09-24 11:10

Docker 教程之仓库配置文件详解

模板在config_sample.yml文件中，可以看到一些现成的模板段：common：基础配置local：存储数据到本地文件系统s3：存储数据到AWSS3中dev：使用local模板的基本配置test
·2019-09-22 18:46

awss3

importjava.awt.image.BufferedImage;importjava.io.File;importjava.io.IOException;importjava.io.InputStream;importjava.nio.file.Files;importjava.nio.file.Path;importjava.nio.file.Paths;importjava.util.H
dunkbird·2019-09-05 18:00

AWS S3存储桶之事件通知

概述在前面的文章中，我们实践过AWSS3跨区域复制功能（CRR），将对象从一个region的存储桶复制到另一个region的存储桶。今天来实践一下对于S3事件通知的操作。
SinnetCloud·2019-08-27 18:34

AWS 存储服务（三）

AWSS3业务场景挑战Web服务器传输大型文件可能引起网络延迟用户生成的内容需要分配到所有的web服务器中解决方案静态资产存放在S3中S3中的对象设置为公开，用户可以直接访问S3的好处通过API或者HTTP
wzlinux·2019-07-23 08:06

干货 | 非结构化数据迁移-Java 版S3Transfer

一、操作说明1、JAVA版迁移工具说明Java版S3Transfer工具目前为公测阶段，此迁移工具支持从AWSS3、阿里云、腾讯云、百度云等存储迁移文件到京东云对象存储；同时也支持本地文件列表迁移。
京东云技术新知·2019-07-17 00:00

干货 | 基于Go SDK操作京东云对象存储OSS的入门指南

从对象存储的API文档可以看到，京东云提供两套接口：1、兼容S3API，支持AWSS3接口，兼容大部分重要功能，作为后续重点开发和优化版本。由于并不是完全兼容S3的接口，因此需要重点阅读兼容接口列表，
京东云技术新知·2019-07-03 00:00

什么是IPFS?IPFS与区块链有什么关系

这时候有些小伙伴可能会问，为什么要使用分布式文件系统，我将我的文件存储在本地笔记本上，或者上传到云端（典型的云端提供商有AWSS3,AzureCloud等等）保管就好了呀，可用性高而且一般不会丢。
阿童木的眷恋·2019-06-19 19:00

Amazon aws s3 加速

awss3加速-工长山的专栏-CSDN博客https://blog.csdn.net/xuanwu_yan/article/details/79160034【实测有效】“解决国内访问s3.amazonaws.com
rgqancy·2019-05-11 12:00

性能依然感人：在对象化存储上无损部署大数据应用

对于寻求可扩展、经济高效存储的企业而言，内部部署和云部署（例如AWSS3）采用对象存储的方案更普遍。然而，对象存储相较于Hadoop性能更低，因此程序开发者可能不愿意在两者间进行权衡选择。企业
Alluxio·2019-05-08 22:26

Spring Boot项目集成AWS SDK连接到AWS S3,实现上传下载功能

本文主要描写在SpringBoot项目里集成AWSSDK连接到AWSS3,实现上传下载功能的具体代码和注意事项。如有不足和错误之处，欢迎指正。
引之旁逸·2019-04-29 15:54

阿里云OSS和腾讯云COS互相迁移

spm=5176.7851628.6.1079.UqBdXKOssImport工具可以将本地、其它云存储的数据迁移到OSS，它有以下特点：支持的丰富的数据源，有本地、七牛、百度BOS、AWSS3、AzureBl
么啥好说的·2019-04-18 23:51

AWS S3 自定义接口和参数

有时候用着你不熟悉的文档开发新项目，然后就怀着一片迷茫的心情，一点点去做，新项目用到了AWSS3的接口文档开发，前端用的html，css，jquery，需求总是各种各样的，遇到的坑也很多，其中有一个自己的点子
chicheese·2019-04-09 18:07

基于分布式分层存储10倍提速S3上Spark和Hive作业性能

网站Alluxio在各大厂用例关注Alluxio微信公众号：Alluxio_China在本文中，来自Bazaarvoice的ThaiBui介绍了Bazaarvoice如何利用开源存储系统Alluxio在AWSS3
Alluxio·2019-03-17 23:20

js 使用预签名(presigned) url 上传文件到 AWS S3服务（解决生成的文件格式错误问题）

背景项目里有图片上传的需求，具体实现是后端生成presignedurl（预签名url，里面包含上传到AWSS3所需要的一些认证标识信息）给到前端，前端通过这个URL将文件上传到云服务上。
yujin0213·2019-03-16 18:42

基于AWS的云备份&容灾解决方案

备份解决方案中物理机采用安装备份代理；虚拟化环境采用无代理模式按照设定的时间间隔或持续的将数据备份或至本地存储（加快备份还原速度）或直接将数据传输至AWSS3存储桶或归档到AWSGlacier中。
ieihihc·2019-02-02 21:22

AWS CLI 命令行直接操作AWS控制台

如awss3就是针对S3存储的操作。参考官方所有命令：AWSCLICommandReference配置文件：AWSCLI的
SolomonXie·2019-01-23 00:00

AWS S3 设置 Bucket Policy 强制加密

AWSS3在上传和下载的时候，默认会使用TLS的方式进行加密和解密。这个具体是在哪里配置的呢？
beanxyz·2018-12-27 13:08

014.Docker Harbor+Keepalived+LVS+共享存储高可用架构

通过前置LB组件，如Keepalived，可以分流到不同的实例中去处理，从而实现负载均衡，也避免了单点故障，其架构图如下：方案说明:共享存储：Harbor的后端存储目前支持AWSS3、OpenstackSwift
木二·2018-12-24 08:00

适用于***测试不同阶段的工具收集整理

https://github.com/ChrisTruncer/EyeWitnessAWSBucketDump：AWSS3安全扫描工具，允许你快速枚举AWSS3buckets以查找有趣或机密的文件。
simeon2005·2018-12-16 18:46

AWS实战 - 对S3数据加密方式的总结

主密钥:也叫客户主密钥或CMK，根据不同的加密方式，主密钥有可能直接用于加密S3对象，也有可能用于加密数据加密密钥；托管:在本文中，是指对密钥进行管理，包括对密钥的创建、启用、停用及轮换等各种操作；介绍AWSS3
Harpsichord1207·2018-12-10 00:00

java上传图片到aws s3

最近因为项目原因，需要将程序下载到本地的图片上传到awss3提供给国外的客户使用，下面是我用到的代码：第一步：连接awss3：BasicAWSCredentialsawsCreds=newBasicAWSCredentials
csdnwsf·2018-11-22 17:21

aws s3文件上传设置accesskey、secretkey、sessiontoken

背景：最近跟进的项目会封装awsS3资源管理细节，对外提供获取文件上传凭证的API，业务方使用获取到的凭证信息直接请求aws进行文件上传。因此，测试过程需要验证S3文件上传的有效性。
AmyZYX·2018-10-25 00:00

s3cmd管理aws-s3桶

使用命令行工具s3cmd管理亚马逊AWSS3资源.md尽管存在awscli这样的官方工具，但这些工具功能不够全面，于是一些第三方工具应运而生。
wdy198622·2018-08-23 17:09

【转】AWS s3 V4签名算法

AmazonWebServices(亚马逊云服务)AWSs3API文档：https://aws.amazon.com/cn/documentation/s3/Minio：（具体的解释自行百度吧）一个基于golang语言开发的AWSS3
mimosa890927·2018-08-16 14:21

AWS S3结合cloudfront distribution实现https访问

转自Troy's博客https://troyyang.com/2018/02/16/hosting-images-with-aws-s3/正确使用AWSS3的方式之打造自己的https图床写过博客的人都知道图床
weixin_33872566·2018-08-16 11:08

minio-搭建个人云存储服务

相信风靡全球的亚马逊AWSS3的存储云服务大家已经耳熟能详了，如何自己搭建一个私有的S3存储云服务呢？Minio提供对象存储服务，兼容了AWSS3存储协议，用于非结构化的数据存。
大飞哥2·2018-06-20 16:05

[实战]生产环境阿里云-OSS资源迁移

使用工具OssImportOssImport工具可以将本地、其它云存储的数据迁移到OSS，它有以下特点：支持的丰富的数据源，有本地、七牛、百度BOS、AWSS3、AzureBlob、又拍云、腾讯云COS
ljpwinxp·2018-05-29 15:01

AWS oozie sqoop action 调度mysql to hive

本文基于AWSS3，oozie4.5.0，sqoop1.4.7，sqoop自己安装，其余AWS安装。
Lyle-liang·2018-05-10 18:33

阿里云如何使用AWS S3并用figaro管理密码

前提：已经把railsapp部署到阿里云，已有AWS账号，并且申请了AWSS3，记录下密钥ID和私钥，Region，Bucket_name。
董志钦·2018-03-15 00:00

私有镜像库构建攻略

虽然我建议大家使用AWSS3，但是我在此将使用registry:2，把所有的数据存放在主机本地。
wangjunjack·2017-12-12 12:44

使用Amazon S3接口云存储

本文主要介绍了如果使用Java操作AmazonS3接口AmazonS3介绍AmazonS3，也叫AWSS3全称是：AmazonSimpleStorageService官网介绍AmazonS3是专为从任意位置存储和检索任意数量的数据而构建的对象存储
会点代码的大叔·2017-10-19 16:24

使用AWS PHP SDK存取天翼云的对象存储(OSS)

中国电信天翼云提供对象存储(OOS)服务，其API接口兼容AWSS3接口。与众不同的是，中国电信提供一种专线，称为云专线，将企业的局域网与云直连。企业可通
JoStudio·2017-09-06 00:20

AWSS3技术点分析

AWSS3技术点分析一、S3的特点：l面向Internet的对象存储对象通俗来讲就是一个完整文件，没有进行追加写入的、可断电保存在物理介质（硬盘或其他磁盘）中的文件。
Swallow_he·2017-07-26 21:57

云存储中的 HTTP 鉴权算法分析

亚马逊的AWSS3和OpenStackSwift分别采取了不同的算法来对每一个HTTP请求进行鉴权。这里想对二者的鉴权过程作简单分析和总结。
FrancisHe·2017-06-05 21:43

软件开发者优质资源网站

例如：数百个开发者希望在2017年2月28日讨论大规模的AWSS3停机。你的同事中可没有几个能见证这种中断所造成的史诗灾难。SlashDot@slashdot这是一个汇集了
ejinxian·2017-03-21 09:34

AWS 的 S3 故障回顾和思考

继Gitlab的误删除数据事件没几天，“不沉航母”AWSS3（SimpleStorageService）几天前也“沉”了4个小时，墙外的半个互联网也跟着挂了。
陈皓·2017-03-03 06:00

私有镜像库构建攻略

虽然我建议大家使用AWSS3，但是我在此将
RancherLabs·2017-01-26 08:08

私有镜像库构建攻略

虽然我建议大家使用AWSS3，但是我在此将
RancherLabs·2016-11-29 00:00

Laravel学习笔记之Filesystem-从Dropbox中下载文件到AWS S3

说明：本文主要讲述了Laravel的文件系统Filesystem的小Demo，逻辑不复杂，主要就是把Dropbox上的一个文件下载到本地local，和下载到AWSS3中。
lx1036·2016-08-19 00:00

PowerShell 自动化管理 AWS（3）- S3

今天继续学习PowerShell管理AWSS3。比起EC2来说，S3要简单很多。S3一般是用作普通的存储来使用，可以存放一些对I/O要求不是太高的文件等等。
beanxyz·2016-06-30 11:28

旧瓶新酒之业务入云不简单

2016年3月又是个特殊的时间点——恰逢AWSS3发布十周年；Google则迎来了Spotify、Apple、Disney等大客户；Microsoft也拿出了“Cloud第一、Windows第二”的态度
魏星·2016-06-27 00:00

架构师（2016年6月）

卷首语：写在InfoQ十周年作者魏星2016年5月23日是InfoQ十周岁的生日，同时距AWSS3发布也刚好十年。十年里，随着云计算大数据的蓬勃发展，企业基础设施和系统架构发生了翻天覆地的变化。
InfoQ中文站·2016-06-08 00:00

一说就懂的 AWS S3

AWSS3的全称是，AmazonSimpleStorageService，亚马逊官网上对其有如下定义：我们通常认为AWSS3就是亚马逊的无限制网络文件服务器，但是事实上其功能远远不止于此。
丘秉宜keith·2016-01-06 15:03

一说就懂的 AWS S3

AWSS3的全称是，AmazonSimpleStorageService，亚马逊官网上对其有如下定义：我们通常认为AWSS3就是亚马逊的无限制网络文件服务器，但是事实上其功能远远不止于此。
keithyau·2016-01-06 15:00
上一页 1 2 3 4 5 6 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他