awss3存储

Ⅰ 如何快速下s3 amazon aws 中的数据

基本受限于带宽，可以考虑s3fs，操作方便

Ⅱ 亚马逊云计算平台AWS的Glacier和S3有什么区别

Glacier最大的两个特点是
1.便宜, 是S3的1/12
2.访问延时非常高, 访问一个S3的数据可能耗时100毫秒, 访问一个Glacier的数据可能耗时3-5小时.

另外,在Glacier中,用户需要自己维护的文件目录.

这
是与Glacier的定位相符合的. Glacier是一种cold storage, 可以看做是高级磁带(但实际上是用定制的磁盘),
AWS的官方文档介绍的几种应用场景是: 公司历史数据保存, 出版物(书, 电影, 音乐, 电视, 新闻)制作过程的素材和中间产物的保存,
科研过程中原始数据的保存.

这几种应用场景有如下特征:
数据总量大, 不是以G计算, 而是以T, 甚至P计算.
访问频率极低, 大多数文件再也不会访问了.
对可靠性要求较高, 要求有异地备份, 防止机房故障.

可以看出, Glacier和S3虽然都是存储服务, 但定位不同, cold storage对访问速度不敏感, 对价格很敏感, 因此Glacier的价格就很低廉, 而访问速度则非常慢.

Ⅲ 如何在AWS S3存储段中设置CloudFront分布

AWS CloudFront是一个用户用于加速静态或动态内容发布的内容发布服务，这里所谓的静态或动态内容主要包括媒体（图像或视频）文件、HTML、Java脚本程序、CSS文件以及其它。
作者：文:Ofir Nachmani 译:滕晓龙来源：TechTarget中国|2015-03-09 10:12
收藏
分享

AWS CloudFront可配合一些其他的服务一起使用，其中就包括了EC2和S3。遵循以下步骤可从一个S3存储段中设置一个CloudFront分布。
AWS CloudFront是一个用户用于加速静态或动态内容发布的内容发布服务，这里所谓的静态或动态内容主要包括媒体（图像或视频）文件、HTML、Java脚本程序、CSS文件以及其它。它的简洁用户界面可以帮助管理员设置CloudFront发布。但是，这一过程并不只是指向和点击那么简单。下面，就让我们来看看CloudFront的工作原理以及应当如何来部署它。
在CloudFront中，每一片的内容都被组织成为具有独特URL并可从网络被访问的发布。该服务可从边缘加速节点数据中心发布这一内容；目前，AWS在全球部署着52个边缘加速节点数据中心以供内容缓存使用。
AWS CloudFront支持两种形式的发布：流形式与下载方式。当一名用户使用CloudFront URL来请求静态内容时，该服务就会根据发出请求的IP以及缓存这一内容的数据中心的位置来找到距离这个IP最近的边缘加速节点数据中心。这样一来，所有来自于相同位置的请求就会减少延迟时间。
CloudFront可配合多个AWS服务使用，其中包括了简单存储服务（S3）、弹性计算云（EC2）、弹性负载平衡（ELB）以及Route 53。CloudFront的主要功能包括：
支持动态内容（减少未来请求的延迟时间）
支持自定义域名
设备检测（移动设备和网络设备）
支持Post/PUT以及其它的HTTP协议
自定义错误响应
支持cookies、查询字符串以及其它
链接一个CloudFront发布至S3
为了从一个S3建立一个CloudFront网络发布，你将需要一个S3存储和一个可公开访问的对象（如图1）。

图1 S3存储段以及一个可公开访问的对象
然后，可遵循以下步骤：
1. 转至CloudFront并创建一个网络发布

图2 选择初始域名存储段
2. 在初始域名栏位，选择存储段名称，并在限制存储段访问中选择“No”。这样做可以限制只能从CloudFront访问对象，所以就没有人可以从S3访问这个存储段了（如图2）。
3. 使用以下参数配置缓存设置：
路径模式：默认。针对特定对象应用缓存处理。如果选择了默认值（*），它就会把所有请求发送到选中的存储段中。
浏览器协议策略：HTTP 和 HTTPS。如果用户想要求CloudFront允许浏览器使用HTTP或HTTPS协议来访问用户的网络内容。
允许的HTTP方法：GET，HEAD。选择用户希望这一缓存操作所允许的HTTP方法列表。
转发头文件：None。如果用户希望根据请求中发送的头文件来缓存内容，那么就可以使用它。理想情况下，保持“None”项是可以提高性能的。
对象缓存：使用初始缓存头文件。当你的初始服务器将增加一个缓存控制头文件以便于控制对象被保存在CloudFront缓存中多长时间时，可选择这一选项。
转发cookies：无。如果用户希望CloudFront在它发送给初始服务器的请求中囊括所有的用户cookies，那么就可以指定“None”。否则，可指定你希望包含在内的cookies。选择“None”，就可配置CloudFront不要发送cookies。
转发请求字符串：不。为了根据URL中的请求字符串获得不同版本的对象；设置“Yes”选项以便于在发送给初始服务器的请求URL中包含请求字符串。
限制浏览器访问：No。在理想情况下，选择“yes”以提高安全性。选择“no”可让每个人都能够查看内容。限制浏览器访问意味着要求使用者为安全访问而创建一个签名的URL（如图3）。

图3 限制浏览器访问
4. 接下来，是设定发布设置
价格类别：使用所有的边缘加速节点数据中心。这一操作可以让用户自行选择愿意为CloudFront服务支付的最高价格。
CNAMEs：空白。这一操作可以允许用户为对象使用URL而不是CloudFront分配的域名。因此，用户可以指定一个自定义URL，而不是CloudFront发布。
SSL证书：默认CloudFront。这一项可以让管理员上传他们自己的证书。用户还可以保留其它的选项作为默认值，并创建发布（如图4）。

Ⅳ 有没有推荐的类似Amazon S3 的文件存储方案

amazon (S3) 是一个公开的服务，Web 应用程序开发人员可以使用它存储数字资产，包括图片、视频、音乐和文档。 S3 提供一个 RESTful API 以编程方式实现与该服务的交互。

Ⅳ AWS S3 怎样

还是挺不错的，你可以免费试用一下哦，注册后，新 AWS 客户将会得 5 GB 的 Amazon S3 标准存储、20000 个 Get 请求、2000 个 Put 请求以及一年内每月 15GB 的对外数据传输量。

Ⅵ amazon s3是分布式存储吗

amazon s3 是亚马逊提供的一种存储服务，即你可以将自己的本地数据在远端云中存储，后台必然使用到了分布式存储，将数据分开存放到不同的服务节点甚至不同的数据中心：1 是为了容量上的扩展，保证能够存储的数据量足够大； 2 是为了容错，利用副本或者纠删码的方法保证一个服务器或者甚至一个数据中心中的数据丢失，你的数据仍然可以恢复

Ⅶ aws s3 最大支持多大容量

S3 对bucket里放入的Object的数量是没有限制的。你可以无限制的放东西。
据我了解， 对于每个Object的大小限制是5TB。

Ⅷ 如何使用linux命令行访问Amazon S3云存储

在linux上安装s3cmd
在Ubuntu或者Debian上安装s3cm

$ sudo apt-get install s3cmd

在Fedora上安装s3cmd

$ sudo yum install s3cmd

在CentOS或者RHEL上安装s3cm

$ s3cmd put –acl-public 4.png s3://dev99

4.png -> s3://dev99/4.png [1 of 1]
30778 of 30778 100% in 8s 3.34 kB/s done

先从官方站点上下载rpm包，然后手工安装。64位CentOS或RHEL 6，用以下命令：

$ sudo rpm -ivh s3cmd-1.0.0-4.1.x86_64.rpm

配置s3cmd
第一次运行s3cmd需要运行下面的命令做配置：

$ s3cmd –configure

它将会问你一系列问题：
AWS S3的访问密钥和安全密钥
对AWS S3双向传输的加密密码和加密数据
为加密数据设定GPG程序的路径（例如，/usr/bin/gpg）
是否使用https协议
如果使用http代理，设定名字和端口
配置将以保存普通文本格式保存在 ~/.s3cfg.
s3cmd的基本用法
在你的账户中列出所有现有的bucket：

$ s3cmd ls

2011-05-28 22:30 s3://mybucket1
2011-05-29 00:14 s3://mybucket2

建立新的bucket:

$ s3cmd mb s3://dev99

Bucket ’s3://dev99/’ created

上传文件到现有的bucket:

$ s3cmd put 1.png 2.png 3.png s3://dev99

1.png -> s3://dev99/1.png [1 of 3]
26261 of 26261 100% in 5s 4.33 kB/s done
2.png -> s3://dev99/2.png [2 of 3]
201430 of 201430 100% in 2s 98.05 kB/s done
3.png -> s3://dev99/3.png [3 of 3]
46630 of 46630 100% in 0s 56.62 kB/s done

上传文件的默认访问权限是私有的(private)，就是只有你自己可以访问，使用正确的访问和安全密码即可。
上传公开访问权限的文件到现有bucket：

$ s3cmd put --acl-public 4.png s3://dev99

4.png -> s3://dev99/4.png [1 of 1]
30778 of 30778 100% in 8s 3.34 kB/s done
Public URL of the object is: http://dev99.s3.amazonaws.com/4.png

如果上传的文件授予公开访问权限，任何人在浏览器中都可以通过http://dev99.s3.amazonaws.com/4.png 访问。

查看一个现有bucket的内容：

$ s3cmd ls s3://dev99

2013-06-02 02:52 26261 s3://dev99/1.png
2013-06-02 02:52 201430 s3://dev99/2.png
2013-06-02 02:52 46630 s3://dev99/3.png
2013-06-02 02:56 30778 s3://dev99/4.png

下载现有bucket包含的文件（例如所有的.png文件）：

$ s3cmd get s3://dev99/*.png

s3://dev99/1.png -> ./1.png [1 of 4]
26261 of 26261 100% in 0s 39.39 kB/s done
s3://dev99/2.png -> ./2.png [2 of 4]
201430 of 201430 100% in 7s 24.64 kB/s done
s3://dev99/3.png -> ./3.png [3 of 4]
46630 of 46630 100% in 1s 39.34 kB/s done
s3://dev99/4.png -> ./4.png [4 of 4]
30778 of 30778 100% in 0s 97.01 kB/s done

删除现有bucket中的文件：

$ s3cmd del s3://dev99/*.png

File s3://dev99/1.png deleted
File s3://dev99/2.png deleted
File s3://dev99/3.png deleted
File s3://dev99/4.png deleted

获取现有bucket的信息，包括存储位置和访问控制列表(ACL):

$ s3cmd info s3://dev99

s3://dev99/ (bucket):
Location: us-east-1
ACL: dan.nanni: READ
ACL: dan.nanni: WRITE
ACL: dan.nanni: READ_ACP
ACL: dan.nanni: WRITE_ACP

在上传到现有的bucket之前，加密文件：

$ s3cmd -e put encrypt.png s3://dev99

/tmp/tmpfile-pzT1zV3kLZlxDwqA0kwy -> s3://dev99/encrypt.png [1 of 1]
196890 of 196890 100% in 1s 99.51 kB/s done

当用s3cmd下载一个加密过的文件时，它会自动检测加密并在下载过程解密，因此下载和访问加密文件时，就像通常所做的一样：

$ s3cmd get s3://dev99/encrypt.png

s3://dev99/encrypt.png -> ./encrypt.png [1 of 1]
196890 of 196890 100% in 1s 131.29 kB/s done

删除现有的bucket:

$ s3cmd rb s3://dev99

Bucket ’s3://dev99/’ removed

注意，你不能删除一个非空的bucket.

Ⅸ AMAZON S3 和 AMAZON cloud drive 有什么区别

Amazon S3是针对企业的，使得企业可以按需付费，可以在上面开发自己的应用，不用自己买设备。
Amazon Cloud Drive是针对普通用户的数据存储产品。
可以认为Cloud Drive是在S3平台上的一个上层应用。

Ⅹ AWS云在Amazon ec2 部署一个网站,能把上传到网站的文件自动存储到Amazon s3中吗

可以实现。

给EC2设置Role或程序中设置对S3有读写权限的密钥。

至于网站的自动上传则建议参照官方的AWS开发者工具文档。

网页链接