问题标签 [s3-bucket]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
2517 浏览

amazon-web-services - 版本化 S3 存储桶可以存储的文件版本数量是否有限制

我们正在为我们的用例使用版本化的 s3 存储桶。

我们会经常更新同一个文件。

我想知道 s3 存储桶可以处理多少个相同文件的版本。

我想知道如果版本化 s3 可以处理的最大文件数量有限制,是否会删除最旧的版本。

0 投票
1 回答
1239 浏览

python - 将亚马逊 s3 存储桶文件夹复制到本地

我有这个链接:

我有相应的ACCESS IDSECRET KEY。如何将完整文件夹(200_files)或全部复制.gz到本地系统?基于Ubuntu CLIPython的解决方案。我知道这不是一个合格的问题,评论中的答案会起作用。谢谢 :)

0 投票
1 回答
1590 浏览

python - 如何使用 Python 下载 S3 存储桶文件

我的要求是根据日期过滤器每天从 S3 存储桶下载文件(例如:day=2018-07-14)。我们可以使用以下代码使用 AWSCLI 成功下载

但我想使用 Python 脚本(可能是 boto3)下载。任何人都可以建议要采取哪些步骤,主要是配置步骤(我使用的是 Windows 机器)以使用 .py 脚本下载。

提前致谢。

0 投票
1 回答
7308 浏览

amazon-web-services - 如何在跨账户上传时更改 S3 文件所有权

我有一个应用程序将一些文件上传(复制)到另一个 AWS 账户中的 S3 存储桶,我使用 AWS SDK(Nodejs)中的 copyObject 命令

这段代码从不同的 AWS 账户运行,比方说,AWS_ACCOUNT_A上传到 S3 存储桶中AWS_ACCOUNT_B的文件问题是,当它将文件上传到这个存储桶时,这些文件的所有权仍然是AWS_ACCOUNT_A

我想知道AWS_ACCOUNT_B在上传文件时我应该怎么做才能将文件的所有权授予 。这里有人可以给我一些指导吗?

更新 :

我使用了这个政策:

但上传的文件仍然归 拥有Account_A,我在政策中做错了吗?

0 投票
1 回答
2415 浏览

android - 如何在不下载本地存储的情况下显示来自 AWS S3 的图像

我的 android 应用程序显示从AWS S3. 现在我将图像下载到本地存储,并显示下载图像中的图像。但是,从用户的角度来看,这会很烦人。

如何在AWS S3不下载到本地存储的情况下显示图像。如果我可以不使用文件而是使用图像 url 显示图像,那就太好了。

ASW S3通过将文件设置为公开,我想避免安全问题,这可能是可能的。

0 投票
1 回答
533 浏览

r - 如何将对象从 S3 存储桶加载到 RStudio 中的 Spark 中?

S3 存储桶中的对象大小为 5.3 GB。为了将对象转换为数据,我使用了get_object("link to bucket path"). 但这会导致内存问题。

因此,我在 RStudio 中安装了 Spark 2.3.0 并尝试将此对象直接加载到 Spark 中,但将对象直接加载到 spark 中的命令未知。 library(sparklyr) library(dplyr) sc <- spark_connect(master = "local")

如果我将对象转换为可读的数据类型(例如 R 中的 data.frame/tbl),我将使用copy_to以下方式将数据从 R 传输到 spark 中:

将数据复制到 Spark

spark_tbl <- copy_to(spark_conn,data)

我想知道如何转换 spark 中的对象?

相关链接将是

  1. https://github.com/cloudyr/aws.s3/issues/170

  2. Sparklyr 连接到 S3 存储桶抛出错误

任何指导将不胜感激。

0 投票
1 回答
382 浏览

amazon-web-services - AWS- AWS command to view lambda function in Command Line

My Lambda function code can't be viewed in the AWS Console due to an error with the file being too large. Is there an AWS command to pull the Lambda function code and view it in the command line?

Or, can I push my lambda code onto an S3 bucket, then download it from there to view it? Is there a command for that?

0 投票
1 回答
650 浏览

java - 来自 S3Bucket 的传输管理器下载目录的集成测试

我已经使用传输管理器构建器从 S3 Bucket 成功下载了目录。代码如下。

现在我正在尝试为此编写测试。我在下面模拟了 Amazon s3Client 代码。

中存在空指针异常

请帮助我编写单元测试!

0 投票
1 回答
51 浏览

amazon-web-services - 与电子邮件关联的 S3 存储桶

s3 Bucket 可以关联到电子邮件 Id 吗?例如,我想自动向 s3 发送报告,就像来自 Oracle 商业智能企业版的自动电子邮件一样,电子邮件会发送到 s3 存储桶中。可能吗 ?如果是,要遵循的程序是什么?如何进行?

0 投票
2 回答
1151 浏览

amazon-web-services - AWS S3 存储桶访问被拒绝

这是我在存储桶中实施的存储桶策略。

保存此存储桶策略后,我无法从控制台列出或对存储桶执行任何操作(我拥有 s3 完全访问权限),所有内容均显示访问被拒绝。因此,当我尝试从 VPC 中的一个 ec2 实例复制文件时,复制成功,但我无法列出存储桶中的对象。我收到拒绝访问错误消息。(ec2 实例具有对存储桶具有完全权限的角色)。这是附加到 EC2 实例的角色。

我想知道的是这种奇怪的行为是否是我的存储桶策略的原因,或者可能是其他原因。如果是,关于我现在如何更改我的存储桶策略的任何提示?此外,这是我控制台的屏幕截图。 在此处输入图像描述