腾讯云
开发者社区
文档
建议反馈
控制台
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
登录/注册
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
AWS SageMaker处理作业
amazon-web-services
、
amazon-sagemaker
我能够在Notebook实例
中
运行一个简单
的
python
代码,
从
S3
存储
桶
中
读取
csv
文件
,或者将
csv
文件
写入Notebook
存储
桶
中
。现在,我想要创建SageMaker处理作业来运行相同
的
代码,而不需要任何输入/输出数据配置。我已经下载了相同
的
代码,并将映像推送到ECR
存
浏览 2
提问于2021-02-19
得票数 0
2
回答
将
CSV
数据
从
S3
加载到Jupyter笔记本
中
python
、
pandas
、
csv
、
jupyter-notebook
、
boto3
我在Amazon Cloud
的
S3
存储
桶
中有几个
CSV
文件
(50 GB)。我正在尝试
使用
以下代码在Jupyter Notebook (带有
Python
3内核)
中
读取这些
文件
:from
boto3
import sessiondataset.he
浏览 14
提问于2018-02-01
得票数 3
回答已采纳
1
回答
使用
py魅力
s3
库
从
boto3
中
删除
文件
python
、
amazon-web-services
、
amazon-s3
、
boto3
如何
使用
pycharm
boto3
库
从
boto3
桶
中
删除具有特定扩展名
的
文件
。例如,我有一个
s3
桶
,它有多个扩展名不同
的
文件
,如'.txt‘、'.
csv
’等等。我想创建
python
脚本,它将从只有".
csv
“扩展名
的
s3
中
删除
文件</em
浏览 11
提问于2022-07-14
得票数 -2
2
回答
使用
Python
子
文件
夹
从
s3
加载
文件
python
、
amazon-web-services
、
amazon-s3
、
boto
、
boto3
我正在尝试
从
亚马逊网络服务
的
s3
存储
桶
中加载pandas
中
的
csv
文件
。
Boto3
似乎没有提供从子
文件
夹加载
文件
的
功能。假设我在
s3
中
有以下路径:bucket1 1/bucket1 files1/file1.
csv
如何指定如何加载file1.
csv
?我知道
s3</
浏览 2
提问于2017-11-29
得票数 2
2
回答
如何删除与
S3
桶
中
特定模式匹配
的
文件
?
python
、
amazon-web-services
、
amazon-s3
、
boto3
、
boto
我有一个
S3
桶
,我保存
CSV
文件
,以便将它们加载到Redshift
中
。为此,我
使用
了
Python
和
Boto3
。在将它们加载到Redshift
中
之后,我希望删除与包含我代码
的
处理ID
的
模式匹配
的
特定
文件
。我将我
的
文件
保存到
S3
桶
中
,如下所示 Redshift{
浏览 3
提问于2019-10-20
得票数 1
1
回答
Sage maker notebook
中
的
雅典娜查询。如何获取输出
文件
的
位置以实现可重用性?
python
、
amazon-web-services
、
amazon-athena
、
amazon-sagemaker
我
的
查询成功了: from pyathena import connectconn = connect(s3_staging_dir='
s3
://alphabucket我正在寻找API,将返回给我
的
结果
文件
。conn)print(file) # -->
s3
:/
浏览 35
提问于2021-07-24
得票数 0
2
回答
使用
boto3
生成
存储
桶
中
最新
object
的
预签名
s3
URL
amazon-web-services
、
amazon-s3
、
boto3
我有一个包含多个
文件
夹
的
s3
存储
桶
。如何
使用
亚马逊网络服务
中
的
python
为用户询问
的
每个
文件
夹生成
最新
对象
的
s3
预签名
boto3
?
浏览 33
提问于2020-04-22
得票数 1
1
回答
获取spark数据帧写入
的
文件
名
python
、
dataframe
、
amazon-s3
、
pyspark
、
filenames
我
使用
下面的代码将spark数据帧写入
s3
存储
桶
中
。. \在这里,我想要获取正在写入
s3
bukcet
的
文件
的
名称,并希望将该
文件
用作后面代码部分
的
一部分。我已经解决了上面的问题,因为我们不能在将数据帧写入<em
浏览 0
提问于2018-06-18
得票数 1
1
回答
切换角色时
的
亚马逊网络服务
S3
存储
桶
访问问题
python
、
amazon-web-services
、
amazon-s3
我登录到AWS控制台
的
身份是MFA &为此,我
使用
Google Authenticator。我有
S3
设备
存储
桶
,要访问该设备
存储
桶
,我必须切换角色,切换后才能访问设备
存储
桶
。我需要帮助如何在
boto3
实现同样
的
python
。 我需要在dataframe
中
打开许多
csv
文件
,如果没有解析访问,我将无法继续。我尝试配置AWS
浏览 3
提问于2019-05-11
得票数 0
2
回答
如何在不
使用
boto3
的
情况下
从
python
程序访问
存储
在
s3
存储
桶
中
的
文件
?
python
、
amazon-web-services
、
amazon-s3
、
amazon-ec2
我想要访问
存储
在我
的
s3
存储
桶
中
的
文件
,在ec2机器上运行
python
脚本。
python
python
包方便了这一点,但是有没有其他方法可以访问
存储
在
s3
存储
桶
中
的
文件
,只需提供
s3
存储
桶
的
url,而不是
浏览 3
提问于2019-04-21
得票数 0
1
回答
Lambda函数执行雅典娜查询,但查询结果不在
S3
输出
存储
桶
中
python
、
amazon-s3
、
boto3
、
amazon-iam
、
amazon-athena
我正在通过
python
boto3
向雅典娜查询
S3
存储
桶
。查询成功,没有错误,但输出
S3
存储
桶
为空。但是,当我通过
python
控制台运行查询时,它可以工作,并且在
S3
输出
存储
桶
中有.
csv
和
.
csv
.metadata以及雅典娜查询结果。 我已经添加了在此页面上提到
的
权限。https://do
浏览 23
提问于2019-06-29
得票数 0
1
回答
AWS Lambda、
S3
和
pandas -将
CSV
加载到
S3
中
,触发Lambda,加载到熊猫
中
,放回
桶
中
?
python
、
pandas
、
amazon-web-services
、
amazon-s3
、
aws-lambda
我是AWS
和
lambda
的
新手,所以如果这是一个愚蠢
的
问题,我道歉。我希望能够做
的
是将电子表格加载到
s3
存储
桶
中
,基于上传触发lambda,让lambda将
csv
加载到
s3
中
并
使用
它进行操作,然后将数据帧写回
csv
到第二个
csv
存储
桶
中
。我读了很多关于压缩
python
脚本以及
浏览 2
提问于2018-01-17
得票数 5
1
回答
从
api保存到
s3
存储
桶
python
、
amazon-web-services
、
api
、
amazon-s3
我正在尝试
使用
bot03
和
python
获取以下
python
代码,以便将
csv
从
api保存到亚马逊
s3
存储
桶
中
,但我看不出哪里出错了。当我执行代码时,我没有得到任何错误,但是
文件
从未出现在
s3
存储
桶
中
。import
boto3
from botocore.exceptions import ClientError
浏览 4
提问于2021-07-12
得票数 0
3
回答
如何
使用
python
boto3
将
文件
上传到aws
S3
存储
桶
中
的
文件
夹
python
、
amazon-web-services
、
amazon-s3
、
boto3
如何访问
S3
存储
桶
中
的
文件
夹对象。如何
使用
python
boto3
访问
S3
存储
桶
内
的
文件
夹。代码适用于
S3
存储
桶
中
的
文件
夹,但适用于
S3
存储
桶
中
的
<e
浏览 7
提问于2018-10-15
得票数 0
4
回答
对
S3
存储
桶
中
的
所有
文件
执行wc -l
amazon-web-services
、
amazon-s3
、
aws-cli
我有一个指向包含许多
文件
的
s3
存储
桶
的
路径。在
使用
aws-cli时,有没有一个命令可以让我读取所有的
文件
和
对输出执行| wc -l?我正在尝试计算
s3
存储
桶
中所有
文件
的
所有行
浏览 4
提问于2018-04-03
得票数 0
1
回答
日期为“通配符参数”
的
aws cp
文件
amazon-s3
、
command-line-interface
我正在尝试
从
s3
存储
桶
中
复制特定
的
文件
,其中我要
查找
的
文件
包含todays作为名称
的
一部分,例如:我没有该
存储
桶
的
列表权限,所以我想知道是否有一种方法可以将日期作为参数传递,并在我
的
命令中
使用
它。类似于: aws cp
s3<
浏览 0
提问于2018-05-04
得票数 0
7
回答
如何
使用
Boto3
下载
S3
存储
桶
的
最新
文件
?
python
、
amazon-web-services
、
amazon-s3
、
boto
、
boto3
我能找到
的
其他问题是指一个旧版本
的
Boto。我想下载
S3
存储
桶
的
最新
文件
。在
中
,我发现有一个list_object_versions()方法可以让您获得一个布尔IsLatest。不幸
的
是,我只设法建立了连接并下载了一个
文件
。您能告诉我如何扩展我
的
代码来获取
存储
桶
的
最新
文件
吗?': &
浏览 7
提问于2017-07-28
得票数 15
1
回答
使用
S3
存储
桶
使用
boto3
下载多个
文件
python
、
amazon-web-services
、
csv
、
amazon-s3
、
boto3
我有一个
csv
文件
,其中包含许多uuids连接到AWS
S3
桶
使用
包含在
CSV
中
的
每个uuid来复制包含
的
文件
。
文件
都包含在这样
的
文件
中
: BUCKET/ORG/FOLDER1/UUID/DATA
浏览 2
提问于2021-12-02
得票数 1
回答已采纳
4
回答
从
Google
存储
桶
复制到
S3
存储
桶
python
、
amazon-s3
、
google-cloud-platform
、
google-cloud-storage
、
airflow
我已经建立了一个气流工作流,它从
s3
到Google
存储
吸收一些
文件
,然后运行一个sql查询工作流,以便在大查询上创建新
的
表。在工作流
的
末尾,我需要将最后一个大查询表
的
输出推送到,然后从那里推到
S3
。我已经破解了
使用
BigQueryToCloudStorageOperator
python
运算符将大查询表传输到Google
的
过程,没有出现任何问题。然而,似乎从到
S3
的
转移是一条不那么
浏览 4
提问于2018-01-09
得票数 3
回答已采纳
1
回答
如何将Lambda输出传递给
csv
文件
并将其上载到AWS
S3
桶
python-3.x
、
amazon-web-services
、
amazon-s3
、
aws-lambda
、
boto3
我创建了Lambda函数,以便
从
我们在本组织
的
每个帐户
中
获取服务列表。我为此编写了下面的
python
代码。import
boto3
)我得到<e
浏览 2
提问于2022-10-18
得票数 -1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
浅谈云上攻防——Web应用托管服务中的元数据安全隐患
python爬虫系列开发scrapy掌握(一)
AWS发布新服务Amazon S3 Storage Lens
“星”产品”XSKY发布 S3 Console,助力企业轻松玩转非结构化数据可视化管理
Python实例:爬取网页中的一列数据
热门
标签
更多标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储
活动推荐
运营活动
广告
关闭
领券