腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
1
回答
如何识别哪个日志流属于哪个
胶水
作业?
、
、
、
、
我有
python
类型的AWS Glue作业。
python
胶水
作业的日志存储在两个不同的cloudwatch日志组中。/aws-
胶水
/
python
-作业/输出:-存储非错误日志 在每次运行
胶水
作业时,都会在上述日志组下创建新的日志流。无法识别哪个日志流属于哪个
胶水
作业。因为在每次运行中都会创建一个新的日志流
浏览 9
提问于2022-01-25
得票数 0
1
回答
从另一个
胶水
作业调用
胶水
作业
、
我有两个
胶水
作业,由aws控制台创建。我想用parameters.what从另一个
胶水
(
python
)作业中调用一个
胶水
作业(
Python
),这是最好的方法。谢谢你的帮助。
浏览 7
提问于2022-04-26
得票数 0
1
回答
无法创建AWS Glue作业而不使用
Python
Boto3提供脚本位置
、
、
我试图使用
Python
来创建Boto3
胶水
作业,而不是使用AWS控制台。我无法找到为数据传输生成
胶水
脚本的选项。AWS
胶水
UI提供了在作业类型为Spark时生成脚本的选项。 如何使用
python
boto3或使用terraform模板实现相同的目标?
浏览 8
提问于2022-01-17
得票数 0
1
回答
对于
胶水
工作流中的
胶水
作业-给定
胶水
运行id,如何访问
胶水
工作流runid?
、
、
、
AWS
胶水
工作流具有多个链接的AWS
胶水
作业。我在aws-cli中找不到api。 请注意,我正在尝试使用外部
Python
代码分析作业运行指标。
浏览 24
提问于2020-11-17
得票数 0
1
回答
如何在aws
胶水
中使用
python
包
、
、
、
我试图在aws-
胶水
中使用
python
“请求”包。我试着为这个包制作.egg文件,但它无法工作。也尝试了制作拉链的请求包,并添加到
胶水
作业。如何在AWS
胶水
中执行下面的代码行print ("Hello")
浏览 1
提问于2019-09-20
得票数 1
2
回答
ImportError:没有名为pg8000的模块
、
、
、
、
我现在使用aws-
胶水
,并想连接aws-
胶水
到aws-极光(Postgres)!没有名为pg8000的模块 我该如何解决这个问题?我如何将aws-
胶水
连接到AWS-极光(Postgres)?
浏览 0
提问于2019-04-10
得票数 0
1
回答
如何在使用YAML(无服务器)使用glue 1.0版部署AWS glue作业时选择
python
版本3
、
、
、
在使用YAML(无服务器)使用glue 1.0版部署AWS glue Job时,如何选择
python
版本3?我正在使用无服务器的YAML代码部署AWS glue。亚马逊网络服务已经提供了GlueVersion参数来选择要使用的
胶水
版本,我将其设置为'1.0‘。我想使用
Python
3,但它正在
胶水
作业中部署到
python
2。有没有人知道如何使用YAML部署代码将其设置为使用
python
3,而无需手动更改glue作业?
浏览 2
提问于2020-11-24
得票数 0
1
回答
AWS Glue-确保s3存储桶中只有1个输出文件
我们有一个将数据从rds复制到s3的aws glue作业。现在,每当该作业运行时,它都会在我们的s3存储桶中创建一个新文件。在创建新文件之前,我们如何确保它覆盖存储桶中的旧文件/删除存储桶中的所有文件?(因此,我们在存储桶中总是有一个文件)…… datasink2 = glueContext.write_dynamic_frame.from_options(frame = repartitioned1, connection_type = "s3", connection_option
浏览 17
提问于2019-11-21
得票数 0
1
回答
在
胶水
上运行Pytest
、
、
如何在aws
胶水
上调用pytest?如下所示在调用pytest时,我找不到关于如何传递这些标记的信息。我在aws
胶水
上看到的唯一选项是传递.py文件。我还可以传递双连字符参数myxml,但不能确定单个连字符,比如-m和-ra。我试过使用
python
和Spark。
浏览 4
提问于2022-07-28
得票数 0
2
回答
AWS胶
python
外壳作业可以称为AWS胶火花作业。
、
、
我是新的AWS
胶水
,只是想解决一个特殊的问题。目前,我只有Glue服务可用,没有EC2节点,没有lambda。我正在尝试运行一个AWS火花胶作业从Aws
python
外壳胶作业。是否可以将AWS
胶水
python
shell作业作为包装器运行,并使用不同的参数多次调用相同的AWS
胶水
火花作业。我试着运行下面的代码片段,但是在日志中获得错误。myNewJobRun = glue.start_job_run(JobName='WHICH I CREATED IN CONSOLE') 在上面的
浏览 0
提问于2019-05-30
得票数 3
回答已采纳
1
回答
我无法在
胶水
作业中从S3导入模块
、
、
、
我在我的S3桶s3://pymod_import_testing/hello_world.py中有一个
Python
文件,我有一个
胶水
作业,配置了以下special-parameters--additional-
python
-modules s3://pymod_import_testing/hello_world.py当我在
胶水<
浏览 6
提问于2022-05-13
得票数 0
1
回答
AWS CloudFormation包胶合额外的
Python
文件
、
、
我正在尝试使用Cloudformation来包含来自repo的
胶水
脚本和额外的
python
文件,以便在包步骤中上传到s3。对于
胶水
脚本,我可以直接使用它 Command:但是,我如何能够对额外的
python
文件进行同样的处理呢?下面的内容不起作用,看来我可以使用包含转换上传文件,但不确定如何在额
浏览 1
提问于2021-08-13
得票数 1
回答已采纳
1
回答
用用
Python
编写的AWS Glue作业构建和导入Cython模块
、
、
、
、
为了加快ETL作业的执行速度,我用Cython而不是
python
实现了一个回归算法。from regression import reg任何帮助都将不胜感激。
浏览 1
提问于2021-04-09
得票数 0
回答已采纳
1
回答
如何在
Python
Shell
胶水
作业中使用CloudWatch自定义日志组?
、
我有一些"
Python
Shell“类型的
胶水
作业,我希望将作业日志发送到自定义CloudWatch日志组,而不是默认日志组。通过提供如下作业参数,我可以为"Spark“类型的
胶水
作业实现这一点:"--continuous-log-logGroup" = "/aws-glue/jobs/glue-job-1" 但是相同的参数对
Pytho
浏览 1
提问于2020-05-06
得票数 3
1
回答
如何使用boto3
python
调用带有一定数量DPU的AWS
胶水
作业?
、
、
、
、
我一直在尝试通过boto3使用API脚本成功地调用一个
胶水
作业。 但是我不能用比当前分配的DPU更多的DPU来调用
胶水
作业。有没有人知道有没有文档可以通过boto3应用程序接口的
python
脚本来帮助增加DPU限制?
浏览 44
提问于2021-11-18
得票数 0
1
回答
s3存储桶是否必须在同一区域中才能创建胶合作业
、
当创建
胶水
作业时,它有一个选项来选择自定义脚本“存储脚本的s3路径”,但它不允许选择保存在其他区域s3存储桶中的
python
脚本,它只允许从我们创建
胶水
作业的相同区域选择存储桶和对象。
浏览 8
提问于2021-05-03
得票数 0
1
回答
如何在aws glue中设置特定的压缩值?如果可能,是否可以在aws glue中手动确定压缩级别和分区?
、
、
、
、
是否可以用
胶水
将摄取的数据压缩到指定的值?例如:将数据压缩到500MB,并能够根据提供的压缩值对数据进行分区?如果是,如何启用?我正在用
Python
编写
胶水
脚本。
浏览 45
提问于2021-10-22
得票数 0
1
回答
AWS Glue
python
shell作业支持Glue version 2.0吗?
、
、
、
、
我们有Glue作业类型:'
Python
‘,Py版本:’
Python
3.6‘,DPU:'1/16',Glue版本:'1.0’。 如何将
胶水
版本从1.0更改为2.0?AWS Glue
python
shell工作是否支持Glue 2.0版本?
浏览 1
提问于2021-12-02
得票数 2
回答已采纳
1
回答
AWS Glue
Python
Shell与Oracle的连接
、
、
、
在运行AWS Glue
Python
(不使用Spark)时,我想连接到Oracle。我成功地在dev_endpoint或虚拟机中完成了所有内容(在下面的链接中描述),但我的目标是让AWS Glue
Python
。AWS Glue
Python
中的所有库都必须以.whl或.egg包的形式出现,然后才能安装它们。但是AWS Glue是无服务器的,我无法找到它们的安装位置,因此我可以正确地设置rpath。
浏览 2
提问于2020-04-14
得票数 0
2
回答
如何将GObjects导出为各种语言
、
还需要注意的是,对于perl和
python
,这种粘合是明确存在的。然而,忽略了如何准确地找到它以及如何使用它。现在我想在
Python
程序中实例化和使用该对象。或Perl程序。或者甚至是Java程序。或具有可用的glib绑定的任何其他编程语言。究竟如何做到这一点呢?请注意,我希望直接使用该对象,很可能是通过已经存在的通用
胶水
代码。我知道可以使用DBus从正在运行的C程序中导出对象,然后使用
Python
语言访问它。但我找不到IPC解决方案。
浏览 0
提问于2013-07-03
得票数 0
回答已采纳
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
一款像胶水的语言
胶水能快递到国外吗
做502胶水的修水人注意了!
我,技术不过硬,但是团队里的重要“胶水”
“气溶胶”牌胶水,这个商标创意你怎么看?
热门
标签
更多标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
活动推荐
运营活动
广告
关闭
领券