腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(8885)
视频
沙龙
1
回答
Airflow
中断
DAG
错误
-
加密
版本
与
加载
的
共享
对象
不
匹配
、
Airflow
1.10.12在UI中看到此
错误
: 损坏
的
DAG
: /home/
airflow
/dags/omething.py
加密
版本
与
加载
的
共享
对象
不
匹配
。如果在Python路径中安装了密码学
的
多个副本,则可能会发生这种情况。请尝试创建新
的
虚拟环境来解决此问题。<em
浏览 18
提问于2020-11-21
得票数 0
3
回答
airflow
: 1.7: GUI中未更新
DAG
我在/opt/
airflow
/dags目录下定义了
dag
文件test1.py。最初,该文件只有一个任务,即test1_task01。在我
的
GUI中,
dag
仅在执行一项任务时正确显示。但是,当我将另一个任务添加到我
的
DAG
时,它看起来如下所示:在我
的
GUI
浏览 4
提问于2016-09-29
得票数 4
3
回答
使用相同
的
DAGS创建新环境时缺少FERNET_KEY配置。
、
、
、
我想要创建一个新环境,并将相同
的
DAG
和变量从旧环境中移到新环境中。 我使用gsutil并将相同
的
DAGs上传到新环境中。然而,在新
的
环境中,由于FERNET_KEY configuration is missing,我
的
所有
DAG
都崩溃了。我最好
的
猜测是,这与导入使用单独
的
Fe
浏览 5
提问于2020-02-19
得票数 6
回答已采纳
5
回答
Airflow
“此
DAG
在the服务器DagBag
对象
中不可用”
、
、
当我将新
的
DAG
python脚本放在dags文件夹中时,我可以在
DAG
UI中查看
DAG
的
新条目,但它不是自动启用
的
。最重要
的
是,它似乎也没有正确
加载
。我只能单击列表右侧
的
Refresh按钮几次,然后切换列表左侧
的
on/off按钮才能安排
DAG
。这些都是手动过程,因为我需要触发一些东西,即使
DAG
脚本被放在
dag
文件夹中。 有人能在这方面帮我吗?或者这
浏览 1
提问于2017-01-10
得票数 51
3
回答
气流网络服务器不能打开
DAG
?
有一点需要注意
的
是,
DAG
最初是在尝试运行时导致超时
错误
,所以我已经编辑了
airflow
.cfg文件,使其具有行.在做了这个改变之后,跑..。
中断
DAG
: /home/气流/气流/dags/mydag.py超时,PID: 44818 (尽管
dag
在
airflow
list_dags命令中看起来构建得很成功)或者see服务器页面显示了一些浏览器<
浏览 5
提问于2020-01-16
得票数 0
回答已采纳
12
回答
Airflow
未在/usr/local/
airflow
/dags中
加载
dags
Airflow
似乎跳过了我添加到/usr/local/
airflow
/dags中
的
dags。当我跑
的
时候输出如下所示example_xcomlatest_only_with_trigger t
浏览 0
提问于2017-08-07
得票数 29
1
回答
两个反向代理后面的气流-图GET请求
不
包含任何
DAG
ID
、
、
、
我
的
设置:
DAG
"None" seems to be missing. 我跟踪了这个问题,直到GET请求到达
Airflow</
浏览 11
提问于2020-02-10
得票数 0
回答已采纳
1
回答
用于定制钩子
的
气流2.0.1/Python3.7.9 ModuleNotFoundError
、
、
、
在我
的
本土气流建筑中,我有如下
的
结构在cust_
dag
代码中,我将该钩子/模块称为:当我检查气流用户界面时,我会因为cust_
dag
提到
错误
为ModuleNotFoundError:没有名为jhook
的
模块而
中断
进程。同样
浏览 0
提问于2021-06-09
得票数 1
回答已采纳
12
回答
DAG
在Web中不可见
、
、
、
我是
Airflow
的
新手。我遵循一个教程,并编写了下面的代码。from
airflow
import
DAG
from datetime importretry_delay': timedelta(minutes=5) CorrectnessPrediction.train()
dag<
浏览 14
提问于2016-08-17
得票数 34
回答已采纳
1
回答
ImportError:密码学
的
版本
与
加载
的
共享
对象
不
匹配
、
、
、
/file.pem'结果: ImportError:
加密
的
版本
与
加载
的
共享
对象
不
匹配
。如果在Python路径中安装了多个
加密
副本,就会发生这种情况。请尝试创建一个新
的
虚拟环境来解决此问题。
加载
python
版本
: 2.4
浏览 0
提问于2019-07-24
得票数 1
回答已采纳
4
回答
以编程方式清除气流任务实例
的
状态
、
当
DAG
完成执行时,我想清除
DAG
中
的
任务。A和B都是计划
的
DAG
。 我知道和Web选项可以清除这些任务。
浏览 15
提问于2019-10-01
得票数 3
1
回答
气流用户访问管理
、
( 1)我们能否创建很少
的
用户,如管理员、开发人员和只读用户?( 2)我们能实现对气流UI 3
的
访问控制吗?是否有任何
dag
部署机制?
浏览 0
提问于2019-05-29
得票数 3
1
回答
在MWAA中列出包含坏调度程序
的
包
、
、
、
、
我有这样
的
问题--依赖关系破裂,特别是:
错误
:pip
的
依赖解决程序目前没有考虑所有已安装
的
包。此行为是下列依赖冲突
的
根源。apache-气流提供商-Amazon1.4.0需要watchtower~=0.7.3,但是你有
不
兼容
的
了望塔2.0.1。除了删除依赖关系
中断
的
包之外,除了创建
DAG
之外,还有什么方法可以列出当前安装
的
包吗?我知道
DAG
应该不难写,只是它永远不会被执行,因为调
浏览 3
提问于2022-05-05
得票数 2
1
回答
/ Composer中多个客户端
的
最佳实践?
、
问题: fault-tolerance
浏览 3
提问于2019-12-28
得票数 3
回答已采纳
1
回答
MWAA -气流- PythonVirtualenvOperator需要虚拟环境
、
、
、
、
我使用AWS
的
(2.2.2)运行各种
DAG
,其中大多数是用标准
的
PythonOperator类型实现
的
。我将
DAG
与
任何
共享
需求捆绑到一个S3桶中,然后将MWAA指向相关
的
对象
和
版本
。现在我想使用类型来实现
DAG
,这是不受欢迎
的
。我正在跟踪关于如何使用自定义插件对行为进行修补,但是继续收到来自气流
的
错误
,在仪表板顶部用红色大写显示:
浏览 16
提问于2022-04-13
得票数 5
回答已采纳
2
回答
路径库/配置解析器出现气流问题- 'PosixPath‘
对象
不可迭代
、
、
、
我在启动调度器后得到
错误
。 我们
的
DAG
需要一个自定义存储库来帮助与我们
的
数据库服务器进行通信。在该存储库中,我们使用pathlib来获取配置文件
的
路径,并将其传递给configparser。中
的
所有
DAG
抛出以下
错误
: Broken
DAG
: [/opt/
airflow
/dags/example_folder/example_
dag
.py]
浏览 85
提问于2021-01-12
得票数 3
回答已采纳
1
回答
在触发前测试气流
DAG
是否有
错误
、
、
、
在触发
DAG
之前,是否有一种快速/简单
的
方法来检查气流(1.10)
DAG
脚本中
的
语法
错误
、任务
错误
等。在我们
的
项目中,我们必须首先将
DAG
代码推到存储区,然后通过Jenkins部署它,然后才能真正运行
DAG
。因此,只有在触发
错误
后才能发现
错误
。当我们不得不反复通过相同
的
过程来发现和修复每一个小
的
编码
错误
时,这就变得非常乏味了。 因此,
浏览 5
提问于2022-09-02
得票数 2
1
回答
如何将(气流)
与
Google连接起来,并将信息提取到Google (桶)
、
、
、
9:00 \x{e76f} 20:0003 - name_c - 9:00 - 20:00其中我只想读取
与
A3我需要使用Composer (气流)这样做,到目前为止,我使用
的
是一个
不
工作
的
脚本,如:import
airflow
from
airflow
.ope
浏览 7
提问于2022-03-30
得票数 0
回答已采纳
3
回答
在气流中部署
dag
文件
的
有效方法
、
在向气流中部署新
的
气垫时,是否遵循任何最佳做法? 这里
的
任何帮助都是非常感谢
的
。如果你需要更多
的</
浏览 5
提问于2018-01-22
得票数 53
回答已采纳
1
回答
如何将EFS添加到Amazon上
的
气流部署中?
、
、
我配置了gitsync并可以成功地运行我
的
DAGS。对于某些
DAG
,我需要将数据保存到Amazon。我按照上
的
说明在ek上安装了Amazon驱动程序。现在,我可以创建一个可以访问NFS
的
新吊舱,但是气流部署
中断
了,并且保持在Back-off restarting failed container状态。我还收到了
与
kubectl -n
airflow
get events --sort-by='{.lastTimestamp}有关
的
事件,并收到
浏览 17
提问于2022-11-16
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
大规模运行Apache Airflow的经验和教训
没看过这篇文章,别说你会用Airflow
任务流管理工具-Airflow配置和使用
迁移工具 Air2phin 宣布开源,2 步迁移 Airflow 至 Dolphinscheduler
airflow 实战系列:基于 python 的调度和监控工作流的平台
热门
标签
更多标签
云服务器
ICP备案
腾讯会议
云直播
对象存储
活动推荐
运营活动
广告
关闭
领券