Airflow 问答列表

AWS Managed Airflow Workers:如何知道 IOPS 或网络限制?

作者:user2059084 提问时间:10/7/2023

如果我查看不同的 Airflow Environment 类 (https://docs.aws.amazon.com/mwaa/latest/userguide/environment-class....

如何从本地创建的python dags复制到本地安装的dockertool box,该dockertool box与airflow image一起运行?

作者:sairamdgr8 提问时间:2/8/2021

我已经使用 docker toolbox 在 Windows 8 64 位上安装了 puckel-airflow 映像。 我在本地创建了一个hello world Python scrpit,即da...

气流:如何在不同时间安排匕首?

作者:Anis Smail 提问时间:12/28/2019

我想每天安排一个 dag,但在一天中的不同时间,例如: 星期一 16H 星期二 9H 星期三 10H ... 星期一 15H 星期二 12H 等。。。 我怎样才能做到这一点?...

Airflow BigQueryCreateEmptyTableOperator 的参数 'if_exists='skip' 无效

作者:DannyRosen 提问时间:6/28/2023

我正在尝试使用 Airflow 运算符来检查 BigQuery 表是否存在,并创建具有给定架构的表(如果它不存在),或者如果它确实存在,则转到下一个运算符。BigQueryCreateEmptyTab...

CSV 行中的最后一个字段留空,出现错误:CSV 表引用列位置 19,但从 position:325 开始的行仅包含 19 列

作者:unnest_me 提问时间:10/10/2023

我有一个 DAG 气流任务,它进入一个特定的存储桶,并从里面的所有文件一起创建一个外部表。尝试在 bigquery 中查询外部表时,我收到错误(CSV 表引用列位置 19,但从 position:32...

从 CSV 文件创建外部 Bigquery 表 - 错误:缺少右引号字符 (“)

作者:unnest_me 提问时间:10/18/2023

我在 google cloud 存储桶中存储了多个 CSV 文件。我创建了一个气流 DAG 任务,该任务将所有这些文件放在同一个存储桶中并创建一个外部表,因为所有这些文件都遵循相同的架构,只是数据不同...

AWS MWAA Airflow 仅针对某些任务失败,因为“无法从log_group读取远程日志”

作者:Afzal Abdul Azeez 提问时间:10/28/2023

我在 AWS 中有一个很大的 Airflow dag,它仅针对某些任务失败,其他任务正在完成并显示日志。 *** Reading remote log from Cloudwatch log_gro...

ValueError:AppflowRunOperator 不支持源 SAP OData

作者:albi 提问时间:11/3/2023

使用 AppflowRunOperator 从气流 dag 调用 AWS appflow 作业时出现以下错误。 ValueError:AppflowRunOperator 不支持源 SAP ODat...

KubernetesPodOperator 在 composer 中说默认命名空间被禁止?

作者:moltke_colombia 提问时间:11/3/2023

Helo我收到以下错误,我不明白为什么。我相信这与服务帐户有关,但服务帐户应该具有编辑权限 目的通过使用安装了 R 的 Docker 映像,使用 BashOperator 运行 R 脚本 错误 ...

气流 DAG 运行:用莳萝解腌出现 NameError:未定义名称“timedelta”

作者:Felix 提问时间:11/7/2023

我有一个简单的 DAG(启用了选项)。我正在尝试将 a 传递给 ,但是当它开始执行时,它失败并出现错误。render_template_as_native_obj{{ dag_run }}Python...


共13条 当前第1页