3

我正在使用 PostgresSQL 运算符。任务如下:

emailage_transformations = PostgresOperator(
    task_id = 'emailage_transformations',
    sql = '/home/ubuntu/airflow_ci/current/scripts/antifraud/emailage_transformations.sql',
    postgres_conn_id = 'redshift',
    autocommit = True,
    dag = dag)

一开始,文件内容如下:

select cd_pedido_nr,fraud_score,risk_band,ip_risk_level
into antifraud.stg_emailage_id_pedido
from antifraud.stg_emailage_id_email e
left join antifraud.info_emails i on id_email = cd_email_nr
;

我得到的错误是

jinja2.exceptions.TemplateNotFound: /home/ubuntu/airflow_ci/current/scripts/antifraud/emailage_transformations.sql

所以我在查询中添加了几个括号以符合 jinja2 模板,现在文件代码是:

{select cd_pedido_nr,fraud_score,risk_band,ip_risk_level
into antifraud.stg_emailage_id_pedido
from antifraud.stg_emailage_id_email e
left join antifraud.info_emails i on id_email = cd_email_nr
;}

但是,我仍然有同样的错误。我该如何解决?

4

1 回答 1

5

我在以下链接中进行了侦察,您应该向template_searchpath您的 DAG 提供一个,以便它能够选择您的外部文件(SQL 或其他文件)

或者,使外部文件可被发现,例如通过修改AIRFLOW_HOME或通过其他技巧也可以工作

于 2019-09-05T15:34:56.127 回答