python - 从子dag拉xcom

我正在使用一个主dag(main_dag)，其中包含许多子subdag，并且这些子subdag中的每一个都有许多任务。我从subdagA taskA推送了一个xcom，但是我在subdagB taskB中提取了该xcom。由于xcom_pull()中的dag_id参数默认为self.dag_id，因此我无法提取必要的xcom。我想知道如何做到这一点，和/或是否有更好的方法来设置这种情况，这样我就不必处理这个问题了。

我目前在subdagB中所做的示例:

def subdagB(parent_dag, child_dag, start_date, schedule_interval):
    subdagB = DAG('%s.%s' % (parent_dag, child_dag), start_date=start_date, schedule_interval=schedule_interval)
    start = DummyOperator(
        task_id='taskA',
        dag=subdagB)
    tag_db_template = '''echo {{ task_instance.xcom_pull(dag_id='dag.main_dag.subdagA', task_ids='taskA') }};'''
    t1 = BashOperator(
        task_id='taskB',
        bash_command=tag_db_template,
        xcom_push=True,
        dag=subdagB)
    end = DummyOperator(
        task_id='taskC',
        dag=subdagB)
    t0.set_upstream(start)
    t1.set_upstream(t0)
    end.set_upstream(t1)
    return subdagB

预先感谢您的任何帮助!

最佳答案

只要您覆盖其中的dag_id，就可以了

[Operator].xcom_pull(dag_id=dag_id, ...)或

[TaskInstance].xcom_pull(dag_id=dag_id, ...)

只要确保



如果您可以使示例更加完整，则可以尝试在本地运行该示例，但是我测试了一个(类似的)示例，并且按预期进行了跨subdag xcoms的工作。

关于python - 从子dag拉xcom，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/43501505/