ApacheAirflow错误:runid已存在
创始人
2024-09-05 09:30:58
0

该错误可能是由于在 Airflow 存储后端中已经存在相同的 run id 导致的。可以尝试使用不同的 run id 或删除旧的 run id,然后重新运行 DAG。

以下是使用 Python 脚本删除旧的 run id 的示例代码:

from airflow.models import DagRun
from datetime import datetime

# specify the dag id and run id to delete
dag_id = 'my_dag'
run_id = 'my_run_id'

# delete existing dag run
try:
    dag_run = DagRun.find(dag_id=dag_id, run_id=run_id)
    if dag_run:
        # mark the dag run as failed
        dag_run.state = 'failed'
        dag_run.end_date = datetime.now()
        dag_run.log('Manually set DagRun state to failed')
        dag_run.update()
        # delete the dag run
        DagRun.delete(dag_run)
        print('Dag run {} deleted.'.format(run_id))
    else:
        print('Dag run {} not found.'.format(run_id))
except Exception as e:
    print('Failed to delete dag run {}: {}'.format(run_id, str(e)))

请注意,使用此方法删除正在运行的 DAG 可能会导致数据丢失或其他问题。因此,在删除任何 DAG 运行之前,请先了解运行期间的情况。

相关内容

热门资讯

前端-session、jwt 目录:   (1)session (2&#x...
linux入门---制作进度条 了解缓冲区 我们首先来看看下面的操作: 我们首先创建了一个文件并在这个文件里面添加了...
关于测试,我发现了哪些新大陆 关于测试 平常也只是听说过一些关于测试的术语,但并没有使用过测试工具。偶然看到编程老师...
前缀和与对数器与二分法 1. 前缀和 假设有一个数组,我们想大量频繁的去访问L到R这个区间的和,...
nodejs:本地安装nvm实... 一、背景-使用不同版本node的原因 vue3+ts、nuxt3版本,node...
JAVA集合知识整理 Java集合知识整理 HashMap相关 HashMap的底层数据结构:jdk1.8之...
无刷直流电机介绍及单片机控制实... 无刷直流电机介绍及单片机控制实例前言基本概念优势与劣势使用寿命基本结构使用单片机控制实例电子调速器&...
fwdiary(2) dp2 1.传纸条  AcWing 275. 传纸条 - AcWing 走两条路,走一条最大的...
常用的DOS命令 常用的DOS命令 DOS(Disk Operating System,磁...
<C++> 类和对象(下) 1.const成员函数将const修饰的“成员函数”称之为const成员函数,cons...