AWSGlue中下载GlueETLMarketplace连接器出现“LAUNCHERROR”的错误。
创始人
2024-09-25 18:02:14
0

根据错误提示,应该是连接器的启动出现了问题。可能原因是连接器的权限不足或者配置不正确。建议检查以下几点:

  1. 确认使用的 AWS Glue 账号是否具有足够的权限去下载连接器。

  2. 确认下载的连接器版本是否适配 AWS Glue 运行环境,以及是否和其他连接器或插件冲突。

  3. 确认连接器配置是否正确。

下面是一个使用 Python SDK 下载并安装 Glue ETL Marketplace 连接器的示例代码:

import boto3

glue = boto3.client('glue')

response = glue.get_dev_endpoints()

for endpoint in response['DevEndpoints']:
    if endpoint['EndpointType'] == 'PythonShell':
        python_endpoint_name = endpoint['EndpointName']
        break

response = glue.get_workflow_runs(
    Name='example-workflow'
)

for run in response['Runs']:
    if run['Status'] == 'FAILED':
        run_id = run['WorkflowRunId']
        break

response = glue.start_job_run(
    JobName='example-job',
    Arguments={
        '--start-date': '2017-05-15',
        '--end-date': '2017-05-16'
    },
    AllocatedCapacity=10,
    MaxCapacity=15,
    WorkerType='G.1X',
    NumberOfWorkers=6,
    GlueVersion='1.0',
    Timeout=20,
    MaxRetries=0
)

response = glue.get_job_run(
    JobName='example-job',
    RunId='jr_4a931437342cf20a041b02bd410240f8f802c9b7d14bb_qyQHV'
)

response = glue.update_job_run(
    JobName='example-job',
    RunId='jr_4a931437342cf20a041b02bd410240f8f802c9b7d14bb_qyQHV',
    JobRunState='FAILED',
    ErrorDetails={
        'ErrorCode': '12345',
        'ErrorMessage': 'Something went wrong'
    },
    NotifyEvent={
        'EventName': 'Error',
        'EventState': 'FAILED',
        'EventData': 'javax.jms.MessageFormatException'
    }
)

相关内容

热门资讯

前端-session、jwt 目录:   (1)session (2&#x...
linux入门---制作进度条 了解缓冲区 我们首先来看看下面的操作: 我们首先创建了一个文件并在这个文件里面添加了...
关于测试,我发现了哪些新大陆 关于测试 平常也只是听说过一些关于测试的术语,但并没有使用过测试工具。偶然看到编程老师...
前缀和与对数器与二分法 1. 前缀和 假设有一个数组,我们想大量频繁的去访问L到R这个区间的和,...
nodejs:本地安装nvm实... 一、背景-使用不同版本node的原因 vue3+ts、nuxt3版本,node...
JAVA集合知识整理 Java集合知识整理 HashMap相关 HashMap的底层数据结构:jdk1.8之...
无刷直流电机介绍及单片机控制实... 无刷直流电机介绍及单片机控制实例前言基本概念优势与劣势使用寿命基本结构使用单片机控制实例电子调速器&...
fwdiary(2) dp2 1.传纸条  AcWing 275. 传纸条 - AcWing 走两条路,走一条最大的...
常用的DOS命令 常用的DOS命令 DOS(Disk Operating System,磁...
<C++> 类和对象(下) 1.const成员函数将const修饰的“成员函数”称之为const成员函数,cons...