如何使用 Boto3 从 AWS Glue 中删除 Glue 作业?


问题陈述 − 在 Python 中使用 boto3 库删除在您的账户中创建的 Glue 作业。

示例 − 删除在您的账户中创建的名为“transfer_from_s3”的 Glue 作业。

解决此问题的方法/算法

步骤 1 − 导入 boto3 和 botocore 异常以处理异常。

步骤 2 − 传递应从 AWS Glue 目录中删除的 job_name 参数。

步骤 3 − 使用 boto3 库创建 AWS 会话。确保在默认配置文件中提到了 region_name。如果未提及,则在创建会话时显式传递 region_name。

步骤 4 − 为 Glue 创建 AWS 客户端。

步骤 5 − 现在使用 delete_job 函数并将 job_name 作为 JobName 参数传递。

步骤 6 − 它将删除作业并返回响应元数据。

步骤 7 − 如果在检查作业时出现错误,则处理通用异常。

注意 − 此操作完成后,它会删除指定的作业定义。如果在 AWS Glue 中找不到作业,则不会引发任何异常,并且输出与删除任何作业时类似。

示例

使用以下代码从 AWS Glue 中删除 Glue 作业: 

import boto3
from botocore.exceptions import ClientError

def delete_a_glue_job(job_name):
   session = boto3.session.Session()
   glue_client = session.client('glue')
   try:
      response = glue_client.delelte_job(JobName=job_name)
   return response
   except ClientError as e:
      raise Exception( "boto3 client error in delete_a_glue_job: " + e.__str__())
   except Exception as e:
      raise Exception( "Unexpected error in delete_a_glue_job: " + e.__str__())

print(delete_a_glue_job("transfer_from_s3"))

输出

{'JobName': ' transfer_from_s3', 'ResponseMetadata': {'RequestId':
'126adb54-f0a0-4558-b345-d6a4e62674f3', 'HTTPStatusCode': 200,
'HTTPHeaders': {'date': 'Sat, 27 Feb 2021 15:53:27 GMT', 'content-type':
'application/x-amz-json-1.1', 'content-length': '22', 'connection':
'keep-alive', 'x-amzn-requestid': '126adb54-……….-d6a4e62674f3'},
'RetryAttempts': 0}}

更新于: 2021年3月22日

475 次浏览

启动您的 职业生涯

通过完成课程获得认证

开始学习
广告