ตัวอย่าง: ดึงรายละเอียดของ Crawler ชื่อ crawler_for_s3_file_job
ขั้นตอนการแก้ปัญหา
- ขั้นตอนที่ 1 – นำเข้า
boto3และbotocore.exceptionsเพื่อจัดการข้อยกเว้น - ขั้นตอนที่ 2 –
crawler_name เป็นพารามิเตอร์บังคับ เป็น List ดังนั้นผู้ใช้สามารถส่งชื่อ Crawler หลายตัวพร้อมกันเพื่อดึงรายละเอียด - ขั้นตอนที่ 3 – สร้าง AWS Session ด้วย Boto3 ตรวจสอบ
region_nameในโปรไฟล์เริ่มต้น หากไม่มี ให้ระบุโดยตรง - ขั้นตอนที่ 4 – สร้าง AWS Client สำหรับ Glue
- ขั้นตอนที่ 5 – ใช้ฟังก์ชัน batch_get_crawlers และส่ง crawler_names
- ขั้นตอนที่ 6 – คืนค่า Metadata ของ Crawlers
- ขั้นตอนที่ 7 – จัดการข้อยกเว้นทั่วไปหากเกิดข้อผิดพลาด
ตัวอย่างโค้ด
ใช้โค้ดต่อไปนี้เพื่อดึงรายละเอียดของ Crawler:
import boto3
from botocore.exceptions import ClientError
def get_crawler_details(crawler_names: list):
session = boto3.session.Session()
glue_client = session.client('glue')
try:
crawler_details = glue_client.batch_get_crawlers(CrawlerNames=crawler_names)
return crawler_details
except ClientError as e:
raise Exception("boto3 client error in get_crawler_details: " + e.__str__())
except Exception as e:
raise Exception("Unexpected error in get_crawler_details: " + e.__str__())
print(get_crawler_details(["crawler_for_s3_file_job"]))
