คำชี้แจงปัญหา: ใช้ boto3 ไลบรารีใน Python เพื่อแบ่งหน้าผ่านทริกเกอร์ทั้งหมดจาก AWS Glue Data Catalog ที่สร้างขึ้นในบัญชีของคุณ
แนวทาง/อัลกอริทึมในการแก้ปัญหานี้
-
ขั้นตอนที่ 1: นำเข้า boto3 และ botcore ข้อยกเว้นในการจัดการข้อยกเว้น
-
ขั้นตอนที่ 2: max_items , page_size และ starting_token เป็นพารามิเตอร์ทางเลือกสำหรับฟังก์ชันนี้
-
max_items หมายถึงจำนวนระเบียนที่จะส่งคืนทั้งหมด หากจำนวนระเบียนที่มีอยู่> max_items จากนั้น NextToken จะถูกจัดเตรียมในการตอบสนองต่อการแบ่งหน้าต่อ
-
page_size หมายถึงขนาดของแต่ละหน้า
-
starting_token ช่วยในการแบ่งหน้า และใช้ NextToken จากการตอบกลับครั้งก่อน
-
-
ขั้นตอนที่ 3: สร้างเซสชัน AWS โดยใช้ boto3 lib . ตรวจสอบให้แน่ใจว่า region_name ถูกกล่าวถึงในโปรไฟล์เริ่มต้น หากไม่กล่าวถึง ให้ส่ง region_name . อย่างชัดแจ้ง ขณะสร้างเซสชัน
-
ขั้นตอนที่ 4: สร้างไคลเอนต์ AWS สำหรับกาว
-
ขั้นตอนที่ 5: สร้าง ตัวแบ่งหน้า วัตถุที่มีรายละเอียดของทริกเกอร์ทั้งหมดโดยใช้ get_triggers
-
ขั้นตอนที่ 5: เรียก แบ่งหน้า และส่งผ่าน max_items , page_size และ starting_token เป็น PaginationConfig พารามิเตอร์
-
ขั้นตอนที่ 6: ส่งกลับจำนวนระเบียนตาม max_size และ page_size .
-
ขั้นตอนที่ 7: จัดการกับข้อยกเว้นทั่วไปหากมีสิ่งผิดปกติเกิดขึ้นขณะทำการแบ่งหน้า
โค้ดตัวอย่าง
ใช้รหัสต่อไปนี้เพื่อแบ่งหน้าผ่านทริกเกอร์ทั้งหมดที่สร้างขึ้นในบัญชีผู้ใช้ -
import boto3 from botocore.exceptions import ClientError def paginate_through_triggers(max_items=None:int,page_size=None:int, starting_token=None:string): session = boto3.session.Session() glue_client = session.client('glue') try: paginator = glue_client.get_paginator('get_triggers') response = paginator.paginate(PaginationConfig={ 'MaxItems':max_items, 'PageSize':page_size, 'StartingToken':starting_token} ) return response except ClientError as e: raise Exception("boto3 client error in paginate_through_triggers: " + e.__str__()) except Exception as e: raise Exception("Unexpected error in paginate_through_triggers: " + e.__str__()) page_itr = paginate_through_tables("test_db",2,5) for page in page_itr: print(page['Triggers']
ผลลัพธ์
[{'Name': 'file-passed', 'WorkflowName': 'data-tx', 'Type': 'CONDITIONAL', 'State': 'ACTIVATED', 'Actions': [{'JobName': 'data-event'}], 'Predicate': {'Logical': 'ANY', 'Conditions': [{'LogicalOperator': 'EQUALS', 'JobName': 'data-worker', 'State': 'SUCCEEDED'}]}}, {'Name': 'file-passed-to-acc', 'WorkflowName': 'tick-data', 'Type': 'CONDITIONAL', 'State': 'ACTIVATED', 'Actions': [{'JobName': 'tick-data'}], 'Predicate': {'Logical': 'ANY', 'Conditions': [{'LogicalOperator': 'EQUALS', 'JobName': 'tick-data', 'State': 'SUCCEEDED'}]}}