如何使用 Boto3 获取 AWS Glue 数据目录中可用的所有分类器的详细信息?
boto3pythonserver side programmingprogramming
问题陈述:使用 Python 中的 boto3 库获取 AWS Glue 数据目录中存在的所有分类器的详细信息。例如,从用户帐户中获取所有分类器的详细信息。
解决此问题的方法/算法
步骤 1 − 导入 boto3 和 botocore 异常以处理异常。
步骤 2 − 没有参数。
步骤 3 − 使用 boto3 库创建 AWS 会话。确保默认配置文件中提到了 region_name。如果没有提到,则在创建会话时明确传递 region_name。
步骤 4 −为 glue 创建 AWS 客户端。
步骤 5 − 调用 get_classifiers。
步骤 6 − 它将获取 AWS Glue 数据目录中所有可用的分类器的详细信息。
步骤 7 − 如果检查作业时出现问题,则处理一般异常。
示例
使用以下代码获取 AWS Glue 数据目录中存在的所有分类器的详细信息 −
import boto3 from botocore.exceptions import ClientError def get_all_classifier_details(): session = boto3.session.Session() glue_client = session.client('glue') try: response = glue_client.get_classifiers() return response except ClientError as e: raise Exception("boto3 client error in get_all_classifier_details: " + e.__str__()) except Exception as e: raise Exception("Unexpected error in get_all_classifier_details: " + e.__str__()) print(get_all_classifier_details())
输出
{'Classifiers': [ {'XMLClassifier': {'Name': 'aiml-linkup', 'Classification': 'xml', 'CreationTime': datetime.datetime(2020, 4, 17, 13, 26, 50, tzinfo=tzlocal()), 'LastUpdated': datetime.datetime(2020, 4, 17, 13, 26, 50, tzinfo=tzlocal()), 'Version': 1, 'RowTag': 'job'}}, {'XMLClassifier': {'Name': 'aiml-test1', 'Classification': 'xml', 'CreationTime': datetime.datetime(2019, 10, 7, 20, 48, 44, tzinfo=tzlocal()), 'LastUpdated': datetime.datetime(2019, 10, 7, 20, 48, 44, tzinfo=tzlocal()), 'Version': 1, 'RowTag': 'nitf'}}, {'GrokClassifier': {'Name': 'classifier1', 'Classification': 'classifier1', 'CreationTime': datetime.datetime(2018, 6, 21, 4, 7, 4, tzinfo=tzlocal()), 'LastUpdated': datetime.datetime(2018, 6, 21, 4, 7, 11, tzinfo=tzlocal()), 'Version': 2, 'GrokPattern': 'SYSLOGTIMESTAMP %{MONTH} +%{MONTHDAY} %{TIME}'}}, {'CsvClassifier': {'Name': 'csvquotes', 'CreationTime': datetime.datetime(2020, 9, 10, 5, 6, 29, tzinfo=tzlocal()), 'LastUpdated': datetime.datetime(2020, 9, 10, 5, 6, 29, tzinfo=tzlocal()), 'Version': 1, 'Delimiter': ',', 'QuoteSymbol': '"', 'ContainsHeader': 'UNKNOWN', 'DisableValueTrimming': False, 'AllowSingleColumn': False}}, {'XMLClassifier': {'Name': 'xml-test', 'Classification': 'xml', 'CreationTime': datetime.datetime(2020, 4, 10, 18, 26, 50, tzinfo=tzlocal()), 'LastUpdated': datetime.datetime(2020, 4, 15, 0, 3, 8, tzinfo=tzlocal()), 'Version': 2, 'RowTag': 'job'}}], 'ResponseMetadata': {'RequestId': '7fa7a78e-…………e4261bfd1', 'HTTPStatusCode': 200, 'HTTPHeaders': {'date': 'Sun, 21 Feb 2021 08:02:30 GMT', 'content-type': 'application/x-amz-json-1.1', 'contentlength': '885', 'connection': 'keep-alive', 'x-amzn-requestid': '7fa7a78e-……………..e4261bfd1'}, 'RetryAttempts': 0}}