AWSGlue作业忽略日志设置。 _编程开发

AWSGlue作业忽略日志设置。

创始人

2024-09-25 18:02:45

0次

AWS Glue作业忽略日志设置的根本原因是Glue作业会在执行时覆盖实例配置（即log4j.properties），从而导致无法使用用户自定义的日志设置。因此，可以在作业脚本中手动设置日志配置信息，以覆盖实例配置并确保自定义日志设置生效。

以下是一个示例，说明如何在AWS Glue作业中手动设置日志配置信息：

导入相应的Python模块

import logging import logging.config

定义日志配置

logging_config = { 'version': 1, 'formatters': { 'default': { 'format': '%(asctime)s %(levelname)s %(name)s:%(message)s' } }, 'handlers': { 'console': { 'class': 'logging.StreamHandler', 'formatter': 'default', 'level': 'INFO' } }, 'root': { 'level': 'INFO', 'handlers': ['console'] }, }

配置日志

logging.getLogger(name) logging.config.dictConfig(logging_config)

使用日志

logging.info('Message to be logged.')

这样，您就可以在AWS Glue作业中手动设置日志配置信息，并确保自定义日志设置生效了。

上一篇：AWSGlue作业的'IdempotentParameterMismatchException”

下一篇：AWSGlue作业失败并显示连接超时错误。

AWSGlue作业忽略日志设置。

相关内容

热门资讯