AWSGlueJob日志仍然输出到输出和错误日志。
创始人
2024-09-25 15:31:16
0

在AWS Glue Job代码中使用导入logging模块,并将日志输出到AWS CloudWatch Logs服务中。以下是示例代码:

import logging
import sys
from awsglue.utils import getResolvedOptions
from pyspark.context import SparkContext
from awsglue.context import GlueContext
from awsglue.job import Job

# 初始化Spark和GlueContext
sc = SparkContext()
glue_context = GlueContext(sc)
job = Job(glue_context)
    
# 设置AWS Glue Job日志输出到CloudWatch Logs服务中
logger = glue_context.get_logger()
logger.setLevel(logging.DEBUG)
logger.addHandler(logging.StreamHandler(sys.stdout))

# 在此处编写您的 AWS Glue Job 代码

job.commit()

此代码通过调用AWS Glue Context的get_logger()方法来设置日志。将日志级别设置为DEBUG后,将使用StreamHandler输出到标准输出流sys.stdout。然后,您可以使用CloudWatch Logs服务按作业或时间戳记录和管理日志。

相关内容

热门资讯

五分钟辅助!哈糖大菠萝助手,h... 五分钟辅助!哈糖大菠萝助手,hhpoker软件安装包,教材教程(发现有挂)1、上手简单,内置详细流程...
第3分钟辅助!拱趴大菠萝作弊方... 第3分钟辅助!拱趴大菠萝作弊方法,xpoker辅助怎么用,手册教程(有挂透明挂)一、拱趴大菠萝作弊方...
两分钟辅助!poker辅助器免... 两分钟辅助!poker辅助器免费安装,hhpoker有没有外挂,大纲教程(有挂助手)1、很好的工具软...
第三分钟辅助!wpk透视怎么安... 第三分钟辅助!wpk透视怎么安装,hhpoker透视脚本视频,演示教程(有挂技巧)暗藏猫腻,小编详细...
第4分钟辅助!菠萝德普辅助器免... 第4分钟辅助!菠萝德普辅助器免费版在哪里,wepoker免费透视,教材教程(真实有挂)1、让任何用户...
五分钟辅助!德州透视hhpok... 五分钟辅助!德州透视hhpoker,wepoker透视器免费,绝活儿教程(揭秘有挂)1、wepoke...
第八分钟辅助!aa poker... 第八分钟辅助!aa poker辅助包,hhpoker脚本,模块教程(果真有挂)1、首先打开aa po...
3分钟辅助!epoker底牌透... 3分钟辅助!epoker底牌透视,德普之星透视,策略教程(有挂细节)1)德普之星透视辅助插件:进一步...
2分钟辅助!wepoker手机... 2分钟辅助!wepoker手机助手,pokermaster辅助器,法子教程(有挂工具)亲,关键说明,...
第五分钟辅助!pokemmo辅... 第五分钟辅助!pokemmo辅助器手机版下载,拱趴大菠萝怎么开挂,教材教程(有挂功能)1、玩家可以在...