AWSEMR中YARN时间线服务器无法显示日志
创始人
2024-09-25 10:30:27
0

问题描述:

如果您在AWS EMR上运行Apache Spark作业并启用了时间线服务器,但在访问时间线UI时未能显示作业日志,则可能会遇到该问题。

要使作业日志出现在时间线UI中,您需要在时间线服务器的配置文件中添加以下属性:

yarn.timeline-service.generic-application-history.store-class = org.apache.hadoop.yarn.server.timeline.LeveldbTimelineStore

请遵循以下步骤:

使用SSH连接到您的EMR群集。 在conf目录下创建yarn-site.xml:

cd /etc/hadoop/conf sudo vi yarn-site.xml

将以下内容添加到yarn-site.xml:

yarn.timeline-service.generic-application-history.store-class org.apache.hadoop.yarn.server.timeline.LeveldbTimelineStore

保存和关闭文件。 重启时间线服务器:

sudo initctl stop hadoop-yarn-timelineserver sudo initctl start hadoop-yarn-timelineserver

等待几分钟,然后访问您的时间线UI页面,您应该能够看到应用程序的日志。

请注意,这些修改只适用于使用时间线服务器的作业。您还可以使用Log4j配置文件将其他Spark应用程序的日志发送到实时日志聚合器,例如AWS CloudWatch日志。

相关内容

热门资讯

让我来分享经验!aa扑克软件,... 让我来分享经验!aa扑克软件,wepoke辅助,规律教程(先前存在有挂)wepoke辅助辅助器中分为...
教程辅助!wpk数据分析,德州... 您好,德州之星有辅助挂这款游戏可以开挂的,确实是有挂的,需要了解加微【136704302】很多玩家在...
推荐一款!wpk微扑克辅助透视... 推荐一款!wpk微扑克辅助透视,aa扑克辅助,解说技巧(一直真的是有挂)1、很好的工具软件,可以解锁...
必看攻略!aapoker俱乐部... 必看攻略!aapoker俱乐部后台可以操作吗,wepoke ai辅助,黑科技教程(切实有挂)1、超多...
科技分享!来玩app有挂吗,w... 科技分享!来玩app有挂吗,wepoke智能ai,细节揭秘(竟然是有挂)1、wepoke智能aiai...
最新科技!wpk德州辅助器是真... 您好,aapoker辅助工具这款游戏可以开挂的,确实是有挂的,需要了解加微【136704302】很多...
技术分享!wepoke辅助技巧... 1、技术分享!wepoke辅助技巧,aapoker挂,第三方教程(原来有挂);代表性(透视辅助软件透...
科技揭秘!德州ai辅助神器软件... 科技揭秘!德州ai辅助神器软件,aapoker辅助,线上教程(好像真的是有挂)1、金币登录送、破产送...
了解一下!德扑之星作弊,微扑克... 了解一下!德扑之星作弊,微扑克系统发牌规律,wpk教程(原本真的是有挂)您好,微扑克系统发牌规律,确...
揭秘一下!wpk微扑克真的有辅... 揭秘一下!wpk微扑克真的有辅助插件吗,wepok软件透明挂,力荐教程(果然是有挂)您好,wepok...