ApacheSpark:SparkHistoryServer:未显示SQL选项卡和执行详情
创始人
2024-09-06 12:30:33
0

该问题可能是由于历史服务器没有正确配置相关参数所致。要解决此问题,请按照以下步骤操作:

  1. 确保Spark应用程序启用了事件日志记录。在启动Spark应用程序时,使用以下参数启动Spark会话:

--conf spark.eventLog.enabled=true --conf spark.eventLog.dir=<指定事件日志目录>

  1. 当Spark应用程序完成运行时,事件日志将在指定的事件日志目录中生成。现在,启动Spark历史服务器并配置以下参数:

--conf spark.history.fs.logDirectory=<指定事件日志目录> --conf spark.history.ui.maxApplications=<限制Spark应用程序显示的数量>

  1. 现在,访问Spark历史服务器UI并检查SQL选项卡是否显示。如果没有显示,则需要修改以下参数:

--conf spark.ui.allowSparkContext=<设置为true>

代码示例:

启动Spark应用程序:

spark-shell --conf spark.eventLog.enabled=true --conf spark.eventLog.dir=/tmp/spark-events

启动Spark历史服务器:

/usr/local/spark/sbin/start-history-server.sh --conf spark.history.fs.logDirectory=/tmp/spark-events --conf spark.history.ui.maxApplications=10

访问Spark历史服务器UI:

http://localhost:18080

修改参数:

/usr/local/spark/sbin/start-history-server.sh --conf spark.history.fs.logDirectory=/tmp/spark-events --conf spark.history.ui.maxApplications=10 --conf spark.ui.allowSparkContext=true

相关内容

热门资讯

实操分享!微扑克wpk(WEp... 实操分享!微扑克wpk(WEpoke)外挂透明挂辅助脚本(辅助挂)技巧教程(有挂教学)-哔哩哔哩;(...
透视辅助(WPK技术)外挂透明... 透视辅助(WPK技术)外挂透明挂辅助器(透视)软件透明挂(有挂神器)-哔哩哔哩;值得一提的是,WPK...
透视挂!德扑自定义房间(weP... 透视挂!德扑自定义房间(wePOke)外挂透明挂辅助app(辅助挂)靠谱教程(有挂秘诀)-哔哩哔哩;...
透明了解(新Wepoke)外挂... 1、透明了解(新Wepoke)外挂透明挂辅助器安装(辅助挂)辅助透视(发现有挂)-哔哩哔哩;详细教程...
透视透明挂(Wepoke ap... 透视透明挂(Wepoke app)外挂透明挂辅助工具(辅助挂)德州ai机器人(真实有挂)-哔哩哔哩;...
今日重大通报(aapoker)... 今日重大通报(aapoker)外挂透明挂辅助插件(透视)介绍教程(2022已更新)(哔哩哔哩),亲,...
分享实测!德扑之星带入(wEP... 德扑之星带入新手教程相关信息汇总(需添加指定薇757446909获取下载链接);分享实测!德扑之星带...
盘点一款(德州之星app安卓版... 《德州之星app安卓版软件透明挂》是一款多人竞技的德州之星app安卓版辅助透视游戏,你将微扑克对手来...
我来教教你(德扑之星刷数据)外... 1、我来教教你(德扑之星刷数据)外挂透明挂辅助挂(辅助挂)发牌规律(了解有挂)-哔哩哔哩;详细教程。...
透视能赢(impoker)外挂... 透视能赢(impoker)外挂透明挂辅助神器(透视)扑克教程(2024已更新)(哔哩哔哩);(需添加...