本地安装的Spark历史服务器为空
创始人
2024-11-29 02:00:41
0

这个问题通常出现在使用本地模式的 Spark 应用程序中。为了使本地安装的 Spark 历史服务器工作,你需要在启动应用程序时指定 spark.eventLog.enabled 和 spark.eventLog.dir 属性。 示例代码如下:

val conf = new SparkConf().setAppName("MyApp") .setMaster("local[*]") .set("spark.eventLog.enabled", "true") .set("spark.eventLog.dir", "/path/to/logs")

val sc = new SparkContext(conf)

// ... your Spark application code

启动应用程序后,你可以在指定的日志目录中找到事件日志文件。你可以使用本地安装的 Spark 历史服务器将这些日志文件转换为易于阅读的 HTML 页面。

$SPARK_HOME/sbin/start-history-server.sh -Dspark.history.fs.logDirectory=/path/to/logs

现在你应该可以在 http://localhost:18080 上找到 Spark 历史服务器,并查看你的事件日志。

相关内容

热门资讯

6分钟辅助!hhpoker是真... 6分钟辅助!hhpoker是真的假的,hhpoker真的有透视吗,演示教程(真是有挂)1、每一步都需...
第七分钟辅助!we poker... 第七分钟辅助!we poker插件,we poker免费辅助器,手筋教程(有挂方式)暗藏猫腻,小编详...
七分钟辅助!aa poker辅... 七分钟辅助!aa poker辅助包,pokemmo脚本辅助器下载,讲义教程(有挂秘籍)1、pokem...
第四分钟辅助!wepoker辅... 第四分钟辅助!wepoker辅助器安装包定制,aapoker透视脚本,大纲教程(有挂总结)所有人都在...
第四分钟辅助!wpk透视辅助靠... 第四分钟辅助!wpk透视辅助靠谱吗,wepoker透视苹果系统,诀窍教程(有挂猫腻);运wepoke...
七分钟辅助!aapoker透视... 七分钟辅助!aapoker透视脚本入口,wejoker开挂,学习教程(有挂教程)1、打开软件启动之后...
第四分钟辅助!淘宝买wepok... 第四分钟辅助!淘宝买wepoker透视有用吗,wpk俱乐部怎么作弊,积累教程(有挂规律)1、下载好淘...
6分钟辅助!we-poker软... 6分钟辅助!we-poker软件,购买的wpk辅助在哪里下载,积累教程(有挂技巧)购买的wpk辅助在...
第2分钟辅助!如何下载wepo... 第2分钟辅助!如何下载wepoker安装包,newpoker怎么安装脚本,教程书教程(今日头条)1、...
4分钟辅助!wepoker钻石... 4分钟辅助!wepoker钻石怎么看底牌,wepoker辅助器有哪些功能,法门教程(有挂详细)该软件...