AWSGlue脚本无法找到Parquet文件
创始人
2024-09-25 15:31:02
0次

这个问题通常出现在使用PySpark的AWS Glue脚本中，可能是由于缺失必要的PySpark导入语句造成的。如果使用以下代码导入语句，可以解决这个问题：

from pyspark.context import SparkContext
from pyspark.sql import SQLContext
from pyspark.sql import SparkSession

sc = SparkContext.getOrCreate()
sqlContext = SQLContext(sc)
spark = SparkSession(sc)

这些语句将Spark和SQL上下文实例化，让Glue脚本能够正确地找到和处理Parquet文件。在脚本中包含这些导入语句，应该能够解决错误信息中提到的Parquet文件缺失问题。

上一篇：AWSGlue将所有任务分配给同一个worker

下一篇：AWSGLUEJob-Crawler识别正确列数据类型，但GLUE作业在选取同一列时选择了不同的数据类型。

相关内容

热门资讯

昨日!wepoker透视脚本(... 您好：这款wepoker透视脚本游戏是可以开挂的，确实是有挂的，很多玩家在这款wepoker透视脚本...
日前!wpk透视辅助靠谱吗(透... 日前!wpk透视辅助靠谱吗(透视)原来是有挂(有挂助手开挂辅助辅助器)-哔哩哔哩；无需打开直接搜索微...
据目击者称!wepoker钻石... 据目击者称!wepoker钻石怎么看底牌(透视)一直真的是有挂(有挂辅助开挂辅助脚本)-哔哩哔哩您好...
做出回应!福建天天开心辅助工具... 福建天天开心辅助工具是一款专注玩家量身打造的游戏记牌类型软件，在福建天天开心辅助工具这款游戏中我们可...
据公告内容!sohoo pok... 据公告内容!sohoo poker辅助器(透视)其实是有挂(有挂总结开挂辅助辅助器)-哔哩哔哩 了解...
随着!余干中至怎么输就一直输(... >>您好：余干中至怎么输就一直输确实是有挂的，很多玩家在这款余干中至怎么输就一直输游戏中打牌都会发现...
围绕透视问题!哈糖大菠萝万能挂... 围绕透视问题!哈糖大菠萝万能挂(透视)一贯是有挂的(了解有挂开挂辅助辅助器)-哔哩哔哩；无需打开直接...
针对!广西老友玩有破解码(辅助... 针对!广西老友玩有破解码(辅助挂)一直是有挂的(有挂经验)-哔哩哔哩；打开点击测试直接进入微信（13...
近年来!hhpoker辅助码(... 近年来!hhpoker辅助码(透视)原来是有挂的(有挂教学开挂辅助下载)-哔哩哔哩您好：hhpoke...
截至发稿!新天道辅助器怎么设置... 截至发稿!新天道辅助器怎么设置(辅助挂)一直是有挂(有挂模板)-哔哩哔哩1、下载安装好新天道辅助器怎...