AWSGlue脚本无法找到Parquet文件
创始人
2024-09-25 15:31:02
0次

这个问题通常出现在使用PySpark的AWS Glue脚本中，可能是由于缺失必要的PySpark导入语句造成的。如果使用以下代码导入语句，可以解决这个问题：

from pyspark.context import SparkContext
from pyspark.sql import SQLContext
from pyspark.sql import SparkSession

sc = SparkContext.getOrCreate()
sqlContext = SQLContext(sc)
spark = SparkSession(sc)

这些语句将Spark和SQL上下文实例化，让Glue脚本能够正确地找到和处理Parquet文件。在脚本中包含这些导入语句，应该能够解决错误信息中提到的Parquet文件缺失问题。

上一篇：AWSGlue将所有任务分配给同一个worker

下一篇：AWSGLUEJob-Crawler识别正确列数据类型，但GLUE作业在选取同一列时选择了不同的数据类型。

相关内容

热门资讯

第3分钟辅助！拱趴大菠萝作弊方... 第3分钟辅助！拱趴大菠萝作弊方法，xpoker辅助怎么用，手册教程（有挂透明挂）一、拱趴大菠萝作弊方...
两分钟辅助！poker辅助器免... 两分钟辅助！poker辅助器免费安装，hhpoker有没有外挂，大纲教程（有挂助手）1、很好的工具软...
第三分钟辅助！wpk透视怎么安... 第三分钟辅助！wpk透视怎么安装，hhpoker透视脚本视频，演示教程（有挂技巧）暗藏猫腻，小编详细...
第4分钟辅助！菠萝德普辅助器免... 第4分钟辅助！菠萝德普辅助器免费版在哪里，wepoker免费透视，教材教程（真实有挂）1、让任何用户...
五分钟辅助！德州透视hhpok... 五分钟辅助！德州透视hhpoker，wepoker透视器免费，绝活儿教程（揭秘有挂）1、wepoke...
第八分钟辅助！aa poker... 第八分钟辅助！aa poker辅助包，hhpoker脚本，模块教程（果真有挂）1、首先打开aa po...
3分钟辅助！epoker底牌透... 3分钟辅助！epoker底牌透视，德普之星透视，策略教程（有挂细节）1）德普之星透视辅助插件：进一步...
2分钟辅助！wepoker手机... 2分钟辅助！wepoker手机助手，pokermaster辅助器，法子教程（有挂工具）亲，关键说明，...
第五分钟辅助！pokemmo辅... 第五分钟辅助！pokemmo辅助器手机版下载，拱趴大菠萝怎么开挂，教材教程（有挂功能）1、玩家可以在...
五分钟辅助！hhpoker是真... 五分钟辅助！hhpoker是真的还是假的，哈糖大菠萝有挂吗，积累教程（有挂详情）1、每一步都需要思考...