ApacheBeam和Dataflow致命的Python错误:XXX堆栈操作下溢
创始人
2024-09-05 11:30:10
0

这个错误是由于Python解释器无法正确跟踪包含本地C扩展的堆栈。解决此问题的一个简单方法是在Dataflow任务的启动脚本中添加一个环境变量PYTHONUNBUFFERED=1。这将禁用Python的输出缓冲,以便错误能够立即输出并显示在控制台上,而不是在脚本结束时输出。以下是示例代码:

import apache_beam as beam

with beam.Pipeline() as p:
  pcoll = p | beam.Create([1, 2, 3])
  _ = pcoll | 'ThrowError' >> beam.Map(lambda x: 1 / (x - 3))

在运行以下命令时,您将看到错误消息并且程序将在这里停止:

python -m apache_beam.examples.wordcount --input gs://dataflow-samples/shakespeare/kinglear.txt --output gs://YOUR_OUTPUT_BUCKET/wordcount/outputs

该命令将返回以下错误消息:

“实际结果”。 ValueError:“堆栈下溢”

要解决此错误,需要将PYTHONUNBUFFERED变量添加到命令中,如下所示:

PYTHONUNBUFFERED=1 python -m apache_beam.examples.wordcount --input gs://dataflow-samples/shakespeare/kinglear.txt --output gs://YOUR_OUTPUT_BUCKET/wordcount/outputs

这表明,如果Python出现问题,错误消息将立即输出到控制台,从而使您能够识别和解决错误。

相关内容

热门资讯

分享个大家!同乡游辅助软件,h... 分享个大家!同乡游辅助软件,hh poker插件下载,wpk教程(新版有挂);暗藏猫腻!同乡游辅助软...
分享一款!广西老友玩友破解,w... 分享一款!广西老友玩友破解,wpk真吗,微扑克教程(有挂辅助)是一款可以让一直输的玩家,快速成为一个...
玩家交流!悟空大厅微信辅助,h... 玩家交流!悟空大厅微信辅助,hhpoker有作弊的吗,透明挂教程(有挂功能);AI辅助机器人普及解说...
科普攻略!wepoker智能辅... 科普攻略!wepoker智能辅助插件,wepoker可以透视码,技巧教程(存在有挂);wepoker...
一分钟揭秘!打哈儿小程序辅助,... 一分钟揭秘!打哈儿小程序辅助,智星德州辅助译码插件靠谱吗,必备教程(有挂教学);一、打哈儿小程序辅助...
一起来探讨!西兵互娱辅助插件a... 【福星临门,好运相随】;一起来探讨!西兵互娱辅助插件app,wepoker破解器,必备教程(有挂解密...
记者揭秘!爱来掌中宝有没有挂,... 记者揭秘!爱来掌中宝有没有挂,wepoker可以开透视吗,解说技巧(有挂教程);相信小伙伴都知道这个...
重大通报!微信卡五星辅助器,拱... 重大通报!微信卡五星辅助器,拱趴大菠萝有挂吗,AI教程(有挂技巧);1、全新机制【微信卡五星辅助器软...
总算了解!九九山城插件,hhp... 总算了解!九九山城插件,hhpoker外挂靠谱吗,新版2025教程(有挂功能),九九山城插件是用手机...
今日头条!广东闲来辅助工具,智... 今日头条!广东闲来辅助工具,智星菠萝辅助,教你攻略(有挂攻略);一、广东闲来辅助工具AI软件牌型概率...