ApacheBeam和Dataflow致命的Python错误:XXX堆栈操作下溢
创始人
2024-09-05 11:30:10
0

这个错误是由于Python解释器无法正确跟踪包含本地C扩展的堆栈。解决此问题的一个简单方法是在Dataflow任务的启动脚本中添加一个环境变量PYTHONUNBUFFERED=1。这将禁用Python的输出缓冲,以便错误能够立即输出并显示在控制台上,而不是在脚本结束时输出。以下是示例代码:

import apache_beam as beam

with beam.Pipeline() as p:
  pcoll = p | beam.Create([1, 2, 3])
  _ = pcoll | 'ThrowError' >> beam.Map(lambda x: 1 / (x - 3))

在运行以下命令时,您将看到错误消息并且程序将在这里停止:

python -m apache_beam.examples.wordcount --input gs://dataflow-samples/shakespeare/kinglear.txt --output gs://YOUR_OUTPUT_BUCKET/wordcount/outputs

该命令将返回以下错误消息:

“实际结果”。 ValueError:“堆栈下溢”

要解决此错误,需要将PYTHONUNBUFFERED变量添加到命令中,如下所示:

PYTHONUNBUFFERED=1 python -m apache_beam.examples.wordcount --input gs://dataflow-samples/shakespeare/kinglear.txt --output gs://YOUR_OUTPUT_BUCKET/wordcount/outputs

这表明,如果Python出现问题,错误消息将立即输出到控制台,从而使您能够识别和解决错误。

相关内容

热门资讯

外挂积累!约局吧德州透视,约局... 外挂积累!约局吧德州透视,约局吧如何查看是否有挂-果然存在有辅助app(哔哩哔哩)1、点击下载安装,...
外挂阶段!德州辅助工具到底怎么... 外挂阶段!德州辅助工具到底怎么样,德普之星私人局透视-确实一直都是有辅助攻略(哔哩哔哩)1、实时德州...
外挂经验!大菠萝789辅助器下... 外挂经验!大菠萝789辅助器下载,约局吧德州真的存在透视吗-果然是真的有辅助插件(哔哩哔哩)1、下载...
外挂指南!红龙poker辅助,... 外挂指南!红龙poker辅助,佛手大菠萝13道挂哪里-本来一直总是有辅助脚本(哔哩哔哩)一、佛手大菠...
外挂资料!哈糖大菠萝有挂吗,p... 外挂资料!哈糖大菠萝有挂吗,pokernow辅助工具-真是存在有辅助app(哔哩哔哩)1、每一步都需...
外挂演示!哈糖大菠萝能开挂吗,... 外挂演示!哈糖大菠萝能开挂吗,pokerworld破解版下载-果然真的有辅助方法(哔哩哔哩)哈糖大菠...
外挂办法!xpoker透视辅助... 外挂办法!xpoker透视辅助,佛手在线大菠萝辅助-本来有辅助教程(哔哩哔哩)1、佛手在线大菠萝辅助...
外挂学习!德州局透视脚本免费版... 外挂学习!德州局透视脚本免费版下载手机版,来玩app破解版-确实是真的有辅助技巧(哔哩哔哩)1、每一...
外挂学习!xpoker辅助助手... 外挂学习!xpoker辅助助手,哈糖大菠萝软件下载-一直一直都是有辅助脚本(哔哩哔哩)1、下载好哈糖...
外挂教程书!拱趴大菠萝万能辅助... 外挂教程书!拱趴大菠萝万能辅助器,拱趴大菠萝有挂吗-果然一直总是有辅助工具(哔哩哔哩)1、每一步都需...