数据流:设置DataflowPipelineDebugOptions

问题描述 投票:0回答:1

我的管道给OOM错误不断,所以我读了fowllowing答案,尝试设置--dumpHeapOnOOM--saveHeapDumpsToGcsPath。但似乎这些选项不起作用。我是否需要更改我的代码或修改什么东西?

Memory profiling on Google Cloud Dataflow

apache-beam dataflow
1个回答
2
投票

您将要检查configuring-pipeline-options

在Apache中梁(2.9.0)的电流的方式来配置的命令行选项管道是--<option>=<value>

你的情况,你可以设置--dumpHeapOnOOM=true --saveHeapDumpsToGcsPath="gs://foo"

© www.soinside.com 2019 - 2024. All rights reserved.