跨多个环境的 GCP 数据流作业中异常的内存使用模式

问题描述 投票:0回答:0

我目前正在处理 4 个数据流作业,每个作业都在 3 个独立的环境中进行复制。在过去的 3 个月中,所有 12 个实例都已成功运行。但是,在大多数情况下,我观察到一种奇怪的内存使用模式,内存消耗在突然崩溃之前呈阶梯状上升。幸运的是,这些崩溃没有导致数据丢失。

目前,我们在低负载下运行,但我担心最终过渡到满负载时可能出现的问题。我应该担心这种内存使用模式吗?如果是这样,我应该调查哪些主要领域来诊断和解决这个问题?任何指导或见解将不胜感激。

performance debugging memory-management google-cloud-dataflow apache-beam
© www.soinside.com 2019 - 2024. All rights reserved.