Sagemaker 自定义模型：创建端点时出现“模型数据存档太大”错误

Question

最近，在使用已知良好的端点配置时，我不断收到一条消息：“模型数据存档太大。请减小模型数据存档的大小或移至具有更多内存的实例类型。”错误。 tar.gz文件有7.7G，但没有加载到内存中（只有一小部分加载到内存中）。我想知道最近是否有任何变化可能导致此问题。

感谢您的任何见解

伊曼纽尔

Answer 1

使用 SageMaker 创建端点时，模型数据工件将被下载并解压缩到实例上的关联磁盘/EBS 卷上。该卷大小与您选择的实例类型成正比[1]。

请确保您选择的实例类型有足够的磁盘空间来容纳未压缩的.tar.gz 文件。 （无论稍后它是完全还是部分加载到内存中，它都必须适合未压缩的磁盘）。

[1] 实例类型的卷大小 - https://docs.aws.amazon.com/sagemaker/latest/dg/host-instance-storage.html

Answer 2

我也有同样的问题

UnexpectedStatusException：托管端点 Custom-sklearn-model-2023-12-05-13-40-53 时出错：失败。原因：无法从 URL“s3://sagemaker-ap-southeast-1-672615214693/RF-custom-sklearn-2023-12-05-12-59-11-567/output/model.tar 提取模型数据存档.gz”。模型数据存档太大。请减小模型数据存档的大小或移至具有更多内存的实例类型..