amazon-sagemaker 相关问题

Amazon SageMaker是一个完全托管的AWS服务,使开发人员和数据科学家能够快速,轻松地构建,培训和部署任何规模的机器学习模型。

如何将 Sagemaker Pipelines TrainingStep 中的模型保存到特定位置,即没有唯一的父文件夹?

我知道 TrainingStep 默认将模型保存为输出,但我想将其保存在 S3 存储桶中的特定位置。我需要一种方法来以编程方式查找模型的存储位置,所以我想要...

回答 2 投票 0

是否可以选择我想要存储管道运行文件的S3目录?

我的管道运行目录正在我的默认存储桶目录中创建,并且它变得混乱。 我一直在尝试在 s3 默认存储桶中设置一个子目录来存储所有管道运行目录(

回答 2 投票 0

Sagemaker 管道中使用的实例是否会在管道完成后自动销毁?

我看到,对于 sagemaker 管道中的每个步骤,我们定义了将运行该步骤的实例。那么,每一步完成后,实例是被销毁,还是继续运行?

回答 1 投票 0

从 Sagemaker 中的 torch.hub 加载预训练模型

尝试在 Sagemaker Studio 中加载预训练的 resnet50 模型时遇到导入错误。我在 t3.medium 上使用提供的 Pytorch 2.0.0 Python 3.10 GPU 优化图像。我的代码: 导入...

回答 1 投票 0

我应该如何对 sagemaker 模型进行版本控制?

因此,我有一个预训练的 ML 模型存储在 S3 存储桶 (nameexample.tar.gz) 中,我有一个管道,它将运行 terraform,通过在 SageMaker 上使用此文件来创建模型并获得预测,我的

回答 1 投票 0

在 AWS Sagemaker Pipeline 中,将 CreateModelStep 移交给 TransformStep 会导致 ModuleNotFoundError:没有名为“inference”的模块

在 AWS Sagemaker Pipeline 中,我有一个连接到 TransformStep 的 CreateModelStep。当我到达 TransformStep 时,我看到抛出以下错误。 回溯(最近一次调用最后一次): 文件“/

回答 1 投票 0

使用 Sagemaker 和 Langchain 部署 LLM

我正在尝试部署使用 Langchain(显然以 LLM 为核心)和 Sagemaker 构建的生成式 AI 解决方案。因此,代码不仅仅是一个推理脚本,而且是推理管道(挑战是......

回答 2 投票 0

将模型评估指标存储到 Sagemaker

目前我正在将 Sagemaker 设置为我们团队的 ML Ops 平台,我们希望将模型评估指标与模型本身一起存储。 现在我们正在使用

回答 2 投票 0

访问 Crowd HTML 输出结果

我正在使用 Crowd HTML 元素创建一个网站,该网站允许用户/工作人员使用边界框格式注释图像。表格如下所示: 我正在使用 Crowd HTML Elements 创建一个网站,让用户/工作人员使用边界框格式注释图像。表格如下所示: <crowd-form> <crowd-bounding-box name="annotatedResult" labels="['Referee', 'Player']" src="https://s3.amazonaws.com/cv-demo-images/basketball-outdoor.jpg" header="Draw boxes around each basketball player and referee in this image" > <full-instructions header="Bounding Box Instructions" > <p>Use the bounding box tool to draw boxes around the requested target of interest:</p> <ol> <li>Draw a rectangle using your mouse over each instance of the target.</li> <li>Make sure the box does not cut into the target, leave a 2 - 3 pixel margin</li> <li> When targets are overlapping, draw a box around each object, include all contiguous parts of the target in the box. Do not include parts that are completely overlapped by another object. </li> <li> Do not include parts of the target that cannot be seen, even though you think you can interpolate the whole shape of the target. </li> <li>Avoid shadows, they're not considered as a part of the target.</li> <li>If the target goes off the screen, label up to the edge of the image.</li> </ol> </full-instructions> <short-instructions> Draw boxes around each basketball player and referee in this image. </short-instructions> </crowd-bounding-box> </crowd-form> 工人提交的结果如下所示: { "annotatedResult": { "boundingBoxes": [ { "height": 3300, "label": "Dog", "left": 536, "top": 154, "width": 4361 } ], "inputImageProperties": { "height": 3456, "width": 5184 } } } ] 我想获取此输出并将其写入数据库,将其传递给 AWS Lambda,将其存储为元数据等,但我不知道如何访问结果。 JSON 输出是我可以抓取的某些 HTML DOM 属性的属性吗? 我可以将 JavaScript 函数附加到众包形式部分的提交操作中... <script> document.querySelector('crowd-form').onsubmit = function() { ??? }; </script> ...但我不确定需要抓住什么物体才能获得结果。 您可以在 onsubmit 事件期间访问边界框,如下所示: <script> document.querySelector('crowd-form').onsubmit = function(e) { const boundingBoxes = document.querySelector('crowd-bounding-box').value.boundingBoxes || document.querySelector('crowd-bounding-box')._submittableValue.boundingBoxes; } </script> 这是一个可以工作的jsfiddle。

回答 1 投票 0

我们可以在不使用 s3 存储桶的情况下使用 sagemaker 模型 python CLI 吗?

我正在尝试训练人择模型来理解数据表及其元数据(关于表如何关联的表)。然后使用它生成 SQL 从数据库中获取数据。我...

回答 1 投票 0

JumpStartEstimator.fit 错误:UnboundLocalError:赋值前引用局部变量“dataset_train”

我有一个简单的模型调整Python代码,当我运行时出现以下错误,感谢您的帮助。 错误:sagemaker.exceptions.UnexpectedStatusException:训练作业元文本生成错误-

回答 1 投票 0

AWS Sagemaker。如何将 data_capture_config 参数传递给 Pipeline?

我正在尝试监控我的数据,因此我需要使用 Sagemaker 中的 DataCaptureConfig 对象。重点是我正在使用包含所有步骤的 Pipeline 对象。在文档中似乎...

回答 1 投票 0

ClientError:调用CreateHyperParameterTuningJob操作时发生错误(ValidationException):目标指标:[mse]

出现错误:ClientError:调用 CreateHyperParameterTuningJob 操作时发生错误 (ValidationException):超参数调整作业的目标指标 [mse] 不可用...

回答 2 投票 0

idx * self.batch_size 是做什么的?

我对机器学习还很陌生,我偶然发现了 Keras 的序列页面,并试图理解这里的代码块: 从 skimage.io 导入 imread 从 skimage.transform 导入资源...

回答 1 投票 0

SageMaker 在创建标签作业时无法访问 S3

我有一个具有以下权限的 IAM 角色: 但是,当我尝试在 SageMaker 中创建标签作业并单击“创建标签作业”时: 手动数据设置 复制粘贴 IAM ARN 单击br...

回答 1 投票 0

ValueError:StatsForecast 的 AutoARIMA 模型中的数学域错误

我正在尝试使用 statsforecast AutoArima 来预测以下类型的数据: 邮政编码 产品系列 周日期 rma_计数 12198 ABC 2021-01-03 6.0 61022 DEF 2021-01-03 1.0 43106 生长激素指数 2021-01...

回答 1 投票 0

工人死亡/工人与 Sagemaker 断开连接

我正在尝试设置一个多模型端点(或者更准确地重新设置它,因为我很确定它不久前在早期版本的 sagemaker 上运行)来进行语言翻译。但我

回答 2 投票 0

如何在 sagemaker 管道中安装附加包

我想在我的 sagemaker 管道中添加依赖包,该包将在预处理步骤中使用。 我尝试将其添加到 setup.py 文件的 required_packages 中,但它不起作用。 我认为 setup.py...

回答 2 投票 0

作为 Sagemaker Pipelines 的一部分运行自定义脚本

探索 Sagemaker Python SDK 并尝试设置最小管道:自定义 Python 脚本,从 S3 文件夹读取两个 csv 文件,处理数据并将单个文件写回 S3。不能...

回答 2 投票 0

Sagemaker SKlearnProcessor 中的 Python 库列表

有没有办法在 Sagemaker SKlearnProcessor 中列出 Python 库? 无法从官方文档中找到该列表。 , https://sagemaker.readthedocs.io/en/stable/amazon_sagemaker_processing.html#dat...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.