amazon-sagemaker 相关问题

Amazon SageMaker是一个完全托管的AWS服务,使开发人员和数据科学家能够快速,轻松地构建,培训和部署任何规模的机器学习模型。

SageMaker batchTransform MultiRecord 错误 - 无法将数据解析为 JSON。确保 Content-Type 标头设置为“application/json”

我正在尝试调用 sagemaker 批量转换 输入文件 example.jsonl {“number”:“0060540745”,“brand_name”:“XYZ”,“generic_keywords”:“123”...

回答 1 投票 0

如何通过 Transformers 库在 sagemaker 中训练模型?

基于此处的示例,https://aws.amazon.com/blogs/machine-learning/fine-tune-and-host-hugging-face-bert-models-on-amazon-sagemaker/, 为了训练,使用了 HuggingFace 估计器,我很屁股......

回答 1 投票 0

无法再在 SageMaker Studio Lab 中读取上传的 csv 文件

我曾经使用pandas命令:pd.read_csv('path Copy from studio lab')来读取csv文件 但现在这个命令似乎不再起作用了。我在 pandas 命令中使用的路径我...

回答 2 投票 0

安装软件包有任何解决方法吗? (深度速度错误)

我试图使用deepspeed,但是当我运行训练时它显示错误。我必须使用 pip 安装 mpi4py。但是,如果我尝试安装 mpi4py 我会收到错误。 从那个错误中我发现......

回答 2 投票 0

Amazon S3 SelectObjectContent 错误 - OverMaxParquetBlockSize

我正在尝试使用 S3 的选择功能,但对于某些文件,我收到 OverMaxParquetBlockSize 错误。 我的选择非常简单: r = s3.select_object_content( Bucket='产品桶', K...

回答 2 投票 0

Amazon Sagemaker 在后台从 jupyter 笔记本运行代码

我正在 Amazon Sagemkaer 笔记本实例上运行代码(在普通的 jupyter 笔记本中,而不是 jupyterLab 中)。 如何在后台运行代码并关闭浏览器选项卡?当我关闭jupy时...

回答 1 投票 0

Amazon Sagemaker 将单单元代码部署到更高的实例

我目前正在“ml.t3.2xlarge”实例上的 amazon sagemaker jupyter 笔记本(不是 jupyterLab,只是一个普通的 jupyter 笔记本)上运行代码。下面显示一行代码,我在其中...

回答 1 投票 0

如何在 Sagemaker 预处理作业中使用 athena VPC 端点从隔离网络模式查询数据

我在隔离网络中编写了一个 sagemaker 处理作业。它有一个 Athena sql,可以从 athena 读取数据帧。 但它会抛出错误“botocore.exceptions.NoCredentialsError:无法...

回答 1 投票 0

尝试通过 Sagemaker 将本地文件上传到 S3 时出现 FileNotFoundError

全面披露:我对 AWS 世界还比较陌生。正如标题所述,我正在尝试通过 Sagemaker 工作室中的 JupyterLab 将文件夹从本地计算机上传到亚马逊 S3 卷。我可以

回答 1 投票 0

如何从 Sagemaker Studio 列出所有正在运行的实例

我的用户经常忘记关闭其 Sagemaker Studio 实例。 我需要一个脚本来列出 sagemaker studio 域内所有正在运行的实例。

回答 1 投票 0

SageMaker Studio 实验室 - XGBoost Algortim - 我阅读的文档正确吗?

Google 有 SageMaker Studio 的答案,但我对 SageMaker Studio LAB 的答案不知所措...... 我正在阅读有关 XGBoost 的以下内容 - 我是否适合 SM Studio LAB? https://docs....

回答 1 投票 0

sagemaker自定义@step装饰器抛出“TypeError:管道变量不支持__str__操作。请使用`.to_string()`”

我正在我的 sagemaker 管道中创建模型卡步骤,因此我定义了 model_card 方法,如下所示: def create_model_card(model_package_details, 存储桶): 进口圣人

回答 1 投票 0

AWS SageMaker 使用 start_pipeline_exection boto3 函数将参数从 Pipeline 传递给 NotebookJobStep

我正在尝试使用本地的 sagemaker 资源以编程方式触发 sagemaker 笔记本。我在 sagemaker 管道步骤中遇到了 NotebookJobStep。我已经成功创建了一个

回答 1 投票 0

Amazon Sagemaker-将模型注册表与处理作业创建的模型集成

我为 ML Ops 创建了一个管道,在其中训练模型并将模型放置在 S3 存储桶中。 我还创建了一个处理作业,将模型注册到 sagemaker 模型注册表。我的问题是

回答 1 投票 0

Sagemaker studio 无法加载

Sagemaker Studio 在前 6 个月里为我完美工作。然后我就开始观察这个问题。错误消息的屏幕截图 屏幕永远保持在这个阶段。这就是我所拥有的...

回答 2 投票 0

ModuleNotFoundError:没有名为“sagemaker”的模块

我正在尝试在 sagemaker 中使用 sklearn 执行预处理。作为先决条件,我尝试导入 sagemaker 模块: %pip install -qU 'sagemaker>=2.15.0' 导入boto3 导入 sagemake...

回答 1 投票 0

在 sagemaker 管道中创建 Model_card 会抛出“序列化 [tuple] 类型的对象时出错:TypeError(“无法pickle 'SSLContext'对象”)

我的管道有以下步骤 步骤0:我用模型数据创建模型 步骤1:我按照`RegisterModel`注册模型 步骤2:然后我使用`CreateModelStep`使用st...

回答 1 投票 0

在 AWS Sagemaker 中利用 HuggingFace Trainer 的最小 FSDP 示例

我目前正在尝试在 AWS Sagemaker 中微调 LLM。由于它太大,无法安装在单个 GPU 上,因此我尝试将模型权重分配到 AWS Sagemaker 实例中的多个 GPU 上。在我的

回答 1 投票 0

传递图像进行推理时,sagemaker 端点的 SSL 验证失败

我训练了一个自定义yolov5模型并将其部署到sagemaker端点b通过参考此博客:https://aws.amazon.com/blogs/machine-learning/scale-yolov5-inference-with-amazon-sagemaker-endpoin ...

回答 2 投票 0

如何在 AWS Sagemaker 中使用 Python 3.8+?

我正在使用 Sagemaker Notebook 实例并为 Python 3.8 和 3.9 创建自定义内核。我可以在我的笔记本中选择这些内核,但是当我运行 sys.version 时,它显示 3.7.10 |由 conda 打包-

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.