aws-glue 相关问题

带红移光谱分析时间戳，胶水目录（S3 Parquet）

我们在AWS胶水目录中有一个表格，其中存储在S3中的数据作为镶木文件。该表包含多个字段，包括： event_name（字符串） 国家（弦） 用户ID（字符串） ti（时间戳） ...

从数据框架中提取列值，然后进入SQL Pyspark，其中句子

我正在尝试一个方案，将数据从后端提取到数据框架中，并且只需从该表中检索column1 list值示例“ ID”列，然后将ID值列表传递到SQL查询中...

从AWS（S3/rds/dyamodb等）读取来自本地应用程序的数据 我有一个本地应用程序，该应用程序应该从各种AWS商店定期读取数据。 是否有任何可以从基础商店（S3，RDS，DynamoDB等）获取数据的AWS服务。

如何在AWS胶水中添加Python套件3.0 Jupyter Notebook Jobs？

如何在胶水中添加新参数？这里有我缺少的东西吗？

EXTRA文件未复制到Job Run Directory

当我经营一份工作时，我仍然会得到fileNotfound例外。我还使用ListDir（）查看内容，并注意到缺少配置文件。

无需在AWS胶水工作中加载Trino Spark Connector

我如何使用AWS GLUE DYAMICFRAME将UpSert（合并）进行雪花？

TOTAL_CUSTOMER_METRICS

modulenotfounderror：没有名为“ psycopg2”的模块[aws胶]

--additional-python-moodules

aws胶水冰山“无法连接到蜂巢metastore” - 但我不使用Hive

Herey。 我遇到错误

在哪里可以看到AWS胶水ETL作业印刷语句？

如何使用昏迷作为分隔器加成JSON键列 我有一个问题来解决这个问题： 有一个JSON文件，例如： { “数据库”： { “ table_1”：{ “ load_type”：“ delta”， “ Colu ...

步长1：在AWS胶水 - >数据连接中创建连接：

aws Glue crawler：没有明确胶水在创建过程中无法添加标签：TagResource许可

我的要求是：

aws_glue_catalog_database在通过Terraform创建新创建的表“默认创建表的默认权限”的复选框检查

aws胶合作业输出文件名

因此，我尝试使用以下代码：

试图从AWS Glue目录table读取value' - '的列时，null null 我正在阅读一个具有列名称br_book_gl1的雅典娜表，其值为' - '和'+'。 雅典娜源数据 在将其阅读为胶水目录表时，我会得到“+”值，但为' - 'valu ...

知道PK和SK

pk

是从大型Dynamo DB Table删除大量数据的最佳方法 我有PK和SK，用于我需要删除的所有记录，并希望找到此操作的最佳方法。我应该写一个脚本以使用batchwriteItem，以25批次删除项目？会...

，以25批次删除项目？为此使用AWS胶水会更好吗？我的桌子有4000万个条目。

收集错误属性验证失败：[属性{/tableInput/vieworiginalText}的值不匹配type {string {string}] 我正在尝试使用表中的数据创建外部视图，但是接收错误属性验证失败：[属性{/tableInput/vieworiginalText}的值不匹配type {string}] w ...

Property validation failure: [Value of property {/TableInput/ViewOriginalText} does not match type {String}]

如何在胶合作业中添加当前的时间戳（额外的列），以便输出数据具有额外的列

如何在胶合作业中添加当前的时间戳（额外的列），以便输出数据具有额外的列。在这种情况下： 架构源表： Col1，Col2 胶水工作后。 目的地模式： ...