batch-processing 相关问题

批处理是指以最少的人工交互进行编程执行。

awk 中的并行处理?

awk 逐行处理文件。假设每行操作不依赖于其他行,有没有办法让 awk 一次并行处理多行? 还有其他文字吗

回答 3 投票 0

使用 wsl 运行多个命令

我的主文件夹上有一些脚本,我想从命令行运行,实际上是从任务计划程序运行,但我找不到这样做的方法。 我努力了 wsl -u Ubuntu -u jlanza "cd /home/

回答 5 投票 0

SQL Server批量性能优化

我们有以下架构 暂存表 读表 临时表是从外部数据库直接加载的,每周一次,来自临时表的数据被加载到读取表中...

回答 1 投票 0

如何在 Mac OS 中使用 Automator 批量缩放图像并填充白色

在 Mac OS 中使用 Automator 我正在尝试批量填充和缩放图像。 我尝试将图像批量缩放到特定尺寸以及填充。 如果我拖放整个文件夹,它不起作用...

回答 3 投票 0

批量文件命令删除目录中的所有音频/Jpg,但不包括存档?

在我的公司,我们每天批量处理大量音频和 jpg。这不可避免地会导致硬盘驱动器填满,并且需要删除这些文件,同时保留批次的 XML。 我的真实情况

回答 1 投票 0

Photoshop 脚本操作和批处理

也许有人可以帮助我编写一些脚本片段: A) 使用 PS 脚本抑制/忽略在操作中打开并保存对话框 B) 打开时抑制颜色警告 C) 接下来打开/关闭对话框...

回答 1 投票 0

如何使用 Spring Batch 5 实现 AsyncItemProcessor 和 AsyncItemWriter?

我目前正在开发 Spring Batch 实现,在学习 YouTube 上标题为“高性能批处理”的教程时遇到了问题。本教程建议使用...

回答 1 投票 0

千分尺正确表示重复性工作

我有一个 Spring Boot 应用程序,其中计划每 12 分钟运行一个操作。它是一个批处理作业,读取 N 条记录并处理它们。将会有 X 次成功和 Y 次失败

回答 1 投票 0

核心转储文件批处理(Windows)

我有许多来自客户的核心转储(或小型转储)文件(.dmp) 我可以在 MS Visual Studio 中打开每个并查看调用堆栈。 我也可以使用 WinDBG 来完成。 但因为有很多而且我想要

回答 1 投票 0

为 MS GraphApi 创建批处理请求

我想优化对 MS GraphAPI 的 API 调用数量。 因此,我需要的是从我的日历中获取事件数量并与 graphAPI 日历事件同步。 数量范围为 0-1000(大约) 哈...

回答 1 投票 0

批处理作业:子查询可接收的记录数

我对 Apex 比较陌生,但我对我正在创建的批处理作业有一些疑问。我想用子查询进行查询(请参阅代码)。每个Portal_c可以有超过200个Expor...

回答 2 投票 0

将已处理的文件从 flink 中的一个文件夹移动到另一个文件夹

我是 flink 的新手,在解决以下用例时面临一些挑战 用例描述: 我将在某个文件夹(例如输入)中每天收到一个带有时间戳的 csv 文件。文件

回答 3 投票 0

AWS ECS:OutOFMemoryError:容器因内存使用而被终止

我正在将 AWS BAtch 作业与 ECS 和 EC2 结合使用。 这是我正在使用的无服务器模板: 描述:> 设置 AWS Batch 计算环境 AWS 批处理作业定义 AWS 批处理队列 参数...

回答 1 投票 0

如果 Kubernetes 作业被逐出,则重新启动,但如果失败则不重新启动?

我正在使用自动缩放 Kubernetes 集群。如果作业的 pod 运行在利用率不足的节点上,则该节点将被销毁,作业的 pod 将被驱逐。 我希望启动该作业的 Pod

回答 1 投票 0

使用数据集约束在 Apache Flink 的批处理模式下处理条件处理

我利用 Apache Flink 进行批处理模式文件处理。最初,我将 CSV 文件读入自定义对象 DataSet readCsvData。随后,我对...

回答 1 投票 0

Spring-Batch 读取器、处理器和写入器

我需要创建一个 Spring Batch 作业,从 MySQL 读取各种数据,将这些数据放入 .csv 文件中,然后将该文件发送到 Google Cloud Storage。 我想了解架构...

回答 1 投票 0

如何在批处理脚本中读取文件的最后两行

我有一个 Java 程序,它在文件的最后两行中附加新的构建信息。 我如何在批处理文件中读取它们?

回答 4 投票 0

在 Firestore 数据库中同时执行 500 多个操作

我正在尝试创建一个 WriteBatch 来控制数据库中的一个动态引用。我的应用程序有一个简单的用户关注后反馈模型,我希望我的用户在他的反馈中看到帖子......

回答 2 投票 0

无法使用任务在azure批处理池中执行python文件。错误:找不到指定的命令程序

目标是使用azure批处理作业执行存储在blob存储中的python文件。 -- 创建天蓝色帐户 -- 创建池 -- 创造就业机会 -- 创建任务 批处理池: 视窗服务器 目标专用号...

回答 1 投票 0

当后续写入 Firebase 实时数据库失败时,如何解决应回滚的成功事务?

在 Firebase 云函数中,我有以下批量写入,我认为这不足以避免竞争条件,并且我应该使用事务: 常量更新= {}; 更新[`...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.