distributed-system 相关问题

分布式系统由一组自治计算机组成,通过网络和分发中间件连接,使计算机能够协调其活动并共享系统资源,以便用户将系统视为单一的集成计算设施。

手动复制 PostgreSQL:我可以确保用户的查询始终是确定性的吗?

我想知道运行多个从空状态初始化的 PostgreSQL 数据库实例是否可行,并通过对它们应用相同的查询序列来手动保持它们同步。

回答 1 投票 0

Google Dataflow 工作人员完成度达 99%

我被这个问题困扰了一个多星期了。当我运行以下管道时,我的工作人员会翻阅我的数据 - 直到 99% 标记,他们会无限期地挂在这个标记上。我...

回答 1 投票 0

如何将用户数据存储本地化到每个用户的地理区域?

我想将国际 Web 应用程序的用户数据存储在物理托管在适合区域的数据中心的数据存储中(将美国用户的数据保存在美国托管的数据中心上,数据为

回答 1 投票 0

无领导者复制实际上是如何工作的?真的没有单个协调者/领导者节点来维护复制吗?

我一直在阅读 Martin Kleppmann 的“设计数据密集型应用程序”作为理解数据库复制及其与共识算法的关系的资源。 根据我的

回答 1 投票 0

Raft 能否通过不提交空操作日志来保证正确性?

我有一个疑问:no-op操作在8的优化部分的raft paper中只提到了。但是,有提到no-op日志以防止“幽灵复发”,但是...

回答 1 投票 0

如何有效扩展 Kafka Connect?

我想运行一个本地 Kafka Connect (KC) 集群,它将运行多个不同的“源”和“接收器”连接器。目前在测试配置中,我缩放了 KC 集群...

回答 1 投票 0

分布式系统初学者项目

我是一个全栈开发者。我想了解更多关于分布式计算和分布式系统的知识。我想知道互联网上一些最好的资源和一些初学者......

回答 0 投票 0

使用多 GPU 的 pytorch DDP 训练的时间成本

我使用 pytorch 的 DDP 在同一台机器上用两个 RTX3090 GPU 训练我的模型,我发现时间成本比在单个 GPU 上没有 DDP 的训练要多。用...训练我的模型大约需要 133s

回答 0 投票 0

领导者提交日志条目并在通知追随者此承诺之前崩溃时,raft 如何保持安全?

在我的理解中,领导者向追随者发送AppendEntries RPC,如果大多数追随者返回成功,领导者将提交这个条目。它将通过将它应用到我来提交这个条目......

回答 2 投票 0

乐观的离线锁:在没有线性化的情况下提供序列化的数据库中实现这一点? (即,DB 不提供严格的可序列化性)

我正在研究乐观的离线锁定模式。即 https://martinfowler.com/eaaCatalog/optimisticOfflineLock.html 我已经看到很多参考资料表明可以通过...实现这种模式

回答 0 投票 0

为什么 Aeron 多播比原始 Tcp 实现慢得多

我正在测试 Aeron 与原始 TCP 服务器-客户端的多播。 Aeron 模型设置: 每个节点上的MD进程 开始 1 个发布和 1 个订阅者 原始 Tcp 服务器客户端: 服务器:1 个线程推送 1

回答 1 投票 0

筏算法的巨大缺陷

所以 raft 论文和论文说这是处理附加条目的方法: 接收器实现: 如果术语< currentTerm (§5.1) Reply false if log doesn’t contain an entry at

回答 0 投票 0

如何为多播频道设置多个并发订阅者?

我正在尝试探索 Aeron,我的机器中有一个由三个节点组成的集群。我正在尝试建立一个简单的模型:节点 1 中的一个频道发布者,以及 Nod 中的两个频道订阅者......

回答 1 投票 0

我应该使用什么模式来聚合 Apache Kafka 中的不同类型的事件?

0 我正在尝试使用 Kafka 进行事件处理,但我有点难以理解我应该使用哪种模式。 我的用例是这样的: 一个消费者等待一种类型的事件。 当那个事件是

回答 0 投票 0

如何在分布式系统中结合分片和一致性哈希?

分片,或者说分区,是一种在分布式系统中广泛使用的技术,它在逻辑上将数据分成多个分区。每个节点都分配了一组分区,因此读/写...

回答 1 投票 0

MPI_ACCUMULATE 和 MPI_REPLACE 总是比 MPI_PUT 更好的选择吗

我正在经历 MPI-3 中引入的累积和原子 MPI RMA 调用。阅读后我发现有一个 MPI_REPLACE 运算符可以在 MPI_Accumulate 中使用来执行...

回答 1 投票 0

这个例子执行是否符合偶然的一致性?

假设进程 A 将 1 写入 X,然后将 X 读取为 2。 进程 B 将 2 写入 X,然后将 X 读取为 1。 这肯定不满足顺序一致性,但是随意一致性呢?

回答 0 投票 0

有人试过在蟑螂DB上运行节奏吗?

cadenace开箱即用的docker镜像自带cassandra依赖,也有基于mysql和postgres的镜像。

回答 1 投票 0

Byzantine Consensus Randomized - Monte Carlo Implementation with matrix for value sending(带矩阵的蒙特卡洛实现)。

为了实现Bizantine共识,必须适用这3条规则:在每一轮中,每个进程必须向其他n-1个进程发送一个位(值为0或1);在一个新的进程开始前,必须向其他进程发送一个位。

回答 1 投票 0

如何用Db事务向Microsoft EventHub发送消息?

我想用Db事务把事件发送到微软的Event-hub,请问有什么方法可以处理这个事情?解释: 用户点击了一个创建订单的端点。OrderService接受订单并将该订单放入db中。现在订单...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.