distributed-computing 相关问题

利用多台计算机,通过通信链路相互连接,完成一项共同任务。

为什么在CAP定理中没有RDBMS分区容忍以及为什么它可用?

关于RDBMS在CAP定理中是CA的两点我不明白:1)它说RDBMS不是分区容忍但是RDBMS如何比MongoDB或其他技术更少的分区容错...

回答 3 投票 14

工作者(线程)如何保留磁盘空间并与其他工作人员通信预留

我正在尝试设置一个自动缩放类,它将检查磁盘资源以查看工作者是否可以安全地运行。可以在运行之前估计磁盘使用情况。工人有什么选择......

回答 1 投票 0

FLP不可靠性结果假设C_1 = e'(C_0)

FLP86关于在异步分布式系统中解决共识的不可能性的着名证据(即使只有一次失败)在第三个引理的证明中假定存在......

回答 1 投票 1

DynamoDB - AWS上的事件存储

我在AWS上设计了一个Event Store,我选择了DynamoDB,因为它似乎是最好的选择。我的设计似乎相当不错,但我面临一些我无法解决的问题。 **设计活动是......

回答 3 投票 0

Firebase云消息传递是否被视为消息代理?

我有一个任务是在分布式系统中选择实现消息代理。 Firebase云消息传递被认为是一个吗?

回答 1 投票 2

如何在PAXOS或RAFT中重新上线复制品?

在诸如PAXOS和RAFT的共识算法中,提出了一个值,并且如果法定数量一致,则它被持久地写入数据存储。对于那些在......不可用的参与者会发生什么

回答 3 投票 2

缓存和持久有什么区别? (为什么)我们需要在RDD上调用缓存或持久化

在RDD持久性方面,spark中的cache()和persist()之间有什么区别?

回答 5 投票 194

在Lamport同步算法的讨论中,“部分排序”和“总排序”是什么意思?

据我所知,部分排序和总排序是两套规则。部分排序有三个规则:(1)如果a b是同一过程中的两个事件而a出现在b之前,那么a-> b。 (...

回答 1 投票 2

我可以在Apache Ignite计算中混合使用C ++和Java吗?

作为一个非常常见的用例,我们有一些用C ++编写的遗留算法。使用Ignite compute,我们可以将C ++代码包装到ComputeFunc中,将它们视为Runnable或Callable,然后从...中调用它们。

回答 1 投票 -1

如何使用分布式查询API(如Criteria API或Distributed Sql Query)以及除IMap之外的任何数据结构?

我想使用分布式查询,创建谓词并使用该谓词来过滤列表中的数据。如何在IList中使用谓词?我已经通过Hazelcast IMDG 3.12文档......

回答 1 投票 -3

有没有办法在Kubernetes集群中举行领导人选举?

所有领导者选举工具,如Consul,Zookeeper或任何其他仲裁系统。我见过已经在同一个集群中使用pod。我需要跨群集进行协调以获得教程。

回答 1 投票 1

在计算密集型系统中,添加更多节点会导致(接近)线性性能提升吗?

假设一组服务器,进行计算密集型工作。假设在该系统中没有DB,没有文件存储或任何类型的东西。假设集群中的每个节点都能够......

回答 1 投票 0

Spark:从具有不同内存/核心配置的单个JVM作业同时启动

问题解释假设您有一个带有独立管理器的Spark集群,其中通过在客户端应用程序中创建的SparkSession来调度作业。客户端应用程序在JVM上运行。你必须推出每个...

回答 1 投票 1

在分布式环境中调用一堆REST API

我在python库中有我的应用程序逻辑。我的库提供的每个操作都涉及一次或多次调用一些REST api。所以我有:def OperationA(resource_id,params):调用REST ...

回答 1 投票 1

无法通过-kill命令杀死oozie作业

我试图像这样杀死一个oozie协调员工作:$ oozie job -oozie http://10.0.3.2:11000/oozie -kill 0003288-130913181709024-oozie-oozi-C没有任何错误出现。但在我检查后......

回答 4 投票 1

Hazelcast的多播发现

有人能说出HazelCast的多播发现是如何运作的。我想要每个成员的细节发现它的同行。我一直试图找到一些好的资源,但没有找到任何详细的......

回答 1 投票 2

分布式Tensorflow:内部错误 - Blas GEMM启动失败

我正在尝试使用分布式Tensorflow,并在localhost上启动了两个进程(Windows 10,Python 3.6.6,Tensorflow 1.8.0)。每个过程都运行一个简单的神经网络的复制品(1隐藏...

回答 1 投票 1

通过多个进程同步轮询文件中的对象列表

使用案例:我有一个带有ID的文件(大约500k)我的应用程序读取这些文件并处理它们(每个id的处理很大)。总的来说,这需要大量的时间和内存......

回答 1 投票 0

公证人如何向节点提供他们诚实的证据?

例如,如何向一个节点证明公证人没有与交易对手勾结以加倍投入?如何在Corda系统内实现信任和共识?编辑:在......

回答 1 投票 0

Python中的分布式计算 - 网络爬虫

我的目标是构建一个分布式爬虫,一次处理多个网站,也可以处理多个查询。为此,我使用像'...这样的标准软件包在Python中构建了一个Web爬虫。

回答 1 投票 1

© www.soinside.com 2019 - 2024. All rights reserved.