如何从Cassandra db读取janusgraph vertexid

问题描述 投票:0回答:1

我有一个使用 Cassandra 和 ElasticSearch 的 janusgraph 数据库。 数据库很大,我需要一种方法来遍历 janusgraph 的所有顶点以用于特定用例。

我尝试使用 SparkGraphComputer 编写 Spark 作业,但即使这样也会超时。

我正在尝试检查 Spark Cassandra 连接器是否可用于遍历数据。有没有什么方法可以直接使用 janusgraph_ids 表或 edgestore 表获取 Cassandra 的所有顶点 id。

apache-spark cassandra janusgraph
1个回答
0
投票

这是一个已知问题,请参阅:https://www.youtube.com/watch?v=oo-b4P1kHu8

最简单的已知解决方法是在 janusgraph 外部保留一个包含顶点 id 的表(例如,通过在 JG 摄取期间更新它),并使用该表在 Spark 作业期间向 JanusGraph 发出 OLTP 请求。

© www.soinside.com 2019 - 2024. All rights reserved.