kryo 相关问题

Kryo是一个快速有效的Java对象图序列化框架。该项目的目标是速度,效率和易于使用的API。无论何时需要持久化对象,无论是文件,数据库还是网络,项目都非常有用。

了解Kryo序列化缓冲区溢出错误

我试图理解以下错误,我在客户端颂歌中运行。 org.apache.spark.SparkException:Kryo序列化失败:缓冲区溢出。可用:0,必需:61186304。为避免......

回答 1 投票 1

Java readInt方法返回LittleEndian而不是Scala中Int的BigEndian值

我正在使用Kryo反序列化最初在Spark中序列化的类。 Kryo以BigEndian格式编写所有原语,但是当我尝试反序列化另一台机器上的值时,值为......

回答 1 投票 1

Spark / Java:不可序列化的问题 - Kryo序列化

关于kryo序列化我缺少什么? Class1和Class3不是java可序列化类(没有默认构造函数,既不是getter也不是setter)当我尝试“使用”一个实例时,那就是......

回答 1 投票 0

Spark Streaming:使用Google Pubsub进行自定义接收器kryo注册

我正在使用Spark 2.0.2和Kryo 序列化。我正在尝试实现一个自定义接收器,用于将来自Google PubSub的消息提取到Spark Streaming中:class PubSubReceiver(project:String,...

回答 1 投票 1

Hazelcast序列化器/解串器

如何在群集级别配置序列化程序/反序列化程序。我可以使用以下Java代码在客户端级别设置序列化器/解串器。 ClientConfig clientConfig = new ...

回答 2 投票 0

冷封/欺骗者

我正在尝试使用kryo序列化和反序列化为二进制。我想我的序列化工作,但我似乎无法反序列化。下面是我正在搞乱的代码,但最终我......

回答 1 投票 2

Spark streaming:com.esotericsoftware.kryo.KryoException:java.lang.IllegalArgumentException:Class未注册:scala.Tuple2 $ mcJZ $ sp

我试图在火花流中使用Kryo Serializer。我在Spark调优文档中读到 - 最后,如果你没有注册你的自定义类,Kryo仍然会工作,但它必须存储...

回答 2 投票 2

如何使用kryo序列化为spark注册byte [] []

我试图充分利用kryo序列化的火花。设置.set(“spark.kryo.registrationRequired”,“true”)这将让我知道需要注册哪些类。我已经注册了......

回答 2 投票 5

如何使用Kryo将非常大的Java对象保存到Oracle中的Blob并避免KryoException缓冲区溢出?

我正在尝试使用Kryo保存一个非常大的对象,public static byte [] toBytes(KryoPool kryoPool,Object object){try(输出输出=新输出(32768,Integer.MAX_VALUE - 8)){...

回答 1 投票 1

Kryo:readClassAndObject / ReadObject和WriteClassAndObject / WriteObject之间的区别

我试图从文档中理解以下语句:如果对象的具体类未知且对象可能为null:kryo.writeClassAndObject(output,object); ...

回答 1 投票 1

如何将Scala Maps与akka-kryo-serializer一起使用

我正在尝试使用库akka-kryo-serializer。我设法使用字符串作为测试,但是当我使用相同的代码处理Map时,请仔细按照网站的说明进行操作...

回答 1 投票 1

您是否需要在Kryo中注册所有接口实现?

使用Kryo时,通常建议您注册要序列化的类,以便类名不需要包含在序列化数据中。但在类层次结构中,......

回答 1 投票 1

Spark 2.x数据集的Kryo序列化

使用Dataset API时是否仍需要Kryo序列化?因为数据集使用编码器进行序列化和反序列化:Kyro序列化是否适用于数据集? (...

回答 1 投票 7

如何使用Kryo序列化对象并再次反序列化? [关闭]

如何使用Kryo序列化对象并再次反序列化?我在Kryo 2.23.0工作

回答 2 投票 5

Kryo反序列化失败,出现“KryoException:Buffer underflow”

我使用Kryo将对象写入字节数组。它工作正常。但是当字节数组转换为对象时,它会抛出,com.esotericsoftware.kryo.KryoException:缓冲区下溢。例外。 ...

回答 3 投票 11

警告:[Kryo]无法使用Kryo的ClassLoader加载类x

警告:[kryo]无法使用kryo的ClassLoader加载类slade.core.Child。重试当前...无法找到类:slade.core.Child序列化跟踪:child(slade.core.Parent)...

回答 1 投票 1

Spark:数据帧序列化

我有2个关于Spark序列化的问题,我只能通过谷歌搜索找不到答案。如何打印出当前使用的序列化程序的名称;我想知道是不是火花....

回答 1 投票 4

使用Kryo序列化与Gemfire或Geode

我希望使用Kryo序列化库(https://github.com/EsotericSoftware/kryo)和Pivotal Gemfire 8.x。但是,关于如何做到这一点的信息并不多。如果...

回答 2 投票 0

KryoNet - 将数据包发送到Android客户端

我正在开发一个Android应用程序,它必须将客户端连接到我的服务器以发送/接收不同类型的数据包。为此,我使用的是KryoNet库。我的客户自己连接......

回答 1 投票 0

使用Kryo序列化quickfix.Message

我正在尝试使用kryo序列化序列化quickfix.Message实例。我正在使用kryo 3.0.3版。代码片段如下:Message fixMessage = getFixMessage(); Kryo kryo = ...

回答 2 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.