Scala 如何使用chill avro在Spark中加载avro GenericRecords？_Scala_Hadoop_Avro_Apache Spark_Kryo

Scala 如何使用chill avro在Spark中加载avro GenericRecords？

scala hadoop apache-spark

Scala 如何使用chill avro在Spark中加载avro GenericRecords？,scala,hadoop,avro,apache-spark,kryo,Scala,Hadoop,Avro,Apache Spark,Kryo,我尝试在Spark中使用Avro GenericRecords，但得到了一个java.io.NotSerializableException:org.apache.Avro.mapred.avrowraper chill项目增加了对Scala的Kryo/Avro支持。如何将Kryo、Avro、chill和Spark组合起来加载Avros？chill Avro不是用于从FS加载数据，而是用于序列化机上数据。有关更多信息，请参阅下面的链接

我尝试在Spark中使用Avro GenericRecords，但得到了一个java.io.NotSerializableException:org.apache.Avro.mapred.avrowraper

chill项目增加了对Scala的Kryo/Avro支持。如何将Kryo、Avro、chill和Spark组合起来加载Avros？

chill Avro不是用于从FS加载数据，而是用于序列化机上数据。有关更多信息，请参阅下面的链接