Hadoop 为烫伤部位添加镶木地板avro支撑

Hadoop 为烫伤部位添加镶木地板avro支撑,hadoop,avro,cascading,scalding,parquet,Hadoop,Avro,Cascading,Scalding,Parquet,我怎样才能创建一个能处理avro和parquet之间转换的shoulding

我怎样才能创建一个能处理
avro
parquet
之间转换的
shoulding

解决办法应:

 1. Read from parquet format and convert to avro memory representation
 2. Write avro objects into a parquet file

注意:我注意到Cascading有一个利用节俭和拼花的模块。我突然想到,这将是一个开始寻找的好地方。我还在

上打开了一个线程,尝试我们在这个fork中的最新更改-

这正是我想要的。投影功能是我寻找拼花地板的原因。我将在这些源代码中使用类型化API来真正拥有一个漂亮的应用程序。非常感谢!我们还一直在努力增加对谓词的支持。我将很快与大家分享这段代码。但是它使用的是parquet-1.6.0rc2-不是parquet的发布版本,这绝对是一件美妙的事情:)嘿,Oleksii,你打算什么时候将它合并到master中?@Oleksii你有没有计划向Burning项目提出合并请求?