Java 以编程方式确定滚烫/层叠管道的字段名
我使用烫伤来处理具有许多(>22)字段的记录。在这个过程的最后,我想把最终管道的字段名写到一个文件中。我知道这是可能的,因为Mapper和Reducer日志显示了这些信息。我想在工作本身中获得这些信息,以作为穷人模式的基础。如果这是不可能做到的,那么有没有一种好方法可以将类型安全管道API用于大型记录(即,不诉诸任意嵌套的元组或case类) 通过使Java 以编程方式确定滚烫/层叠管道的字段名,java,scala,hadoop,cascading,scalding,Java,Scala,Hadoop,Cascading,Scalding,我使用烫伤来处理具有许多(>22)字段的记录。在这个过程的最后,我想把最终管道的字段名写到一个文件中。我知道这是可能的,因为Mapper和Reducer日志显示了这些信息。我想在工作本身中获得这些信息,以作为穷人模式的基础。如果这是不可能做到的,那么有没有一种好方法可以将类型安全管道API用于大型记录(即,不诉诸任意嵌套的元组或case类) 通过使writeHeader=true告诉.write函数也包括模式 .write(Tsv("filename.tsv"), writeHeader=tru
writeHeader=true
告诉.write
函数也包括模式
.write(Tsv("filename.tsv"), writeHeader=true)