Hadoop 按Pig拉丁语中的最后一列筛选-未指定架构时

Hadoop 按Pig拉丁语中的最后一列筛选-未指定架构时,hadoop,mapreduce,apache-pig,Hadoop,Mapreduce,Apache Pig,我正在尝试用Pig拉丁语编写一个通用脚本,需要根据最后一列过滤数据 我的数据集将有不同的列计数,我将根据最后一列进行过滤 我们有没有办法得到猪的最后一栏 master = LOAD '/user/data/usps/dataset_1/' using PigStorage(',') ; B = FILTER master BY last_column is null; 您不能使用pig存储。但是,您可以编写自己的自定义加载程序(老实说很容易)来解析数据,并将最后一列命名为“last_colum

我正在尝试用Pig拉丁语编写一个通用脚本,需要根据最后一列过滤数据

我的数据集将有不同的列计数,我将根据最后一列进行过滤

我们有没有办法得到猪的最后一栏

master = LOAD '/user/data/usps/dataset_1/' using PigStorage(',') ;
B = FILTER master BY last_column is null;

您不能使用pig存储。但是,您可以编写自己的自定义加载程序(老实说很容易)来解析数据,并将最后一列命名为“last_column”

您不能使用pigstorage。但是,您可以编写自己的自定义加载程序(老实说很容易)来解析数据并将最后一列命名为“last_column”