Warning: file_get_contents(/data/phpspider/zhask/data//catemap/5/sql/68.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Sql Hive可以像flatmap/map那样进行Spark操作吗?_Sql_Hive - Fatal编程技术网

Sql Hive可以像flatmap/map那样进行Spark操作吗?

Sql Hive可以像flatmap/map那样进行Spark操作吗?,sql,hive,Sql,Hive,在过去的几个月里,我一直在使用Spark来清理数据。在大多数情况下,它只是过滤或一些简单的聚合 最近,我发现使用HQL可以在配置单元中完成大部分任务。但是我发现使用Hive进行map,特别是flatmap很困难 从某种意义上说,select-类操作是map操作,但是如果flatmap呢 有人能给点建议吗 谢谢。横向视图()可以以有限的方式绘制平面图

在过去的几个月里,我一直在使用Spark来清理数据。在大多数情况下,它只是过滤或一些简单的聚合

最近,我发现使用HQL可以在配置单元中完成大部分任务。但是我发现使用Hive进行
map
,特别是
flatmap
很困难

从某种意义上说,
select
-类操作是
map
操作,但是如果
flatmap

有人能给点建议吗


谢谢。

横向视图()可以以有限的方式绘制平面图