Warning: file_get_contents(/data/phpspider/zhask/data//catemap/2/.net/21.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
C# ApacheSpark通过C进行查询#_C#_.net_Apache Spark_.net Spark_Spark Dotnet - Fatal编程技术网

C# ApacheSpark通过C进行查询#

C# ApacheSpark通过C进行查询#,c#,.net,apache-spark,.net-spark,spark-dotnet,C#,.net,Apache Spark,.net Spark,Spark Dotnet,我想知道是否有一种方法可以使用C#编写在ApacheSpark上运行的查询。我知道spark SQL查询可以用java/scala/python编写。c#?是否有任何接口可供您实现具体目标?如果您想编写使用spark API的程序,可能您运气不好,因为只公开了scala、java和python API。但是,如果您想查询spark存储数据,那么您可以看到thriftserver附带spark并将查询传递给它。本质上,它应该支持任何JDBC连接(见文档中的直线示例)在线搜索什么?考虑使用-并在C系

我想知道是否有一种方法可以使用C#编写在ApacheSpark上运行的查询。我知道spark SQL查询可以用java/scala/python编写。c#?

是否有任何接口可供您实现具体目标?如果您想编写使用spark API的程序,可能您运气不好,因为只公开了scala、java和python API。但是,如果您想查询spark存储数据,那么您可以看到thriftserver附带spark并将查询传递给它。本质上,它应该支持任何JDBC连接(见文档中的直线示例)

在线搜索什么?考虑使用-并在C系列中创建一个REST接口,用于数据结构的JSON序列化。我建议使用这种方法,因为jobserver提供了上下文,允许您返回并重用以前的数据帧。我会的,这对卡桑德拉有用吗?有没有一种方法可以通过thriftserver传递Spark SQL查询来获取数据,而不必使用Spark作业?