Warning: file_get_contents(/data/phpspider/zhask/data//catemap/9/java/362.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Java 在azure上设置hadoop_Java_Azure_Hadoop - Fatal编程技术网

Java 在azure上设置hadoop

Java 在azure上设置hadoop,java,azure,hadoop,Java,Azure,Hadoop,我想设置以下(粗略)场景 存储这些事件中发生的事件和活动的数据的数据库/存储文件 在这些数据集上应用的(理想情况下是java)map reduce算法,以获得所需的数据 RESTAPI也允许外部访问以前算法的结果 [我知道我的数据集不会很大,但这是一个概念证明] 我已经从我的azure门户设置了一个HDInsight群集,但不知道下一步该如何进行 如何将结构化数据保存到存储空间?(如果这不是一个 数据库) 如何从地图中连接到该数据 应用程序(如果它不是标准文件,我将遵循 否则) 我发现了一些

我想设置以下(粗略)场景

存储这些事件中发生的事件和活动的数据的数据库/存储文件 在这些数据集上应用的(理想情况下是java)map reduce算法,以获得所需的数据 RESTAPI也允许外部访问以前算法的结果

[我知道我的数据集不会很大,但这是一个概念证明]

我已经从我的azure门户设置了一个HDInsight群集,但不知道下一步该如何进行

  • 如何将结构化数据保存到存储空间?(如果这不是一个 数据库)
  • 如何从地图中连接到该数据 应用程序(如果它不是标准文件,我将遵循 否则)

我发现了一些关于这个问题的信息,但是它在Windows Azure上已经过时,并且已经发生了很大的变化。我也不想使用powershell,因为我只需要运行java代码来自动执行。

从简单的字数开始,然后继续提问。我不是要简单的解决方案。我要的是结构化数据。以Sqoop为例。从任何数据库或任何联机源导入结构化数据,然后尝试运行mapred。