Warning: file_get_contents(/data/phpspider/zhask/data//catemap/0/hadoop/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Hadoop 如何使用spark在纱线簇模式下将原木直接打印到控制台上_Hadoop_Apache Spark_Yarn - Fatal编程技术网
Fatal编程技术网
  • hadoop/
  • Hadoop 如何使用spark在纱线簇模式下将原木直接打印到控制台上

Hadoop 如何使用spark在纱线簇模式下将原木直接打印到控制台上

hadoop apache-spark

Hadoop 如何使用spark在纱线簇模式下将原木直接打印到控制台上,hadoop,apache-spark,yarn,Hadoop,Apache Spark,Yarn,我是spark的新手，我想在spark集群模式下使用apache spark在控制台上打印日志。您需要检查log4j.properties文件中的值。在我的例子中，这个文件位于/etc/spark/conf.dist目录中 log4j.rootCategory=INFO,console 信息-打印控制台上的所有日志。您可以将该值更改为ERROR，WARN，以限制您希望在控制台上看到的信息，因为sparks日志可能会非常多您只能在客户端模式下将日志打印到控制台，请参见

我是spark的新手，我想在spark集群模式下使用apache spark在控制台上打印日志。

您需要检查log4j.properties文件中的值。在我的例子中，这个文件位于/etc/spark/conf.dist目录中

log4j.rootCategory=INFO,console
信息-打印控制台上的所有日志。您可以将该值更改为ERROR，WARN，以限制您希望在控制台上看到的信息，因为sparks日志可能会非常多

您只能在客户端模式下将日志打印到控制台，请参见