Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 为什么';t应用程序UI存储选项卡显示广播变量_Apache Spark - Fatal编程技术网

Apache spark 为什么';t应用程序UI存储选项卡显示广播变量

Apache spark 为什么';t应用程序UI存储选项卡显示广播变量,apache-spark,Apache Spark,当我在SPARK中广播变量时,在应用程序web UI的存储选项卡中看不到它。看看它使用了多少内存会很方便。广播变量没有显示有什么原因吗?我遇到了同样的问题,发现2014年的问题仍未解决: 它说,向司机发送广播var信息将打开一个新的(完全不必要的)频道。解决办法拉请求(在其他信息的基础上发送广播信息)不知何故随着时间的推移丢失了。。。 是的,似乎这并不是一个优先事项——这很公平。但是,我们不需要发送到驱动程序的值,只需要web UI。我对spark的内部结构了解不够,不知道这是不是一回事。

当我在SPARK中广播变量时,在应用程序web UI的存储选项卡中看不到它。看看它使用了多少内存会很方便。广播变量没有显示有什么原因吗?

我遇到了同样的问题,发现2014年的问题仍未解决:

它说,向司机发送广播var信息将打开一个新的(完全不必要的)频道。解决办法拉请求(在其他信息的基础上发送广播信息)不知何故随着时间的推移丢失了。。。

是的,似乎这并不是一个优先事项——这很公平。但是,我们不需要发送到驱动程序的值,只需要web UI。我对spark的内部结构了解不够,不知道这是不是一回事。