Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/6.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark apachesparkrddpersist_Apache Spark_Rdd - Fatal编程技术网

Apache spark apachesparkrddpersist

Apache spark apachesparkrddpersist,apache-spark,rdd,Apache Spark,Rdd,一旦我们将RDD保存在内存中,它将在内存中保留多长时间?如果我们从spark shell中出来,我们可以访问相同的数据吗?如果您从shell中出来,那么您的RDD将不再可访问,或者不再存储在spark shell的下一个实例或任何其他进程的内存中。如果您从shell中出来,那么您的RDD将不再可访问,或者不再存储在spark shell的下一个实例或任何其他进程的内存中进程。最好的方法是查询并找出它。哦!!GR8answerrd作为反序列化java对象存储在spark executor JVM中

一旦我们将RDD保存在内存中,它将在内存中保留多长时间?如果我们从spark shell中出来,我们可以访问相同的数据吗?

如果您从shell中出来,那么您的RDD将不再可访问,或者不再存储在spark shell的下一个实例或任何其他进程的内存中。

如果您从shell中出来,那么您的RDD将不再可访问,或者不再存储在spark shell的下一个实例或任何其他进程的内存中进程。

最好的方法是查询并找出它。哦!!GR8answerrd作为反序列化java对象存储在spark executor JVM中。只要JVM处于活动状态并且退出spark shell时不再存在(即垃圾收集),它们就会继续存在。gr8 gr8问题的答案@Raghuveer frm你从何处得到如此棒的答案yaar lol……。你可以自己尝试的一切都在stackoverflow中……:最好的办法就是查询并找出答案。哦!!GR8answerrd作为反序列化java对象存储在spark executor JVM中。只要JVM处于活动状态并且退出spark shell时不再存在(即垃圾收集),它们就会继续存在。gr8 gr8问题的答案@Raghuveer frm你从何处得到如此棒的答案yaar lol……。你可以自己尝试的一切都在stackoverflow中……:D