如何从pyspark中删除bash脚本

如何从pyspark中删除bash脚本,bash,pyspark,Bash,Pyspark,我有大量的csv文件,我正在通过bash处理这些文件 有没有一种方法可以从pyspark调用bash脚本文件,然后从中生成RDD?使用subprocess.call触发bash代码 subprocess.call("run.bash", shell=True) 从展示pyshark的工作原理或工作方式开始?它是从命令行调用的吗?更多信息将用于子流程调用。it workedAd:已使用子流程调用。如果你解决了问题并添加了更多细节,你也可以回答自己的问题,这对其他人也有帮助。

我有大量的csv文件,我正在通过bash处理这些文件


有没有一种方法可以从pyspark调用bash脚本文件,然后从中生成RDD?

使用subprocess.call触发bash代码

subprocess.call("run.bash", shell=True)

从展示pyshark的工作原理或工作方式开始?它是从命令行调用的吗?更多信息将用于子流程调用。it workedAd:已使用子流程调用。如果你解决了问题并添加了更多细节,你也可以回答自己的问题,这对其他人也有帮助。