Graph Spark-RDD沿袭图表示
我想知道是否有办法使用 spark api的函数将RDD.toDebugString()转换为更结构化的格式,因此可以使用它自动获取图形表示,例如graphviz 似乎围绕着这件事有一些活动: 但是我想从Graph Spark-RDD沿袭图表示,graph,apache-spark,rdd,Graph,Apache Spark,Rdd,我想知道是否有办法使用 spark api的函数将RDD.toDebugString()转换为更结构化的格式,因此可以使用它自动获取图形表示,例如graphviz 似乎围绕着这件事有一些活动: 但是我想从toDebugString()获取结构化格式的信息, 然后决定使用哪种图形格式来表示。toDebugString()在内部迭代RDD的递归结构,构建一个可显示的字符串 与其让toDebugString()返回更结构化的输出,不如读取其内部实现(它确实依赖于结构化数据),然后修改它以适合您的方式
toDebugString()
获取结构化格式的信息,
然后决定使用哪种图形格式来表示。toDebugString()
在内部迭代RDD的递归结构,构建一个可显示的字符串
与其让toDebugString()
返回更结构化的输出,不如读取其内部实现(它确实依赖于结构化数据),然后修改它以适合您的方式保存数据
您无需等待JIRA的任何问题,只需DIY:)可以使用默认在4040端口上运行的spark UI查看更详细和格式化的可视化表示。 下面是显示所有详细信息的屏幕截图:
这个问题不会得到解决。我不知道Scala,如何在java中做到这一点?