Mongodb 将Apache spark群集与多个数据库集成
我的团队使用不同的数据库,比如mongodb和cassandra。Mongodb 将Apache spark群集与多个数据库集成,mongodb,apache-spark,cassandra,Mongodb,Apache Spark,Cassandra,我的团队使用不同的数据库,比如mongodb和cassandra。 我需要知道是否可以将单个spark群集与mongodb和cassandra群集集成。 或者,换句话说,是否可以在同一个spark应用程序中从mongodb和cassandra创建数据帧?spark只查看数据帧和RDD。只要连接器存在,使用哪个数据库并不重要。您可以在单个Spark上下文中根据需要建立任意多个外部连接 任何读入这些格式的数据源都可以合并
我需要知道是否可以将单个spark群集与mongodb和cassandra群集集成。
或者,换句话说,是否可以在同一个spark应用程序中从mongodb和cassandra创建数据帧?spark只查看数据帧和RDD。只要连接器存在,使用哪个数据库并不重要。您可以在单个Spark上下文中根据需要建立任意多个外部连接 任何读入这些格式的数据源都可以合并