Warning: file_get_contents(/data/phpspider/zhask/data//catemap/3/apache-spark/5.json): failed to open stream: No such file or directory in /data/phpspider/zhask/libs/function.php on line 167

Warning: Invalid argument supplied for foreach() in /data/phpspider/zhask/libs/tag.function.php on line 1116

Notice: Undefined index: in /data/phpspider/zhask/libs/function.php on line 180

Warning: array_chunk() expects parameter 1 to be array, null given in /data/phpspider/zhask/libs/function.php on line 181
Apache spark 如何在spark JDBC中处理不一致的提交_Apache Spark_Apache Spark Sql_Spark Jdbc - Fatal编程技术网
Fatal编程技术网
  • apache-spark/
  • Apache spark 如何在spark JDBC中处理不一致的提交

Apache spark 如何在spark JDBC中处理不一致的提交

apache-spark

Apache spark 如何在spark JDBC中处理不一致的提交,apache-spark,apache-spark-sql,spark-jdbc,Apache Spark,Apache Spark Sql,Spark Jdbc,使用spark，我将数据从一个区域移动到另一个区域（Postgres），进行一些转换。 mode（SaveMode.Append）.option（“truncate”，true）.jdbc（）。 如果某个执行器由于某些SQLException失败，是否有任何方法可以回滚在不同执行器中发生的所有数据写入？。我希望避免不一致的提交

使用spark，我将数据从一个区域移动到另一个区域（Postgres），进行一些转换。 mode（SaveMode.Append）.option（“truncate”，true）.jdbc（）。 如果某个执行器由于某些SQLException失败，是否有任何方法可以回滚在不同执行器中发生的所有数据写入？。我希望避免不一致的提交