Apache spark 在Spark中执行EXPECT()操作期间的字段标识

Apache spark 在Spark中执行EXPECT()操作期间的字段标识,apache-spark,except,Apache Spark,Except,except()函数在spark work中比较两个数据帧并从第一个数据帧返回不匹配的记录 然而,我想田径场的细节也,这是不匹配的。如何在spark中完成它??请按照所述提供帮助,除非会导致行完全不匹配。所以我建议使用leftanti-join而不是Exception,并使用一个或多个连接键作为条件。您可以使用主密钥或复合密钥。这将为您提供与这些键不匹配的行。然后,您需要在键匹配的地方再编写一个查询,即交叉点,但在其他列中不匹配。为此w.r.t键编写一个内部联接,其中table1.colA!=表

except()
函数在spark work中比较两个数据帧并从第一个数据帧返回不匹配的记录


然而,我想田径场的细节也,这是不匹配的。如何在spark中完成它??请按照所述提供帮助,除非会导致行完全不匹配。所以我建议使用leftanti-join而不是Exception,并使用一个或多个连接键作为条件。您可以使用主密钥或复合密钥。这将为您提供与这些键不匹配的行。然后,您需要在键匹配的地方再编写一个查询,即交叉点,但在其他列中不匹配。为此w.r.t键编写一个内部联接,其中table1.colA!=表2.1在案例条件下,所有字段都是这样