Fatal编程技术网
  • scala/
  • Scala 哪个元素负责数据帧。滴落重复滴落

Scala 哪个元素负责数据帧。滴落重复滴落

scala

Scala 哪个元素负责数据帧。滴落重复滴落,scala,apache-spark-sql,spark-dataframe,scala-collections,Scala,Apache Spark Sql,Spark Dataframe,Scala Collections,如果我根据列对数据帧进行降序排序。然后使用df.dropDuplicate删除副本，然后删除哪个元素？根据排序哪个元素更小 DropDuplicate方法保留第一个元素并删除其他元素 因此，是的，在降序排序时，只有最大的（基于排序）将被保留，其他的将被删除。我认为是的，它应该保留第一个，删除第二个，即删除较小的值。显示我可以保留最后一个元素吗？我无法在没有特定列的情况下对desc进行排序

如果我根据列对数据帧进行降序排序。然后使用df.dropDuplicate删除副本，然后删除哪个元素？根据排序哪个元素更小

DropDuplicate方法保留第一个元素并删除其他元素

因此，是的，在降序排序时，只有最大的（基于排序）将被保留，其他的将被删除。

我认为是的，它应该保留第一个，删除第二个，即删除较小的值。显示我可以保留最后一个元素吗？我无法在没有特定列的情况下对desc进行排序