Java 使用coalesce（1）将数据集写入s3会花费太多时间

我使用coalesce（1）在csv进程中的s3存储桶中编写记录集。 这对505条记录来说花费了太多的时间

dataset.coalesce(1).write().csv("s3a://bucketname/path");

在写这篇文章之前，我想提一下，我有一个加密过程，它改变了数据集行中一些字段的值。在这里，我使用了重新分区（200）。作为

如果我跳过了加密过程，那么编写过程甚至不需要一分钟。
导致进程减慢的问题是什么？

---

如何提高性能？

始终避免使用coalesce（1）而不是使用partition by，我认为用于加密数据的函数需要花费大量时间，因为它必须遍历所有记录，您可以将其更改为平面映射并检查性能

请你检查一下

---

欢迎来到社区，如果有用，请接受答案。

如果需要澄清，请询问

dataset.javaRDD().repartition(200).map(r -> func());