Google cloud platform Dataprep-处理后缺少行

我的csv包含150万行。我准备了数据准备工作，解析数据并将其存储到BQ（或CSV）。但经过处理后，我有将近一半的行丢失（大约700k）。当我在没有任何配方步骤的情况下运行此Dataprep作业时，我得到了相同的错误行数

我做了分析，输入的数据看起来是正确的。我过滤了输出中缺少的一些数据子集，并且正确导入了这个小子集

---

难道输出中没有类似于数据采样的东西吗？是什么原因导致我的行丢失。

我建议查看以下文档：您可以在其中找到有关查找丢失数据的信息。此外，请查看并下载已完成作业的结果。您以前遇到过这种行为吗？如果你发现有什么有意义的东西，请告诉我。你可以试试过滤器。您所需要做的就是在应用配方后收集此样本，并查找缺少的值。这将告诉您在写入最终输出之前或写入之后是否缺少值。我建议您查看以下文档：在哪里可以找到有关查找缺少数据的信息。此外，请查看并下载已完成作业的结果。您以前遇到过这种行为吗？如果你发现有什么有意义的东西，请告诉我。你可以试试过滤器。您所需要做的就是在应用配方后收集此样本，并查找缺少的值。这将告诉您在写入最终输出之前或写入之后是否缺少值