SSIS并行执行单个平面文件
我有一个大的文本文件（220万行、170列、日期、整数、浮点和varchar）。 我不完全理解如何使用SSI进行并行执行。 我想知道是否有一种方法可以“并行”加载（单个）文件。SSIS并行执行单个平面文件,ssis,Ssis,我有一个大的文本文件（220万行、170列、日期、整数、浮点和varchar）。 我不完全理解如何使用SSI进行并行执行。 我想知道是否有一种方法可以“并行”加载（单个）文件。 例如，我可以让一个“进程”加载行1-1.1m，另一个“进程”加载行1.1m到2.2m吗？我将原始文件拆分为几个较小的文件，并将它们保存在临时文件夹中，因此，您有多个源文件，可以并行运行您的进程。将现有文件拆分为多个源文件的问题在于，您现在需要支付磁盘访问成本，以读取该文件，然后将其全部写回，这不是并行操作，只是为了让自己
例如，我可以让一个“进程”加载行1-1.1m，另一个“进程”加载行1.1m到2.2m吗？我将原始文件拆分为几个较小的文件，并将它们保存在临时文件夹中，因此，您有多个源文件，可以并行运行您的进程。将现有文件拆分为多个源文件的问题在于，您现在需要支付磁盘访问成本，以读取该文件，然后将其全部写回，这不是并行操作，只是为了让自己能够开始处理分割的文件。在这一点上，您将花费至少2倍的时间来读取（读取到拆分，读取拆分）而不是使用。更不用说存储成本的暂时性增长了。您看过平衡数据分发服务器吗？