Azure数据湖与SSIS数据过滤
我正在使用DataLake作为SSIS中的源,但我希望获取或过滤SSIS中的某些特定行。请您建议我们如何在SSIS中过滤Azure data lake数据 您可以在Azure数据湖与SSIS数据过滤,azure,ssis,azure-data-lake,msbi,Azure,Ssis,Azure Data Lake,Msbi,我正在使用DataLake作为SSIS中的源,但我希望获取或过滤SSIS中的某些特定行。请您建议我们如何在SSIS中过滤Azure data lake数据 您可以在数据流中的数据湖存储源之后使用条件拆分或派生列 我不确定要如何筛选某些特定行。我假设like filter具有前两个字符的行为AB (DT_STR,50001252)子字符串([Column 0],1,2)!=“AB” 在这种情况下,Data lake将获取所有记录,但我需要一些来自源代码的特定记录。@RahulJain将您的特定记录
数据流中的数据湖存储源
之后使用条件拆分
或派生列
我不确定要如何筛选某些特定行。我假设like filter具有前两个字符的行为AB
(DT_STR,50001252)子字符串([Column 0],1,2)!=“AB”
在这种情况下,Data lake将获取所有记录,但我需要一些来自源代码的特定记录。@RahulJain将您的特定记录条件放在条件
列中。在我上面的例子中。我已经过滤了以AB开头的记录,它们是(DT_STR,50001252)子字符串([Column 0],1,2)!=“AB”
。您可以定义您的条件,如this@RahulJain我的上述回答对你有帮助吗?请向上投票/接受答案。在这种情况下,我的问题将被考虑,他们不希望将数据提取到Ssis,然后对数据执行筛选。他们希望减少正在获取的行数。我理解对了吗?