Snowflake cloud data platform 功率双增量刷新与雪花

Snowflake cloud data platform 功率双增量刷新与雪花,snowflake-cloud-data-platform,Snowflake Cloud Data Platform,是否有人成功地将PBI增量刷新与Snowflake一起用作数据源?完全刷新我的数据集(无增量刷新)大约需要20分钟,但在启用增量刷新的情况下,数据刷新超时,因为它需要超过120分钟。在Snowflake中查看查询历史记录时,它看起来像是一个“SELECT*”查询在一次又一次地执行,直到超时为止 我看到一些帖子说Snowflake不支持“查询折叠”,而另一些帖子说部分支持 请澄清 我们还尝试了多个选项来检查是否可以为Snowflake Power BI组合启用增量刷新 从Power BI发送的查询

是否有人成功地将PBI增量刷新与Snowflake一起用作数据源?完全刷新我的数据集(无增量刷新)大约需要20分钟,但在启用增量刷新的情况下,数据刷新超时,因为它需要超过120分钟。在Snowflake中查看查询历史记录时,它看起来像是一个“SELECT*”查询在一次又一次地执行,直到超时为止

我看到一些帖子说Snowflake不支持“查询折叠”,而另一些帖子说部分支持


请澄清

我们还尝试了多个选项来检查是否可以为Snowflake Power BI组合启用增量刷新

  • 从Power BI发送的查询的雪花查询历史记录
  • 使用power bi desktop中的诊断功能,该功能将显示是否生成了源查询
  • 这两种情况都表明查询折叠不起作用,因此需要进行增量刷新。我们探讨的另一个选项是,我们是否可以利用Power BI数据流进行增量刷新。但这也没有得到直接支持

    我们还计划再尝试一个“长切口”,这可能有助于我们实现增量刷新:

  • 在power bi和snowflake之间引入Azure ADLS gen2存储
  • 我们需要将需要增量加载到ADL的数据引入
  • 可以利用Power BI数据流从ADL对Power BI数据集进行增量刷新
  • 不知道这对你有多合适。祝你一切顺利

    谢谢,
    Prasanth

    自2020年8月起,使用Snowflake的增量刷新在数据集和数据流中都起作用。已通过雪花中的查询历史进行验证。

    谢谢您,Prasanth,非常感谢您的回复!