Azure 我们是否应该在完成后删除DataLake分析作业?

Azure 我们是否应该在完成后删除DataLake分析作业?,azure,azure-data-lake,u-sql,Azure,Azure Data Lake,U Sql,我们非常频繁地提交U-SQL作业,我们可以看到以前在ADLA中提交的作业列表 我们看到Data Lake store的总存储利用率正在日益提高。我们提交的所有作业只更新一个输出文件,大小约为10 MB Data Lake store当前的存储利用率为9.3 GB。我们认为这是由于以前的工作资源仍然保存在数据湖中。我们应该处理这个问题还是在这里做点什么?我认为工作数据在几周后过期,但如果您担心,不需要用于审计或调查的数据,请随时删除它们 考虑到商店没有限制,并且根据当前的定价网站,存储成本为4c/

我们非常频繁地提交U-SQL作业,我们可以看到以前在ADLA中提交的作业列表

我们看到Data Lake store的总存储利用率正在日益提高。我们提交的所有作业只更新一个输出文件,大小约为10 MB


Data Lake store当前的存储利用率为9.3 GB。我们认为这是由于以前的工作资源仍然保存在数据湖中。我们应该处理这个问题还是在这里做点什么?

我认为工作数据在几周后过期,但如果您担心,不需要用于审计或调查的数据,请随时删除它们


考虑到商店没有限制,并且根据当前的定价网站,存储成本为4c/GB/月,这并不是一个很大的成本。

您可以访问/system/jobservice/jobs/usql/year/month/date。。请随意删除您不再需要的文件夹

谢谢Micheal,这些信息很有用。嗨,Michael,在我们的情况下,工作数据不会过期。结果,azure data lake的总存储利用率飙升至500GB,作业总数约为5000个。所以我们想清理旧工作,我们怎么做?我看不到删除作业的删除按钮。@Saratrachuri:通常“作业数据”可以扣到“作业列表”和“作业资源”上。“工作列表”数据在帐户中不占用任何空间,也不计费。作业资源占用空间,但它们将在30天后过期(一段时间前,这已从“无过期”更改为“无过期”)。如果您愿意,请将您的帐户名(微软的mrys)通过电子邮件发送给我,我们可以看看根本原因是什么。此外,您还可以在作业完成后自行删除作业文件夹中的数据(不建议提前删除)。谢谢,这很有帮助。我删除了指定的文件夹,总存储利用率从500GB降至100GB。