Azure 在HDInsight群集资源调配上向ADL授予访问权限的更快方法?
我有一个Azure Data Lake Store(ADLS),其中包含约100k个文件,我需要从HDInsight群集访问这些文件进行分析。当我通过Azure Portal配置集群时,我将此ADL用于集群的存储,并使用服务主体+“数据湖存储访问”功能为ADL上的所有文件分配rwx权限。此功能似乎一次授予对每个文件的访问权限,速度约为每分钟2k:仅授予权限就需要一个多小时Azure 在HDInsight群集资源调配上向ADL授予访问权限的更快方法?,azure,azure-hdinsight,azure-data-lake,Azure,Azure Hdinsight,Azure Data Lake,我有一个Azure Data Lake Store(ADLS),其中包含约100k个文件,我需要从HDInsight群集访问这些文件进行分析。当我通过Azure Portal配置集群时,我将此ADL用于集群的存储,并使用服务主体+“数据湖存储访问”功能为ADL上的所有文件分配rwx权限。此功能似乎一次授予对每个文件的访问权限,速度约为每分钟2k:仅授予权限就需要一个多小时 有没有一种更快的方法可以在其关联的ADL上授予新群集rwx权限?是的,有更好的方法可以设置所有这些。您需要一次性将Azure
有没有一种更快的方法可以在其关联的ADL上授予新群集rwx权限?是的,有更好的方法可以设置所有这些。您需要一次性将Azure Active Directory组的权限添加到您的所有文件和文件夹中。设置好后,无论何时创建新的HDInsight群集,只需将服务主体设置为组成员即可 因此,总结一下: