Google cloud platform 在google composer中安装hadoopy
我正在使用Google cloud platform 在google composer中安装hadoopy,google-cloud-platform,airflow,google-cloud-composer,hadoopy,Google Cloud Platform,Airflow,Google Cloud Composer,Hadoopy,我正在使用googlecomposer 如何在googlecomposer环境中安装hadoopy 此页面包含Linux机器中hadoopy的步骤 Github克隆 git clone https://github.com/bwhite/hadoopy.git cd hadoopy sudo python setup.py install PIP安装 sudo pip install -e git+https://github.com/bwhite/hadoopy#egg=hadoopy 我
googlecomposer
如何在googlecomposer环境中安装hadoopy
此页面包含Linux机器中hadoopy的步骤
Github克隆
git clone https://github.com/bwhite/hadoopy.git
cd hadoopy
sudo python setup.py install
PIP安装
sudo pip install -e git+https://github.com/bwhite/hadoopy#egg=hadoopy
我不知道如何在Google Composer环境中安装此软件包,该软件包似乎在上可用。因此,您可以通过web UI(composer环境>Pypi软件包选项卡>编辑>添加==
)安装它。也可以通过命令行执行此操作:
gcloud composer环境更新ENVIRONMENT-NAME\
--从文件requirements.txt更新pypi包\
--位置
requirements.txt
应该包含如下内容:
hadoopy==0.6.0
请注意,安装依赖项可能相当长(Composer需要使用附带的包重新生成Docker映像)
如果您想直接从Github上的源添加依赖项,则必须遵循文档中描述的步骤:。该软件包似乎在上可用。因此,您可以通过web UI(composer环境>Pypi软件包选项卡>编辑>添加==
)安装它。也可以通过命令行执行此操作:
gcloud composer环境更新ENVIRONMENT-NAME\
--从文件requirements.txt更新pypi包\
--位置
requirements.txt
应该包含如下内容:
hadoopy==0.6.0
请注意,安装依赖项可能相当长(Composer需要使用附带的包重新生成Docker映像)
如果要直接从Github上的源添加依赖项,则必须遵循文档中描述的步骤: