Sparkyr k8s gClouid-豆荚是';t运行
每个人Sparkyr k8s gClouid-豆荚是';t运行,r,apache-spark,kubernetes,gcloud,sparklyr,R,Apache Spark,Kubernetes,Gcloud,Sparklyr,每个人 正如标题所说,我很想知道为什么我不能使用kubernetes通过Sparkyr连接到gCloud集群 配置系统的步骤如下所示: 在gCloud上创建项目(免费版300美元) MacOS上的云SDK安装 在MacOS上安装带curl的Kubectl二进制文件 Docker安装 通过终端: 配置群集 gcloud配置集计算/区域us-central1-f gcloud容器集群在gke上产生火花——机器类型n1-standard-2 将群集管理员绑定到电子邮件 kubectl创建cluste
正如标题所说,我很想知道为什么我不能使用kubernetes通过Sparkyr连接到gCloud集群 配置系统的步骤如下所示:
- 在gCloud上创建项目(免费版300美元)
- MacOS上的云SDK安装
- 在MacOS上安装带curl的Kubectl二进制文件
- Docker安装
- 通过终端:
- 配置群集
gcloud配置集计算/区域us-central1-f gcloud容器集群在gke上产生火花——机器类型n1-standard-2
- 将群集管理员绑定到电子邮件
kubectl创建clusterrolebinding用户管理绑定--clusterrole=cluster admin--user=pesca@gmail.com kubectl create clusterrolebinding--clusterrole=cluster admin--serviceaccount=default:default spark admin
- 从R connect到MASTER_IP,导入jluraschi提供的公共映像
remotes::安装github(“rstudio/sparkyr”);库(sparkyr)
非常感谢您的回答!
在代码末尾,您还将看到使用gcloud制作的pod配置的屏幕截图。以下是终端的结果:MBP-di-Simone:~ simone$ kubectl get services NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE kubernetes ClusterIP 10.3.240.1 <none> 443/TCP 13d MBP-di-Simone:~ simone$ kubectl get pods --all-namespaces NAMESPACE NAME READY STATUS RESTARTS AGE default alpine 1/1 Running 0 13d kube-system event-exporter-v0.2.4-5f88c66fb7-67pb6 2/2 Running 0 13d kube-system fluentd-gcp-scaler-59b7b75cd7-mbgxj 1/1 Running 0 13d kube-system fluentd-gcp-v3.2.0-9dlx8 2/2 Running 0 5d8h kube-system fluentd-gcp-v3.2.0-9w6t2 2/2 Running 0 5d8h kube-system fluentd-gcp-v3.2.0-dwrlz 2/2 Running 0 5d8h kube-system heapster-5f6cdd4bd-qmlhb 3/3 Running 0 13d kube-system kube-dns-79868f54c5-5sqvb 4/4 Running 0 13d kube-system kube-dns-79868f54c5-g9h4q 4/4 Running 0 13d kube-system kube-dns-autoscaler-bb58c6784-9bbcg 1/1 Running 0 13d kube-system kube-proxy-gke-spark-on-gke-default-pool-7fad1be1-2279 1/1 Running 0 13d kube-system kube-proxy-gke-spark-on-gke-default-pool-7fad1be1-70hn 1/1 Running 0 13d kube-system kube-proxy-gke-spark-on-gke-default-pool-7fad1be1-pnpj 1/1 Running 0 13d kube-system l7-default-backend-fd59995cd-8tzjv 1/1 Running 0 13d kube-system metrics-server-v0.3.1-57c75779f-gz776 2/2 Running 0 13d kube-system prometheus-to-sd-ktvbk 2/2 Running 0 13d kube-system prometheus-to-sd-tmwkw 2/2 Running 0 13d kube-system prometheus-to-sd-xxx4p 2/2 Running 0 13d MBP-di-Simone:~ simone$ kubectl describe pods [sparklyr-2e62d04d5dd] Error from server (NotFound): pods "[sparklyr-2e62d04d5dd]" not found MBP-di-Simone:~ simone$
MBP di Simone:~Simone$kubectl获取服务 名称类型CLUSTER-IP外部IP端口年龄 kubernetes ClusterIP 10.3.240.1 443/TCP 13d MBP di Simone:~Simone$kubectl获取pods——所有名称空间 名称空间名称 就绪状态重新开始使用 默认高山1/1运行0 13d kube系统事件-exporter-v0.2.4-5f88c66fb7-67pb6 2/2运行0 13d kube系统fluentd-gcp-scaler-59b7b75cd7-mbgxj 1/1运行0 13d kube系统fluentd-gcp-v3.2.0-9dlx8 2/2运行0 5d8h kube系统fluentd-gcp-v3.2.0-9w6t2 2/2运行0 5d8h kube系统fluentd-gcp-v3.2.0-dwrlz 2/2运行0 5d8h kube系统heapster-5f6cdd4bd-qmlhb 3/3运行0 13d kube系统kube-dns-79868f54c5-5sqvb 4/4运行0 13d kube系统kube-dns-79868f54c5-g9h4q 4/4运行0 13d kube系统kube-dns-autoscaler-bb58c6784-9bbcg 1/1运行0 13d kube系统kube-proxy-gke-spark-on-gke-default-pool-7fad1be1-2279 1/1运行0 13d kube系统kube-proxy-gke-spark-on-gke-default-pool-7fad1be1-70hn 1/1运行0 13d kube系统kube-proxy-gke-spark-on-gke-default-pool-7fad1be1-pnpj 1/1运行0 13d kube系统l7-default-backend-fd59995cd-8tzjv 1/1运行0 13d kube system metrics-server-v0.3.1-57c75779f-gz776 2/2运行0 13d kube系统prometheus至sd ktvbk 2/2运行0 13d kube系统prometheus至sd tmwkw 2/2运行0 13d kube系统prometheus-to-sd-xxx4p 2/2运行0 13d 西蒙尼的MBP:~Simone$kubectl描述吊舱[Sparkyr-2e62d04d5dd] 服务器错误(未找到):未找到播客“[Sparkyr-2e62d04d5dd]” 西蒙尼:西蒙尼$
您可以分享以下命令的执行情况吗?“kubectl get services kubectl get pods--所有名称空间kubectl描述pods[无法连接的pod名称]”您可以详细说明如何公开“Sparkyr-c27317e4b89”吗“豆荚?对不起,我来晚了。我没有收到评论通知。我试着跑,下面是结果。非常感谢你!