首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

minikube运行sparkPi

spark-on-k8s是spark执行任务的一种方式,当然还有spark-on-yarn等,本文讲述下spark-on-k8s的入门级操作流程,使用的是minikube来搭建单机版的k8s环境,好了废话不多说了...,直接如主题: 1、安装minikube环境(本文用到的是1.15.1版本) 进入https://github.com/kubernetes/minikube/releases/tag/v1.15.1页面下载系统对应的...minikube版本,博主用的是ubuntu系统,所以下载 minikube-linux-amd64文件即可 2、下载完minikube-linux-amd64后改名为minikube,放在/usr/...local/bin目录下,通过chmod +x minikube赋予可执行特性,执行minikube version验证执行结果: 3、下载spark代码:https://downloads.apache.org...:(6G内存,3个CPU),这个配置参考的是spark官网给出的推荐配置https://spark.apache.org/docs/latest/running-on-kubernetes.html minikube

64010
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Ubuntu 中安装 minikube,处理启动错误

    按照官网的文档来,https://minikube.sigs.k8s.io/docs/start/ 执行下面的命令安装 minikube curl -LO https://storage.googleapis.com.../minikube/releases/latest/minikube-linux-amd64 sudo install minikube-linux-amd64 /usr/local/bin/minikube...我这里记录一下遇到的问题: 可能是我这里安装过,后来又不能用了,导致这次安装好之后一直无法使用,经过网上查询别人遇到的同样的问题,经过测试,知道删除 ~/.minikube 后,再使用minikube...使用minikube dashboard --url --alsologtostderr -v=1 来启动dashboard,我这里报的错误是 一直停在 正在验证 proxy 运行状况, 控制台输出如下...dashboard --url 发现成功的输出了管理界面的url ~ minikube dashboard --url 正在验证 dashboard

    2.2K20

    minikube刚踩过的那些坑——更新

    minikube使用virtualbox创建host only虚拟网络 用过docker machine的朋友,使用minikube后就能感觉到它其实跟docker machine很像,默认都是使用virtualbox...由于我之前通过vagrant创建过很多虚拟机,虽然都已经destroy了,但对应的虚拟网络会残留下来,结果在使用minikube start的时候,发生了以下的错误: ? ?...大概意思就是minikube需要创建并使用一个192.168.60.1网段的虚拟网络,但现在这个网段已经被占用了,必须删除原有创建的。...再次运行minikube start,不再报错了,成功创建了虚拟机。处于好奇,使用vboxmanager list hostonlyif查看了minikube创建的虚拟网络: ? ?...而本身这个错其实不会影响minikube的创建,minikube默认的使用网段是192.168.99.1。所以是因为引用了其他库的代码导致了主项目发生了逻辑上不怎么合理的错误。

    1.1K20
    领券