MicroK8s及KubeFlow安装文档

安装简单的k8s大约有三种思路:minikube,microk8s,kubeadm。minikube 虽然是官方出品,但主要仍是基于虚拟机作的设计。在 Linux 生产环境下,microk8s 多是一个更合适的选择,它的主要组件是基于二进制包启动。javascript

microk8s 基于 snap 进行安装,ubuntu 16.04 及以后的版本都已经预装了 snap,若是是其余发行版的 Linux 须要先安装 snap。css

一,SNAP安装

Snap是Canonical推出的一种新的软件打包格式,完全解决linux依赖性的问题,Snap 软件包拥有更加稳定和安全的特性。html

官网URL:https://docs.snapcraft.io/installing-snap-on-centosjava

 

# 安装EPELnode

sudo yum install epel-releasejquery

# 安装snapdlinux

sudo yum install snapdgit

# 添加snap,启动通讯socketgithub

sudo systemctl enable --now snapd.socketweb

# 建立软链

sudo ln -s /var/lib/snapd/snap /snap

 

 

 

二,Snap经常使用命令

# 列出已经安装的snap包

sudo snap list

# 搜索要安装的snap包

sudo snap find <text to search>

# 搜索要安装的snap包

sudo snap install <snap name>

# 删除一个snap包

sudo snap remove <snap name>

 

 

 

三,MicroK8s安装

经过 microk8s 能够很是快速的搭建起一个 Kubernetes 单机环境,安装极其很是方便,经过 snap 命令一键安装,可用测试,快速原型及CI/CD。

官方URL:https://microk8s.io/

 

1,单独安装microk8s

# 安装1.14稳定版microk8s

sudo snap install microk8s --classic --channel=1.14/stable

# 启用microk8s的DNS,存储和面板功能

sudo microk8s.enable dns dashboard storage

# 启动microk8s

sudo microk8s.start

# 查看microk8s状态

sudo microk8s.status

# 中止microk8s服务

sudo smicrok8s.stop

# 查看集群信息

sudo microk8s.kubectl cluster-info

# 查看集群节点

sudo microk8s.kubectl get nodes

# 命令别名

sudo snap alias microk8s.kubectl kubectl

2,脚本安装microk8s

因为本次安装microk8s主要是为了和kubeflow进行集成使用,因此使用更为方便的脚本安装。

Kubeflow推荐的脚本:https://github.com/canonical-labs/kubernetes-tools

安装脚本:

sudo kubernetes-tools/setup-microk8s.sh

安装过程以下图示:

 

***注意,因为此脚本安装dashborad时,使用了token,登录时会增长操做步骤。为更方便测试,须要对脚本内容进行裁剪,禁用microm8s的dashboard功能(脚本里去除dashaboard或是microk8s命令禁用)。

dashboard的deployment及service使用了我本身提供的以下方案。

apiVersion: v1

kind: ServiceAccount

metadata:

  labels:

    k8s-app: kubernetes-dashboard

  name: kubernetes-dashboard

  namespace: kube-system

---

apiVersion: rbac.authorization.k8s.io/v1

kind: ClusterRoleBinding

metadata:

  name: kubernetes-dashboard

roleRef:

  apiGroup: rbac.authorization.k8s.io

  kind: ClusterRole

  name: cluster-admin

subjects:

- kind: ServiceAccount

  name: kubernetes-dashboard

  namespace: kube-system

---

kind: Deployment

apiVersion: apps/v1beta2

metadata:

  labels:

    k8s-app: kubernetes-dashboard

  name: kubernetes-dashboard

  namespace: kube-system

spec:

  replicas: 1

  revisionHistoryLimit: 3

  selector:

    matchLabels:

      k8s-app: kubernetes-dashboard

  template:

    metadata:

      labels:

        k8s-app: kubernetes-dashboard

    spec:

      containers:

      - name: kubernetes-dashboard

        image: k8s.gcr.io/kubernetes-dashboard-amd64:v1.10.1

        ports:

        - containerPort: 9090

          protocol: TCP

        livenessProbe:

          httpGet:

            path: /

            port: 9090

          initialDelaySeconds: 25

          timeoutSeconds: 30

      serviceAccountName: kubernetes-dashboard

---

kind: Service

apiVersion: v1

metadata:

  labels:

    k8s-app: kubernetes-dashboard

  name: kubernetes-dashboard

  namespace: kube-system

spec:

  type: NodePort

  ports:

    - port: 80

      targetPort: 9090

      nodePort: 32766

  selector:

    k8s-app: kubernetes-dashboard

 

 

 

四,Kubeflow安装

Kubeflow是目前基于Kubernetes的主流机器学习解决方案,它抽象了和机器学习相关的PS-Worker模型,实现了一套pipeline的工做流,支持超参数训练和Jupyter notebooks集成等能力。

官网URL:https://www.kubeflow.org/

 

1,脚本安装kubeflow

本次安装参考url: https://www.kubeflow.org/docs/started/getting-started-multipass/

Kubeflow推荐的脚本:https://github.com/canonical-labs/kubeflow-tools

安装脚本:

sudo kubeflow-tools/install-kubeflow.sh

安装过程以下所示

 

2,镜像获取

上图中,有些kubeflow的pod已开始running,但有些pod一直处于ImagePullBackOff状态,这是由于这批镜像都是放在gcr.io域名仓库中,须要特别上网才能访问。

在这种状况下,根据网上的资料,咱们以dockerhub为中继,将须要的docker镜像展转拉取,直至全部镜像成功启动。

 

 

3,更新jupyter-web-app镜像

当一切就绪之,若是咱们访问kubeflow的notebook服务时,发现仍是没法正常使用jupyterhub功能。分析浏览器错误,才发现是一个网页内的jquery库,引用的是googleapis的地址,因而,还须要从新将涉及的layout.html更改以后生成新的镜像。

 

       Dockerfile内容:

FROM gcr.io/kubeflow-images-public/jupyter-web-app:v0.5.0

COPY layout.html /app/kubeflow_jupyter/default/templates/

COPY layout.html /app/kubeflow_jupyter/rok/templates/

 

       Layout.html更新后的内容:

 

<!DOCTYPE html>

<html>

<head>

  <!-- Required meta tags -->

  <meta charset="utf-8">

  <meta name="viewport" content="width=device-width, initial-scale=1, shrink-to-fit=no">

 

  <!-- Material Design Lite -->

  <link rel="stylesheet" href="https://fonts.googleapis.com/icon?family=Material+Icons">

  <link rel="stylesheet" href="https://code.getmdl.io/1.3.0/material.blue-pink.min.css">

  <script src="https://code.getmdl.io/1.3.0/material.min.js"></script>

 

  <!-- UI Specific -->

  <script src="https://cdn.bootcss.com/jquery/3.3.1/jquery.min.js"></script>

 

  <link rel="stylesheet" href="https://use.fontawesome.com/releases/v5.3.1/css/all.css">

  <link rel="shortcut icon" href="{{ prefix + url_for('static', filename='kubeflow.png') }}">

  <link rel="stylesheet" href="{{ prefix + url_for('static', filename='css/main.css') }}">

 

  <!-- Dialogs -->

  <link rel="stylesheet" href="{{ prefix + url_for('static', filename='css/dialog.css') }}"">

  <script src="{{ prefix + url_for('static', filename='js/dialog.js') }}"></script>

 

  {% if title %}

      <title>Kubeflow Jupyter - {{ title }}</title>

  {% else %}

      <title>Kubeflow Jupyter</title>

  {% endif %}

 

  {% block javascript %}

    <script type="text/javascript">

      var prefix = "{{ prefix }}";

    </script>

  {% endblock %}

</head>

<body>

  <div class='parent errors'>

    <div class="spacer"></div>

    <div id="error-msgs"></div>

    <div class="spacer"></div>

  </div>

  <div class="page-content">

    {% block content %}{% endblock %}

  </div>

</body>

</html>

 

最终,便可正常使用这一功能了。

 

相关文章
相关标签/搜索