From f5ae5402c3d75c7358146606b8ff8d38d3907ebd Mon Sep 17 00:00:00 2001 From: kazu634 Date: Sun, 10 May 2020 22:56:20 +0700 Subject: [PATCH] =?UTF-8?q?=E8=A8=98=E4=BA=8B=E3=81=AE=E8=BF=BD=E5=8A=A0?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit --- .../2020-05-10-jupyter-on-kubernetes.md | 193 ++++++++++++++++++ 1 file changed, 193 insertions(+) create mode 100644 content/labs/jupyter/2020-05-10-jupyter-on-kubernetes.md diff --git a/content/labs/jupyter/2020-05-10-jupyter-on-kubernetes.md b/content/labs/jupyter/2020-05-10-jupyter-on-kubernetes.md new file mode 100644 index 0000000..b8261d4 --- /dev/null +++ b/content/labs/jupyter/2020-05-10-jupyter-on-kubernetes.md @@ -0,0 +1,193 @@ ++++ +title = "Kubernetes上でJupyterを稼働させる" +date = 2020-05-10T18:12:22+08:00 +Description = "GolangからOLEを利用することでOutlookを操作してみました。" +Tags = [] +Categories = ["python", "jupyter", "kubernetes"] ++++ + +Udemyがバーゲンをしていることに気づいたため、日本のゴールデンウィーク期間中は「[【ゼロから始めるデータ分析】 ビジネスケースで学ぶPythonデータサイエンス入門](https://www.udemy.com/course/optworks_1/)」でお勉強をしています。まだ終わっていません。。 + +この講座は`Jupyter`を用いてデータ分析を進める形でしたので、お家Kubernetes上に`Jupyter`を稼働させることとしました。 + +## JupyterのDockerイメージを探す +[JupyterのDockerイメージまとめ - Qiita](https://qiita.com/kshigeru/items/ea174d6bcacc474f2a51)でまとめられています。今回は、`datascience-notebook`を使うことにしました。 + +## JupyterのDockerイメージに日本語フォントを導入する +[Jupyterのmatplotlibを使用する際の日本語豆腐を解決 - Qiita](https://qiita.com/Gvling/items/29516eebccf527e7be5d)を参考にして、日本語フォントを導入します: + +``` +FROM jupyter/datascience-notebook + +COPY ./ipag.ttf /opt/conda/lib/python3.7/site-packages/matplotlib/mpl-data/fonts/ttf/ipag.ttf + +RUN echo "font.family : IPAGothic" >> /opt/conda/lib/python3.7/site-packages/matplotlib/mpl-data/matplotlibr +c + +# Delete font cache +RUN rm -r ./.cache +``` + +## Kubernetesの設定 +Kubernetesの設定をまとめます。 + +### Persistent Volume +Persistent Volumeはお家NASからNFSで領域を確保しています。 + +``` +apiVersion: v1 +kind: PersistentVolume +metadata: + name: nfs-jupyter-work + namespace: jupyter + labels: + name: nfs-jupyter-work + annotations: + volume.beta.kubernetes.io/storage-class: "slow" +spec: + capacity: + storage: 25Gi + accessModes: + - ReadWriteMany + persistentVolumeReclaimPolicy: Retain + mountOptions: + - nfsvers=4.1 + nfs: + server: 192.168.10.200 + path: /volume1/Shared/kubernetes/jupyter/work +--- +apiVersion: v1 +kind: PersistentVolume +metadata: + name: nfs-jupyter-config + namespace: jupyter + labels: + name: nfs-jupyter-config + annotations: + volume.beta.kubernetes.io/storage-class: "slow" +spec: + capacity: + storage: 25Gi + accessModes: + - ReadWriteMany + persistentVolumeReclaimPolicy: Retain + mountOptions: + - nfsvers=4.1 + nfs: + server: 192.168.10.200 + path: /volume1/Shared/kubernetes/jupyter/config +``` + +### Persistent Volume Claim +確保したPersistent Volumeから、領域を確保します。 + +``` +apiVersion: v1 +kind: PersistentVolumeClaim +metadata: + name: jupyter-claim-work + namespace: jupyter + annotations: + volume.beta.kubernetes.io/storage-class: "slow" +spec: + accessModes: + - ReadWriteMany + resources: + requests: + storage: 25Gi + selector: + matchLabels: + name: nfs-jupyter-work +--- +apiVersion: v1 +kind: PersistentVolumeClaim +metadata: + name: jupyter-claim-config + namespace: jupyter + annotations: + volume.beta.kubernetes.io/storage-class: "slow" +spec: + accessModes: + - ReadWriteMany + resources: + requests: + storage: 25Gi + selector: + matchLabels: + name: nfs-jupyter-config +``` + +### Deployment +Deploymentの設定で、`Jupyter`のコンテナをデプロイします。レプリカの数は1個にしています。おそらく複数コンテナを起動しても、ステートレスに接続できないと考えたためです。 + +``` +apiVersion: apps/v1 +kind: Deployment +metadata: + name: jupyter + namespace: jupyter + labels: + app: jupyter +spec: + replicas: 1 + selector: + matchLabels: + app: jupyter + template: + metadata: + labels: + app: jupyter + spec: + containers: + - name: jupyter + image: reg.kazu634.com/kazu634/jupyter + ports: + - containerPort: 8888 + env: + - name: CHOWN_HOME + value: "yes" + - name: CHOWN_HOME_OPTS + value: "-R" + - name: GRANT_SUDO + value: "yes" + volumeMounts: + - mountPath: /home/jovyan/work + name: docker-jupyter-work + readOnly: false + - mountPath: /home/jovyan/.jupyter + name: docker-jupyter-config + readOnly: false + volumes: + - name: docker-jupyter-work + persistentVolumeClaim: + claimName: jupyter-claim-work + - name: docker-jupyter-config + persistentVolumeClaim: + claimName: jupyter-claim-config +``` + +### serviceの設定 +serviceの設定は以下になります。プライベートIPアドレスの`192.168.10.210/24`でアクセスできるようにしています。ポート番号は80にしました。 + +``` +apiVersion: v1 +kind: Service +metadata: + name: jupyter + namespace: jupyter +spec: + ports: + - name: http + port: 80 + protocol: TCP + targetPort: 8888 + selector: + app: jupyter + type: LoadBalancer + loadBalancerIP: 192.168.10.210 +``` + +## 動作確認 +自宅ネットワークにいる状態でアクセスしたら、無事に接続できました。 + +Untitled \ No newline at end of file