【雲原生】Minio on k8s 講解與實戰操作

語言: CN / TW / HK
時間 2022-11-17 06:15:28

一、概述

MinIO 是在 GNU Affero 通用公共許可證 v3.0 下發布的高效能物件儲存。它與 Amazon S3 雲端儲存服務 API 相容。使用 MinIO 為機器學習、分析和應用程式資料工作負載構建高效能基礎架構。

官方文件：https://docs.min.io/
中文文件：http://docs.minio.org.cn/docs/
GitHub地址：https://github.com/minio/minio/

想了解更多關於minio也可以參考我以下幾篇文章： - 高效能分散式物件儲存——MinIO（環境部署） - 高效能分散式物件儲存——MinIO實戰操作（MinIO擴容）

在這裡插入圖片描述

二、開始編排部署

因為minio是有chart包，所以這裡就基於現有的chart包進行改造。

1）下載chart 包

bash helm repo add bitnami https://charts.bitnami.com/bitnami helm pull bitnami/minio --version 11.10.16 tar -xf minio-11.10.16.tgz

2）構建映象

這裡就不重新構建映象了，只是把遠端的包推送到本地harbor倉庫，如有不知道怎麼構建映象的小夥伴，歡迎留言或私信。

```bash docker pull docker.io/bitnami/minio:2022.11.11-debian-11-r0 docker tag docker.io/bitnami/minio:2022.11.11-debian-11-r0 myharbor.com/bigdata/minio:2022.11.11-debian-11-r0 docker push myharbor.com/bigdata/minio:2022.11.11-debian-11-r0

docker pull docker.io/bitnami/minio-client:2022.11.7-debian-11-r0 docker tag docker.io/bitnami/minio-client:2022.11.7-debian-11-r0 myharbor.com/bigdata/minio-client:2022.11.7-debian-11-r0 docker push myharbor.com/bigdata/minio-client:2022.11.7-debian-11-r0 ```

3）修改yaml編排

  • minio/values.yaml

```bash image: registry: myharbor.com repository: bigdata/minio tag: 2022.11.11-debian-11-r0

clientImage: registry: myharbor.com repository: bigdata/minio-client tag: 2022.11.7-debian-11-r0

standalone or distributed

mode: distributed

登入賬號，密碼

auth: rootUser: admin rootPassword: "admin12345"

statefulset: ## @param statefulset.replicaCount Number of pods per zone (only for MinIO® distributed mode). Should be even and >= 4 ## replicaCount: 4

service: ## @param service.type MinIO® service type ## type: NodePort nodePorts: api: "31900" console: "31901"

persistence: enabled: true storageClass: "local-minio-stroage" size: 10Gi local: - name: minio-0 host: "local-168-182-110" path: "/opt/bigdata/servers/minio/data/data1" - name: minio-1 host: "local-168-182-111" path: "/opt/bigdata/servers/minio/data/data1" - name: minio-2 host: "local-168-182-112" path: "/opt/bigdata/servers/minio/data/data1" - name: minio-3 host: "local-168-182-110" path: "/opt/bigdata/servers/minio/data/data2" `` -minio/templates/pv.yaml`

```yaml {{- range .Values.persistence.local }}

apiVersion: v1 kind: PersistentVolume metadata: name: {{ .name }} labels: name: {{ .name }} spec: storageClassName: {{ $.Values.persistence.storageClass }} capacity: storage: {{ $.Values.persistence.size }} accessModes: - ReadWriteOnce local: path: {{ .path }} nodeAffinity: required: nodeSelectorTerms: - matchExpressions: - key: kubernetes.io/hostname operator: In values: - {{ .host }}

{{- end }} ```

4）開始部署

```bash ssh local-168-182-110 mkdir -p /opt/bigdata/servers/minio/data/data{1..2} ssh local-168-182-111 mkdir -p /opt/bigdata/servers/minio/data/data{1..2} ssh local-168-182-112 mkdir -p /opt/bigdata/servers/minio/data/data{1..2}

--dry-run 模擬安裝

--debug 開啟debug

helm install --dry-run --debug minio ./minio -n minio --create-namespace

helm install --debug minio ./minio -n minio --create-namespace ``` NOTES

```bash CHART NAME: minio CHART VERSION: 11.10.16 APP VERSION: 2022.11.11

Please be patient while the chart is being deployed

MinIO® can be accessed via port on the following DNS name from within your cluster:

minio.minio.svc.cluster.local

To get your credentials run:

export ROOT_USER=$(kubectl get secret --namespace minio minio -o jsonpath="{.data.root-user}" | base64 -d) export ROOT_PASSWORD=$(kubectl get secret --namespace minio minio -o jsonpath="{.data.root-password}" | base64 -d)

To connect to your MinIO® server using a client:

  • Run a MinIO® Client pod and append the desired command (e.g. 'admin info'):

kubectl run --namespace minio minio-client \ --rm --tty -i --restart='Never' \ --env MINIO_SERVER_ROOT_USER=$ROOT_USER \ --env MINIO_SERVER_ROOT_PASSWORD=$ROOT_PASSWORD \ --env MINIO_SERVER_HOST=minio \ --image myharbor.com/bigdata/minio-client:2022.11.7-debian-11-r0 -- admin info minio

To access the MinIO® web UI:

  • Get the MinIO® URL:

export NODE_PORT=$(kubectl get --namespace minio -o jsonpath="{.spec.ports[0].nodePort}" services minio) export NODE_IP=$(kubectl get nodes --namespace minio -o jsonpath="{.items[0].status.addresses[0].address}") echo "MinIO® web URL: http://$NODE_IP:$NODE_PORT/minio"

``` 在這裡插入圖片描述 檢視

bash kubectl get pods,svc -n minio -owide 在這裡插入圖片描述

5）測試驗證

web登入：新增連結描述http://local-168-182-110:31901/ 賬號/密碼：admin/admin12345 在這裡插入圖片描述 在這裡插入圖片描述 建立桶並上傳檔案 在這裡插入圖片描述 mc客戶端

```bash

檢視notes

helm get notes minio -n minio

啟動客戶端

export ROOT_USER=$(kubectl get secret --namespace minio minio -o jsonpath="{.data.root-user}" | base64 -d) export ROOT_PASSWORD=$(kubectl get secret --namespace minio minio -o jsonpath="{.data.root-password}" | base64 -d)

kubectl run --namespace minio minio-client \ --rm --tty -i --restart='Never' \ --env MINIO_SERVER_ROOT_USER=$ROOT_USER \ --env MINIO_SERVER_ROOT_PASSWORD=$ROOT_PASSWORD \ --env MINIO_SERVER_HOST=minio \ --image myharbor.com/bigdata/minio-client:2022.11.7-debian-11-r0 -- admin info minio ``` 在這裡插入圖片描述

6）解除安裝

```bash helm uninstall minio -n minio

ssh local-168-182-110 rm -fr /opt/bigdata/servers/minio/data/data{1..2}/ ssh local-168-182-111 rm -fr /opt/bigdata/servers/minio/data/data{1..2}/ ssh local-168-182-112 rm -fr /opt/bigdata/servers/minio/data/data{1..2}/* ```

git 地址：https://gitee.com/hadoop-bigdata/minio-on-k8s

Minio on k8s 講解與實戰操作就先到這裡了，就疑問的小夥伴歡迎給我留言，後續會持續更【雲原生+大資料】相關的文章，請小夥伴耐心等待~

「」
「」