Skip to main content

在 Kubernetes 中使用 JuiceFS 的动态配置方法

本文档展示了如何在 pod 内安装动态配置的 JuiceFS volume。

准备工作

在 Kubernetes 中创建 CSI Driver 的 Secret,社区版和云服务版所需字段有所区别,分别如下:

社区版

以 Amazon S3 为例:

kubectl -n default create secret generic juicefs-secret \
--from-literal=name=<NAME> \
--from-literal=metaurl=redis://[:<PASSWORD>]@<HOST>:6379[/<DB>] \
--from-literal=storage=s3 \
--from-literal=bucket=https://<BUCKET>.s3.<REGION>.amazonaws.com \
--from-literal=access-key=<ACCESS_KEY> \
--from-literal=secret-key=<SECRET_KEY>

其中:

  • name:JuiceFS 文件系统名称
  • metaurl:元数据服务的访问 URL (比如 Redis)。更多信息参考这篇文档
  • storage:对象存储类型,比如 s3gsoss。更多信息参考这篇文档
  • bucket:Bucket URL。更多信息参考这篇文档
  • access-key:对象存储的 access key。
  • secret-key:对象存储的 secret key。

用您自己的环境变量替换由 <> 括起来的字段。 [] 中的字段是可选的,它与您的部署环境相关。

您应该确保:

  1. access-keysecret-key 对需要有对象存储 bucket 的 GetObjectPutObjectDeleteObject 权限。
  2. Redis DB 是干净的,并且 password(如果有的话)是正确的

云服务版

kubectl -n default create secret generic juicefs-secret \
--from-literal=name=${JUICEFS_NAME} \
--from-literal=token=${JUICEFS_TOKEN} \
--from-literal=accesskey=${JUICEFS_ACCESSKEY} \
--from-literal=secretkey=${JUICEFS_SECRETKEY}

其中:

  • name:JuiceFS 文件系统名称
  • token:JuiceFS 管理 token。更多信息参考这篇文档
  • accesskey:对象存储的 Access key。
  • secretkey:对象存储的 Secret key。

您应该确保 accesskeysecretkey 对需要有对象存储 bucket 的 GetObjectPutObjectDeleteObject 权限。

部署

创建 StorageClass、PersistentVolumeClaim (PVC) 和示例 pod

kubectl apply -f - <<EOF
apiVersion: storage.k8s.io/v1
kind: StorageClass
metadata:
name: juicefs-sc
namespace: default
provisioner: csi.juicefs.com
parameters:
csi.storage.k8s.io/provisioner-secret-name: juicefs-secret
csi.storage.k8s.io/provisioner-secret-namespace: default
csi.storage.k8s.io/node-publish-secret-name: juicefs-secret
csi.storage.k8s.io/node-publish-secret-namespace: default
---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name: juicefs-pvc
namespace: default
spec:
accessModes:
- ReadWriteMany
resources:
requests:
storage: 10Pi
storageClassName: juicefs-sc
---
apiVersion: v1
kind: Pod
metadata:
name: juicefs-app
namespace: default
spec:
containers:
- args:
- -c
- while true; do echo $(date -u) >> /data/out.txt; sleep 5; done
command:
- /bin/sh
image: centos
name: app
volumeMounts:
- mountPath: /data
name: juicefs-pv
volumes:
- name: juicefs-pv
persistentVolumeClaim:
claimName: juicefs-pvc
EOF

检查使用的 JuiceFS 文件系统

当所有的资源创建好之后,确认 pod 状态是 running:

kubectl get pods

确认数据被正确地写入 JuiceFS 文件系统中:

kubectl exec -ti juicefs-app -- tail -f /data/out.txt