在 Kubernetes 中使用 StatefulSet 部署 etcd 集群需要注意以下几个方面。
- 创建一个 ConfigMap
ConfigMap 可以用来存放 etcd 的配置文件,例如 etcd.conf
等。在创建 ConfigMap 时可以指定这些配置文件的内容,例如:
apiVersion: v1
kind: ConfigMap
metadata:
name: etcd-configmap
data:
etcd.conf: |
name: "etcd-cluster"
data-dir: "/var/lib/etcd"
listen-peer-urls: "https://0.0.0.0:2380"
listen-client-urls: "https://0.0.0.0:2379"
initial-advertise-peer-urls: "https://$(hostname -f):2380"
advertise-client-urls: "https://$(hostname -f):2379"
- 创建一个 Headless Service
为了让每个 etcd 实例都有唯一的 hostname 和 network identity,我们需要创建一个 Headless Service 来分配独立的 hostname。
apiVersion: v1
kind: Service
metadata:
name: etcd-service-headless
spec:
ports:
- name : client
port : 2379
targetPort : client
clusterIP : None
selector :
app : etcd
- 创建一个 StatefulSet
下面是一个简单的 etcd StatefulSet 配置示例,其中 replicas
指定了副本数,serviceName
指定了使用的 Headless Service 名称,volumeClaimTemplates
定义了每个 Pod 使用的 PVC。
apiVersion: apps/v1
kind: StatefulSet
metadata:
name: etcd-statefulset
spec:
serviceName: etcd-service-headless
replicas: 3
selector:
matchLabels:
app: etcd
template:
metadata:
labels:
app: etcd
spec:
containers:
- name : etcd
image : quay.io/coreos/etcd:v3.5.0
command :
- /usr/local/bin/etcd
- --config-file=/etc/etcd/etcd.conf
ports :
- containerPort : 2379
name : client
- containerPort : 2380
name : peer
env :
- name : ETCD_NAME
valueFrom :
fieldRef :
fieldPath : metadata.name
- name : ETCD_INITIAL_CLUSTER_STATE
value : new
volumeMounts :
- name : data-volume
mountPath : /var/lib/etcd/data
- name : config-volume
mountPath : /etc/etcd/
volumes :
- name : data-volume
persistentVolumeClaim :
claimName : pvc-etcd-data
- name : config-volume
configMap :
name : etcd-configmap
terminationGracePeriodSeconds: 10
dnsPolicy: ClusterFirstWithHostNet
---
apiVersion: v1
kind: PersistentVolumeClaim
metadata:
name:pvc-etcd-data
spec:
accessModes:
- ReadWriteOnce
resources :
requests :
storage : 20Gi
这个配置将创建三个 etcd 实例,每个实例都有自己的 PVC 存储卷和配置文件。StatefulSet 会按照 etcd-0
、etcd-1
、etcd-2
的顺序为 Pod 分配唯一的 hostname 和 network identity。我们可以使用 DNS 来访问这些实例:
https://etcd-0.etcd-service-headless.default.svc.cluster.local:2379
https://etcd-1.etcd-service-headless.default.svc.cluster.local:2379
https://etcd-2.etcd-service-headless.default.svc.cluster.local:2379
这样,我们就成功地使用 Kubernetes StatefulSet 部署了一个 etcd 集群。