什么是ConfigMap
ConfigMap是用来存储配置文件的Kubernetes的资源对象,配置对象存储在Etcd中,配置的形式可以是完整的配置文件或者key/value的形式
ConfigMap可以带来什么好处
传统的应用服务,每个服务都有自己的配置文件,各自配置文件存储在服务所在节点,对于单体应用,这种存储没有任何问题,
但是随着用户数量的激增,一个节点不能满足线上用户使用,故服务可能从一个节点扩展到十个节点,这就导致,
如果有一个配置出现变更,就需要对应修改十次配置文件。这种人肉处理,显然不能满足线上部署要求,
故引入了各种类似于 ZooKeeper 中间件实现的配置中心,但配置中心属于 “侵入式” 设计,
需要修改引入第三方类库,它要求每个业务都调用特定的配置接口,破坏了系统本身的完整性,
而Kubernetes 利用了 Volume 功能,完整设计了一套配置中心,其核心对象就是ConfigMap,
使用过程不用修改任何原有设计,即可无缝对 ConfigMap;为什么呢?
使用configmap的限制条件
ConfigMap必须在Pod之前创建 ConfigMap受Namespace限制,只有处于相同Namespace中的Pod才可以引用它。 ConfigMap中的配额管理还未能实现。 kubelet只支持可以被API Server管理的Pod使用ConfigMap kubelet在本Node上通过 --manifest-url或–config自动创建的静态Pod将无法引用ConfigMap。 在Pod对ConfigMap进行挂载(volumeMount)操作时,在容器内部只能挂载为“目录”,无法挂载为“文件”,在挂载到容器内部后,在目录下将包含ConfigMap定义的每个item,
如果在该目录下原来还有其他文件,则容器内的该目录将被挂载的ConfigMap覆盖 如果应用程序需要保留原来的其他文件,则需要进行额外的处理。可以将ConfigMap挂载到容器内部的临时目录,再通过启动脚本将配置文件复制或者链接到(cp或link命令)应用
所用的实际配置目录下
ConfigMap 三种创建方式
第一种方式: 指定字面量进行创建,创建命令如下所示
kubectl create configmap configmaptest --from-literal=foo=bar --from-literal=one=two [root@master01 ~]# kubectl get configmap configmaptest -o yaml apiVersion: v1 data: foo: bar one: two kind: ConfigMap metadata: name: configmaptest namespace: default
第二种方式: 指定特定文件进行创建
[root@master01 template]# cat db.properties
driverClassName=com.mysql.jdbc.Driver
kubectl create configmap config-files --from-file=/data/k8s/template/db.properties
[root@master01 template]# kubectl get configmap config-files -o yaml
apiVersion: v1
data:
db.properties: |
driverClassName=com.mysql.jdbc.Driver
kind: ConfigMap
metadata:
creationTimestamp: "2020-08-12T13:52:35Z"
managedFields:
- apiVersion: v1
fieldsType: FieldsV1
fieldsV1:
f:data:
.: {}
f:db.properties: {}
manager: kubectl
operation: Update
time: "2020-08-12T13:52:35Z"
name: config-files
namespace: default
resourceVersion: "491983"
selfLink: /api/v1/namespaces/default/configmaps/config-files
uid: bfeacb89-fdd7-41d7-8089-ce1a1629b102
You have new mail in /var/spool/mail/root
第三种: 指定特定文件夹进行创建
kubectl create configmap config-dir --from-file=/data/k8s/template/config/
[root@master01 ~]# kubectl get configmap config-dir -o yaml
apiVersion: v1
data:
db.properties: |
driverClassName=com.mysql.jdbc.Driver
svc.properties: |
#server
protocol=tcp
system.properties: |
time=100
kind: ConfigMap
metadata:
name: config-dir
namespace: default
ConfigMap 作为环境变量三种使用方式
1、单个引用
先创建configmap kubectl create configmap configmaptest --from-literal=code=25 --from-literal=foo=bar --from-literal=one=two spec: containers: - name: demo-nginx image: nginx imagePullPolicy: IfNotPresent env: - name: CODE-TIME (env变量名) valueFrom: configMapKeyRef: name: configmaptest (configmap的名称) key: code (定义的key)
验证
[root@master01 template]# kubectl exec -it demo-nginx-55485d6b97-7wzhq -- /bin/bash
root@demo-nginx-55485d6b97-7wzhq:/# env|grep CO
CODE-TIME=25
2)多个引用
一次性传递所有ConfigMap条目作为环境变量
spec: containers: - name: demo-nginx image: nginx imagePullPolicy: IfNotPresent envFrom: - prefix: CODE_ #以CODE前缀 configMapRef: name: configmaptest #configmap名称 ports: - name: http containerPort: 80
验证
[root@master01 template]# kubectl exec -it demo-nginx-6b8dcf7d4f-xzhgk -- /bin/bash
root@demo-nginx-6b8dcf7d4f-xzhgk:/# env|grep CO
CODE_code=25
CODE_one=two
CODE_foo=bar
3) args 方式传递环境变量
容器启动时,传递该变量到服务,运行 shell 脚本,可能会用到,具体设置方式如图(5)所示
spec:
containers:
- name: demo-nginx
image: nginx
imagePullPolicy: IfNotPresent
env:
- name: CONFIG
valueFrom:
configMapKeyRef:
name: configmaptest
key: code
args: ["$(CONFIG)"]
4)volume挂载
...... - containerPort: 80 volumeMounts: - mountPath: /usr/local/nginx/conf/vhost/ name: http - mountPath: /usr/local/nginx/html/foo subPath: foo name: nginx-html volumes: - name: http configMap: name: nginx-conf - name: nginx-html configMap: name: configmaptest items: - key: foo path: foo ......
如果有特定需求,需要挂载某个特定文件,而不允许覆盖原有文件,可以挂载到指定文件,通过 subPath 配合指定文件。
但是单个文件挂载这种方式不能实现热更新,即宿主机 ConfigMap 文件发生变化,容器内部不会自动重载
至于 items 使用就比较简单了,如果一个 ConfigMap 中包含多个配置文件,但是只想暴露出来其中一部分
那么可以通过 items 方式进行指定。当然你也可以对文件设置读写权限
像下面的LAMP,可以将同一个volume下的 mysql 和 html目录,挂载到不同的挂载点上,这样就不需要为 mysql 和 html 单独创建volume了
apiVersion: v1 kind: Pod metadata: name: my-lamp-site spec: containers: - name: mysql image: mysql env: - name: MYSQL_ROOT_PASSWORD value: "rootpasswd" volumeMounts: - mountPath: /var/lib/mysql name: site-data subPath: mysql - name: php image: php:7.0-apache volumeMounts: - mountPath: /var/www/html name: site-data subPath: html volumes: - name: site-data persistentVolumeClaim: claimName: my-lamp-site-data
apiVersion: v1kind: Pmetadata: name: pod-volume-test spec: containers: - name: apache image: httpd ports: - containerPort: 80 volumeMounts: - name: volume-test mountPath: /var/www/html volumes: - name: volume-test configMap: name: cm-apache items: - key: html path: main.html #文件名 - key: path path: path.txt #文件名 验证: root@pod-volume-test:/# cd /var/www/html/ root@pod-volume-test:/var/www/html# ls main.html path.txt root@pod-volume-test:/var/www/html#cat main.html hello world root@pod-volume-test:/var/www/html# cat path.txt /var/www/html
apiVersion: v1 kind: Pod metadata: name: mypod spec: containers: - name: mypod image: busybox args: [ "/bin/sh", "-c", "sleep 3000" ] volumeMounts: - name: mysql mountPath: "/tmp" volumes: - name: mysql configMap: name: mysql-cm items: - key: my.cnf path: mysql/my.cnf 验证 [root@master ~]# kubectl exec -it mypod sh / # cat /tmp/mysql/my.cnf [mysqld] datadir=/var/lib/mysql socket=/var/lib/mysql/mysql.sock symbolic-links=0 [mysqld_safe] log-error=/var/log/mariadb/mariadb.log pid-file=/var/run/mariadb/mariadb.pid !includedir /etc/my.cnf.d / # exit
热更新机制
当 ConfigMap 作为 Volume 进行挂载时,它的内容是会更新的。分析 ConfigMap volume 的更新机制:
更新操作由 kubelet 的 Pod 同步循环触发,每次进行 Pod 同步时(默认每 10 秒一次),kubelet 都会将 Pod 的所有 ConfigMap Volume 标记为“需要重新挂载
(RequireRemount)”,而 kubelet 中的 Volume 控制循环会发现这些需要重新挂载的 Volume,去执行一次挂载操作,在 ConfigMap 的重新挂载过程中,kubelet
会先比较远端的 ConfigMap 与 Volume 中的 ConfigMap 是否一致,再做更新。要注意,“拿远端的 ConfigMap” 这个操作可能是有缓存的,因此拿到的并不一定是最新版本。
延迟时间:Pod 同步间隔(默认10秒)+ ConfigMap 本地缓存的 TTL。
部分文件挂载
apiVersion: v1 kind: Pod metadata: labels: name: busybox role: master name: busybox spec: containers: - name: busybox image: myhub.fdccloud.com/library/busybox command: - sleep - "3600" volumeMounts: - name: configmap-volume mountPath: /etc/passwd subPath: path/to/passwd - name: configmap-volume-1 mountPath: /etc/group subPath: path/to/group nodeSelector: app: busybox volumes: - name: configmap-volume configMap: name: cmtest items: - key: passwd path: path/to/passwd - name: configmap-volume-1 configMap: name: cmtest items: - key: group path: path/to/group