Kubernetes--Pod控制器：DaemonSet、Job&CronJob
时间：2023-09-28 03:37:02
1、Daemon控制器
DaemonSet该类型的控制器可以在集群中的每个(或指定)节点上运行副本。一般适用于日志收集、节点监控等场景。也就是说，如果是一个Pod提供的功能是节点级别(每个节点都需要，只需要一个)，所以这种功能Pod就适合使用DaemonSet创建类型控制器。
DaemonSet控制器的特点：
● 在向集群中添加节点时，指定 Pod 该节点还将添加副本
● 当节点从集群中移除时，Pod 它被垃圾回收
来看看DaemonSet资源清单文件
apiVersion: apps/v1 # 版本号 kind: DaemonSet # 类型 metadata: # 元数据 name: # rs名称 namespace: # 命名空间 labels: #标签 controller: daemonset spec: # 详情描述 revisionHistoryLimit: 3 # 保留历史版 updateStrategy: # 更新策略 type: RollingUpdate # 滚动更新策略 rollingUpdate: # 滚动更新 maxUnavailable: 1 # 最大不可用状态 Pod 的最大值，可以是百分比，也可以是整数 selector: # 选择器，指定控制器管理什么pod matchLabels: # Labels匹配规则 app: nginx-pod matchExpressions: # Expressions匹配规则 - {key: app, operator: In, values: [nginx-pod]} template: # 当副本数量不足时，模板，根据以下模板创建模板pod副本 metadata: labels: app: nginx-pod spec: containers: - name: nginx image: nginx:1.17.1 ports: - containerPort: 80创建一个pc-daemonset.yaml
[root@master 1.8 ]# vi pc-dameonset.yaml apiVersion: apps/v1 kind: DaemonSet metadata: name: pc-daemonset namespace: dev spec: selector: matchLabels: app: nginx-pod template: metadata: labels: app: nginx-pod spec: containers: - name: nginx image: nginx:1.17.1 # 创建daemonset并查看 [root@master 1.8 ]# kubectl create -f pc-dameonset.yaml daemonset.apps/pc-daemonset created [root@master 1.8 ]# kubectl get daemonset -n dev NAME DESIRED CURRENT READY UP-TO-DATE AVAILABLE NODE SELECTOR AGE pc-daemonset 2 2 2 2 2 32s 3 [root@master 1.8 ]# kubectl get pod -n dev -o wide NAME READY STATUS RESTARTS AGE IP NODE NOMINATED NODE READINESS GATES pc-daemonset-9n7w8 1/1 Running 0 29m 10.244.36.88 k8s-node1 pc-daemonset-9x65g 1/1 Running 0 29m 10.244.169.149 k8s-node2 #删除daemonset 2、Job
Job，主要用于负责批量处理(一次要处理指定数量任务)短暂的一次性(每个任务只运行一次就结束)任务。Job特点如下：
●当Job创建的pod执行成功结束时，Job记录成功结束pod数量
●成功结束pod当达到指定数量时，Job将完成执行
Job资源清单文件：
apiVersion: batch/v1 # 版本号 kind: Job # 类型 metadata: # 元数据 name: # rs名称 namespace: # 命名空间 labels: #标签 controller: job spec: # 详情描述 completions: 1 # 指定job需要成功运行Pods的次数。默认值: 1 parallelism: 1 # 指定job任何时候都应该并发运行Pods的数量。默认值: 1 parallelism: 1 # 指定job任何时候都应该并发运行Pods数量。默认值： 1 activeDeadlineSeconds: 30 # 指定job超过时间还没有结束，系统将试图终止可操作的时间。 backoffLimit: 6 # 指定job失败后重试的次数。默认是6 manualSelector: true # 是否可用selector选择器选择pod，默认是false selector: # 选择器，指定控制器管理什么pod matchLabels: # Labels匹配规则 app: counter-pod matchExpressions: # Expressions匹配规则 - {key: app, operator: In, values: [counter-pod]} template: # 当副本数量不足时，模板，根据以下模板创建模板pod副本 metadata: labels: app: counter-pod spec: restartPolicy: Never # 只能设置为重启策略Never或者OnFailure containers: - name: counter image: busybox:1.30 command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 2;done"]重启策略设置说明:
如果指定为OnFailure，则job会在pod重新启动容器，而不是创建故障pod，failed次数不变
如果指定为Never，则job会在pod出现故障时创造新的pod，并且故障pod它不会消失或重启，failed次数加1
如果指定为Always如果是这样，就意味着一直重启，意味着job任务会重复执行，当然不对，不能设置为Always
创建pc-job.yaml
[root@master 1.8 ]# vi pc-job.yaml apiVersion: batch/v1 kind: Job metadata: name: pc-job namespace: dev spec: manualSelector: true selector: matchLabels: app: counter-pod template: metadata: labels: app: counter-pod spec: restartPolicy: Never containers: - name: counter image: busybox:1.30 command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 3;done"] # 查看job [root@master 1.8 ]# kubectl get job -n dev NAME COMPLETIONS DURATION AGE pc-job 0/1 47s 47s
[root@master 1.8+]# kubectl get pod -n dev -w
NAME READY STATUS RESTARTS AGE
pc-job-7flxk 0/1 Completed 0 60s
[root@master 1.8+]# kubectl get job -n dev
NAME COMPLETIONS DURATION AGE
pc-job 1/1 61s 2m3s
# 接下来，调整下pod运行的总数量和并行数量 即：在spec下设置下面两个选项
# completions: 6 # 指定job需要成功运行Pods的次数为6
# parallelism: 3 # 指定job并发运行Pods的数量为3
# 然后重新运行job，观察效果，此时会发现，job会每次运行3个pod，总共执行了6个pod
[root@master 1.8+]# kubectl get job -n dev -w
NAME COMPLETIONS DURATION AGE
pc-job 0/6 5s 5s
pc-job 0/6 29s 29s
pc-job 1/6 29s 29s
pc-job 1/6 29s 29s
pc-job 2/6 29s 29s
pc-job 2/6 29s 29s
pc-job 3/6 29s 29s
pc-job 3/6 58s 58s
pc-job 4/6 58s 58s
pc-job 4/6 59s 59s
pc-job 5/6 59s 59s
pc-job 5/6 59s 59s
pc-job 6/6 59s 59s
# 监听Pod
[root@master ~]# kubectl get pod -n dev -w
NAME READY STATUS RESTARTS AGE
pc-job-b8grh 0/1 Pending 0 0s
pc-job-b8grh 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Pending 0 0s
pc-job-8jfpw 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Pending 0 0s
pc-job-8jfpw 0/1 Pending 0 0s
pc-job-b8grh 0/1 ContainerCreating 0 0s
pc-job-8jfpw 0/1 ContainerCreating 0 0s
pc-job-zcqh4 0/1 ContainerCreating 0 0s
pc-job-8jfpw 0/1 ContainerCreating 0 1s
pc-job-b8grh 0/1 ContainerCreating 0 1s
pc-job-zcqh4 0/1 ContainerCreating 0 1s
pc-job-8jfpw 1/1 Running 0 1s
pc-job-zcqh4 1/1 Running 0 2s
pc-job-b8grh 1/1 Running 0 2s
pc-job-8jfpw 0/1 Completed 0 29s
pc-job-l75jw 0/1 Pending 0 0s
pc-job-l75jw 0/1 Pending 0 0s
pc-job-8jfpw 0/1 Completed 0 29s
pc-job-l75jw 0/1 ContainerCreating 0 0s
pc-job-8jfpw 0/1 Completed 0 29s
pc-job-b8grh 0/1 Completed 0 29s
pc-job-59ck7 0/1 Pending 0 0s
pc-job-59ck7 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Completed 0 29s
pc-job-b8grh 0/1 Completed 0 29s
pc-job-59ck7 0/1 ContainerCreating 0 0s
pc-job-f88x7 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Completed 0 29s
pc-job-f88x7 0/1 Pending 0 0s
pc-job-zcqh4 0/1 Completed 0 29s
pc-job-b8grh 0/1 Completed 0 29s
pc-job-f88x7 0/1 ContainerCreating 0 0s
pc-job-l75jw 0/1 ContainerCreating 0 1s
pc-job-l75jw 1/1 Running 0 2s
pc-job-59ck7 0/1 ContainerCreating 0 2s
pc-job-f88x7 0/1 ContainerCreating 0 2s
pc-job-59ck7 1/1 Running 0 3s
pc-job-f88x7 1/1 Running 0 3s
pc-job-l75jw 0/1 Completed 0 29s
pc-job-l75jw 0/1 Completed 0 29s
pc-job-l75jw 0/1 Completed 0 29s
pc-job-f88x7 0/1 Completed 0 30s
pc-job-f88x7 0/1 Completed 0 30s
pc-job-59ck7 0/1 Completed 0 30s
pc-job-59ck7 0/1 Completed 0 30s
pc-job-f88x7 0/1 Completed 0 30s
pc-job-59ck7 0/1 Completed 0 30s
3、Cornjob（CJ）
CronJob控制器以Job控制器资源为其管控对象，并借助它管理pod资源对象，Job控制器定义的作业任务在其控制器资源创建之后便会立即执行，但CronJob可以以类似于Linux操作系统的周期性任务作业计划的方式控制其运行时间点及重复运行的方式。也就是说，CronJob可以在特定的时间点(反复的)去运行job任务。
# CronJob的资源清单文件：
apiVersion: batch/v1beta1 # 版本号
kind: CronJob # 类型
metadata: # 元数据
name: # rs名称
namespace: # 所属命名空间
labels: #标签
controller: cronjob
spec: # 详情描述
schedule: # cron格式的作业调度运行时间点,用于控制任务在什么时间执行
concurrencyPolicy: # 并发执行策略，用于定义前一次作业运行尚未完成时是否以及如何运行后一次的作业
failedJobHistoryLimit: # 为失败的任务执行保留的历史记录数，默认为1
successfulJobHistoryLimit: # 为成功的任务执行保留的历史记录数，默认为3
startingDeadlineSeconds: # 启动作业错误的超时时长
jobTemplate: # job控制器模板，用于为cronjob控制器生成job对象;下面其实就是job的定义
metadata:
spec:
completions: 1
parallelism: 1
activeDeadlineSeconds: 30
backoffLimit: 6
manualSelector: true
selector:
matchLabels:
app: counter-pod
matchExpressions: 规则
- {key: app, operator: In, values: [counter-pod]}
template:
metadata:
labels:
app: counter-pod
spec:
restartPolicy: Never
containers:
- name: counter
image: busybox:1.30
command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 20;done"]
# 需要重点解释的几个选项：
schedule: cron表达式，用于指定任务的执行时间
*/1 * * * *
<分钟> <小时> <日> <月份> <星期>
分钟 值从 0 到 59.
小时 值从 0 到 23.
日 值从 1 到 31.
月 值从 1 到 12.
星期 值从 0 到 6, 0 代表星期日
多个时间可以用逗号隔开； 范围可以用连字符给出；*可以作为通配符； /表示每...
concurrencyPolicy:
Allow: 允许Jobs并发运行(默认)
Forbid: 禁止并发运行，如果上一次运行尚未完成，则跳过下一次运行
Replace: 替换，取消当前正在运行的作业并用新作业替换它
创建pc-cronjob.yaml
[root@master 1.8+]# kubectl create -f pc-cronjob.yaml
Warning: batch/v1beta1 CronJob is deprecated in v1.21+, unavailable in v1.25+; use batch/v1 CronJob
cronjob.batch/pc-cronjob created
\\\
apiVersion: batch/v1beta1
kind: CronJob
metadata:
name: pc-cronjob
namespace: dev
labels:
controller: cronjob
spec:
schedule: "*/1 * * * *"
jobTemplate:
metadata:
spec:
template:
spec:
restartPolicy: Never
containers:
- name: counter
image: busybox:1.30
command: ["bin/sh","-c","for i in 9 8 7 6 5 4 3 2 1; do echo $i;sleep 3;done"]
[root@master 1.8+]# kubectl get cj -n dev
NAME SCHEDULE SUSPEND ACTIVE LAST SCHEDULE AGE
pc-cronjob */1 * * * * False 0 26s
监控一下cronjob和job
[root@master ~]# kubectl get job -n dev -w
NAME COMPLETIONS DURATION AGE
pc-cronjob-27510232 1/1 28s 2m1s
pc-cronjob-27510233 1/1 29s 61s
pc-cronjob-27510234 0/1 1s 1s
pc-cronjob-27510234 0/1 28s 28s
pc-cronjob-27510234 1/1 28s 28s
pc-cronjob-27510235 0/1 0s
pc-cronjob-27510235 0/1 0s 0s
pc-cronjob-27510235 0/1 29s 29s
pc-cronjob-27510235 1/1 29s 29s
pc-cronjob-27510232 1/1 28s 3m29s
pc-cronjob-27510236 0/1 0s
pc-cronjob-27510236 0/1 0s 0s
pc-cronjob-27510236 0/1 28s 28s
pc-cronjob-27510236 1/1 28s 28s
[root@master ~]# kubectl get cj -n dev -w
NAME SCHEDULE SUSPEND ACTIVE LAST SCHEDULE AGE
pc-cronjob */1 * * * * False 0 50s 2m40s
pc-cronjob */1 * * * * False 1 0s 2m50s
pc-cronjob */1 * * * * False 0 28s 3m18s
pc-cronjob */1 * * * * False 0 28s 3m18s
pc-cronjob */1 * * * * False 1 0s 3m50s
pc-cronjob */1 * * * * False 0 29s 4m19s
pc-cronjob */1 * * * * False 0 29s 4m19s
pc-cronjob */1 * * * * False 1 0s 4m50s
pc-cronjob */1 * * * * False 0 28s 5m18s
pc-cronjob */1 * * * * False 0 28s 5m18s
pc-cronjob */1 * * * * False 1 0s 5m50s
pc-cronjob */1 * * * * False 0 29s 6m19s
pc-cronjob */1 * * * * False 0 29s 6m19s
pc-cronjob */1 * * * * False 1 0s 6m50s
pc-cronjob */1 * * * * False 0 29s 7m19s
pc-cronjob */1 * * * * False 0 29s 7m19s
pc-cronjob */1 * * * * False 1 0s 7m50s
pc-cronjob */1 * * * * False 0 29s 8m19s
pc-cronjob */1 * * * * False 0 29s 8m19s
pc-cronjob */1 * * * * False 1 0s 8m50s
pc-cronjob */1 * * * * False 0 29s 9m19s
pc-cronjob */1 * * * * False 0 29s 9m19s
pc-cronjob */1 * * * * False 1 0s 9m50s
# 删除cronjob
[root@master 1.8+]# kubectl delete -f pc-cronjob.yaml
Warning: batch/v1beta1 CronJob is deprecated in v1.21+, unavailable in v1.25+; use batch/v1 CronJob
cronjob.batch "pc-cronjob" deleted
