k8s学习(十二)创建Job

目录前言一、Job二、非并行Job三、固定结束次数的Job四、带有工作队列的并行Job前言Job负责批量处理短暂的一次性任务，即仅执行一次的任务，它保证批处理任务的一个或多个Pod成功结束。一、Job1、Kubernetes支持以下几种Job：非并行Job：通常创建一个Pod直至其成功结束固定结束次数的

_lrs

1852人浏览 · 2021-12-27 22:05:21

_lrs · 2021-12-27 22:05:21 发布

前言

Job负责批量处理短暂的一次性任务，即仅执行一次的任务，它保证批处理任务的一个或多个Pod成功结束。

一、Job

1、Kubernetes支持以下几种Job：

非并行Job：通常创建一个Pod直至其成功结束

固定结束次数的Job：设置.spec.completions，创建多个Pod，直到.spec.completions个Pod成功结束

带有工作队列的并行Job：设置.spec.Parallelism但不设置.spec.completions，当所有Pod结束并且至少一个成功时，Job就认为是成功

2、特点

RestartPolicy仅支持Never或OnFailure

单个Pod时，默认Pod成功运行后Job即结束

.spec.completions标志Job结束需要成功运行的Pod个数，默认为1

.spec.parallelism标志并行运行的Pod的个数，默认为1

spec.activeDeadlineSeconds标志失败Pod的重试最大时间，超过这个时间不会继续重试

二、非并行Job

（1）job-once.yaml

[root@k8s-master k8s]# cat job-once.yaml
apiVersion: batch/v1
kind: Job
metadata:
  name: busybox-job-test
spec:
  template:
    spec:
      restartPolicy: Never
      containers:
      - name: busybox-job-container
        image: busybox
        command: ["sh",  "-c"]
        args: ['echo "hello";sleep 30; echo "job"']

（2）创建

[root@k8s-master k8s]# kubectl create -f job-once.yaml
job.batch/busybox-job-test created

（3）查看pod

任务处于 Running 状态

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS    RESTARTS   AGE
busybox-job-test-qwvd2                         1/1     Running   0          7s

[root@k8s-master k8s]# kubectl logs busybox-job-test-qwvd2
hello

等待30s过后，再次查看，任务处理Completed 状态

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS      RESTARTS   AGE
busybox-job-test-qwvd2                         0/1     Completed   0          1m20s

[root@k8s-master k8s]# kubectl logs busybox-job-test-qwvd2
hello
job

（4）查看pod详细信息

能够看到job执行情况

[root@k8s-master k8s]# kubectl describe pod busybox-job-test-qwvd2
...
    Command:
      sh
      -c
    Args:
      echo "hello";sleep 30; echo "job"
    State:          Terminated
      Reason:       Completed
      Exit Code:    0
      Started:      Sun, 26 Dec 2021 23:16:01 -0500
      Finished:     Sun, 26 Dec 2021 23:16:31 -0500
    Ready:          False
    Restart Count:  0
    Environment:    <none>
    Mounts:
      /var/run/secrets/kubernetes.io/serviceaccount from default-token-w5gbb (ro)
Conditions:
  Type              Status
  Initialized       True
  Ready             False
  ContainersReady   False
  PodScheduled      True
Volumes:
  default-token-w5gbb:
    Type:        Secret (a volume populated by a Secret)
    SecretName:  default-token-w5gbb
    Optional:    false
QoS Class:       BestEffort
Node-Selectors:  <none>
Tolerations:     node.kubernetes.io/not-ready:NoExecute op=Exists for 300s
                 node.kubernetes.io/unreachable:NoExecute op=Exists for 300s
Events:
  Type    Reason     Age   From               Message
  ----    ------     ----  ----               -------
  Normal  Scheduled  43s   default-scheduler  Successfully assigned default/busybox-job-test-qwvd2 to k8s-node01
  Normal  Pulling    41s   kubelet            Pulling image "busybox"
  Normal  Pulled     37s   kubelet            Successfully pulled image "busybox" in 4.480345937s
  Normal  Created    37s   kubelet            Created container busybox-job-container
  Normal  Started    37s   kubelet            Started container busybox-job-container

三、固定结束次数的Job

（1）job-many.yaml

[root@k8s-master k8s]# cat job-many.yaml
apiVersion: batch/v1
kind: Job
metadata:
  name: busybox-job-many-test
spec:
  completions: 6
  parallelism: 3
  backoffLimit: 6
  template:
    spec:
      restartPolicy: Never
      containers:
      - name: busybox-job-many-container
        image: busybox
        command: ["sh",  "-c"]
        args: ['echo "hello";sleep 30; echo "job"']

（2）创建

[root@k8s-master k8s]# kubectl create -f job-many.yaml
job.batch/busybox-job-many-test created

（3）查看pod

首先创建了3个job

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS    RESTARTS   AGE
busybox-job-many-test-75gq9                    1/1     Running   0          34s
busybox-job-many-test-l2v8w                    1/1     Running   0          34s
busybox-job-many-test-njhf6                    1/1     Running   0          34s

3个job完成后，又并行创建了3个job

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS      RESTARTS   AGE
busybox-job-many-test-75gq9                    0/1     Completed   0          56s
busybox-job-many-test-h99mq                    1/1     Running     0          15s
busybox-job-many-test-l2v8w                    0/1     Completed   0          56s
busybox-job-many-test-njhf6                    0/1     Completed   0          56s
busybox-job-many-test-pdsl2                    1/1     Running     0          10s
busybox-job-many-test-zpc74                    1/1     Running     0          19s

6个job全部完成

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS      RESTARTS   AGE
busybox-job-many-test-75gq9                    0/1     Completed   0          2m7s
busybox-job-many-test-h99mq                    0/1     Completed   0          86s
busybox-job-many-test-l2v8w                    0/1     Completed   0          2m7s
busybox-job-many-test-njhf6                    0/1     Completed   0          2m7s
busybox-job-many-test-pdsl2                    0/1     Completed   0          81s
busybox-job-many-test-zpc74                    0/1     Completed   0          90s

[root@k8s-master k8s]# kubectl get job
NAME                    COMPLETIONS   DURATION   AGE
busybox-job-many-test   6/6           83s        5m51s

四、带有工作队列的并行Job

（1）job-queue.yaml

[root@k8s-master k8s]# cat job-queue.yaml
apiVersion: batch/v1
kind: Job
metadata:
  name: busybox-job-queue-test
spec:
  parallelism: 3
  backoffLimit: 6
  template:
    spec:
      restartPolicy: Never
      containers:
      - name: busybox-job-queue-container
        image: busybox
        command: ["sh",  "-c"]
        args: ['echo "hello";sleep 30; echo "job"']

（2）创建

[root@k8s-master k8s]# kubectl create -f job-queue.yaml
job.batch/busybox-job-queue-test created

（3）查看job

并行启动了3个job，都处于Running 状态

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS    RESTARTS   AGE
busybox-job-queue-test-h4k9w                   1/1     Running   0          16s
busybox-job-queue-test-lhs6q                   1/1     Running   0          16s
busybox-job-queue-test-wr5zz                   1/1     Running   0          16s

[root@k8s-master k8s]# kubectl get job
NAME                     COMPLETIONS   DURATION   AGE
busybox-job-queue-test   0/1 of 3      20s        20s

等待一会任务完成后

[root@k8s-master k8s]# kubectl get pods
NAME                                           READY   STATUS      RESTARTS   AGE
busybox-job-queue-test-h4k9w                   0/1     Completed   0          101s
busybox-job-queue-test-lhs6q                   0/1     Completed   0          101s
busybox-job-queue-test-wr5zz                   0/1     Completed   0          101s

[root@k8s-master k8s]# kubectl get job
NAME                     COMPLETIONS   DURATION   AGE
busybox-job-queue-test   3/1 of 3      46s        100s

Cloudpods

开源、云原生的融合云平台

更多推荐

面向未来的 IT 基础设施管理架构——融合云（Unified IaaS）

随着数字化时代的到来，IT系统已成为人类社会正常运转不可或缺的组成部分。不远的未来，智能制造，5G和人工智能等技术将成为推动生产力发展的重要引擎，人类社会将面临前所未有的全面彻底的数字化浪潮。IT基础设施作为IT系统运行的平台和载体，是实现数字化的基石。在这场数字化浪潮中，企业必须积极拥抱云计算技术，采用符合技术发展趋势、面向未来的IT基础构架，才能在未来的竞争中赢得先机。一、云计算历经十余年

Cloudpods

Cloudpods负载均衡的功能介绍

作者:周有松今天的内容会从以下几个方面展开：负载均衡产品简介。主要介绍负载均衡作为一个云上产品，它的功能模型是怎样的，日常使用中会遇到的业务词汇负载均衡的功能与典型应用场景。这部分主要结合业务词汇，对负载均衡服务中常见的一些功能选项进行介绍，并举例介绍一些典型的应用场景最后，我们做一下总结，讨论一下负载均衡产品相比传统方式的优点一、产品简介 1. 以NGINX为例提到负载均衡，我们以

Cloudpods

使用Linux vfio将Nvidia GPU透传给QEMU虚拟机

Linux 上虚拟机 GPU 透传需要使用 vfio 的方式。主要是因为在 vfio 方式下对虚拟设备的权限和 DMA 隔离上做的更好。但是这么做也有个缺点，这个物理设备在主机和其他虚拟机都不能使用了。 qemu 直接使用物理设备本身命令行是很简单的，关键在于事先在主机上对系统、内核和物理设备的一些配置。单纯从 qemu 的命令行来看，其实和普通虚拟机启动就差了最后那个-device的选项。这

Cloudpods

所有评论(0)

查看更多评论

_lrs

@RenshenLi

已为社区贡献1条内容