• 使用 CronJob 运行自动化任务


    在 Kubernetes v1.21 版本中,CronJob 被提升为通用版本。如果你使用的是旧版本的 Kubernetes, 请参考你正在使用的 Kubernetes 版本的文档,这样你就能看到准确的信息。 旧的 Kubernetes 版本不支持 batch/v1 CronJob API。

    你可以利用 CronJob 执行基于时间调度的 Job。 这些自动化任务和 Linux 或者 Unix 系统的 Cron 任务类似。

    CronJob 在创建周期性以及重复性的任务时很有帮助,例如执行备份操作或者发送邮件。 CronJob 也可以在特定时间调度单个任务,例如你想调度低活跃周期的任务。

    CronJob 有一些限制和特点。 例如,在特定状况下,同一个 CronJob 可以创建多个任务。 因此,任务应该是幂等的。

    有关更多限制,请参考 CronJob

    准备开始

    • 你必须拥有一个 Kubernetes 的集群,同时你的 Kubernetes 集群必须带有 kubectl 命令行工具。 建议在至少有两个节点的集群上运行本教程,且这些节点不作为控制平面主机。 如果你还没有集群,你可以通过 Minikube 构建一个你自己的集群,或者你可以使用下面任意一个 Kubernetes 工具构建:

    创建 CronJob

    CronJob 需要一个配置文件。 以下是针对一个 CronJob 的清单,该 CronJob 每分钟运行一个简单的演示任务:

    apiVersion: batch/v1
    kind: CronJob
    metadata:
      name: hello
    spec:
      schedule: "* * * * *"
      jobTemplate:
        spec:
          template:
            spec:
              containers:
              - name: hello
                image: busybox:1.28
                imagePullPolicy: IfNotPresent
                command:
                - /bin/sh
                - -c
                - date; echo Hello from the Kubernetes cluster
              restartPolicy: OnFailure
    

      

    执行以下命令以运行此 CronJob 示例:

    kubectl create -f https://k8s.io/examples/application/job/cronjob.yaml
    

    输出类似于:

    cronjob.batch/hello created
    

    创建好 CronJob 后,使用下面的命令来获取其状态:

    kubectl get cronjob hello
    

    输出类似于:

    NAME    SCHEDULE      SUSPEND   ACTIVE   LAST SCHEDULE   AGE
    hello   */1 * * * *   False     0        <none>          10s
    

    就像你从命令返回结果看到的那样,CronJob 还没有调度或执行任何任务。大约需要一分钟任务才能创建好。

    kubectl get jobs --watch
    

    输出类似于:

    NAME               COMPLETIONS   DURATION   AGE
    hello-4111706356   0/1                      0s
    hello-4111706356   0/1           0s         0s
    hello-4111706356   1/1           5s         5s
    

    现在你已经看到了一个运行中的任务被 “hello” CronJob 调度。 你可以停止监视这个任务,然后再次查看 CronJob 就能看到它调度任务:

    kubectl get cronjob hello
    

    输出类似于:

    NAME    SCHEDULE      SUSPEND   ACTIVE   LAST SCHEDULE   AGE
    hello   */1 * * * *   False     0        50s             75s
    

    你应该能看到 hello CronJob 在 LAST SCHEDULE 声明的时间点成功地调度了一次任务。 目前有 0 个活跃的任务,这意味着任务执行完毕或者执行失败。

    现在,找到最后一次调度任务创建的 Pod 并查看一个 Pod 的标准输出。

    说明: Job 名称与 Pod 名称不同。
    # 在你的系统上将 "hello-4111706356" 替换为 Job 名称
    pods=$(kubectl get pods --selector=job-name=hello-4111706356 --output=jsonpath={.items..metadata.name})
    

    查看 Pod 日志:

    kubectl logs $pods
    

    输出类似于:

    Fri Feb 22 11:02:09 UTC 2019
    Hello from the Kubernetes cluster
    

    删除 CronJob

    当你不再需要 CronJob 时,可以用 kubectl delete cronjob <cronjob name> 删掉它:

    kubectl delete cronjob hello
    

    删除 CronJob 会清除它创建的所有任务和 Pod,并阻止它创建额外的任务。你可以查阅垃圾收集

    编写 CronJob 声明信息

    像 Kubernetes 的其他对象一样,CronJob 需要 apiVersionkind 和 metadata 字段。 有关 Kubernetes 对象及它们的清单的更多信息, 请参考资源管理和 使用 kubectl 管理资源文档。

    CronJob 配置也需要包括 .spec 部分。

    说明:

    如果你修改了一个 CronJob,你所做的修改将只被应用到将来所运行的任务上, 对当前 CronJob 内处于运行中的 Job 集合(和 Job 里面的 Pod)不会产生任何变化,它们将继续运行。 也就是说,对 CronJob 的修改不更新现有的任务,即使这些任务处于运行状态。

    排期表

    .spec.schedule 是 .spec 中的必需字段。它接受 Cron 格式串,例如 0 * * * * or @hourly,作为它的任务被创建和执行的调度时间。

    该格式也包含了扩展的 “Vixie cron” 步长值。 FreeBSD 手册中解释如下:

    步长可被用于范围组合。范围后面带有 /<数字> 可以声明范围内的步幅数值。 例如,0-23/2 可被用在小时字段来声明命令在其他数值的小时数执行 (V7 标准中对应的方法是 0,2,4,6,8,10,12,14,16,18,20,22)。 步长也可以放在通配符后面,因此如果你想表达 “每两小时”,就用 */2 。

    说明: 调度中的问号 (?) 和星号 * 含义相同,它们用来表示给定字段的任何可用值。

    任务模板

    .spec.jobTemplate是任务的模板,它是必需的。它和 Job 的语法完全一样, 只不过它是嵌套的,没有 apiVersion 和 kind。 有关如何编写一个任务的 .spec,请参考 编写 Job 规约

    开始的最后期限

    .spec.startingDeadlineSeconds 字段是可选的。 它表示任务如果由于某种原因错过了调度时间,开始该任务的截止时间的秒数。 过了截止时间,CronJob 就不会开始任务。 不满足这种最后期限的任务会被统计为失败任务。如果此字段未设置,那任务就没有最后期限。

    如果 .spec.startingDeadlineSeconds 字段被设置(非空), CronJob 控制器将会计算从预期创建 Job 到当前时间的时间差。 如果时间差大于该限制,则跳过此次执行。

    例如,如果将其设置为 200,则 Job 控制器允许在实际调度之后最多 200 秒内创建 Job。

    并发性规则

    .spec.concurrencyPolicy 也是可选的。它声明了 CronJob 创建的任务执行时发生重叠如何处理。 spec 仅能声明下列规则中的一种:

    • Allow (默认):CronJob 允许并发任务执行。
    • Forbid: CronJob 不允许并发任务执行;如果新任务的执行时间到了而老任务没有执行完,CronJob 会忽略新任务的执行。
    • Replace:如果新任务的执行时间到了而老任务没有执行完,CronJob 会用新任务替换当前正在运行的任务。

    请注意,并发性规则仅适用于相同 CronJob 创建的任务。如果有多个 CronJob,它们相应的任务总是允许并发执行的。

    挂起

    .spec.suspend 字段也是可选的。如果设置为 true ,后续发生的执行都会被挂起。 这个设置对已经开始的执行不起作用。默认是 false

    注意: 在调度时间内挂起的执行都会被统计为错过的任务。当 .spec.suspend 从 true 改为 false 时, 且没有开始的最后期限,错过的任务会被立即调度。

    任务历史限制

    .spec.successfulJobsHistoryLimit 和 .spec.failedJobsHistoryLimit是可选的。 这两个字段指定应保留多少已完成和失败的任务。 默认设置分别为 3 和 1。设置为 0 代表相应类型的任务完成后不会保留。

    实例案例:

    apiVersion: batch/v1beta1
    kind: CronJob
    metadata:
      name: smartctl-info
      namespace: test
    spec:
      schedule: "*/60 * * * *"
      jobTemplate:
        spec:
          template:
            spec:
              containers:
              - name: smartctl-info
                image: smartctl:4.0_test
                imagePullPolicy: IfNotPresent 
                command: ["python", "/usr/smartctlinfo/smartctlinfo.py"]
              nodeSelector:
                disktype: ssd
              restartPolicy: OnFailure
    

      

  • 相关阅读:
    js 基础(面试前必看)
    typescript 使用的几种情况
    flutter 命令卡主的问题
    React 通过注释自动生成文档
    jest 测试入门(一)
    react hooks 全面转换攻略(三) 全局存储解决方案
    缓存穿透、击穿、雪崩区别和解决方案
    java8 lambda表达式
    maven中snapshot快照库和release发布库的区别和作用
    初识 Nacos 以及安装
  • 原文地址:https://www.cnblogs.com/weifeng1463/p/16573312.html
Copyright © 2020-2023  润新知