Як автоматично видалити завершені завдання Kubernetes, створені CronJob?

Чи є спосіб автоматичного видалення виконаних завдань, крім створення CronJob для очищення виконаних завдань?

Документація про роботу K8s стверджує, що передбачувана поведінка виконаних завдань полягає у тому, щоб вони залишались у завершеному стані до видалення вручну. Оскільки я працюю тисячами вакансій щодня через CronJobs, і я не хочу тримати завершені вакансії.

Тепер ви можете встановити обмеження історії або взагалі вимкнути історію, щоб невдалі або успішні CronJobs не тривали довгий час. Дивіться мою відповідь тут . Документація тут .

Щоб встановити обмеження історії :

.spec.successfulJobsHistoryLimitІ .spec.failedJobsHistoryLimitполя є необов'язковими. У цих полях вказано, скільки виконаних та невдалих завдань слід зберігати. За замовчуванням вони встановлюються на 3 та 1 відповідно. Встановлення обмеження 0відповідає збереженню жодного із відповідних видів робіт після їх закінчення.

Конфігурація з 0 обмеженнями виглядатиме так:

apiVersion: batch/v1beta1
kind: CronJob
metadata:
  name: hello
spec:
  schedule: "*/1 * * * *"
  successfulJobsHistoryLimit: 0
  failedJobsHistoryLimit: 0
  jobTemplate:
    spec:
      template:
        spec:
          containers:
          - name: hello
            image: busybox
            args:
            - /bin/sh
            - -c
            - date; echo Hello from the Kubernetes cluster
          restartPolicy: OnFailure

Це можливо з версії 1.12 Alpha with ttlSecondsAfterFinished. Приклад автоматичного очищення готових завдань :

apiVersion: batch/v1
kind: Job
metadata:
  name: pi-with-ttl
spec:
  ttlSecondsAfterFinished: 100
  template:
    spec:
      containers:
      - name: pi
        image: perl
        command: ["perl",  "-Mbignum=bpi", "-wle", "print bpi(2000)"]
      restartPolicy: Never

Я виявив, що наведене нижче працює

Щоб видалити невдалі завдання:

kubectl delete job $(kubectl get jobs | awk '$3 ~ 0' | awk '{print $1}')

Щоб видалити виконані завдання:

kubectl delete job $(kubectl get jobs | awk '$3 ~ 1' | awk '{print $1}')

Я використовую wernight / kubectl «s kubectl зображення

запланував cron, видаливши все, що є

• completed
• 2 - 9 days old (отже, у мене є 2 дні, щоб переглянути будь-які невдалі роботи)

він працює кожні 30 хвилин, тому я не враховую роботи старше 10 днів

apiVersion: batch/v1beta1
kind: CronJob
metadata:
  name: cleanup
spec:
  schedule: "*/30 * * * *"
  jobTemplate:
    spec:
      template:
        spec:
          containers:
          - name: kubectl-runner
            image: wernight/kubectl
            command: ["sh", "-c", "kubectl get jobs | awk '$4 ~ /[2-9]d$/ || $3 ~ 1' | awk '{print $1}' | xargs kubectl delete job"]
          restartPolicy: Never

Нещодавно я створив kubernetes-оператор для виконання цього завдання.

Після розгортання він буде контролювати вибраний простір імен і видаляти виконані завдання / підсистеми, якщо вони виконані без помилок / перезапусків.

https://github.com/lwolf/kube-cleanup-operator

Використання jsonpath:

kubectl delete job $(kubectl get job -o=jsonpath='{.items[?(@.status.succeeded==1)].metadata.name}')

Інший спосіб використання селектора поля :

kubectl delete jobs --field-selector status.successful=1 

Іншим способом запустити це в cronjob, подібним до іншої відповіді, буде:

Створити обліковий запис служби зі списком пакетів / завдань та видалити дозвіл; Він використовує bitnami kubectl, оскільки запропоноване зображення kubectl не має field-selectorопції

apiVersion: batch/v1beta1
kind: CronJob
metadata:
  name: jobs-cleanup
spec:
  schedule: "*/30 * * * *"
  jobTemplate:
    spec:
      template:
        spec:
          serviceAccountName: my-sa-name
          containers:
          - name: kubectl-container
            image: bitnami/kubectl:latest
            command: ["sh", "-c", "kubectl delete jobs --field-selector status.successful=1"]
          restartPolicy: Never

Як зазначено в документації "Користувач повинен видалити старі завдання", див Http://kubernetes.io/docs/user-guide/jobs/#job-termination-and-cleanup

Я запустив би стручок, щоб виконати це очищення, виходячи з назви посади та певних умов, дозволяючи kubernetes принаймні подбати про доступність вашого процесу тут. Для цього ви можете запустити повторюване завдання (за умови, що ви запустили kubernetes 1.5).

Простий спосіб їх видалити, виконавши завдання cron:

kubectl get jobs --all-namespaces | sed '1d' | awk '{ print $2, "--namespace", $1 }' | while read line; do kubectl delete jobs $line; done