Диагностика Pod в состоянии Pending или CrashLoopBackOff

Задача и общий подход

Материал посвящён теме «Диагностика Pod в состоянии Pending или CrashLoopBackOff» с акцентом на безопасности и ограничению доступа.

Kubernetes добавляет уровни контейнера, Pod, Service, Ingress и сетевой политики. Диагностика должна определить, где объект перестаёт быть готовым.

Практический порядок одинаков для любой рабочей системы: зафиксировать исходное состояние, создать резервную точку, изменить один компонент, проверить результат и только затем переходить дальше.

Когда применять этот порядок

Этот сценарий подходит для следующих ситуаций:

• плановое внедрение или перенос компонента категории «Kubernetes» на новый VPS
• изменение портов, домена, сертификата, маршрута или способа публикации сервиса
• разбор инцидента, когда локальная и внешняя проверки дают разные результаты
• подготовка к обновлению пакета или восстановлению после неудачного изменения

Что должно получиться

После выполнения руководства по теме «Диагностика Pod в состоянии Pending или CrashLoopBackOff» результат должен быть измеримым:

• получить воспроизводимую конфигурацию, проверяемую командами
• оставить наружу только необходимые интерфейсы и порты
• зафиксировать логи и признаки успешного запуска
• сохранить резервную точку и понятный сценарий отката

Резервная точка

Сохраните именно те файлы и параметры, которые собираетесь менять.

TS=$(date +%F-%H%M%S)
mkdir -p /root/iiadmin-change-$TS
cp -a /path/to/config /root/iiadmin-change-$TS/
systemctl status SERVICE --no-pager > /root/iiadmin-change-$TS/status-before.txt
ss -lntup > /root/iiadmin-change-$TS/listeners-before.txt

Рядом с копией запишите точную команду восстановления. Это особенно важно, если откат будет выполнять другой администратор.

Подготовка перед изменениями

Подготовительный этап снижает риск потерять доступ и смешать несколько причин одной неисправности.

• Откройте вторую административную сессию и не закрывайте текущую.
• Проверьте свободное место, DNS и системное время.
• Сохраните копии изменяемых файлов с датой и временем.
• Подготовьте команду отката до применения изменений.
• Зафиксируйте текущие порты, процессы и состояние службы.

Пошаговая настройка

Выполняйте блоки последовательно и после каждого шага проверяйте код возврата команды.

kubectl describe pod POD_NAME -n NAMESPACE

kubectl get nodes -o wide
kubectl get pods -A -o wide

kubectl logs POD_NAME -n NAMESPACE --all-containers --tail=200
kubectl logs POD_NAME -n NAMESPACE --previous

kubectl get svc,endpoints -n NAMESPACE
kubectl get pod -n NAMESPACE --show-labels

kubectl top nodes
kubectl top pods -A
kubectl describe node NODE_NAME

Имена доменов, адреса, порты и пути в примерах условные. Перед выполнением замените их фактическими значениями.

Проверка результата

Проверка должна охватывать конфигурацию, процесс, listener и реальный запрос.

• узлы Ready
• Pod проходит readiness
• Service имеет endpoints
• метки совпадают
• Ingress направляет на нужный Service

systemctl is-active SERVICE
systemctl status SERVICE --no-pager
journalctl -u SERVICE -n 80 --no-pager
ss -lntup

Типичные ошибки

Чаще всего восстановление усложняют следующие действия:

• изменение нескольких компонентов одной командой без промежуточных тестов
• игнорирование различий правил IPv4 и IPv6
• открытие административного порта для всего интернета
• удаление рабочей конфигурации до успешного запуска новой
• использование устаревшей команды без проверки версии пакета
• перезапуск службы до проверки синтаксиса

Безопасность

После получения рабочего результата уменьшите количество исключений и временных разрешений.

• просматривайте журналы аутентификации и ошибки запуска
• используйте принцип минимально необходимых прав
• ограничивайте административный доступ доверенными IP или VPN
• выдавайте файлам конфигурации минимальные права
• закрывайте временные порты после завершения теста

Диагностика, если не заработало

Диагностика строится как последовательное исключение уровней, а не случайный набор перезапусков.

1. Подтвердите симптом точной командой и запишите время.
2. Проверьте конфигурацию штатным тестом.
3. Проверьте процесс и последние записи журнала.
4. Убедитесь, что нужный адрес и порт слушаются.
5. Сравните локальный запрос с запросом извне.
6. Только затем проверяйте firewall, DNS и маршрут.
7. Меняйте одну переменную и повторяйте тот же тест.

Для темы «Диагностика Pod в состоянии Pending или CrashLoopBackOff» важно не путать открытый firewall с запущенным сервисом: правило доступа не создаёт listener, а активный процесс не гарантирует доступность извне.

Дальнейшее сопровождение

Рабочая конфигурация со временем устаревает и требует контроля.

• периодически выполняйте тестовое восстановление
• храните резервную копию вне VPS
• после обновления повторяйте тест конфигурации и портов
• документируйте нестандартные пути и зависимости
• контролируйте таймеры, сертификаты и автоматические задания

Откат изменений

Откат выполняется в обратном порядке и с теми же проверками, что использовались после настройки.

1. rollout history
2. rollout undo
3. проверить rollout status
4. не удалять тома до проверки данных

Не удаляйте неудачную конфигурацию до выяснения причины: она полезна для diff и разбора инцидента.

Контрольный список

Перед тем как считать тему «Диагностика Pod в состоянии Pending или CrashLoopBackOff» закрытой, пройдите список:

Что дополнительно сверить в документации

При подготовке материала были сопоставлены разделы русскоязычной документации. Для углублённой проверки полезно изучить:

• Как установить кластер Kubernetes в Ubuntu 22.04 и 24.04
• Kubernetes
• Предварительные требования
• Настройка операционной системы
• Установка CRI-O
• Установка Kubernetes
• Проверка работоспособности кластера
• Заключение

Финальная проверка с точки зрения реального клиента

Последнюю проверку темы «Диагностика Pod в состоянии Pending или CrashLoopBackOff» выполняйте тем же способом, которым сервисом будет пользоваться человек или приложение: с нужным доменом, протоколом, учётной записью и внешней сетью. Локальная команда остаётся диагностическим этапом, но не заменяет прохождение всей цепочки.

После успешного ответа ещё раз просмотрите журнал и убедитесь, что запрос попал в ожидаемый компонент, не создал скрытую ошибку и не использовал старый кэш. Результат и время проверки полезно сохранить рядом с резервной точкой.

kubectl get svc,endpoints -n NAMESPACE
kubectl get pod -n NAMESPACE --show-labels

Побочные эффекты и соседние компоненты

Изменение по теме «Диагностика Pod в состоянии Pending или CrashLoopBackOff» может затронуть соседние части схемы: права файлов, DNS, firewall, reverse proxy, сертификаты, автоматические задания или порядок запуска. До работы перечислите эти связи и выберите по одной короткой проверке для каждой критичной зависимости.

После получения основного результата убедитесь, что ранее работавшие функции не ухудшились. Такая регрессионная проверка особенно важна на сервере, где один публичный порт или веб-сервер обслуживает несколько независимых сервисов.

Результаты регрессионной проверки записывайте теми же командами, которые использовались до изменения. Это делает сравнение объективным и помогает быстро доказать, что соседний компонент не пострадал.

• основной сервис отвечает тем же способом, что и до изменения
• административный доступ и аварийная консоль остаются доступны
• временные listeners и правила не заняли рабочие порты
• журналы не показывают новые повторяющиеся ошибки

Данные, которые нужно сохранить до изменения

Перед работой по теме «Диагностика Pod в состоянии Pending или CrashLoopBackOff» сохраните состояние именно тех компонентов, которые участвуют в схеме: активную конфигурацию, статус процесса, открытые порты, последние ошибки и результат контрольного запроса. Этот набор позволит отличить последствия новой правки от ранее существовавшего поведения.

Полезно хранить вывод в одном каталоге с временной меткой и коротким README. При разборе инцидента это быстрее, чем повторно собирать сведения после нескольких перезапусков.

kubectl describe pod POD_NAME -n NAMESPACE

Декларативные ресурсы, Helm и секреты

Для повторного развёртывания сохраняйте исходные манифесты, Helm values, namespaces, RBAC, сетевые политики и параметры Ingress. Экспорт текущего объекта полезен для диагностики, но может содержать служебные поля и не заменяет исходный Git-репозиторий.

Secrets требуют отдельной политики. Base64 не является шифрованием, поэтому значения не должны попадать в публичный архив или журнал генератора.

kubectl get ns
kubectl get deploy,sts,ds,svc,ingress -A
kubectl get role,rolebinding,clusterrole,clusterrolebinding -A
helm list -A

Источники и документация

Источники использованы для выбора терминов, контрольных вопросов и команд. Полные абзацы чужих публикаций не копируются.

• Как установить кластер Kubernetes в Ubuntu 22.04 и 24.04