Разборы

Технические разборы симптомов, причин и проверяемых выводов.

2 разбора

  1. 2 мин чтения

    Бэкап, который удалил систему

    Сервер отвечал на ping и пускал по SSH, но не мог запустить ни одного нового процесса. Два часа ушло на версию об отказе диска. Причиной оказался мой собственный скрипт отправки бэкапов, выкаченный за четыре минуты до аварии.

  2. 1 мин чтения

    Неделя, когда мониторинг показывал ноль

    Воркеры были живы, панели показывали ноль скачиваний, а единственный сработавший алерт указывал не туда. Почему поиск целей в Prometheus молча возвращал пустой список и почему это не считалось ошибкой.