Публикация Школы траблшутеров

Алгоритм траблшутера: как найти причину сбоя

Время чтения: 6 мин 45 сек
21 ноября 2026 Просмотров: 5

Одиннадцать с лишним часов ищет причину отказа насосной бригада «Кедра», проверяя версии по привычке, и около четырёх – по алгоритму траблшутера. Основатель «Школы траблшутеров», экс-директор Альфа-Банка по процессам, Олег Брагинский рисует этот алгоритм в четырёх нотациях и выбирает самую понятную для руководителей компаний.

Алгоритм траблшутера: как найти причину сбоя

Рис. 1. Схема по ГОСТ 19.701: сначала изменения, потом гипотезы

В среду начали поступать многочисленные жалобы на сбои в программе AlfaCheck, которая месяцами давала Альфа-Банку небывалое преимущество на рынке потребительских займов и кредитных карт. Собрал тимлидов и задал один вопрос: что в коде изменилось вчера?

Ответа никто не знал. Провели анализ: подключили библиотеку анимированных изображений, чтобы развлекать сотрудников во время затягивавшихся автоматических процедур. Отображение гифок в свежей версии библиотеки приводило к постепенному исчерпанию памяти.

Работа шла в ускоренном режиме – до 35 секунд на кредит в худшем случае, поэтому эффект оказался катастрофическим и по числу сбоев, и по влиянию на бизнес.

Короткий ответ: сначала спрашивают, что менялось перед сбоем, а потом проверяют гипотезы по убыванию шанса подтвердиться на час проверки.

Рисовать такой поиск руководителю удобнее всего на языке ДРАКОН: две развилки, одна петля и ни одного пересечения линий.

Как устроен метод?

Алгоритм траблшутера – способ искать причину сбоя по шагам: описать симптом, проверить, что недавно меняли, составить гипотезы и проверять их в выгодном порядке, пока одна не подтвердится. По ГОСТ 19.701 – две развилки и цикл «Пока есть непроверенные».

Кепнер и Трего описали поиск причины через сравнение «где есть сбой – где нет» в книге «Рациональный менеджер» 1965 года, а в «Тойоте» учили пять раз спрашивать «почему?».

Почему симптом – ещё не причина?

Работал над компьютерной расшифровкой кардиограмм для великого хирурга Амосова. Получил обширные инструкции, разработал регламент, придумал чек-лист, но дело не шло.

Как-то медик сгоряча сказал: ищешь симптомы, а нужно понимать причину.

Чек-лист перечисляет признаки, а алгоритм ведёт от признаков к механизму: каждая гипотеза – предположение о причине, которое проверка подтверждает или отбрасывает.

Как это выглядит на деле?

Сервисная компания «Кедр» получает жалобу: насосная на объекте не держит давление. Версий шесть: настройки контроллера после обновления, засор фильтра, утечка в трубе, износ насоса, датчик давления и питание двигателя. У каждой – шанс оказаться причиной и часы на проверку: от получаса до шести.

image html

Рис. 2. Пример: порядок проверок решает, сколько часов уйдёт на поиск

Слесарь по привычке начинает с насоса и трубы – в среднем 11,4 часа до причины. По убыванию вероятности выходит 5,0 часа, а по шансу на час – 4,1: за два часа причина находится в 65% случаев против нуля у привычного порядка.

Чем опасно мнение большинства?

Буровая установка перед отправкой в Индию не запустилась на стенде предварительной сборки. Собрали хор старожилов, и те объявили виновником новомодный ленинградский станок с ЧПУ: с ним никто не хотел работать, наладка была кропотливой и сложной.

Когда комиссия огласила вердикт, все ахнули: ошибка оказалась в химическом составе сплава корпуса мотора, что считалось делом практически невозможным.

Голосование назначает виновного, а не находит причину. Версию со станком стоило проверить, но наравне с остальными – по шансу и цене проверки, а не по неприязни к новой технике, которую никто не хотел толком осваивать.

Где поиск буксует?

Разрабатывал вторую версию антивируса, добавляя модули для лечения разных типов зловредов. О рефакторинге в те годы ещё не знал и, предсказуемо, запутался в связях.

Как-то пошёл лечить OneHalf преподавателю по кличке Дед Магнит, которого боялась вся соседняя кафедра. Тот угостил дефицитной тогда колбасой, сыром и даже налил коньяку.

А я вирус именно ему и не полечил. Первую причину понял через пару часов: не предусмотрел прогресс-бар для процедуры расшифровки. А вот вторую искал наугад неделями, перебирая версии в коде и голове, пока не нашёл нужный алгоритм и не выдохнул.

Перебор вслепую – главный пожиратель времени. Когда версий кода много, их делят пополам, как в двоичном поиске из начала сборника: за десять проверок находят виновную среди тысячи.

Этой статьёй курс завершается: двадцать четыре способа думать по шагам.

Сколько стоит поиск?

Модель: расчёт порядка для шести гипотез – минута в таблице: поделить шанс на часы и отсортировать. Выигрыш – семь часов в среднем на сбое против привычного порядка.

Какими нотациями рисовать поиск?

ГОСТ 19.701 показывает развилки и цикл, его ценят разработчики и аудиторы.

ДРАКОН любят руководители и инженеры: главная линия идёт сверху вниз, обе ветки «да» уходят вправо и сходятся, линии нигде не пересекаются.

image html

Рис. 3. Тот же поиск на шампуре с двумя развилками

Язык ДРАКОН создали в 1986–1996 годах для программы «Буран» под руководством Владимира Паронджанова, чтобы схемы алгоритмов читались без разночтений.

EPC предпочитают методологи: события чередуются с функциями, а у каждой функции виден исполнитель – дежурный, тимлиды или траблшутер. Нотацию придумали в 1992 году в Саарбрюккене для системы моделирования ARIS.

image html

Рис. 4. Тот же поиск цепочкой шестиугольников и блоков

BPMN выбирают владельцы процессов, когда в поиске участвуют несколько ролей: руководитель задаёт вопрос, команда ищет изменения, траблшутер проверяет гипотезы, и на схеме сразу видно, кто кого и сколько ждёт.

image html

Рис. 5. Тот же поиск, разложенный по дорожкам

Какая нотация лучше?

Лучшая нотация для алгоритма траблшутера – ДРАКОН: 21 балл против 19 у BPMN, 16 у ГОСТ и 15 у EPC. Руководитель за минуту видит обе развилки и петлю проверок. Вес вопроса о руководителе удвоен: сборник написан для него.

image html

Рис. 6. Оценка четырёх нотаций: 16, 21, 15 и 19 баллов

BPMN отстал на два балла и нужен, когда поиск ведут несколько команд, EPC – для регламента, ГОСТ – разработчикам.

Что сделать руководителю?

Хватит четырёх шагов:

  1. Первым делом спросите, что менялось перед сбоем, и ведите журнал изменений.
  2. Запишите гипотезы с шансом и часами на проверку и идите по убыванию шанса на час.
  3. Не назначайте виновного голосованием: проверяйте версии, а не мнения.
  4. Найдя причину, проверьте её: убрали – сбой исчез, вернули – появился.

Что запомнить?

  • сначала – что менялось
  • симптом не причина
  • выгодный порядок проверок экономит часы
  • большинство может ошибаться
  • алгоритм траблшутера лучше всего рисовать на языке ДРАКОН.