Сборка на шесть минут: что реально помогло
Восемнадцать минут от пуша до зелёной галочки — это не «терпимо». Это двадцать запусков в день, помноженные на ожидание и переключение контекста. Мы взялись за это без переписывания пайплайна с нуля и дошли до шести минут. Вот что дало эффект, а что оказалось пустой тратой времени.
Сначала измерение, потом оптимизация
Первое, что мы сделали — перестали спорить и посмотрели на таймлайн. Он показал неожиданное: половину времени съедал не билд, а подготовка окружения и тесты, которые запускались последовательно после линтера.
Правило простое: не оптимизируйте шаг, пока не увидели его в отчёте. Ощущение «долго собирается» почти всегда указывает не туда.
Что дало эффект
1. Кэш зависимостей по lock-файлу
Кэшировать надо не «node_modules», а результат установки, привязанный к хэшу lock-файла. Ключ вида deps-${{ hashFiles('**/package-lock.json') }} даёт попадание почти всегда, кроме тех коммитов, где зависимости действительно менялись.
Эффект: минус три с половиной минуты. Самый дешёвый выигрыш из всех.
2. Параллельные джобы вместо последовательных
Линтер, юнит-тесты и сборка не зависят друг от друга. Мы разнесли их в отдельные джобы и объединили в один обязательный чек через needs.
jobs:
lint: { ... }
unit: { ... }
build: { ... }
required:
needs: [lint, unit, build]
runs-on: ubuntu-latest
steps:
- run: echo ok
Эффект: критический путь сократился до самого долгого джоба, а не суммы всех.
3. Тесты по файлам, а не «всё сразу»
Один прогон на 4000 тестов плохо параллелится и плохо диагностируется. Мы разрезали набор на четыре шарда по времени выполнения, а не по количеству файлов — иначе один тяжёлый файл съедает весь шард.
pytest -n 4 --dist loadfile
Эффект: минус четыре минуты, но только после того, как мы убрали тесты, которые ходили в сеть.
4. Отказ от «на всякий случай» шагов
В пайплайне жили шаги, которые никто не читал: генерация отчёта покрытия, который не открывали; проверка орфографии в комментариях; сборка docker-образа на каждый коммит в ветку, где он не нужен.
Мы удалили всё, что не влияет на решение «мержить или нет». Это не оптимизация — это гигиена. Минус полторы минуты и минус раздражение.
Что не помогло
- Более мощный раннер. Дороже в три раза, быстрее на 40 секунд: узкое место было в последовательности, а не в CPU.
- Кэш всего подряд. Кэш докер-слоёв без аккуратного ключа давал ложные попадания и «зелёные» сборки со старым кодом. Однажды это стоило нам отката.
- Свой раннер на домашнем сервере. Работал, пока не сломался диск в субботу. Для команды из шести человек это неэкономия, а новый дежурный.
Что осталось
Шесть минут — это не предел, но дальнейшее упирается в интеграционные тесты, которые поднимают базу и внешние заглушки. Следующий шаг — переиспользовать контейнер с базой между джобами, но это уже отдельная история с отдельными граблями.
Главное, что я вынес: быстрый CI — это не про железо. Это про то, чтобы не делать работу, результат которой никто не смотрит.