fix-flaky-tests — скилл для Claude Code: чинит нестабильные тесты

Что делает fix-flaky-tests

Скилл работает через CLI Tuist. Сначала он тянет метрики теста командой tuist test case show <id-or-identifier> --json, потом смотрит историю нестабильных прогонов через tuist test case run list Module/Suite/TestCase --flaky --json, а детали падения — сообщение, путь к файлу и номер строки — берёт из tuist test case run show <test-case-run-id> --json. Дальше открывает исходник по указанному пути и правит.

Если конкретный тест не задан, скилл сам ищет все нестабильные: tuist test case list --flaky --json --page-size 50. Он группирует их по сьютам, потому что несколько падающих тестов в одном сьюте часто имеют общую причину. Отдельно проверяет, не упали ли тесты в одном прогоне из-за краха процесса, а не из-за собственной ошибки.

Внутри — каталог типовых причин: гонки и незакрытые ожидания, общее состояние между тестами, зависимость от сети, времени и путей, порядок запуска. Для крахов есть разбор по crash_report: EXC_BREAKPOINT, EXC_BAD_ACCESS, EXC_CRASH. Правку скилл советует делать минимальную, без рефакторинга соседнего кода. Проверка — повторный прогон через xcodebuild test с -test-iterations и -run-tests-until-failure; для быстрых юнит-тестов он советует начать с 50–100 итераций, для медленных интеграционных хватит 2–5. Учтите: воспроизвести гонку или проблему, которая видна только на CI, локально может не получиться, тогда скилл идёт от логов и анализа кода.