Pipeline CI/CD ma odpowiedzieć na jedno pytanie: czy tę zmianę można bezpiecznie przekazać dalej? Testy są w nim głównym źródłem odpowiedzi. Problem w tym, że wiele zespołów wrzuca wszystkie testy do jednego kroku. Efekt jest przewidywalny: pipeline trwa 40 minut, developerzy przestają czekać na wynik, a czerwony status staje się tłem, które wszyscy ignorują.
Dobry pipeline nie uruchamia wszystkiego zawsze. Uruchamia właściwe testy we właściwym momencie.
Zasada: najszybsza informacja jak najwcześniej
Każdy etap pipeline’u powinien być szybszy i tańszy od następnego. Najpierw wyłapujemy błędy, które da się wykryć w sekundach, a dopiero potem inwestujemy czas w testy wymagające środowiska, danych i przeglądarki.
W praktyce sprawdza się podział na cztery poziomy.
1. Przy każdym commicie: kontrole statyczne i testy jednostkowe
- lint, formatowanie i analiza typów,
- testy jednostkowe i komponentów,
- skan zależności pod kątem znanych podatności.
Cel: wynik w mniej niż 5 minut. Jeśli ten etap trwa dłużej, developerzy zaczną go omijać.
2. Przy pull requeście: testy integracyjne i API
Tu sprawdzamy, czy moduły i usługi współpracują ze sobą: kontrakty API, zapis i odczyt danych, obsługę błędów, autoryzację. Testy API są zwykle kilkanaście razy szybsze i stabilniejsze niż testy przez interfejs, a wykrywają dużą część problemów integracyjnych.
3. Po scaleniu: krytyczne ścieżki end-to-end
Testy E2E w przeglądarce są najdroższe i najbardziej podatne na niestabilność. Dlatego warto ograniczyć je do kilku–kilkunastu krytycznych ścieżek: logowania, rejestracji, płatności, kluczowego formularza. Uruchamiamy je na środowisku zbliżonym do produkcji, po każdym scaleniu do głównej gałęzi.
4. Przed wydaniem i po nim: smoke testy i monitoring
Po wdrożeniu na preview lub produkcję krótki zestaw smoke testów potwierdza, że aplikacja wstała, kluczowe strony odpowiadają, a integracje działają. Jeśli nie - automatyczny rollback jest tańszy niż nocne gaszenie pożaru.
Przykładowy układ etapów
commit → lint, typy, testy jednostkowe (~3 min)
pull request → testy integracyjne i API (~8 min)
merge do main → E2E krytycznych ścieżek na stagingu (~15 min)
deploy → smoke testy + rollback przy błędzie (~2 min)
nocny build → pełna regresja, dostępność, wydajność
Pełna regresja nie musi blokować każdej zmiany. Może działać w nocnym buildzie i raportować wyniki rano - pod warunkiem, że ktoś je faktycznie czyta.
Gdzie zostaje miejsce na testy manualne?
Automatyzacja w pipeline sprawdza to, co już wiemy, że powinno działać. Nie oceni, czy nowa funkcja ma sens dla użytkownika, czy komunikat błędu jest zrozumiały ani co się stanie, gdy ktoś zrobi coś nieprzewidzianego. Testy eksploracyjne nowych funkcji i przegląd dostępności nadal wymagają człowieka - najlepiej zanim zmiana trafi do wydania, a nie po zgłoszeniu od klienta.
Najczęstsze błędy
- Wszystko w jednym kroku. Długi pipeline to wolny feedback i pokusa obchodzenia go.
- Za dużo testów E2E. Każdy scenariusz, który da się sprawdzić na poziomie API, powinien być tam sprawdzany.
- Tolerowanie niestabilnych testów. Jeden test, który „czasem nie przechodzi”, uczy zespół ignorować czerwony status.
- Brak właściciela wyników. Raport z nocnej regresji, którego nikt nie otwiera, nie jest kontrolą jakości.
- Brak testu rollbacku. Procedura przywracania, której nigdy nie sprawdzono, zwykle zawodzi wtedy, gdy jest potrzebna.
Od czego zacząć?
Nie trzeba przebudowywać całego procesu. Zacznij od zmierzenia, ile trwa obecny pipeline i które testy najczęściej zawodzą bez powodu. Potem wydziel szybki etap dla commitów, przenieś możliwe scenariusze z UI na API i wybierz kilka krytycznych ścieżek E2E. Już te trzy kroki zwykle skracają informację zwrotną o połowę.
Pipeline jest tak wartościowy, jak bardzo zespół ufa jego wynikowi.
Jeśli chcesz, żebyśmy spojrzeli na Twój pipeline i zaproponowali układ testów, opisz produkt - zaczniemy od przeglądu obecnego repozytorium.