Ile kosztuje crowdtesting aplikacji
Crowdtesting to testowanie aplikacji lub strony przez grupę zewnętrznych testerów, którzy pracują zdalnie według scenariusza i zgłaszają błędy. Większość platform nie publikuje cen i wycenia projekt po rozmowie handlowej. W PracaEdu godzina testów według scenariusza kosztuje 54 zł netto, a do tego płacisz abonament planu od 199 zł netto miesięcznie. Test pięciu osób po 6 godzin, czyli 30 godzin, to 1620 zł za godziny i 199 zł abonamentu planu Start, razem 1819 zł netto. Poniżej pokazujemy, jak policzyć to dla własnego wydania.
Co obejmuje crowdtesting, a czego nie
Crowdtesting nie zastępuje testera w Twoim zespole ani testów automatycznych. Sprawdza aplikację oczami zwykłego użytkownika, na różnych urządzeniach i w różnych przeglądarkach, czego wewnętrzny zespół zwykle nie robi, bo zna produkt zbyt dobrze. Zespół uczniów z PracaEdu dobrze sprawdza się w czterech rodzajach testów:
- testy funkcjonalne według scenariusza: rejestracja, logowanie, koszyk, płatność testowa, formularze,
- testy eksploracyjne z ograniczonym zakresem, na przykład nowy moduł przed wydaniem,
- testy regresji po aktualizacji, według tej samej listy kroków co poprzednio,
- ocena użyteczności przez osoby z grupy docelowej, jeśli Twoja aplikacja jest skierowana do nastolatków i młodych dorosłych.
Nie zlecaj nam testów bezpieczeństwa, testów wydajności pod obciążeniem ani audytu dostępności według norm. To praca dla specjalistów z certyfikatami. Nie nadaje się też test, który wymaga dostępu do prawdziwych danych osobowych Twoich klientów.
Przykład liczenia kosztu dla aplikacji sklepu
Weźmy sklep internetowy, który przed świętami wydaje nową ścieżkę zakupu w aplikacji mobilnej. Scenariusz ma 18 kroków: od wyszukania produktu, przez koszyk i kod rabatowy, po płatność testową i e-mail z potwierdzeniem. Firma chce, żeby każdą ścieżkę przeszło kilka osób na różnych telefonach, a potem powtórzyło test po poprawkach.
| Etap | Osoby | Godziny na osobę | Godziny razem | Koszt godzin netto |
|---|---|---|---|---|
| Test pierwszy, pełny scenariusz i zgłoszenia błędów | 5 | 4 | 20 | 1080 zł |
| Test eksploracyjny modułu rabatów | 3 | 3 | 9 | 486 zł |
| Retest po poprawkach | 5 | 2 | 10 | 540 zł |
| Razem | 39 | 2106 zł |
Pięć osób mieści się w planie Start za 199 zł netto miesięcznie, więc cały cykl kosztuje 2305 zł netto plus 23% VAT, czyli 2835,15 zł brutto. Przy płatności rocznej abonament jest o połowę niższy. Jeśli chcesz więcej testerów naraz albo kilka projektów równolegle, plan Rekrutacja (399 zł netto, do 20 osób) da ten sam cykl za 2505 zł netto.
Najważniejsze dla budżetu: godziny zatwierdzasz po sprawdzeniu zgłoszeń. Jeśli raport jednej osoby nie zawiera kroków do odtworzenia błędu ani zrzutu ekranu, odrzucasz go i nie płacisz za ten czas. Platformy crowdtestingowe rozliczają zwykle pakiet lub liczbę testerów z góry. Jeśli testujesz sklep, a nie aplikację mobilną, gotową listę obszarów i przykład zgłoszenia znajdziesz na stronie o testowaniu sklepu internetowego.
Crowdtesting na platformie, software house czy zespół uczniów
| Cecha | Platforma crowdtestingowa | Dział QA w software house | Zespół uczniów PracaEdu |
|---|---|---|---|
| Cennik | Najczęściej wycena po rozmowie | Stawka za godzinę testera lub ryczałt | 54 zł netto za godzinę testów plus abonament od 199 zł |
| Kto testuje | Testerzy z wielu krajów, różne doświadczenie | Doświadczeni testerzy, często z certyfikatem | Uczniowie liceów, techników i szkół branżowych z Polski |
| Język testu | Często angielski | Polski lub angielski | Polski, angielski i niemiecki po sprawdzianie językowym |
| Rozliczenie | Pakiet lub cykl testowy | Godziny lub projekt | Godziny zatwierdzone po sprawdzeniu zgłoszeń |
| Gdzie wygrywa | Duże pokrycie urządzeń w wielu krajach | Złożone systemy, testy automatyczne, bezpieczeństwo | Polskojęzyczne aplikacje, powtarzalne scenariusze, młoda grupa docelowa |
Jeśli Twoja aplikacja działa w jednym kraju i po polsku, płacenie za globalną bazę testerów często nie ma sensu. Jeśli wydajesz produkt na dwadzieścia rynków, platforma będzie lepszym wyborem. Podobnie wyglądało nasze porównanie przy zadaniach biurowych w tekście zespół uczniów czy freelancer.
Kiedy crowdtesting się nie opłaca
Są sytuacje, w których lepiej wydać te pieniądze inaczej. Pierwsza to aplikacja we wczesnej fazie, w której co tydzień zmienia się połowa ekranów. Scenariusz dezaktualizuje się szybciej, niż zespół zdąży go przejść, a Ty płacisz za zgłoszenia błędów w funkcjach, których za tydzień już nie będzie. Druga to produkt dla wąskiej grupy specjalistów, na przykład system dla laboratoriów albo program księgowy. Uczeń nie oceni, czy wynik obliczenia jest poprawny merytorycznie, sprawdzi tylko, czy przyciski działają. Trzecia to testy, które trzeba powtarzać przy każdym wdrożeniu, codziennie. Tu szybciej zwróci się automatyzacja.
Crowdtesting opłaca się najbardziej przed konkretnym wydaniem: nowa ścieżka zakupu, nowa wersja aplikacji, migracja sklepu na inną platformę, kampania, przed którą ruch wzrośnie kilkukrotnie. Wtedy kilkadziesiąt godzin testów kosztuje mniej niż jeden dzień zepsutego koszyka.
Jak przygotować test, żeby nie przepłacić
Koszt crowdtestingu rośnie przede wszystkim przez niejasny scenariusz. Tester, który nie wie, co ma sprawdzić, klika po aplikacji i zgłasza rzeczy, które Ciebie nie interesują. Przed startem przygotuj:
- Scenariusz krok po kroku z oczekiwanym wynikiem każdego kroku. 15 do 25 kroków na jedną ścieżkę to rozsądny rozmiar.
- Środowisko testowe z kontami testowymi i płatnością w trybie testowym. Nigdy nie dawaj testerom dostępu do produkcyjnych danych klientów.
- Wzór zgłoszenia błędu: tytuł, kroki do odtworzenia, wynik oczekiwany, wynik rzeczywisty, urządzenie i system, zrzut ekranu lub nagranie.
- Listę rzeczy znanych, żeby nikt nie zgłaszał po raz piąty błędu, który już naprawiacie.
- Próbę na dwóch osobach. Puść scenariusz najpierw dwóm testerom na godzinę, popraw niejasne kroki i dopiero wtedy uruchom cały zespół.
W panelu PracaEdu opisujesz oczekiwane zachowanie, sposób zapisu uwag i materiały potrzebne do odtworzenia problemu już przy zakładaniu projektu. Zespół widzi to samo, więc pytań jest mniej.
Najczęstsze pytania przed zamówieniem testów
Ile kosztuje testowanie aplikacji mobilnej?
Zależy od liczby ścieżek, urządzeń i powtórzeń. Mały cykl, czyli jedna ścieżka, pięć osób i retest, to zwykle 30 do 40 godzin. W PracaEdu daje to około 1600 do 2200 zł netto za godziny plus abonament od 199 zł. Software house wyceni to w swojej stawce godzinowej testera.
Czy uczniowie mogą legalnie testować aplikacje?
Tak, jeśli to praca lekka, a osoby niepełnoletnie mają zgodę rodzica. Uczniowie w wieku 16 i 17 lat pracują w roku szkolnym do 12 godzin tygodniowo, nie między 22:00 a 6:00. Panel pilnuje tych limitów. Zasady opisuje Kodeks pracy, a kontroluje je Państwowa Inspekcja Pracy.
Jak chronić poufność aplikacji przed wydaniem?
Udostępnij tylko środowisko testowe, konta testowe i dane fikcyjne. Uczniowie opisują udział w projekcie w CV z zachowaniem poufności danych projektu, czyli bez szczegółów Twojej aplikacji. Jeśli aplikacja jest objęta tajemnicą handlową, ogranicz test do zamkniętego zakresu funkcji.
Jak szybko można zacząć test?
Dobór zespołu trwa do 7 dni roboczych w planie Start, do 5 dni w planie Rekrutacja i do 72 godzin w planie Program. Przy wydaniu z ustaloną datą zamów zespół z wyprzedzeniem i zrób próbę na dwóch osobach tydzień przed terminem.
Dane osobowe w testach
Jeśli scenariusz wymaga wpisywania danych, używaj danych fikcyjnych. Gdy test musi dotknąć prawdziwych danych osobowych, potrzebujesz podstawy prawnej i umowy powierzenia, a to wykracza poza lekkie zadania. Wytyczne dotyczące danych testowych publikuje Urząd Ochrony Danych Osobowych. Najprościej w ogóle ich nie używać.
Zamów zespół testerów
Jeśli masz aplikację po polsku i scenariusz, który da się opisać na jednej stronie, zacznij od małego cyklu w planie Start. Opisz projekt, dołącz scenariusz i wzór zgłoszenia, a my dobierzemy zespół. Stawki i plany znajdziesz w cenniku, a model rozliczania godzin na stronie wynajem pracowników na godziny. Gdy po testach potrzebujesz też ludzi do uzupełniania treści w sklepie, sprawdź ofertę pracowników do katalogowania produktów albo przeglądu cen konkurencji, który opisujemy w artykule badanie cen konkurencji. Ogólne zasady współpracy opisujemy na stronie dla pracodawców.