Po co marce test prototypu na grupie 15-19
Zespół projektowy i dział marketingu zwykle nie należą do grupy, do której sprzedają. Dziewczyny 15-19 szybko wyczuwają, co jest ich, a co jest „dla młodzieży” w wersji dorosłych. Test przed premierą daje sygnał od osób, które faktycznie noszą takie rzeczy, i to w kontekście, w którym podejmują decyzje: obok innych stylizacji, na telefonie, w kilka sekund. Na Najmodniej takie testy prowadzimy w ramach usługi trend forecasting, na tych samych mechanizmach, co codzienne pojedynki stylizacji.
Jak zaprojektować uczciwy test A vs B
Dobry test porównuje jedną różnicę naraz. Jeśli wersja A ma inny kolor, inny krój i inne zdjęcie niż wersja B, nie dowiesz się, co zdecydowało.
- Jedna zmienna: kolor, długość, krój, nadruk albo hasło kampanii, nie wszystko jednocześnie.
- Te same warunki zdjęcia: to samo światło, tło, kadr i ta sama stylizacja reszty stroju.
- Losowa kolejność: wersje pokazywane raz po lewej, raz po prawej stronie, żeby strona ekranu nie wpływała na wynik.
- Bez logo i ceny, jeśli testujesz sam projekt. Cenę i markę testuj osobno.
- Pytanie zamknięte i jasne: „Którą wersję byś założyła do szkoły?” mówi więcej niż „Która ładniejsza?”.
Próbę i próg głosów ustal przed startem
Najczęstszy błąd to zaglądanie do wyniku co godzinę i zatrzymanie testu, gdy wygląda dobrze. Przy małej liczbie głosów przewaga jednej wersji potrafi się odwrócić kilka razy. Dlatego przed startem ustal dwie rzeczy: minimalną liczbę głosów, po której w ogóle patrzysz na wynik, i minimalną przewagę, którą uznasz za decyzję. Im mniejsza różnica między wersjami, tym więcej głosów potrzeba, żeby odróżnić ją od przypadku: niepewność wyniku maleje wraz z pierwiastkiem z liczby głosów, więc czterokrotnie większa próba zmniejsza ją mniej więcej o połowę. Wynik bliski remisowi przy małej próbie traktuj jako brak rozstrzygnięcia, a nie jako zwycięstwo którejkolwiek wersji.
- Próg głosów i minimalna przewaga zapisane w briefie przed startem.
- Stały czas trwania testu, obejmujący dni szkolne i weekend.
- Wynik oglądany dopiero po zamknięciu głosowania.
Jakość głosów i ochrona przed farmami kont
Test ma sens tylko wtedy, gdy głosuje grupa docelowa, a nie boty albo kilka osób z wieloma kontami. Na Najmodniej głosuje wyłącznie zalogowana użytkowniczka z potwierdzonym e-mailem, jeden głos na stylizację, bez głosów anonimowych i bez kupowania głosów. Działa limit głosów na konto i IP na dobę oraz wykrywanie serii: wiele kont z jednego urządzenia albo sieci i nienaturalne tempo głosowania. Głosy z farmy kont są unieważniane przed ogłoszeniem wyniku, więc marka dostaje wynik już oczyszczony.
Co mierzyć, a czego nie wnioskować
Głosowanie A vs B mówi, która wersja jest preferowana przez głosujących w danym kontekście. To dużo, ale nie wszystko.
- Mierz: udział głosów dla każdej wersji po zamknięciu testu, różnice między stylami (na przykład streetwear i clean girl), między okazjami i między miastami w ujęciu zbiorczym.
- Mierz: komentarze moderowane pod stylizacjami, bo często mówią, dlaczego wersja przegrała (za krótka, zły odcień, niewygodna).
- Nie wnioskuj: że zwycięska wersja się sprzeda w konkretnej liczbie sztuk. Preferencja to nie deklaracja zakupu.
- Nie wnioskuj: o całym rynku, jeśli testujesz jedną grupę wiekową i jeden kontekst.
- Nie wnioskuj: z bardzo małej przewagi przy małej liczbie głosów.
- Nie porównuj wyników testów prowadzonych w różnych warunkach, na przykład ze zdjęciami o innej jakości.
Dane zbiorcze bez danych osób
Marka dostaje wyniki wyłącznie w ujęciu zbiorczym: udziały głosów, podział według stylów, okazji, miast i grup wiekowych w przedziałach, bez imion, adresów e-mail i zdjęć osób, które głosowały. Rankingi szkół nie istnieją, licea są pokazywane tylko zbiorczo po mieście albo stylu. Dzięki temu test spełnia zasadę minimalizacji danych z RODO, a jednocześnie daje marce wszystko, czego potrzebuje do decyzji. Jeśli chcesz, żeby prototyp był też wystylizowany przez uczestniczki, połącz test z formatem kampania z influencerami i dostaniesz dodatkowo treści ze zgodami.
Jak zamienić wynik w decyzję
- Wyraźna przewaga powyżej progu: wersja idzie do produkcji albo do kampanii, a przegrana do archiwum z notatką, dlaczego przegrała.
- Remis albo przewaga poniżej progu: obie wersje są akceptowane, decyduje koszt, dostępność materiału albo drugi test z inną zmienną.
- Wyraźne odrzucenie obu wersji: sygnał, żeby wrócić do projektu, zanim pójdzie na to budżet.
- Wnioski zapisz w jednym miejscu, żeby kolejny test porównywał się z poprzednim.