Większa sprzedaż produktu po zmianie hasła nie dowodzi jeszcze, że zadziałał tekst. Wynik mogą podnieść niższa cena, dodatkowy facing albo dostawa, która zakończyła trzydniowy brak towaru. Test przy półce ma sens wtedy, gdy między wariantami zmienia się komunikat, a pozostałe warunki są utrzymywane możliwie jednakowo i dokumentowane.
Nie potrzeba do tego rozbudowanego systemu badawczego. Potrzebne są dane kasowe, prosty arkusz kontroli oraz pracownik, który sprawdzi ekspozycję według ustalonego harmonogramu.
1. Ustal jedną hipotezę i główny miernik
Porównuj dwie konkretne obietnice, a nie dwa zupełnie różne projekty. Dla płatków śniadaniowych wariant A może brzmieć „Śniadanie gotowe w minutę”, a wariant B „Chrupiący początek dnia”, o ile komunikaty odpowiadają właściwościom produktu. Pierwszy akcentuje wygodę, drugi doświadczenie jedzenia.
Przed rozpoczęciem wybierz jeden główny wskaźnik, na przykład liczbę sprzedanych opakowań na 1000 transakcji sklepu. Taki przelicznik ogranicza wpływ różnic w ruchu, choć nie usuwa różnic między klientami placówek. Pomocniczo zapisuj sprzedaż całej kategorii, przychód oraz marżę produktu, żeby zauważyć przesunięcie zakupów z sąsiedniego SKU.
Ustal również minimalny efekt uzasadniający wdrożenie, przykładowo wzrost wskaźnika o 8%. To próg biznesowy przyjęty na potrzeby testu, a nie uniwersalna granica skuteczności reklamy.
2. Rozdziel warianty między porównywalne sklepy
Praktyczny pilotaż można przeprowadzić w ośmiu placówkach przez 28 dni. Dobierz cztery pary podobne pod względem formatu, ruchu i wcześniejszej sprzedaży badanego produktu, a następnie w każdej parze losowo przypisz hasło A i B. Do dopasowania wykorzystaj na przykład cztery poprzednie tygodnie, oznaczając okresy promocji i braków towaru.
Po 14 dniach zamień warianty między sklepami w każdej parze. Dzięki temu każde hasło pracuje w każdej placówce przez dwa pełne cykle tygodniowe. Zamianę wykonaj tego samego dnia przed otwarciem, bez pozostawiania starego komunikatu.
Taki układ ogranicza wpływ specyfiki sklepu, ale nie usuwa wszystkich zakłóceń. Święto, remont ulicy albo lokalna akcja promocyjna nadal mogą zmienić wynik, a część stałych klientów może pamiętać poprzednie hasło. Każde takie zdarzenie powinno trafić do dziennika testu.
3. Zamroź cenę, zapas i pozycję produktu
Najczęstszy błąd to porównanie komunikatów przy różnych warunkach zakupu. Hasło A nad ceną 7,99 zł i hasło B nad ceną 6,49 zł nie tworzą uczciwego testu tekstu. Różnica ceny jest wtedy osobnym bodźcem, którego nie da się oddzielić prostym porównaniem sprzedaży.
- Cena: identyczna cena regularna oraz te same warunki rabatów i programu lojalnościowego.
- Dostępność: zapas na półce i zapleczu oraz jednakowa częstotliwość uzupełniania.
- Ekspozycja: ta sama wysokość półki, liczba facingów i pozycja wobec konkurencji.
- Otoczenie: brak dodatkowego standu, gazetki lub degustacji tylko dla jednego wariantu.
Kontrolę zaplanuj na otwarcie, środek dnia i dwie godziny przed zamknięciem. Jeżeli produkt znika, zapisz możliwie dokładny czas braku; trzy kontrole nie dają jednak pewności ciągłej dostępności. Duży zapas na magazynie nie pomaga, gdy klient widzi pustą półkę.
4. Wykonaj dwa identyczne nośniki z różnym tekstem
Wobbler ma przyciągać uwagę ruchem i wysunięciem poza linię półki, dlatego jego konstrukcja jest częścią warunków eksperymentu. Jeśli nośnikiem jest elastyczny wobler reklamowy przy półce, oba warianty powinny mieć identyczny format, materiał, długość ramienia oraz sposób mocowania. Inaczej test obejmie jednocześnie hasło i widoczność reklamy.
Można przyjąć tarczę o średnicy 100 mm i ramię długości 150 mm, jeżeli pozwala na to wyposażenie sklepu. Zachowaj ten sam krój oraz rozmiar pisma, kontrast, grafikę i pozycję tekstu. Gdy dłuższe hasło wymaga mniejszych liter, lepiej je skrócić niż wprowadzać kolejną zmienną.
Przed startem zrób próbę czytelności z odległości 1–1,5 m i zdjęcie wzorcowego montażu. Nośnik nie powinien zasłaniać ceny, oznaczeń sąsiednich produktów ani utrudniać zdejmowania opakowań.
5. Zapisuj zdarzenia, zanim zobaczysz wynik
Arkusz powinien zawierać datę, sklep, wariant, liczbę transakcji, sprzedane sztuki, cenę oraz uwagi o dostępności i ekspozycji. Dopisz godzinę kontroli, stan wobblera i informację o działaniach konkurencji. Zdjęcie wykonane z tego samego miejsca pozwala sprawdzić, czy po uzupełnianiu towaru nie zmienił się układ półki.
Zasady postępowania z zakłóceniami ustal wcześniej. Dzień z błędną ceną albo zdjętym nośnikiem oznacz jako niezgodny z planem; braków towaru nie usuwaj automatycznie, ponieważ mogły wynikać z większego popytu wywołanego hasłem. Pokaż wynik całościowy oraz dodatkowe porównanie okresów zgodnych z planem, opisując przyczyny różnic.
6. Oblicz efekt, ale sprawdź też jego powtarzalność
Załóżmy, że przy wariancie A sprzedano 240 opakowań na 12 000 transakcji, a przy B – 276 na 12 000. Wskaźniki wynoszą odpowiednio 20 i 23 opakowania na 1000 transakcji. Wzrost względny wynosi 15%, natomiast różnica bezwzględna to trzy opakowania na 1000 transakcji.
Sam wynik łączny nie wystarcza do ogłoszenia zwycięzcy. Sprawdź, czy kierunek zmiany powtarza się w parach sklepów i obu okresach, czy przewagę stworzyła jedna placówka. Przy formalnej analizie uwzględnij grupowanie obserwacji według sklepów; dni z tej samej placówki nie są niezależnymi powtórzeniami.
Osiem sklepów i 28 dni to schemat pilotażu, nie gwarancja odpowiedniej precyzji. Potrzebna skala zależy od sprzedaży bazowej, jej zmienności i oczekiwanego efektu. Nie kończ testu wcześniej tylko dlatego, że po kilku dniach jeden wariant prowadzi.
7. Podejmij decyzję bez dopisywania historii do danych
Wdrożenie ma uzasadnienie, gdy przewaga przekracza ustalony próg biznesowy, jest dostatecznie precyzyjnie oszacowana i nie wynika z naruszenia warunków testu. Jeśli wynik jest niejednoznaczny, zaplanuj kolejną turę zamiast przedstawiać niewielką różnicę jako dowód skuteczności.
Zachowaj projekty, zdjęcia montażu, arkusz zdarzeń i sposób obliczeń. Test A/B wskazuje lepsze z dwóch haseł w określonych warunkach; bez grupy pozbawionej wobblera nie odpowiada natomiast na pytanie, czy sam nośnik zwiększa sprzedaż.