Fundusze Europejskie Województwo Łódzkie Unia Europejska
Retencja

Uczestnicy Twojego programu kupują więcej. To niczego nie dowodzi.

Uczestnicy kupują więcej w każdym opublikowanym badaniu, bo Twoi najlepsi klienci dołączają pierwsi. Loyalz prowadzi program i mierzy, czy cokolwiek zmienił.

Program lojalnościowy to uporządkowana zachęta do kolejnego zakupu — punkty, poziomy, benefity, nagrody. Czy Twój działa, to trudniejsze pytanie, niż się wydaje, bo zwykłe dowody nie wytrzymują sprawdzenia: najlepsi klienci dołączają pierwsi, więc uczestnicy wypadają lepiej od reszty niezależnie od tego, czy program zmienił czyjekolwiek zachowanie. Jedyny sposób, żeby to sprawdzić, to odebrać program losowo wybranej grupie i porównać wyniki.

01zakłócenie

Wynik, który cytują wszyscy

Wykres, na którym opiera się branża
Przychód na klienta
£318 Uczestnicy programu
£94 Poza programem
3.4× · liczba z każdej prezentacji
Dlaczego ta różnica nic nie mówi
To już Twoi najlepsi klienci Zapisują się do programu
Program zmienia zachowanie Wydają więcej
Oba schematy dają ten sam wykres po lewej. Nic na tym wykresie nie mówi, na który z nich patrzysz.

Cała branża opiera sprzedaż na tym wykresie — i on jest prawdziwy. I nic z niego nie wynika, bo nikt nie przydzielił tych klientów do tych grup — oni wybrali sami.

Twoi najlepsi klienci zapisują się do programu dlatego, że są Twoimi najlepszymi klientami. To ich lojalność wywołała członkostwo, a nie odwrotnie.

Każde zestawienie uczestników z resztą klientów, jakie Ci kiedykolwiek pokazano, jest równie zgodne z programem, który nie robi zupełnie nic. Sprzedajemy program lojalnościowy i mimo to mówimy Ci to wprost, bo alternatywą jest sprzedanie Ci liczby, o której wiemy, że nic nie znaczy.

02pomiar

Schemat badania, który daje odpowiedź

Sześć zasad, jeden schemat
Wszyscy klienci losowanie tylko raz
Grupa A · 50% Program działa — punkty, poziomy, questy, benefity
Grupa B · 50% Cały program wstrzymany — bez punktów, bez korzyści z poziomów porównanie
Oś czasu schemat zamrożony cykl 1 — przyspieszony? cykl 2 — dodatkowy?
01
Losuj klientów, nie zamówienia

Podział na poziomie zamówień przecieka — ta sama osoba trafia do obu grup i efekt się rozmywa.

02
Przydziel raz, nigdy ponownie

Klient, który w trakcie zmienia grupę, nie należy do żadnej. Zapisz grupę, znacznik czasu i ziarno losowania.

03
Wstrzymaj cały program

Wstrzymanie samych punktów przy działających korzyściach z poziomów mierzy mechanikę, a nie program.

04
Przeprowadź dwa cykle zakupowe

Jeden cykl pokazuje, czy zakup został przyspieszony. Dwa pokazują, czy w ogóle powstał.

05
Najpierw zamroź schemat

Metryka, okno i progi ustalone przed pierwszym przydziałem. Decydowanie po zajrzeniu w dane to sposób, w jaki wynik zerowy zamienia się w sukces.

06
Mierz na przydzielonego klienta

Dzielenie przez aktywnych po cichu wyrzuca wszystkich, do których program nie dotarł — czyli tych, na których miał zadziałać.

03rachunek

Ilu klientów to kosztuje

Przychód na klienta ma skośny rozkład, więc potrzeba więcej klientów, niż podpowiada intuicja. Na grupę, test dwustronny, moc 80%:

Zmienność przychodu wykryć +5% wykryć +10% wykryć +20%
Wąski asortyment 6,280 1,570 390
Typowy sklep 14,130 3,530 880
Szeroki asortyment 25,120 6,280 1,570
Z ogonem VIP 39,240 9,810 2,450
Wielkość grupy kontrolnej a łączny koszt
podział 50 / 50 1.0×
podział 10 / 90 2.8×
Łączna liczba potrzebnych klientów. Porównanie ogranicza mniejsza grupa, więc ostrożny podział kosztuje więcej, nie mniej.
Jeśli Twój sklep jest za mały, żeby wykryć efekt, na którym Ci zależy, uczciwa odpowiedź brzmi: nie da się tego zmierzyć — a test zrobiony mimo wszystko daje liczbę, która wygląda jak odpowiedź, a jest szumem.

Odruch podpowiada, żeby wstrzymać program dla 5 czy 10% klientów, bo wstrzymanie kosztuje przychód. To podnosi koszt testu, a nie obniża: podział 10/90 potrzebuje około 2.8× tylu klientów co podział równy, bo porównanie ogranicza mniejsza grupa.

04koszt

Nagrody to koszt, którego prawie nikt nie odejmuje

Przykład rachunkowy
100% deklarowanego przychodu z programu
38% 62%
Faktycznie przyrostowe38 Marża oddana klientom, którzy i tak by wrócili62

Przykład liczbowy rozkładu, którego branża nigdy nie rysuje. Nagroda odebrana przez kogoś, kto i tak kupiłby ponownie, nie jest wydatkiem marketingowym — to marża oddana za nic, a powstałe zamówienie i tak trafia do przychodu przypisanego lojalności.

Co odjąć, zanim nazwiesz to zyskiem Retencja, zmierzona
05program

Program, gdy umiesz go zmierzyć

Dashboard poglądowy
Poziomy doświadczenia LVL 1 → 5
Poziom 1 Start 01 Start
Poziom 2 Odkrywca 02 Odkrywca
Poziom 3 Stały klient 03 Stały klient
Poziom 4 Premium 04 Premium
Poziom 5 Ikona 05 Ikona
Zdobywane za Sprzedaż Aktywność społecznościowa Rankingi czasowe tylko grupa A, w czasie testu
Retencja · ostatnie 90 dni
Wskaźnik powrotów
31.4%
+2.2pp
Przychód na klienta
£186
+£11
Koszt nagród
£14,280
+9.1%
Koszt, nie wynik
Uczestnicy
8,410
+412
Marża pokrycia
£96,700
+4.4%
Odsetek wykorzystanych punktów
22.8%
−1.4pp
Udział drugich zamówień
18.9%
+0.8pp

Układ poglądowy. Punkty, cashback, poziomy doświadczenia, questy i kolekcje benefitów — z kosztem nagród na tym samym ekranie co przychód, który miał z nich powstać, bo tylko takie ustawienie pozwala wyłapać program, który sam sobie opłaca wyniki.

Segmentacja RFM mówi, kogo warto zatrzymać, zanim wydasz cokolwiek na zatrzymywanie. Świeżość, częstotliwość i wartość zakupów to trzy fakty o kliencie, które przewidują kolejne zamówienie — i nie potrzebują żadnego modelu.

Retencja klientów, zmierzona Ile jest wart klient
06ograniczenia

Czego to nie robi

Najbardziej prawdopodobny wynik
Brak wykrywalnego efektu Zmierzony wzrost Zmierzony spadek
Wynik zerowy publikujemy tak samo widocznie jak sukces. Nie podajemy prawdopodobieństwa, który Ci wyjdzie — to byłaby dokładnie taka liczba, przeciw jakiej ta strona argumentuje.
Mniejsza obietnica
To nie dowodzi, że Twój program działa
Daje Ci schemat badania, który to potrafi, i rachunek, który mówi, czy Twój sklep jest dość duży, żeby je przeprowadzić.
Mniejsza obietnica
CLV jest tu zmierzone, nie prognozowane
Średni przychód na zidentyfikowanego klienta z ostatnich 24 miesięcy. Pomiar przeszłości — i tak go nazywamy.
Twarda granica
Zakupy bez konta są poza pomiarem
Nie ma czym ich zidentyfikować. Ich zamówienia dalej liczą się do przychodu.
Twarda granica
Tożsamość osobno dla każdego źródła
Kupujący występujący pod dwoma identyfikatorami to dwóch klientów, dopóki nie połączysz tych rekordów.
Twoja decyzja
Grupa kontrolna realnie kosztuje
Na czas testu odbiera korzyść prawdziwym klientom. Ta decyzja należy do Ciebie, nie do nas.
Twoja decyzja
Uczciwe wyniki najczęściej są zerowe
Przy Twojej próbie najbardziej prawdopodobny wynik to brak wykrywalnego efektu. Opublikujemy go tak samo widocznie jak sukces.

Sprawdź, czy Twój sklep jest dość duży, żeby to zmierzyć

Przynieś historię zamówień. Policzymy, jak duży efekt faktycznie wykryjesz — zanim komukolwiek cokolwiek wstrzymasz.

Umów te dwadzieścia minut