Fundusze Europejskie Województwo Łódzkie Unia Europejska
Retencja

Czy program lojalnościowy zwiększa przychód? Sprawdź z grupą kontrolną.

Uczestnicy programu kupują więcej? To samo w sobie niczego nie dowodzi: lojalni klienci mogą chętniej dołączać. Loyalz łączy program z pomiarem: dobrze zaplanowany test z losową grupą kontrolną pozwala oszacować jego wpływ na przychód.

Program lojalnościowy to zachęta do kolejnego zakupu: punkty, poziomy, benefity i nagrody. Test wymaga dość klientów (w typowym sklepie ok. 3 530 w grupie, by wykryć +10% przychodu na klienta), jednego, stałego przydziału do grup, wstrzymania całego programu w grupie kontrolnej, tak by korzyści nie przenikały, i dwóch cykli zakupowych. Wynik podajemy wraz z niepewnością.

01zakłócenie

Wynik, który cytują wszyscy

Wykres, na którym opiera się branża
Przychód na klienta
£318 Uczestnicy programu
£94 Poza programem
3.4× · liczba z każdej prezentacji
Dlaczego ta różnica nic nie mówi
To już Twoi najlepsi klienci Zapisują się do programu
Program zmienia zachowanie Wydają więcej
Oba schematy dają ten sam wykres po lewej. Nic na tym wykresie nie mówi, na który z nich patrzysz.

Cała branża opiera sprzedaż na tym wykresie — i on jest prawdziwy. I nic z niego nie wynika, bo nikt nie przydzielił tych klientów do tych grup — oni wybrali sami.

Twoi lojalni klienci mogą częściej zapisywać się do programu. Ich wcześniejsze zachowanie może więc tłumaczyć część różnicy w zakupach, którą przypisujesz programowi.

Samo porównanie uczestników z pozostałymi klientami nie oddziela efektu programu od różnic między tymi grupami. Sprzedajemy program lojalnościowy i mówimy o tym wprost: wyniki powinny pomagać ocenić decyzję, a nie tylko dobrze wyglądać na wykresie.

02pomiar

Test, który pomaga oszacować efekt

Sześć zasad, jeden schemat
Wszyscy klienci losowanie tylko raz
Grupa A · 50% Program działa — punkty, poziomy, questy, benefity
Grupa B · 50% Cały program wstrzymany — bez punktów, bez korzyści z poziomów porównanie
Oś czasu schemat zamrożony cykl 1 — przyspieszony? cykl 2 — dodatkowy?
01
Losuj klientów, nie zamówienia

Podział na poziomie zamówień przecieka — ta sama osoba trafia do obu grup i efekt się rozmywa.

02
Przydziel raz, nigdy ponownie

Klient, który w trakcie zmienia grupę, nie należy do żadnej. Zapisz grupę, znacznik czasu i ziarno losowania.

03
Wstrzymaj cały program

Wstrzymanie samych punktów przy działających korzyściach z poziomów mierzy mechanikę, a nie program.

04
Przeprowadź dwa cykle zakupowe

Jeden cykl pokazuje, czy zakup został przyspieszony. Dwa pokazują, czy w ogóle powstał.

05
Najpierw zamroź schemat

Metryka, okno i progi ustalone przed pierwszym przydziałem. Decydowanie po zajrzeniu w dane to sposób, w jaki wynik zerowy zamienia się w sukces.

06
Mierz na przydzielonego klienta

Dzielenie przez aktywnych po cichu wyrzuca wszystkich, do których program nie dotarł — czyli tych, na których miał zadziałać.

03rachunek

Ilu klientów to kosztuje

Przychód na klienta ma skośny rozkład, więc potrzeba więcej klientów, niż podpowiada intuicja. Na grupę, test dwustronny, moc 80%:

Zmienność przychodu wykryć +5% wykryć +10% wykryć +20%
Wąski asortyment 6,280 1,570 390
Typowy sklep 14,130 3,530 880
Szeroki asortyment 25,120 6,280 1,570
Z ogonem VIP 39,240 9,810 2,450
Wielkość grupy kontrolnej a łączny koszt
podział 50 / 50 1.0×
podział 10 / 90 2.8×
Łączna liczba potrzebnych klientów. Porównanie ogranicza mniejsza grupa, więc ostrożny podział kosztuje więcej, nie mniej.
Jeśli Twój sklep jest za mały, żeby wykryć efekt, na którym Ci zależy, uczciwa odpowiedź brzmi: nie da się tego zmierzyć — a test zrobiony mimo wszystko daje liczbę, która wygląda jak odpowiedź, a jest szumem.

Odruch podpowiada, żeby wstrzymać program dla 5 czy 10% klientów, bo wstrzymanie kosztuje przychód. To podnosi koszt testu, a nie obniża: podział 10/90 potrzebuje około 2.8× tylu klientów co podział równy, bo porównanie ogranicza mniejsza grupa.

04koszt

Nagrody to koszt, którego prawie nikt nie odejmuje

Przykład rachunkowy
100% przychodu przypisanego programowi
38% 62%
Sprzedaż, której bez programu by nie było38 Marża oddana klientom, którzy i tak by wrócili62

Przykład liczbowy, którego branża nie pokazuje: tylko 38% przychodu przypisanego programowi to sprzedaż, której bez niego by nie było. Nagroda odebrana przez kogoś, kto i tak kupiłby ponownie, nie jest wydatkiem marketingowym — to marża oddana za nic, a powstałe zamówienie i tak trafia do przychodu przypisanego lojalności.

Co odjąć, zanim nazwiesz to zyskiem Retencja, zmierzona
05program

Program, gdy umiesz go zmierzyć

Dashboard poglądowy
Poziomy doświadczenia LVL 1 → 5
Poziom 1 Start 01 Start
Poziom 2 Odkrywca 02 Odkrywca
Poziom 3 Stały klient 03 Stały klient
Poziom 4 Premium 04 Premium
Poziom 5 Ikona 05 Ikona
Zdobywane za Sprzedaż Aktywność społecznościowa Rankingi czasowe tylko grupa A, w czasie testu
Retencja · ostatnie 90 dni
Wskaźnik powrotów
31.4%
+2.2pp
Przychód na klienta
£186
+£11
Koszt nagród
£14,280
+9.1%
Koszt, nie wynik
Uczestnicy
8,410
+412
Marża pokrycia
£96,700
+4.4%
Odsetek wykorzystanych punktów
22.8%
−1.4pp
Udział drugich zamówień
18.9%
+0.8pp

Układ poglądowy. Punkty, cashback, poziomy doświadczenia, questy i kolekcje benefitów — z kosztem nagród na tym samym ekranie co przychód, który miał z nich powstać, bo tylko takie ustawienie pozwala wyłapać program, który sam sobie opłaca wyniki.

Segmentacja RFM mówi, kogo warto zatrzymać, zanim wydasz cokolwiek na zatrzymywanie. Świeżość, częstotliwość i wartość zakupów to trzy fakty o kliencie, które przewidują kolejne zamówienie — i nie potrzebują żadnego modelu.

Retencja klientów, zmierzona Ile jest wart klient
06ograniczenia

Czego to nie robi

Najbardziej prawdopodobny wynik
Brak wykrywalnego efektu Zmierzony wzrost Zmierzony spadek
Wynik zerowy publikujemy tak samo widocznie jak sukces. Nie podajemy prawdopodobieństwa, który Ci wyjdzie — to byłaby dokładnie taka liczba, przeciw jakiej ta strona argumentuje.
Mniejsza obietnica
To nie dowodzi, że Twój program działa
Daje Ci schemat badania, który to potrafi, i rachunek, który mówi, czy Twój sklep jest dość duży, żeby je przeprowadzić.
Mniejsza obietnica
CLV jest tu zmierzone, nie prognozowane
Średni przychód na zidentyfikowanego klienta z ostatnich 24 miesięcy. Pomiar przeszłości — i tak go nazywamy.
Twarda granica
Zakupy bez konta są poza pomiarem
Nie ma czym ich zidentyfikować. Ich zamówienia dalej liczą się do przychodu.
Twarda granica
Tożsamość osobno dla każdego źródła
Kupujący występujący pod dwoma identyfikatorami to dwóch klientów, dopóki nie połączysz tych rekordów.
Twoja decyzja
Grupa kontrolna realnie kosztuje
Na czas testu odbiera korzyść prawdziwym klientom. Ta decyzja należy do Ciebie, nie do nas.
Twoja decyzja
Brak wykrywalnego efektu też jest wynikiem
Przy zbyt małej próbie test może nie wykryć efektu, nawet jeśli program działa. Brak wykrywalnego efektu pokażemy równie wyraźnie jak wzrost, wraz z niepewnością wyniku.

Sprawdź, czy Twój sklep jest dość duży, żeby to zmierzyć

Przygotuj historię zamówień. Typowy sklep potrzebuje ok. 3 530 klientów w każdej grupie, żeby wykryć +10% przychodu na klienta, i 880, żeby wykryć +20%. Oszacujemy, gdzie jest Twój sklep przy założeniach testu — zanim zdecydujesz o grupie kontrolnej.

Umów demo na swoich danych — 20 min →