Program lojalnościowy — jak sprawdzić, czy naprawdę działa

Każda strona w wynikach na tę frazę odpowiada na inne pytanie. Wyszukaj kampania lojalnościowa i dostaniesz siedem wyników o programach lojalnościowych — o stałej konstrukcji, punktach i poziomach. Kampania to rzecz, którą uruchamiasz na dwa tygodnie w listopadzie. To nie ten sam obiekt i psują się na różne sposoby.

Kampania lojalnościowa to nie program lojalnościowy

Program to stała infrastruktura. Kampania to ograniczona w czasie akcja w jego środku, wycelowana w jeden segment, z datą startu i datą końca.

To rozróżnienie ma znaczenie, bo druga porażka jest niewidoczna dla sposobu, w jaki mierzy niemal każdy. O tym jest reszta tego tekstu.

Pomysły na kampanie i koszt każdej z nich

Osiem, które da się faktycznie uruchomić — z mechanizmem kosztu zamiast obietnicy:

Ostatni wiersz jako jedyny na tej liście nie zjada marży brutto. W tym produkcie mechanika to korzyść typu GATED zamiast typu DISCOUNT i akurat ta jest z tych dwóch używana najrzadziej. Dostęp nic cię nie kosztuje i nie da się go połączyć z kodem rabatowym.

Uczestnicy kupują więcej. To niczego nie dowodzi

Standardowy dowód na to, że kampania lojalnościowa zadziałała, to porównanie uczestników z resztą klientów. Tę liczbę publikuje każdy dostawca w tej kategorii i nie odróżnia ona programu, który zmienił zachowania, od takiego, który nie zrobił zupełnie nic.

Oto sklep, w którym efekt kampanii jest z założenia dokładnie zerowy.

Tysiąc klientów, dziesięć równych grup. Grupa n składa n zamówień rocznie — grupa 1 kupuje raz, grupa 10 kupuje dziesięć razy. Średnia wartość zamówienia jest u wszystkich taka sama. Jedna reguła: zapisują się klienci z co najmniej trzema wcześniejszymi zamówieniami. To jedyne założenie, które tu pracuje, i jest realistyczne, bo więksi kupujący częściej mówią przy kasie „tak”.

Teraz uruchom kampanię, która nie zmienia niczyjego zachowania. Zero zmiany. I zmierz ją tak, jak mierzy się zwykle:

Zamówienia na klienta rocznie w sklepie, w którym kampania nic nie zmieniła

Uczestnicy składają średnio 6,5 zamówienia rocznie wobec 1,5 u pozostałych — 4,3 razy częściej. Przychód od uczestników to 1 040 000 z 1 100 000 łącznie, czyli 94,5% przychodu pochodzi od uczestników.

Oba zdania są prawdziwe. Oba są bezwartościowe. Kampania nie zrobiła nic, a nagłówkowe liczby, którymi posługuje się branża, i tak się pojawiły — bo zapis do programu wybierał ludzi po tym samym zachowaniu, które potem mierzysz.

To nie jest osobliwość handlu detalicznego. To powód, dla którego pomiar reklamy przeszedł na eksperymenty: porównanie grupy, która reklamę widziała, z tą, która jej nie widziała — choćby najstaranniej dopasowanych — nie odtwarza tego, co pokazuje eksperyment. Piętnaście eksperymentów terenowych w Facebooku, obejmujących 500 milionów obserwacji użytkownik–eksperyment, doprowadziło do wniosku, że „metody obserwacyjne często nie odtwarzają efektów uzyskanych w eksperymentach randomizowanych, nawet po uwzględnieniu rozbudowanych zmiennych demograficznych i behawioralnych”.

Jak poprowadzić kampanię, którą da się zmierzyć

Pięć kroków. Ludzie pomijają tylko drugi — i to pominięcie kosztuje cię odpowiedź.

1. Zdefiniuj kryterium udziału jako regułę, którą da się wkleić. „Uczestnicy z co najmniej jednym zakupem

w ciągu 180 dni, z wyłączeniem tych, którzy kupili w ostatnich 14”. Zapisz to, zanim spojrzysz na kogokolwiek.

1. Wstrzymaj losową jedną dziesiątą. Użyj hash(customer_id) mod 10 == 0 zamiast losowego

tasowania — regułę da się sprawdzić i odtworzyć po miesiącach, gdy ktoś zapyta, jak wybierałeś.

1. Zakotwicz pomiar na dacie zapisu do programu, żeby wydatki sprzed kampanii nie przeciekły do

grupy objętej kampanią.

1. Obserwuj przez okno kampanii plus jeden pełny cykl zakupowy. Jeden cykl powie ci,

czy przesunąłeś zakup w czasie. Dwa — czy w ogóle go stworzyłeś.

1. Zamroź analizę przed startem. Metryka, okno, próg odcięcia. Ustalanie, co się liczy,

po zobaczeniu danych to sposób, w jaki wynik zerowy zamienia się w sukces.

Arytmetyka mieści się wtedy w jednej linii:

przychód przyrostowy = (przychód na głowę w grupie objętej − przychód na głowę w grupie kontrolnej) × liczba objętych

Odejmij koszt nagród w momencie ich wydania, przemnóż przez marżę brutto i masz przyrostowy wkład na pokrycie. To jest ta liczba. Cała reszta to opis.

Jeśli twoja lista jest za mała, żeby wydzielić z niej grupę kontrolną, zrób porównanie przed/po na dopasowanych tygodniach — ale powiedz na głos, że nie usuwa ono sezonowości, równoległych promocji ani dryfu bazy, więc pozwala na dużo słabszą tezę.

Jak duża musi być lista?

Na tyle duża, żeby różnica, na której ci zależy, była większa niż szum. To wzór, nie benchmark:

n na grupę = (z(α/2) + z(β))² × [p₁(1−p₁) + p₂(1−p₂)] / (p₁ − p₂)²

Przy mocy 80% i α = 0,05 mnożnik wynosi 7,849. Znajdź swój wiersz:

Przyłóż to do swojej realnej listy. Dwa tysiące klientów przy dziesięcioprocentowej grupie kontrolnej daje dwieście osób w kontroli — tyle wystarczy, żeby wykryć skok o dziesięć punktów i nic drobniejszego. To uczciwa pozycja. Nieuczciwe jest uruchomić kampanię, zobaczyć ruch o trzy punkty i ogłosić sukces.

Ile naprawdę kosztuje weekend z podwójnymi punktami

O mnożnikach mówi się zwykle, że budują presję czasu, nie ruszając twojej ekonomii. To rabat z odroczeniem.

Mnożnik 2× przy bazowym naliczaniu 5% wydaje punkty warte 10% koszyka. Ile to kosztuje, zależy od tego, ile z nich zostanie wykorzystanych:

Przy 60% wykorzystania i koszyku 200 tak to wygląda na poziomie marży pokrycia:

Im cieńsza marża, tym większą jej część zjada mnożnik. Przy 30% oddajesz piątą część wkładu na pokrycie z każdego zamówienia w oknie kampanii.

Jeszcze jedno działanie, którego nikt nie robi: próg nagrody ÷ (AOV × stopa naliczania) mówi, ile zamówień musi złożyć uczestnik, żeby sięgnąć po nagrodę. Nagroda 50 przy naliczaniu 5% i koszyku 200 to pięć zamówień. Jeśli twoi klienci kupują dwa razy w roku, nagroda jest oddalona o dwa i pół roku, a punkty są dekoracją. Niewykorzystane punkty to zobowiązanie, nie przychód — obietnica, której jeszcze nie spłaciłeś.

Kiedy przerwać

Kryteria wyłączenia, spisane przed startem. Każdy sygnał to porównanie, które robisz sam — nie próg, który ktoś ci poda:

I porównanie, które decyduje o budżecie: koszt jednego przyrostowego zamówienia policzony z grupy kontrolnej, zestawiony z twoim uśrednionym kosztem pozyskania nowego klienta. Jeśli utrzymanie kosztuje więcej niż pozyskanie, budżet na punkty należy do reklamy. Większość sklepów ma z tego porównania połowę o pozyskaniu, a nie ma połowy o retencji — i dokładnie tę lukę zamyka ta metoda.

Szerszy obraz tego, co te mechaniki robią z powtarzalnością zakupów, znajdziesz w tekście retencja mierzona, a nie zakładana. Jeśli interesuje cię druga strona pytania o marżę, tekst jak zwiększyć średnią wartość zamówienia pokazuje, co próg robi z zyskiem.

Częste pytania