Performance & analityka

Incrementality: czy reklama naprawdę dokłada sprzedaż (holdout i geo-lift dla MŚP)

📅 5 lipca 2026 ⏱️ 9 min czytania

Michał Winciorek

Performance Marketing Strategist · LinkedIn ↗

Twój raport pokazuje ROAS 6. Wygląda świetnie, dopóki nie zadasz jednego pytania: ile z tej sprzedaży wydarzyłoby się, gdybyś w ogóle nie wydał tych pieniędzy? To pytanie o przyrost (incrementality), czyli o realną nadwyżkę sprzedaży, którą reklama faktycznie dołożyła. Większość firm mid-market nigdy go nie stawia, bo panele reklamowe raportują przypisanie zamiast przyrostu. W tym artykule pokażę dwie metody, które odpowiadają na to pytanie uczciwie, holdout i geo-lift, i wytłumaczę, jak zrobić prosty test przy budżecie, który realnie masz.

ROAS mierzy przypisanie zamiast przyrostu

Panel Meta pokazuje 200 konwersji. Google Ads dokłada kolejne 150. GA4 w modelu data-driven rozdziela to jeszcze inaczej. Zsumowałeś, wyszło więcej sprzedaży niż faktycznie miałeś w sklepie, i już wiesz, że coś się nie zgadza. To codzienność każdej firmy, która prowadzi więcej niż jeden kanał płatny.

Problem jest głębszy niż podwójne liczenie. Każdy panel odpowiada na pytanie „która reklama była po drodze do tej transakcji". Pytanie „czy ta transakcja w ogóle by się wydarzyła bez reklamy" zostaje bez odpowiedzi. To dwie zupełnie różne rzeczy. Klient, który już wpisał w Google nazwę Twojej marki, bo widział ją u znajomego, kliknie Twoją reklamę brandową i zostanie przypisany jako konwersja z kampanii. Zapłaciłeś za sprzedaż, którą i tak byś miał.

Atrybucja mówi Ci, komu przypisać zasługę. Przyrost mówi Ci, czy zasługa w ogóle istnieje. Decyzje o budżecie powinieneś podejmować na podstawie tej drugiej liczby.

Dlatego wysoki ROAS na kampaniach remarketingowych i brandowych bywa mirażem. Docierasz do ludzi najbliżej zakupu, więc konwersje przypisują się łatwo, a raport wygląda dumnie. Pytanie, ile z tych osób kupiłoby tak czy inaczej, zostaje bez odpowiedzi, dopóki nie zmierzysz przyrostu.

Czym naprawdę jest przyrost

Przyrost to różnica między światem z reklamą a światem bez reklamy, przy założeniu, że wszystko inne pozostaje takie samo. Wyobraź sobie dwie kopie tej samej firmy w tym samym tygodniu, ta sama oferta, ten sam sezon, ci sami klienci. Jedna wydaje na reklamę, druga nie. Różnica w sprzedaży między nimi to czysty przyrost, wolny od sezonu, brandu i przypadku.

Nie da się mieć dwóch kopii firmy, więc zamiast tego dzielimy jedną publiczność albo jeden rynek na dwie grupy i jedną z nich celowo pozbawiamy reklamy. To jest cała idea eksperymentu przyrostu. Mierzysz różnicę między grupami zamiast sumować kliknięcia.

• ROAS przypisany mówi: na tę sprzedaż była po drodze reklama za X złotych.
• iROAS (incremental ROAS) mówi: reklama za X złotych wygenerowała Y złotych sprzedaży, której inaczej by nie było.
• Lift to procentowy wzrost sprzedaży w grupie z reklamą względem grupy bez reklamy.

Różnica bywa brutalna. Kampania z raportowanym ROAS 8 potrafi mieć iROAS bliski 1, bo docierała głównie do ludzi już zdecydowanych. Odwrotnie, kampania do zimnego ruchu z raportowanym ROAS 2 potrafi mieć iROAS wyraźnie wyższy, bo faktycznie przyprowadza nowych klientów. Bez pomiaru przyrostu wygaszasz to, co realnie zarabia, i skalujesz to, co tylko dobrze wygląda w tabeli.

Test holdout: grupa kontrolna bez reklamy

Holdout to najprostsza forma eksperymentu przyrostu. Bierzesz swoją publiczność i losowo odkładasz jej fragment, na przykład 10 procent, do grupy kontrolnej, która świadomie nie zobaczy danej kampanii. Reszta dostaje reklamę normalnie. Po zakończeniu testu porównujesz sprzedaż na osobę w obu grupach.

Jeśli grupa z reklamą kupiła istotnie więcej niż grupa kontrolna, masz dowód przyrostu i możesz policzyć jego wartość. Jeśli obie grupy kupiły podobnie, reklama dokładała niewiele, choć panel cały czas dumnie przypisywał sobie konwersje z tej grupy z reklamą.

Meta udostępnia narzędzie Conversion Lift, które robi taki holdout wewnątrz systemu, dzieląc odbiorców na eksponowanych i kontrolnych. Google ma analogiczne testy przyrostu konwersji. Warto z nich korzystać, ale trzeba znać ograniczenia:

• Wymóg skali. Platformowe testy liftu wymagają sporego wolumenu konwersji, żeby wynik był istotny statystycznie. Przy kilkunastu zamówieniach tygodniowo najczęściej nie zbierzesz próby.
• Zamknięty ogród. Test Meta mierzy tylko wpływ Mety. Nie powie Ci, jak Meta i Google działają razem ani czy się kanibalizują.
• Kontrola jednego kanału. Osoba w grupie kontrolnej Mety i tak może zobaczyć Twoją reklamę w Google, co zaniża zmierzony lift.

Dla firmy z solidnym ruchem holdout na poziomie platformy to najszybsza droga do pierwszej uczciwej liczby. Dla mniejszej skali trzeba sięgnąć po eksperyment na poziomie geografii.

Warto na starcie ustawić oczekiwania właściciela albo zarządu. Holdout z definicji odbiera reklamę części Twoich najlepszych odbiorców, więc w trakcie testu zobaczysz w panelu mniej konwersji z tej kampanii. To normalne i zaplanowane. Liczba, po którą sięgasz, pojawia się dopiero na końcu, gdy porównasz obie grupy. Ktoś, kto patrzy tylko na dzienny raport, może w połowie testu spanikować i kazać go wyłączyć, unieważniając cały pomiar.

Geo-lift: eksperyment na poziomie regionów, gdy brakuje skali

Geo-lift odwraca perspektywę. Zamiast dzielić ludzi, dzielisz mapę. Wybierasz zestaw regionów, w których włączasz albo zwiększasz reklamę (grupa testowa), i porównywalny zestaw regionów, w których zostawiasz status quo (grupa kontrolna). Potem patrzysz, czy sprzedaż w regionach testowych urosła bardziej niż w kontrolnych.

To metoda dla firm, które mają za mało konwersji na test na poziomie użytkownika, ale mają zasięg geograficzny, na przykład sprzedaż w całej Polsce albo sieć punktów w kilku województwach. Zaletą jest to, że łapiesz łączny efekt wszystkich kanałów naraz, bo mierzysz sprzedaż w całym regionie zamiast kliknięć w jednym panelu.

Geo-lift mierzy to, co dzieje się w kasie, zamiast tego, co raportuje piksel. Dlatego jest odporny na blokady ciasteczek, iOS i podwójne liczenie między platformami.

Dobór regionów jest tu kluczowy. Grupa testowa i kontrolna powinny mieć podobny historyczny trend sprzedaży, podobną wielkość i podobną sezonowość. Jeśli do testu weźmiesz Warszawę, a do kontroli powiat o innej dynamice, wynik będzie mówił więcej o różnicy między regionami niż o reklamie. W praktyce dobiera się kilka lub kilkanaście rynków po każdej stronie i sprawdza, czy przed testem ich sprzedaż poruszała się równolegle.

Jak zaprojektować prosty test przyrostu przy małym budżecie

Nie potrzebujesz zespołu analityków danych, żeby zrobić uczciwy pierwszy test. Potrzebujesz dyscypliny i jednej zmiennej naraz. Oto szkielet, który działa dla firmy mid-market:

1. Zdefiniuj jedną hipotezę. Na przykład: kampania brandowa w Google dokłada mniej niż 20 procent sprzedaży, którą sobie przypisuje. Test ma tę liczbę potwierdzić albo obalić.
2. Wybierz metodę do skali. Masz setki konwersji tygodniowo, idź w holdout na platformie. Masz kilkanaście i sprzedajesz w wielu regionach, idź w geo-lift.
3. Ustal okres i wielkość efektu. Test trwa zwykle 4 do 6 tygodni, żeby złapać pełne cykle zakupowe. Z góry określ, jaki wzrost uznasz za wart uwagi, na przykład minimum 10 procent liftu.
4. Wyłącz zmienną, którą testujesz. Chcesz zmierzyć przyrost z brandu w Google, wyłącz go w grupie kontrolnej i nie ruszaj niczego innego. Żadnych nowych promocji, żadnych zmian budżetu w innych kanałach w trakcie.
5. Mierz sprzedaż w swoim systemie zamiast w panelu. Źródłem prawdy są zamówienia w Twoim systemie, przypisane do regionu albo grupy. Panel reklamowy służy tu do sterowania ekspozycją, wynik liczysz poza nim.
6. Policz iROAS i zdecyduj. Nadwyżka sprzedaży w grupie testowej podzielona przez wydatek to Twój realny zwrot. Poniżej progu opłacalności, tniesz. Powyżej, skalujesz z czystym sumieniem.

Najczęstszy błąd na starcie to testowanie wszystkiego naraz. Jeśli w tym samym tygodniu zmienisz budżet Mety, odpalisz newsletter i wystartujesz promocję, nie dowiesz się, co zadziałało. Jedna zmienna, jeden test, jedna decyzja. Przy pierwszym teście zaczynam od kanału, który pochłania najwięcej budżetu i budzi najwięcej wątpliwości, bo tam pomyłka kosztuje najwięcej.

Najczęstsze błędy pomiaru przyrostu

Test przyrostu jest tak dobry jak jego projekt. Kilka pułapek potrafi zamienić wiarygodny eksperyment w mylący wykres:

• Kanibalizacja brandu. Reklama brandowa przechwytuje kliknięcia, które i tak trafiłyby do Twojego wyniku organicznego. Jeśli nie testujesz jej osobno, przypiszesz sobie sprzedaż, którą dowoziło darmowe SEO.
• Sezon i święta. Uruchomienie testu tuż przed Black Friday zniekształci wszystko. Grupy testowa i kontrolna muszą przechodzić przez ten sam sezon, inaczej mierzysz kalendarz zamiast reklamy.
• Za mała próba. Przy niskim wolumenie różnica między grupami mieści się w granicy przypadku. Wynik wygląda na sukces albo porażkę, choć jest szumem. Bez minimalnej próby test nie ma mocy statystycznej i nie wolno na nim opierać decyzji.
• Skażona kontrola. Grupa kontrolna, która i tak widzi Twoją reklamę w innym kanale, zaniża zmierzony przyrost. W geo-lift dochodzi problem dojazdów i sprzedaży online, która nie zna granic województw.
• Zmiana zasad w trakcie. Podniosłeś budżet w połowie testu, bo „szło słabo". Właśnie unieważniłeś eksperyment. Test przyrostu wymaga zamrożenia warunków na cały okres.

Te błędy są powodem, dla którego wiele firm po jednym rozczarowującym teście uznaje, że incrementality „nie działa". Zwykle zawiódł projekt testu, a sama metoda pozostaje poprawna.

Kiedy incrementality się nie opłaca i co robić w zamian

Uczciwie: pomiar przyrostu ma koszt. Odkładasz część budżetu albo część rynku bez reklamy, więc świadomie rezygnujesz z jakiejś sprzedaży w trakcie testu, żeby poznać prawdę. Przy bardzo małej skali i niskim budżecie ten koszt bywa wyższy niż wartość informacji, którą uzyskasz.

Jeśli miesięcznie wydajesz na paid tyle, że test odłożyłby budżet do granicy szumu, odpuść sformalizowany geo-lift. Zamiast tego zrób prostsze, tańsze przybliżenia przyrostu:

• Test włącz/wyłącz w czasie. Wyłącz jeden kanał na dwa tygodnie i obserwuj, czy łączna sprzedaż spada. Słabszy dowód niż grupa kontrolna, ale często wystarczający, żeby wychwycić kanał, który dokłada zero.
• Analiza nowych vs powracających. Sprawdź, ilu klientów z danego kanału to faktycznie pierwszy zakup. Wysoki udział powracających na kampanii do zimnego ruchu to sygnał kanibalizacji.
• Badanie „skąd nas znasz". Jedno pytanie w koszyku albo po zakupie daje surowy, ale niezależny od pikseli obraz tego, co realnie sprowadza ludzi.

Reguła jest prosta: im więcej wydajesz, tym bardziej opłaca się formalny test przyrostu, bo stawka pomyłki rośnie. Przy dużym budżecie kilka punktów procentowych błędu w ocenie kanału to realne pieniądze co miesiąc.

W Audycie Startowym najpierw sprawdzam, czy Twoje obecne raporty w ogóle rozróżniają przypisanie od przyrostu, i dobieram metodę pomiaru do Twojej skali, żebyś nie palił budżetu na test, który przy Twoim wolumenie i tak nic nie pokaże. Czasem najlepszą rekomendacją jest prosty test włącz/wyłącz zamiast kosztownego eksperymentu geo. Cel jest jeden: żebyś skalował sprzedaż, którą reklama faktycznie dokłada, zamiast tej, którą tylko sobie przypisuje.