Hogyan mérjük, hogy a boltod valóban jobban teljesít a modellel?
Az üzlet teljesítményének korrekt mérése emberileg rendkívül összetett feladat. A legtöbb tulajdonos ösztönösen, egyszerű összehasonlításokkal dolgozik – „több volt-e a bevétel, mint múlt hónapban?” –, miközben nem veszi figyelembe a piac hatásait: szezonális ingadozások, infláció, fogyasztói hangulat, külső események.
Ezek nélkül a szempontok nélkül a mérés szinte mindig torz képet ad: úgy tűnhet, hogy a bolt jobban vagy rosszabbul teljesít, miközben csak a környezet változott.
Mi a méréseknél egyben kezeljük az üzlet saját teljesítményét és a piaci hatásokat, és olyan professzionális, statisztikailag megalapozott módszereket használunk, amelyek kiszűrik a véletlent és a külső zajt. Komplex valószínűségi eloszlásokon alapuló hipotézis tesztek használata kritikusan fontos, hogy az információs zajból kilássanak és hogy meg lehessen állapítani, hogy egy növekedés véletlenszerűségből jön-e, vagy ténylegesen az optimalizálás hatása.
Ennek eredménye: valódi, bizonyítható, üzleti döntésekre alkalmas teljesítménymutatók.
Nettó profit / nap (rendelésekből számolva)
Profit stabilitás (ingadozás csökkenése)
Relatív teljesítmény a piachoz képest (ha a piac esik, te mennyivel esel kevesebbet)
Hogyan szűrjük ki a „piac zaját”?
Két egymást erősítő módszert használunk:
Előtte–utána (időbeli) mérés, permutációs hipotézisvizsgálattal
összevetjük az optimalizálás előtti és utáni azonos hosszúságú időszak profitját,
a permutációs teszt megmondja, mennyi az esélye, hogy a különbség csak véletlen
Párhuzamos kontroll vs. optimalizált csoport
ugyanabban az időszakban az optimalizált termékeket hasonlítjuk a kontroll (nem optimalizált) termékekhez,
így a piaci hatások teljesen kiütik egymást (azonos idő, azonos környezet).
Mit kérünk a tiszta méréshez?
Ne állítsd le a hirdetéseket az optimalizálás előtti és mérés alatti időszakban.
Lehetőleg ne változtass a logisztikán, akciózási politikán, kategória-kínálaton, költségszámításon a mérési ablakban.
Ideális: legalább 1 hónap stabil bázis az indulás előtt.
Lényeg: nem „több-e a bevétel, mint múltkor” alapon mérünk, hanem piac-korrigált, statisztikailag igazolt módon mutatjuk meg, mennyit hoz a modell – még negatív piacon is. Egy bolt számára a legnagyobb érték, ha pontosan tudja, mi működik és mi nem – ezt a bizonyosságot adjuk mi.