Tip:
Highlight text to annotate it
X
5. videó: AdWords Kampánykísérletek: A kísérlet eredményeinek értelmezése és a statisztikai szignifikancia bemutatása
Az AdWords Kampánykísérletek létrehozásának 3. lépésében engedte futni a kísérletet,
és megfigyelte annak eredményeit. Ez a lecke segít megérteni a kísérlet során
megfigyelhető eredmények egy részét.
A kampánykísérlet futása során elkezdenek gyűlni a kontroll- és a kísérleti részek adatai
a kampányok, a hirdetéscsoportok, valamint a kulcsszavak szintjén. Ha valamelyik lapon
még nem jelennek meg külön kontroll- és kísérleti sorok, akkor ezek bekapcsolásához kattintson a
Lebontás elemre, majd válassza a Kísérlet lehetőséget.
Ahogy egyre gyűlnek az eredmények, a kezelőfelületen különböző jelzők mutatják a statisztikai szignifikanciát,
amelyek segítenek megállapítani, hogy az összehasonlított mutatók eltérnek-e
vagy sem.
Az minősül statisztikailag szignifikáns különbségnek, amely valószínűleg nem véletlenül következett be.
Ha egy mutató nem változott statisztikailag szignifikáns mértékben, akkor lehetséges,
hogy nem az Ön kísérleti módosítása volt hatással rá.
A szürke fel-le mutató ikon azt jelzi, hogy a mutató nem változott statisztikailag szignifikáns
mértékben. Valószínű, hogy a mérhető különbség pusztán kísérleti zaj.
A felfelé mutató ikon azt jelzi, hogy a mutató statisztikailag szignifikáns mértékben
megnövekedett. Ha a kísérleti módosításokat az összes aukcióra alkalmazza, akkor azt várhatja,
hogy a szóban forgó mutató növekedni fog.
A lefelé mutató ikon azt jelzi, hogy a mutató statisztikailag szignifikáns mértékben
csökkent. Ha a kísérleti módosításokat az összes aukcióra alkalmazná,
akkor azt várhatja, hogy a szóban forgó mutató csökkenni fog.
Ezeknek az ikonoknak három fokozatuk is van, amelyből kiderül, hogy mennyire lehet biztos abban,
hogy az eredmények a kísérleti módosításoknak köszönhetők, nem pedig a véletlennek:
Ha egyetlen nyíl mutat felfelé vagy lefelé, az azt jelenti, hogy 95% a valószínűsége annak, hogy
a mutató nőtt vagy csökkent. Máshogy fogalmazva: statisztikailag kimondható, hogy a kísérleti módosítások
teljes körű alkalmazásával csak 5% az esélye annak, hogy a mutató végül nem mozdul el az ikon által
mutatott irányba, és minden ugyanúgy marad.
Ha két nyíl mutat felfelé vagy lefelé, az azt jelenti, hogy 99% a valószínűsége annak, hogy
a mutató nőtt vagy csökkent. Máshogy fogalmazva: statisztikailag kimondható, hogy a kísérleti módosítások
teljes körű alkalmazásával csak 1% az esélye annak, hogy a mutató végül nem mozdul el az ikon által
mutatott irányba, és minden ugyanúgy marad.
Ha három nyíl mutat felfelé vagy lefelé, az azt jelenti, hogy 99,9% a valószínűsége annak, hogy
a mutató nőtt vagy csökkent. Máshogy fogalmazva: statisztikailag kimondható, hogy a kísérleti módosítások
teljes körű alkalmazásával csak 0,1% az esélye annak, hogy a mutató végül nem mozdul el az ikon által
mutatott irányba, és minden ugyanúgy marad.
Ha olyan kísérletet futtat, amelynél a kísérlet/kontroll felosztásának aránya nem 50/50
(hanem például 70/30 vagy 20/80), akkor a kampány által a kontroll- és a kísérleti részben felhalmozott statisztikai
adatok nem vethetők össze egymással 1:1 arányban. Tegyük fel például, hogy Ön egy
90/10 arányú kísérletet futtat. Ha a kísérletet nem változtatja meg, akkor arra számíthat, hogy a
kontrollrészben 900 megjelenítés történik, a kísérleti rész 100 megjelenítése esetén.
Éppen ezért, ha a kontrollrészben 900 megjelenítés szerepel, a kísérleti részben pedig 400,
az statisztikailag szignifikáns növekedést jelentene a megjelenítések számában. Hogy miért?
Mert a 400 sokkal több annál a 100-nál, amire akkor számíthatunk, ha nem vezetünk be változást.
Ez azt jelenti, hogy a módosítások alkalmazásával növekedésre számíthatunk a megjelenítések számában,
még akkor is, ha a 900 nagyobb szám, mint a 400.
50/50 felosztás esetén sokkal egyszerűbb az összehasonlítás, ugyanis az abszolút számoknak
meg kell egyezniük akkor, ha a módosításoknak nincs hatása. Továbbá sok kampány nem rendelkezik akkora
volumenű forgalommal, hogy sikeresen következtetést lehessen levonni belőlük 50/50-től eltérő felosztás esetén.
Ezért a legtöbb hirdetőnek az 50/50 arányú kísérletek futtatását ajánljuk. Más esetben Önnek kell számításokat
végeznie annak megállapításához, hogy a kísérleti módosítások összes aukcióra való alkalmazása esetén
mekkora a mutató várható százalékos változása.