A/B Testing - מה לבדוק קודם
שיעור 9 מתוך 18
התשובה הקצרה
בעל עסק רואה שגרסה A הביאה 42 לידים וגרסה B הביאה 45, ומחליט תוך יום שגרסה B מנצחת ומעביר אליה את כל התקציב. זו לא בדיקה - זו ניחוש עם גרפים. A/B Testing אמיתי דורש 3 תנאים: מדגם מספיק גדול (לפחות 1,000 חשיפות לגרסה ב-Meta, 500 קליקים בגוגל), משתנה יחיד בכל פעם, וסף החלטה ברור לפי 3 אזורים - הבדל מתחת ל-10% הוא רעש סטטיסטי, בין 10% ל-20% זה אזור אפור שדורש עוד דאטה, ומעל 20% זה ניצחון אמיתי שאפשר לפעול לפיו. סדר הבדיקה (מהחשוב ביותר להכי פחות): קהל, Hook, קריאייטיב מרכזי, CTA, מחיר/הצעה. בשיעור הזה נבנה 3 בדיקות A/B לקמפיין שלך - עם השערה, גודל מדגם, וסף החלטה מוגדרים מראש, לא בדיעבד.
מה זה A/B Test תקני
A/B Test הוא ניסוי שבו מציגים לקהל אקראי שתי גרסאות של אותו דבר (Ad A מול Ad B) באותה תקופת זמן, ועוקבים אחרי מדד אחד. הניסוי נחשב תקף רק כש-3 תנאים מתקיימים: 1) מדגם מספיק גדול - לפחות 1,000 חשיפות לכל גרסה ב-Meta, 500 קליקים בגוגל. 2) ההבדל בין הגרסאות הוא משתנה אחד בלבד. 3) אותו טווח זמן (השוואת שבוע מול שבוע, לא יום מול יום). לגבי גודל ההבדל עצמו - יש 3 אזורים, לא סף אחד: הבדל של פחות מ-10% הוא רעש סטטיסטי, גם עם מדגם גדול. הבדל של 10%-20% הוא אזור אפור - יש מגמה, אבל עדיין לא מספיק בטוח כדי להעביר עליו את כל התקציב; ממשיכים לבדוק עוד שבוע. הבדל של 20% ומעלה, עם מדגם שעומד בתנאי הראשון, הוא ניצחון אמיתי שאפשר לפעול לפיו. בעלי עסק רבים מסיקים מסקנות אחרי 48 שעות עם 200 חשיפות והבדל של 3%…
טוען את המשך השיעור...