איך זה עובד?

הטסט לוקח חלק מהרשימה שלכם, מחלק אותו לשניים- לכל חלק הוא שולח גרסא אחרת של המייל שיצרתם, ואוסף את התוצאות.

כמעט לכל ספק אימייל יש אפשרות מובנית לביצוע AB טסט. אם אין לספק המייל שלכם את האפשרות הזאת קיימים כלים חיצוניים שניתן להשתמש בהם.

כדי לבצע AB טסט נכון לוקחים אלמנט אחד בלבד במייל, כמו למשל אורך הכותרת, ובודקים רק אותו. אני יודעת שזה מפתה לבדוק על הדרך גם את השימוש בשם פרטי וגם את התמונה בשחור לבן לעומת הצבעונית בגוף המייל, אבל העמסה של יותר מאלמנט אחד בבדיקה לא תגלה לנו מה מהשינויים שעשינו הביא לתוצאות שקיבלנו, כי לא תהיה דרך לבודד אף אחד מהם.

אז סיכמנו, בוחרים אלמנט אחד אותו אנחנו בודקים.

איזה אלמנטים אפשר לבדוק?

יש לא מעט למען האמת, הנה כמה רעיונות:

כותרות

• אורך

• ניסוח

• שימוש בשם פרטי

• שימוש באנגלית

שם השולח

תוכן המייל

• אורך המלל בגוף המייל

• תמונות

• סדר הפוסטים, או ההצעות, אם מדובר באי קומרס

• כפתורים: צבע, נוסח

זמן השליחה

• שעות שליחה

• ימי שליחה

אז תכל'ס- איך עושים AB טסט?

מחליטים מה בודקים.
לצורך הדוגמא נבדוק שימוש בשם פרטי בכותרת. הכותרת שלנו היא "איפה אתם בחג?"- בגרסא אחת היא תצא ככה ובגרסא השניה עם פתיח של שם פרטי "[שם פרטי], איפה אתם בחג?".

מחליטים מה הפרמטר שיבחן.
יש כמה אפשרויות לקביעת תוצאות של טסט. הנפוצות ביותר:

• פתיחות.
• הקלקות.
• מכירות.

האופציה הזאת אפשרית רק אם אתם מוכרים אונליין, ולכן נתרכז כרגע רק בשתי האפשרויות הראשונות.

בחירת הפרמטר תלויה במה שתרצו לבדוק- אם המטרה היא להגדיל את מספר הפתיחות, אז תבחרו באפשרות הראשונה, אבל אם המטרה היא להביא יותר טראפיק לאתר שלכם תבחרו באפשרות השניה.

הפרמטר שנבדוק כאן יהיה הקלקות, כי אני מעוניינת לדעת איזה מהניסוחים יצר אצל היוזרים תחושה פרסונלית יותר והניע אותם לייצר יותר אינגייג'מנט ולהגיע לאתר.

מחליטים איזה חלק מהאוכלוסיה יכלל בבדיקה.
ההחלטה הזאת תלויה בעיקר בגודל הרשימה שלכם. אם יש לכםרשימה קטנה תבדקו על כולה- ההגדרה בעצם תהיה שהטסט הוא 50-50 והמערכת תשלח ל-50% מהרשימה את גרסא A ול-50% את גרסא B.

אם הרשימה שלכם קצת יותר גדולה תוכלו לעשות Live AB test- בוחרים איזה אחוז מהרשימה שלכם יכלל בבדיקה ואת הגרסא המנצחת שולחים לשאר. למשל- אם החלטנו לבדוק על 20% מהאוכלוסיה גרסא Aתשלח ל-10% מהרשימה, גרסא B תשלח ל-10% מהרשימה והגרסא המנצחת מבין השתיים תשלח ל-80% הנותרים.

מחליטים כמה זמן תימשך הבדיקה.
זמן הבדיקה הוא בעצם ההגדרה כמה זמן תתנו למערכת לאסוף את הנתונים של אוכלוסיית הבדיקה שלכם לפני שהיא תציג לכם נתונים סופיים או תבחר את הגרסא המנצחת.

ההמלצה שלי היא לא לבדוק בפחות משעתיים, כדי שיצטברו לכם מספיק נתונים שתוכלו להסיק על בסיסם מסקנות. אם בחרתם להתבסס על פרמטר של מכירות לצורך הבדיקה תצטרכו לפחות 12 שעות כדי לבחון את התוצאות. אני אומרת "לפחות", כי ברור שיש מוצרים שהמעורבות הרגשית והכלכלית של היוזר ברכישה שלהם הרבה יותר גבוהה והם ידרשו יותר זמן, כמו רכישת מכונית, חופשה או מיטה למשל.

אז איך זה נראה?

אצל כל ספק אימייל זה יראה קצת אחרת, אבל הבסיס דומה בכולם.

בוחרים את כל המשתנים שדיברנו עליהם כמו מה יבדק, משך הבדיקה, הפרמטרים וגודל האוכלוסיה הנבדקת. אחר כך בוחרים את שתי גרסאות המייל שישלחו במסגרת הבדיקה ומתזמנים את השליחה שלהם, בדיוק כמו שתעשו בקמפיין רגיל.

עשיתי AB טסט. יש תוצאות. מה עכשיו?

עכשיו עושים עוד אחד. ואז עוד אחד. ואז עוד אחד. לא נוכל להסיק מסקנות על סמך בדיקה אחת, כיוון שיכולות להיות הרבה הטיות לאורך הדרך. אם החלטתם לבדוק שימוש בשם פרטי בדקו את זה מספר פעמים, אספו את הנתונים של כל הבדיקות וסכמו אותם. אחרי שתצברו מספיק נתונים תוכלו להגדיר לעצמכם כללי אצבע לשימוש בשם פרטי בכותרת- מתי כן ומתי לא, באילו שעות ביום, באילו סוגי מיילים ועוד הרבה דברים שתגלו אחרי שתעשו כמה טסטים.

זהירות, זה ממכר.