A/B Testing

מי שכבר מכיר את המושג מוזמן לדלג לסוף הפוסט.
מכירים את הדיונים וההתלבטויות האינסופיים על עיצוב אתר? לעיתים הדיונים או ההתלבטויות מתחילים כבר בשלבי האיפיון. נניח שהמטרה היא רישום לניוזלטר – לא ברור אם יהיה טוב יותר לשים את הקומפוננטה של הרישום בחלק העליון של האתר, בבר הניווט וכו'.
ניתן להתפלסף שעות כאשר לכל אופציה יש דוגמאות מחזקות מאתרים רציניים ומצליחים וגם הסברים מאד הגיוניים.
A/B Testing פותר לנו את הנושא בצורה אלגנטית-
העקרון הבסיסי הוא להשוות גרסאות שונות של אותו דף או אלמנט באתר. על מנת לקבל תוצאות בעלות ערך אמיתי חשוב לשים לב לכמה דברים:

• להשוות כל שינוי בנפרד.
• להקפיד על ניסוי בתחום זמן גדול מספיק ועל בסיס משתמשים מספיק גדול.
• לבדוק גם שינויי תוכן וגם שינויי עיצוב.
• להבחין בין שינוי עיצובי (פונט, צבע, רקע וכו') לבין שינוי לייאאוט (מיקום אובייקטים).
• לבחון השפעה על המטרה הסופית ולא רק על ההקלקות. 

מתי זה פחות מתאים? 
כדי לקבל נתונים מהימנים יש צורך בגולשים רבים שיבצעו מספיק פעמים את הפעולה אותה רציתם למדוד. לכן ניסיוי באתרים עם מעט גולשים ייתן תוצאות לא מהימנות שיכולות דווקא להטעות.

מקרה לדוגמה

באתר ביטוח רכב בדקנו איך שינויים באתר משפיעים על הפרמטר של השארת פרטים. רוב אתרי ביטוח הרכב דומים מאד אחד לשני והאתגר הגדול הוא שהמשתמש ימלא פרטים כמו סוג הביטוח, דגם הרכב, גיל הנהג וכו'.
ניסינו שינויי טקסט בכותרות ובתוכן של הדף, ניסינו רקעים שונים וצבעים שונים לכפתור בטופס יצירת הקשר.
אחרי ניחושים מוצלחים יותר ופחות גילינו ששינוי קטן בצבע של הכפתור היה הדבר היחיד ששינה משמעותית את ההמרות (בקרוב ל10%).
הכפתור הירוק כנראה הרתיע אנשים והוא עבד פחות טוב מהכפתור הכחול… 

המסקנה שלי מהניסוי הזה הייתה שאין מה לנסות לנחש ולפעמים דווקא שינוי שנראה זניח יכול להשפיע בצורה משמעותית על התנהגות הגולשים.

2 כלים שימושיים:

Goals – בגוגל אנליטיקס מאפשר בדיקה של מגוון פעולות של גולש כמו הגעה לדף יעד, הקלקה על כפתור מסויים וכו'

כלי A/B Testing נוסף בקוד פתוח שהמליצו לי עליו אבל לא ניסיתי הוא Vanity
http://vanity.labnotes.org/ 

בהצלחה!