בדיקת A/B

בדיקות A/B הן כלי פשוט לקביעת האם תכונה מסוימת מועדפת על ידי משתמשים.

המשתמשים מחולקים לשתי קבוצות. קבוצה אחת רואה את התכונה החדשה; הקבוצה השנייה רואה את הגרסה הישנה. לאחר מכן אתה בודק האם הקבוצות מתנהגות בצורה שונה, למשל, אם קבוצה אחת מבצעת יותר עריכות מהשנייה.

איך להגדיר את זה

אינסטרומנטציה עבור בדיקת A/B יכולה להיות מסובכת, לכן בקשו עזרה.

מבחני A/B רבים באתרי ויקי ציבוריים מבוצעים עבור משתמשים מחוברים בלבד. ניתן להגביל את הבדיקות למשתמשים באתרי ויקי מסוימים או עם רמות ניסיון מסוימות (למשל, רק עורכי ויקיפדיה חדשים). אם אתם רוצים להריץ בדיקת A/B עבור משתמשים שאינם מחוברים (משתמשי IP), כנראה שעדיף שתדברו תחילה עם צוות הביצועים של ויקימדיה.

לרוב, שתי הקבוצות מזוהות לפי מספרי זיהוי חשבון המשתמש שלהן. מספרים אלה הם למעשה אקראיים.

שימושים קודמים

זוהי רשימה לא שלמה של שימושים קודמים בפיתוח מדיה-ויקי.

• Wikipedia.org Portal A/B testing
• Page Previews/2016 A/B Tests וגם Page Previews/2017-18 A/B Tests
• UK A/B Testing
• VisualEditor on mobile/Edit cards
• Reading/Web/Projects/Mobile Page Issues/AB tests
• Reading/Search Engine Optimization/sameAs test
• (אנא הוסיפו כאן קישורים למחקרים אחרים!)

ראה גם

• wikitech:Metrics_Platform
• wikitech:A/B testing
• phab:T213315 "Output 3.2: Controlled experiment (A/B test) capabilities" (מתוך התוכנית השנתית של קרן ויקימדיה/2018-2019/קהלים#שימוש טוב יותר בנתונים)