Pruebas A/B

Pruebas A/B (del inglés A/B testing) es una herramienta simple para determinar si una característica es preferida por los usuarios.

Los usuarios son divididos en dos grupos. Un grupo ve la nueva característica; el otro grupo, la antigua. Luego comprueba si los grupos se comportan de manera diferente, por ejemplo, si un grupo hace más ediciones que el otro.

Cómo Configurarlo

La instrumentación para una prueba A/B puede ser complicada, así que pide ayuda.

Muchas pruebas A/B en wikis públicas se ejecutan solo para usuarios conectados. Las pruebas pueden limitarse a los usuarios de ciertas wikis o con ciertos niveles de experiencia (p.ej., solo los nuevos editores de Wikipedia). Si desea realizar una prueba A/B para usuarios que no han iniciado sesión (usuarios IP/usuarios que no han iniciado sesión), probablemente debería hablar primero con el Equipo de la plataforma de experimentación (que puede recurrir a personas asociadas con el Wikimedia Performance Team ), que son los responsables del mantenimiento de Test Kitchen (también conocido como Laboratorio de experimentación o «xLab»).

Comúnmente, los dos grupos se identifican por sus números de Id. de sus cuentas de usuario. Estos números son esencialmente aleatorios.

Usos previos

Esta es una lista incompleta de usos pasados en el desarrollo de MediaWiki.

• Wikipedia.org Portal A/B testing
• Page Previews/2016 A/B Tests y Page Previews/2017-18 A/B Tests
• UK A/B Testing
• VisualEditor on mobile/Edit cards
• Reading/Web/Projects/Mobile Page Issues/AB tests
• Reading/Search Engine Optimization/sameAs test
• (Por favor, añade enlaces a otros estudios aquí!)

Véase también

• wikitech:Metrics_Platform
• wikitech:A/B testing
• phab:T213315 "Output 3.2: Controlled experiment (A/B test) capabilities" (de Fundación del plan anual de Wikimedia/2018-2019/Audiencias#Mejor uso de datos)