|
|
Onderzoek
|
Bruikbaarheid
|
Gebruik
|
Gezondheidsmetingen en Algemene performance
|
| Waarom
|
Dit hielp bij het vinden van wat moet er gerepareerd worden
|
Dit hielp om te verifiëren dat de voorgestelde oplossingen correct waren
|
Dit hielp om te verifiëren dat de oplossingen beter presteerden dan de vorige versies
|
Dit hielp bij het inschatten van de langetermijneffecten en voordelen van het op grote schaal gebruik van de nieuwe skin
|
| Wat
|
Kwalitatief onderzoek in meerdere talen en wiki's, waaronder de Engelstalige Wikipedia, is uitgevoerd om de belangrijkste problemen met de oude skin Vector te bepalen
|
Kwalitatieve methoden zoals gebruikerstesten, prototype testen en interviews zijn uitgevoerd voor zowel individuele kenmerken als de algehele skin
|
Kwantitatieve methoden, waaronder A/B-testen en daaropvolgende monitoring zijn uitgevoerd om de resultaten van kwalitatieve tests op wiki's te valideren, om te laten zien hoe functies en de skin in werkelijkheid werden gebruikt
|
Naast het testen van individuele kenmerken, werden kwalitatieve gezondheidsstatistieken geïdentificeerd en gecontroleerd om ervoor te zorgen dat het gebruik van de nieuwe skin vergelijkbaar of beter was dan de oude skin Vector
|
| Resultaten
|
- Te veel informatiedichtheid en navigatie-elementen op de pagina maakten het moeilijk om zich te concentreren op een bepaalde lees- of bewerkingstaak.
- Lezers waren niet in staat om het doel, de terminologie en de concepten van beschikbare hulpmiddelen zoals het hoofdmenu, het gebruikersmenu en de pagina-hulpmiddelen te begrijpen.
- Lezers vonden het moeilijk om door de pagina te navigeren en brachten veel tijd door met scrollen.
- Lezers vonden het moeilijk om te zoeken naar informatie die voor hen relevant is.
- Meertalige lezers waren zich niet bewust van de functionaliteit voor het wisselen van taal.
- Lezers wilden een gemakkelijke manier hebben om de inhoudsopgave op de hele pagina te bekijken.
- Bewerkers en andere bijdragers wilden gemakkelijker toegang tot de hulpmiddelen die ze vaak gebruiken.
- De bewerkers vonden de hiërarchie van de navigatie voor nieuwkomers verwarrend.
- De bewerkers hebben uitgesproken om minder, maar prominentere manieren te hebben om te beginnen met bijdragen.
- Bewerkers gaven aan dat ze de behoefte hadden om de interface te kunnen configureren via gadgets en gebruikersscripts.
- Onderzoek naar de breedte van de inhoud gaf aan dat het aantal tekens per regel van Wikipedia meer dan drie keer de aanbevolen waarde was.
|
Kopregel
|
|
Gebruik
|
| De meerderheid van de gebruikers rapporteerde positieve tot neutrale ervaringen met de nieuwe configuratie van de kop (header) en het logo. 8% van de betrokken bewerkers meldde negatieve ervaringen met het nieuwe logo.
|
- Vanaf mei 2023 is Vector 2022 op alle grote wiki's met Vector legacy de standaard, de meest gebruikte niet-standaard skin.
- De Duitse Wikipedia met een uniek hoog percentage Monobook-gebruikers is een uitzondering. Het gebruik van Vector 2022 en Monobook is daar bijna gelijk.
- Meestal is Monobook de meest gebruikte niet-standaard skin. De derde meest gebruikte niet-standaard skin is Timeless.
|
| Invouwbare zijbalk
|
Paginaweergaven
|
- Bij het testen van prototypes met editors vond de meerderheid van de gebruikers die feedback gaven de ingevouwen zijbalk leuk voor persoonlijk gebruik, en vooral voor leesdoeleinden.
- In een gebruikersonderzoek met lezers rapporteerden deelnemers een sterke voorkeur voor de ingevouwen versie van het menu, waarbij ze verklaarden dat dit een betere leeservaring creëerde dan de huidige versie.
|
- Ingelogde en uitgelogde gebruikers gedragen zich heel verschillend bij het gebruik van de zijbalk.
- Zowel ingelogde als ingelogde gebruikers gebruikten de invouwbare zijbalk vaak.
- Uitgelogde gebruikers hadden de neiging om de zijbalk in te vouwen en hielden 81% van de tijd die zo.
- De snelheid waarmee het invouwen werd gedaan, gaf echter aan dat gebruikers zich ervan bewust zijn dat, als ze naar een item in de zijbalk moesten navigeren, die optie voor hen beschikbaar was.
- Ingelogde gebruikers hadden de neiging om de zijbalk in te vouwen en vervolgens weer te openen met redelijk gelijke snelheden, wat aangeeft dat ze de zijbalk sloten wanneer dat nodig was en weer openden om de benodigde functionaliteit te gebruiken.
|
- Wiki's met Vector 2022 als standaard ondervonden geen afname van het aantal paginaweergaven dat aan Vector 2022 wordt toegeschreven.
- NB: zonder directe A/B-testen bij alle gebruikers, wat niet privacyvriendelijk is, is een toename van het aantal paginaweergaven als gevolg van de nieuwe ervaring moeilijk te bewijzen.
- Dit is de reden waarom in plaats daarvan een drempel van geen significante stijging of afname wordt gebruikt.
- Wiki's met Vector 2022 als standaard ontvangen echter een hogere ratio van paginaweergaven in vergelijking met de benchmark van 2019 dan de Engelse Wikipedia of alle andere Wikipedia's met uitzondering van de Engelse.
|
| Beperkte breedte inhoud
|
Snelheid bewerken
|
- Bij het testen van prototypes door bewerkers waardeerden de meeste de kortere regellengtes en waren ze het erover eens dat de functie een comfortabelere leeservaring creëerde.
- Een aanzienlijk aantal bewerkers had een hekel aan de witruimte rond de inhoud en vond dat het verspilde ruimte was.
- Bij gebruikerstesten met lezers meldden deelnemers een sterke voorkeur aan de beperkte inhoud breedte, waarbij werd verklaard dat het de leeservaring verbeterde.
- Eerder onderzoek wees uit dat gebruikers nauwkeuriger en sneller lezen bij beperkte regellengtes.
|
Het beperken van de inhoudsbreedte liet geen significante effecten zien van de gezondheidsstatistieken: paginaweergaven, aantal bewerkingen en het maken van accounts op de pilot-wiki's.
|
Wiki's met Vector 2022 als standaard ondervonden geen dalingen in bewerkingssnelheden die aan Vector 2022 worden toegeschreven.
|
| Zoeken
|
Account aanmaken
|
| In gebruikerstests die op usertesting.com werden uitgevoerd, konden alle deelnemers het resultaat vinden waarnaar ze op zoek waren met behulp van het nieuwe zoeken.
|
- Er was een gemiddelde toename van 28,9% zoeksessies die werden geïnitieerd op early adopter wiki's in de AB-test voor de groep die de nieuwe zoekwidget gebruikte, vergeleken met de oude versie voor ingelogde gebruikers.
- Voor uitgelogde gebruikers was er een toename van 13,4% in zoeksessies die zijn gedaan na de implementatie van de nieuwe zoekwidget.
|
- Wiki's met Vector 2022 ondervonden een kleine stijging van het aanmaken van accounts toegeschreven aan Vector 2022.
- Een grondige A/B-test moet worden uitgevoerd om vast te stellen of deze wijzigingen significant zijn.
|
| Wisselen van taal
|
- Bij het testen van prototypes met bewerkers gaf de meerderheid van hen de voorkeur aan de nieuwe locatie van de taalkiezer.
- Een aanzienlijk aantal heeft echter hun bezorgdheid uitgesproken over het hebben van een extra klik om van taal te wisselen.
- In gebruikerstesten met lezers konden deelnemers die in andere dan het Engels lezen, en meertalige deelnemers die Engels lezen, de nieuwe taalkiezer gemakkelijker vinden en sneller wisselen van taal.
|
- In een A/B-test voor deze functie met ingelogde gebruikers was er een afname van 44,57% in het totale aantal klikken op taallinks. Dit bracht het team ertoe om de functie te herhalen.
- Na het herhalen van de functie om richtlijnen op te nemen over waar de nieuwe functionaliteit zich bevindt, was er een toename van het wisselen van taal door uitgelogde gebruikers die de nieuwe versie van de taalkiezer gebruikten en vergelijkbaar gebruik van de nieuwe en oude versies van de taalkiezer voor ingelogde gebruikers.
|
| Sticky header
|
- In gebruikerstesten met lezers en bewerkers werden twee problemen bestudeerd: het gebruiksgemak van een sticky header en de functionaliteit met de hoogste prioriteit die erin moet worden opgenomen.
- Op basis van deze resultaten werden de pictogrammen in de huidige sticky header gekozen.
- Bij het testen van prototypes met ingelogde gebruikers rapporteerde een overweldigende meerderheid van de testdeelnemers positieve ervaringen met de sticky header.
|
- In het algemeen zagen we een gemiddelde daling van 15% in scrolls per sessie door ingelogde gebruikers op de 15 pilot wiki's in de testgroep, vergeleken met de controlegroep.
- Dit geeft aan dat onze hypothese correct was - het toevoegen van de sticky header aan de pagina verminderde aanzienlijk de noodzaak om naar de top van de pagina te scrollen.
|
| Gebruikersmenu
|
|
- Uit prototypetests met bewerkers bleek dat het nieuwe gebruikersmenu gemakkelijk te gebruiken was en dat deelnemers vanaf hun eerste poging intuïtief naar pagina's in het menu konden navigeren.
- Sommige deelnemers gaven aan dat ze meer controle wilden hebben over welke items binnen en buiten het menu worden weergegeven.
- Gebruikerstesten met lezers en bewerkers gaven aan dat de menu-items en pictogrammen intuïtief te gebruiken en te begrijpen waren.
|
| Inhoudsopgave
|
- Uit gebruikerstesten met lezers in meerdere landen is gebleken dat lezers en bewerkers de voorkeur geven aan een inhoudsopgave die op de hele pagina persistent is, zonder invouwbare elementen.
- Bij het testen van prototypes met bewerkers was de overgrote meerderheid van de feedback op de inhoudsopgave positief. Ingelogde gebruikers meldden ook mogelijke wijzigingen in de voorgestelde inhoudsopgave die de bruikbaarheid ervan zouden verbeteren.
|
- Van de sessies met ten minste 1 klik op de inhoudsopgave heeft de testgroep (de groep die wordt blootgesteld aan de nieuwe inhoudsopgave) meer klikken op de inhoudsopgave dan de controlegroep (de groep die is blootgesteld aan de oude inhoudsopgave).
- Het datamodel voorspelt 53% meer klikken op de nieuwe inhoudsopgave met ingelogde gebruikers en 45,5% meer klikken op nieuwe inhoudsopgave met anonieme gebruikers in vergelijking met de vorige inhoudsopgave.
- Deze trend is consistent in alle tellingen van het aantal bewerkingen: d.w.z. ingelogde gebruikers klikten met ongeveer dezelfde frequentie op de inhoudsopgave, ongeacht het aantal bewerkingen dat ze eerder hadden gedaan.
|
| Referenties
|
|
|
|
|
