النمو/تجربة التنشيط البنّاء
|
تجربة تنشيط بنّاء
 تجارب لزيادة نسبة حاملي الحسابات الجديدية الذين يعدلون بشكل بنّاء
|
كجزء من المخطط السنوي 2024/2025 لفريق النموّ، سيبحث الفريق عن السبل المختلفة حتى يزداد التنشيط البنّاء على الهاتف المحمول.
توثق صفحة المشروع هذه تجارب فريق النمو المتعلقة بـالخطة السنوية لمؤسسة ويكيميديا 2024-2025، وتحديدًا النتيجة الرئيسية لتجارب ويكي 1.2.
الوضع الحالي
- يونيه 2024 – التخطيط وتشارك الفرضية الأولى
- سبتمبر 2024 – اختبار مستخدم للنموذجات الأولية للتصميم
- نوفمبر 2024 – بدأ مشورة المجتمع مع ويكيبيدياتنا النموذجية
- نوفمبر 2024 – release "Add a Link" A/B test at English Wikipedia
- ديسمبر 2024 – conduct a temporary "Surfacing Structured Tasks" test at pilot wikis
- فبراير 2025 – release "Surfacing Structured Tasks" A/B test at pilot wikis
- يونيه 2025 – end "Surfacing Structured Tasks" A/B test at pilot wikis
- يوليه 2025 – experiment analysis published: Add-a-link Experiment on Enwiki and Surfacing Add-a-link in Read Mode
ملخص
تتطلب حاليا تجارب تحرير الصفحة كاملةً الكثير من السياق والصبر والتجربة والخطأ لدى الكثير من المبتدئين الجدد حتّى يساهموا بشكل بناء. To support a new generation of volunteers, we will increase the number and availability of smaller, structured, and more task-specific editing workflows (e.g. Edit check and Structured Tasks). The Growth team will primarily focus on Structured Tasks, while working closely with the Editing team to ensure our work integrates well with Edit Check.
المشروع ده بيهدف لمعالجة مشكلة المستخدمين التالية:
البدء في تحرير في ويكيبيديا صعب وخاصة محبط على الأجهزة المحمولة. أريد أن توفر واجهة التحرير، السياسة الحالية والإرشادات الفنية التي أحتاجها، حتى لا تذهب جهودي الأولية سدى.
يهدف هذا المشروع إلى تحقيق النتيجة التالية للمستخدمين:
بصفتي متطوع/ـة جديد/ة في ويكيبيديا، أنا أشعر بالثقة والحماس في المساهمة في حركة ويكيبيديا عن طريق تحرير مقالات ويكيبيديا. الأدوات المتوفّرة بتشيرني خطوة بخطوة، وتحد من الاهتمامات، وتسمح لي بالتعلم بتدريجية بحيث يمكنني المساهمة بنجاح على جهاز هاتفي.
الخلفيه
كيف يتناسب هذا العمل مع الخطة السنوية لمؤسسة ويكيميديا؟
تجارب الويكي 1: هدف تجربة المساهمين
في إطار هدف البنية الأساسية لمؤسسة ويكيميديا، وضمن مجموعة الأهداف التي تركز على تجارب الويكي، يوجد هدف يتعلق بتحسين تجربة المساهمين:
- تجارب الويكي 1: هدف تجربة المساهمين - يجتمع المساهمون الجدد وذوي الخبرة معًا عبر الإنترنت لبناء موسوعة جديرة بالثقة، بسهولة أكبر وإحباط أقل.
نتائج تجارب ويكي 1.2 الرئيسية
في إطار هدف تجربة المساهمين، هو نتيجة رئيسية واحدة تركز على زيادة التفعيل البناء للوافدين الجدد على الهاتف المحمول:
- نتيجة رئيسية لتجارب ويكي 1.2 (WE1.2) - أظهر نشر التدخلات على نطاق واسع أنه يسبب زيادة سنوية بنسبة 10% في نسبة الوافدين الجدد الذين ينشرون ≥1 تعديل بناء في النطاق الرئيسي على جهاز محمول، مثل ما تم قياسه من خلال التجارب الخاضعة للرقابة.
تلتزم العديد من فرق مؤسسة ويكيميديا بالعمل على المشاريع بموجب النتيجة الرئيسية WE1.2: مسودة الفرضيات.
Growth Team Hypotheses
| فرضية فريق النمو | الخط الزمني | المهمة الرئيسية للفبريكاتور |
|---|---|---|
| تجارب الويكي 1.2.3:
إذا أجرينا اختبارات المستخدم على اثنين أو أكثر من نماذج التصميم الأولية التي تقدم مهام مهيكلة للوافدين الجدد داخل/بالقرب من المحرر المرئي، فيمكننا أن نتعلم بسرعة أي التصاميم ستعمل بشكل أفضل للمحررين الجدد، مع تمكين المهندسين أيضًا من تقييم الجدوى الفنية وتقدير الجهد لكل نهج. |
يوليه 2024 - سبتمبر 2024 | T362584 |
| ويكي تجربة 1.2.6:
If we release a way for people to act on “Add a link” suggestions from an article in Wikipedia to Beta, we will set the stage for an experiment in early Q3, where we aim to increase the percentage of new account holders who constructively activate on mobile by 10% compared to the baseline. |
اكتوبر 2024 - ديسمبر 2024 | T368187 |
| Wiki Experiences 1.2.9:
If we surface the ‘Add a Link’ Structured Task to new account holders who are reading Wikipedia articles through an A/B test on pilot wikis, then we expect to increase the percentage of these people who constructively activate on mobile by 10% compared to the control group. |
يناير 2025 - مارس 2025 | T385343 |
| Wiki Experiences 1.2.11:
If we release the “Add a Link” Structured Task to at least 5% percent of newcomers on English Wikipedia, then newcomers with access to this structured task will demonstrate a constructive activation rate on mobile that is 10% percent higher than the baseline, as measured through an A/B test. |
يناير 2025 - مارس 2025 | T382603 |
| Wiki Experiences 1.2.16:
If we complete at least two “Add a Link” improvements that communities are asking for, then we can increase the percentage of newcomers at English Wikipedia to whom the task is available, which will increase constructive activation on our largest wiki. |
ابريل 2025 - يونيه 2025 | T389288 |
| Wiki Experiences 1.2.17:
If we send accounts with 0 edits a supportive notification with a Suggested Edit recommendation within 24 hours of account creation, then we will increase constructive activation. *An Echo notification and an email if the account has an associated email address. |
مايو 2025 - يوليه 2025 | T392256 |
كيف يمكننا تعريف التنشيط البناء؟
بالنسبة لإصدار WE1.2، فإننا نركز على أصحاب الحسابات الجديدة على الهاتف المحمول، لذا فإن "التنشيط البناء" يُعرَّف بأنه قيام الوافد الجديد بإجراء تعديل واحد على الأقل على مقالة في النطاق الرئيسي لمشروع ويكيبيديا على جهاز محمول خلال 24 ساعة من التسجيل على جهاز محمول، وعدم استرجاع هذا التعديل خلال 48 ساعة من نشره. سيتم قياس ذلك على أساس كل منصة على حدة (سوف نقيس تنشيط الويب المحمول وتطبيق الهاتف المحمول بشكل منفصل).
ما هي الأبحاث والبيانات التي تستند إليها هذه التجارب؟
يسترشد هذا العمل بالملاحظات التالية والبيانات والأبحاث المرتبطة بها: معظم أصحاب الحسابات الجديدة على ويكيبيديا لا يكملون حتى التحرير الأول.
تتسبب كلّ من سير العمل المحددة والمهام المهيكلة في دفع المزيد من الوافدين الجدد إلى نشر تحرير بناء.
- البحوث في المهام المهيكلة – إضافة رابط وإضافة صورة
- بحوث صفحات النقاش – أداة الردّ & أداة موضوع جديد
- تحليل تجربة مهام الوافدين الجدد
يواجه الوافدون الجدد صعوبة في ملاحظة وفهم وتطبيق السياسات التي تشكل ويكيبيديا.
أصبح عدد المحررين الجدد المسجلين على ويكيبيديا أقل.
- أحصائيات ويكيميديا: المستخدمون المسجلون الجدد
- التحقق في انخفاض عدد المحررين الجدد T351759
معظم مشاهدات صفحات ويكيبيديا من الهواتف المحمولة.
النقاش المجتمعي
لقد ناقشنا المفهوم الأوسع وراء هذا المشروع مع المجتمعات كجزء من مناقشات أهداف ونتائج المنتجات والتكنولوجيا السنوية لمؤسسة ويكيميديا، أيضًا جمعنا ردود الفعل من الحاضرين في ويكيمانيا، وسوف نبدأ مشاورة مجتمعية أكثر تفصيلاً مع ويكيبيديا النموذجية (ويكيبيديا المصرية والفرنسية والإسبانية) قريبًا. (T372957)
التصميم
لقد استكشفنا ثلاثة أساليب مختلفة لتسليط الضوء على المهام المنظمة، ودرسنا اللحظات الأكثر ملاءمة لتقديم اقتراح تحرير أثناء رحلة التحرير. قررنا اختبار والمضي قدمًا في نهجين أثناء تجربة القراءة (صور الشاشة 1 و2)، ونهج آخر أثناء عملية التحرير، داخل المحرر المرئي (3).
-
(1) -
(2) -
(3)
أجرينا اختبارات مستخدمين غير خاضعة للإشراف مع مشاركين على دراية بموسوعة ويكيبيديا، ولكن بخبرة محدودة فيما يتعلق بالتحرير والمساهمة فيها. وكانت الأهداف الرئيسية هي:
- فهم أي من التصميمات الثلاثة كان الأكثر إيجابية للمستخدمين،
- التحقق مما إذا كان المستخدمون أكثر أو أقل ميلاً إلى التفكير في التحرير في المستقبل عند معرفة توفر هذا النوع من المساعدة، و
- تحديد خيارات النسخ التي تلقى صدى أفضل لدى المشاركين.
رؤى اختبار المستخدم
بشكل عام، كانت فكرة عرض اقتراح تحرير جنبًا إلى جنب مع/داخل المحرر المرئي مقبولة بشكل جيد. أعرب جميع المشاركين (6/6) عن أنهم قد يفكرون في التحرير عند علمهم بتوفر هذا النوع من المساعدة، وأنهم سيشعرون بالحافز لإكمال التحرير. من حيث الأساليب المختلفة، كان النهج الأول هو الأكثر تشجيعًا بالنسبة لمعظم المشاركين (6/4). In terms of the different approaches, approach one was the most promising for most participants (4/6).
"التجربة الأولى هي أفضل، فهي توفر مساعدة مباشرة في التحرير."
ومع ذلك، فقد أثيرت العديد من الأسئلة حول ما يعنيه الوسم الأصفر في الواقع. وافترض المشاركون معاني مختلفة، على سبيل المثال، أن الوسم يمثل رابطًا معطلاً، أو برنامجًا آليًا، أو نصًا تم تحريره مؤخرًا.
بالنسبة للنهج الثاني، أعرب المشاركون عن تقديرهم لعلامات تقدير الصعوبة + الوقت.
"إذا استغرق الأمر دقيقتين أو ثلاث دقائق فقط، فلا بأس بذلك. فهو يعني أنه أمر سهل، وهذا يزيد من احتمالية قيامي به."
لم تكن المحاولة الثالثة ناجحة بشكل كبير، ولكن راجعنا المشاركون بردود ثمينة.
"لم أجد [النموذج] مربكًا أو مزعجًا. أعتقد أنه كان مشجعًا بالفعل".
"كنت أشعر بالرغبة في التحرير، وخاصة إذا كان الأمر يتعلق بموقف نسيت فيه أنني أقوم بالتحرير أو لم أنتهي من التحرير بعد. لذا فهو بالتأكيد تذكير جيد".
"سأكون أكثر ميلاً إلى النقر فوق 'مساعدة في إضافة رابط' لأنني أعتقد أنه سيفي بالغرض تقريبًا، وأشعر أنني حققت شيئًا ما"
فيما يتعلق بالنسخة، قدمنا أربعة خيارات وطلبنا من المشاركين ذكر أي نسخة من النص تبدو أكثر جاذبية لهم. كان هذان الخياران هما الأكثر نجاحًا، ووصفا بأنهما آسران وموجزان وجذابان:
"هل ينبغي ربط هذا النص؟ تأتي هذه المقالة مع اقتراح تحرير بسيط لإضافة روابط ترشدك خلال العملية خطوة بخطوة. هل ترغب في مراجعتها؟"
"ربط المعرفة: ربط هذه المقالة بالمقال الآخر وتحسين شبكة المعلومات في ويكيبيديا."
الخطوات الجايه
بينما نخطط للمستقبل، ساعدتنا هذه الاختبارات على فهم وتحديد التحسينات المحتملة الأخرى. ومن بينها:
- التكرار على النسخة
- إعادة التفكير في العلامة الصفراء للنهج الأول
- التفكير في إضافة علامات تقدير الصعوبة والوقت إلى جميع الطرق
Second iteration design
Based on insights from user testing, we’ve made targeted updates to the initial design. While this version is not final, it’s intended to be a functional prototype that enables us to evaluate the feature’s impact on constructive activation and newcomer retention.
If early results are promising, we plan to invest in additional improvements, including a lightweight opt-out option and exploring streamlined workflows that don’t require launching the full Visual Editor experience.
القياس والنتائج
Temporary Alpha Test
In December 2024, the Growth team conducted a temporary alpha test to quickly gather data and assess how many new account holders would encounter "Add a Link" tasks in the Read view.
The test revealed that the current volume of "Add a Link" tasks was too low to support a statistically significant experiment or drive a meaningful increase in newcomer activation.
Based on these findings, we prioritized the following improvements before launching the Pilot Experiment:
- Improving the "Add a Link" Task Flow: To enhance the user experience and address patroller concerns, we’re updating the task flow so that when a user initiates the task from the Read view, only the specific link they tapped on will be surfaced (T381450). Patrollers have noted that when some links in an edit are incorrect, fixing them requires more effort than a simple revert. This change also aims to reduce that frustration.
- Expanding Link Suggestions To ensure we have enough tasks available, we are significantly increasing the number of link suggestions for our pilot wikis: We are scaling up the minimum number of "Add a Link" suggestions generated per wiki tenfold (T383714). If no link suggestions are available for a page, we will store that result and avoid reprocessing the article until it is edited again (T382270).
- Expanding the Pilot to More Wikis: To gather sufficient data for meaningful analysis, we are including additional wikis in the pilot test (T385343). While the alpha test only included Spanish Wikipedia, French Wikipedia, and Egyptian Arabic Wikipedia, the Q3 Pilot Experiment will include additional Wikipedias.
- Expanding to Desktop: The alpha test was limited to mobile users, but for the Q3 release, we will also surface "Add a Link" suggestions on desktop.
This will help us learn more and ensure a broader range of newcomers engage with the feature.
Surfacing Structured Tasks in Read Mode Pilot Experiment
The Growth team launched an A/B test to display "Add a Link" tasks in an article's Read view, but only for newcomers on Pilot Wikis (eswiki, frwiki, arzwiki, ptwikki, fawiki, and idwiki).
Surfacing Structured Tasks "Add a Link" Read Mode Experiment Results
Although the results were mixed, we did not observe a statistically significant difference in constructive activation between the control and treatment groups. This suggests that presenting "Add a Link" suggestions in a low-disruption way to logged-in readers does not meaningfully increase the likelihood that new account holders will complete a first edit. However, this outcome should not be interpreted as evidence that surfacing simple editing tasks is inherently ineffective for improving newcomer activation or retention.
Given the lack of measurable impact, the Growth team will conclude this experiment and will not scale the current implementation to additional wikis. Instead, we will apply the lessons learned to future design and experimentation efforts.
While this intervention did not achieve its intended impact, it offered valuable insights into a relatively new space—proactively suggesting structured tasks to readers—which will inform ongoing work by both the Growth and Editing teams to support newer editors through mobile-friendly, structured editing experiences.
Other learnings from this experiment
- Process Learnings: We can get a feature in front of newcomers quickly when the first release is an alpha test that we plan to roll back. This empowers us to learn faster, and ensures we don’t delay the release until the feature is polished enough for a meaningful A/B test.
- Mobile visibility. While we offered read mode link suggestions, we could not guarantee that mobile editors in the treatment group of this experiment saw the suggestions. Because article sections on mobile are collapsed, to see a suggestion, a mobile web user must expand a section containing a link suggestion and potentially scroll to that suggestion’s general location (have that link suggestion visible in their viewport) if the section was long. Thus, if a newcomer never expanded a section containing a suggestion nor scrolled to the area of the suggestion, where necessary, they didn’t see the suggestion; so logically the intervention did not impact their activation.
- High-traffic articles rarely need newcomer help: “Add a Link” recommendations exist on articles that are underlinked; some of these may be lower view count, shorter, and/or less developed articles. High-traffic articles are often high-quality articles or articles related to controversy or current events (articles that are sometimes protected from newcomer edits).
- Clearer cues: It is important to note that this experiment deliberately prioritized a non-intrusive user experience. Future tests could explore more prominent calls to action or alternative UX patterns. We may see stronger results if future interventions use a clearer or more directive interface, such as Suggestion Mode or a more highly visible call to action.
- Different target audiences: We could iterate on what we’ve learned and test a similar intervention with different target audiences. For instance, Welcome Survey data suggests that many newly registered users create accounts with a specific edit or article creation in mind, making them less likely to respond to suggestions not matching their initial intention.
- Personalization: Our exploratory analysis confirmed that the homepage module continues to provide value to newcomers. We also observed preliminary evidence that read-view suggestions may encourage contribution over time, particularly among accounts that do not visit the homepage. These findings suggest the presence of distinct newcomer archetypes with varying behaviors. It is possible that read-view suggestions are more effective for some segments of users than others.
Enwiki A/B test & "Add a Link" Improvements (Wiki Experiences 1.2.11 & 1.2.16)
The "Add a Link" Structured Task has previously been tested on several pilot wikis, consistently demonstrating increases in newcomer participation (see 2021 and 2024 experiments). However, outcomes can vary by wiki, and English Wikipedia is often an outlier. As we gradually scaled the feature on English Wikipedia, we used this opportunity to run a natural A/B test to evaluate its impact.
The test aimed to determine whether "Add a Link" improves constructive activation on English Wikipedia—specifically, whether it helps more new account holders complete a first edit. The A/B test confirmed our hypothesis: the task led to a relative increase in constructive activation on both mobile and desktop platforms. Because this experiment was designed to support the Wiki Experiences 1.2 key result focused on mobile, our report emphasizes results from the mobile web platform.
The analysis found that, on mobile web, the "Add a Link" task produced strong outcomes:
- 33.7% increase in the constructive activation rate
- 3.7% increase in the constructive retention rate
- 19.6% decrease in the revert rate
Newcomers in the treatment group—those with access to the "Add a Link" feature—showed improvements across all three metrics compared to the control group.
Full Report: Add-a-link Experiment on English Wikipedia
Lessons Learned
- Improved newcomer activation: Significant gains, especially on mobile, confirm the task’s effectiveness.
- Structured tasks like “Add a Link” are especially impactful on mobile.
- Feature improvements and Community Configuration helped increase performance compared to the original pilot tests from 2021.
- Community Configuration supports local control, helping build support for adoption, though it currently lacks gradual rollout capabilities.
- Community engagement: Volunteers provided essential feedback and reviewed edits, shaping improvements to the task and its configuration. We have released two changes based on community feedback:
- Limit “Add a Link” to newer accounts: This change allows communities to restrict the task to newer users, which addresses concerns experienced users have expressed about newcomers using this task to quickly inflate edit counts or general community concerns about moderators being overwhelmed by these edits. (T393688) See the "Stop suggesting "Add a link" tasks based on newcomers' total edits" in your home Wikipedia's related configuration page:
Special:CommunityConfiguration/GrowthSuggestedEdits - Remove problematic link suggestions: This addresses a key complaint on English Wikipedia, and will ensure the link suggestions more closely follow enwiki's Manual of Style. (T386867) At English Wikipedia, continent and country names are no longer suggested. Related discussion thread.
- Limit “Add a Link” to newer accounts: This change allows communities to restrict the task to newer users, which addresses concerns experienced users have expressed about newcomers using this task to quickly inflate edit counts or general community concerns about moderators being overwhelmed by these edits. (T393688) See the "Stop suggesting "Add a link" tasks based on newcomers' total edits" in your home Wikipedia's related configuration page:
Next Steps:
- Share findings with the movement (T390613) and at Wikimania 2025.
- Collaborate with Machine Learning and Research to improve the "Add a Link" model and ensure the models can be retrained regularly (T388258).
Get Started Notification (Wiki Experiences 1.2.17)
User story: As a newcomer, I want to receive a well-timed and engaging notification that guides me toward my first edit, so I can quickly understand what to do next and feel encouraged to contribute. By receiving clear guidance at the right moment, I will be more likely to take my first editing step and continue participating in Wikipedia.
Hypothesis: If new accounts that have not yet edited receive a supportive notification* with a Suggested Edit recommendation within 24 hours of creating an account, then they will be more likely to activate constructively. *An Echo notification and an email if the account has an confirmed email address.
Background & research:
- The “Get Started” notification has already been shown to increase newcomer editing when sent at 48 hours after account creation (1). This suggests that well-timed interventions can positively impact newcomer activation. By sending the notification earlier, we may further improve activation rates by reaching users while their interest is still high.
- Prior studies show that positive reinforcement, such as the "Thanks" feature, leads to increased editor engagement (2). This suggests that notifications framed as encouragement rather than just instructions may yield better results.
