فحص التحرير/التأثير
فحص التحرير (المراجع) تقرير حول تأثير الميزة
تحليل نتائج اختبار A/B لفحص المراجع
لمعرفة ما إذا كان فحص المرجع في التحرير متسبّبًا في إجراء الوافدين الجدد لتعديلات يريدها ويقدّرها المتطوعون ذوو الخبرة، أجرينا اختبار A/B مع 11 ويكيبيديا.
أدناه يمكنكم قراءة المزيد عن ما أظهرت هذه التجربة، وما يخطط فريق التحرير تباعًا ومزيد من التفاصيل حول تصميم الاختبار.
الخلاصة والخطوة التالية
أدّى فحص المراجع إلى تطوّر إيجابيّ على مستوى جودة التعديلات التي نشرها الوافدون الجدد ولم يتسبّب في أيّ اضطرابات كبيرة.
يؤدي هذا المزيج إلى جعل فريق التحرير واثقًا من أن تقديم التحقق من المرجع كميزة افتراضية سيكون له تأثير إيجابي واضح على مواقع الويكي والأشخاص الذين يساهمون فيها.
الاستنتاجات
تحريرات محتويات جديدة *مع* مرجع
الأشخاص الذين يظهر لهم التحقق من المرجع هم أكثر عرضة بمقدار 2,2 مرة لنشر تعديل محتوى جديد يتضمن مرجعًا ويكون بناءً (لا يتم استرجاعه خلال 48 ساعة).
- لوحظت الزيادات لدى جل أنواع المستخدمين الذين تمت اختبارهم، وفي كلّ مواقع الويكي، وعبر كل الأجهزة.
- أعلى زيادة ملحوظة كانت على الهاتف المحمول حيث يكون المساهمون أكثر احتمالاً لنشر تعديل محتوى جديد بنّاء مع مرجع عند عرض فحص المراجع.
معدل الاسترجاع
- معدل الاسترجاع عند تحرير المحتوى الجديد انخفض بنسبة 8,6% إذا كان فحص المراجع متاحًا.
- تعديلات المحتوى الجديدة التي أجراها المساهمون من أفريقيا جنوب الصحراء أقل احتمالية بنسبة 53% للاسترجاع عند عرض فحص المراجع.
- في حين أن هذه الميزة قد أدت إلى إدخال بعض التحريرات الجديدة غير البناءة للمحتوى مع إشارة (زيادة بنسبة 5 نقاط مئوية) ، كانت هناك نسبة أعلى من التحريرات البناءة لمحتوى جديد مع إضافة إشارة (23,4 نقطة مئوية). ونتيجة لذلك، لاحظنا زيادة عامة في جودة تحرير المحتوى الجديد.
معدل بنّاء للاستبقاء
- المساهمون الذين يظهر لهم التحقق من المرجع وقاموا بحفظ تعديل بنجاح ولم يتم استرجاعه، هم أكثر احتمالية بنسبة 16% للعودة في الشهر الثاني (بعد 31-60 يومًا) لإجراء تعديل لم يتم استرجاعه.
- لوحظت هذه الزيادة في المقام الأول بالنسبة لتعديلات سطح المكتب. وكان هناك فرق غير ذو دلالة إحصائية لوحظ على الهاتف المحمول.
حواجز الحماية
معدّل اكتمال التّعديل
- لقد لاحظنا عدم وجود انخفاضات جذرية في معدل اكتمال التعديل من نية الحفظ (حيث يظهر فحص المراجع) إلى إنهاء عمليّة الحفظ بنجاح بشكل عام أو بشكل خاصّ لكل ويكي.
- بشكل عام، كان هناك انخفاض بنسبة 10% في معدل اكتمال التحرير للتعديلات التي تم عرض فحص المراجع فيها.
- كان هناك انخفاض أعلى في معدل إكمال التحرير على الهاتف المحمول مقارنة مع سطح المكتب. على الهاتف المحمول، انخفض معدل إكمال التحرير بنسبة -24.3% في حين انخفض في سطح المكتب بنسبة -3,1%.
معدل الحظر
- كان هناك انخفاض أو عدم وجود تغييرات في معدل حظر المستخدمين بعد عرض فحض المراجع ونشر التعديل مقارنة بالمستخدمين في مجموعة المراقبة.
معدل سلبي كاذب
- كان هناك معدل سلبي كاذب منخفض. فقط 1,8% من جميع تعديلات المحتوى الجديدة المنشورة في مجموعة الاختبار لم تتضمن مرجعًا جديدًا ولم يتم فيها عرض فحص المرجع.
معدل إيجابي كاذب
- 6,6% من المساهمين رفضوا إضافة استشهاد لأنهم أشاروا إلى أن المحتوى الجديد الذي تتم إضافته لا يحتاج إلى مرجع. كان هذا هو خيار الرفض الأقل تحديدًا بشكل عام.
اختبار التصميم
11 موقع ويكيبيديا شارك في الاختبار. في كل ويكي، تم تعيين 50% من المستخدمين بشكل عشوائي إلى مجموعة بقيمة test
، و50% إلى مجموعة بقيمة control
.
تم عرض إشعار مراجعة المراجع على المستخدمين في مجموعة test
مما دفعهم إلى القرار ما إذا كان المحتوى الجديد الذي كانوا يضيفونه يحتاج إلى مرجع (إذا لم يضيفوا مرجعًا بالفعل).
تم عرض تجربة التحرير الافتراضية للمستخدمين في مجموعة control
، حتى لو لم يرافقوا المحتوى الجديد الذي كانوا يضيفونه بمرجع.
التوقيت
تم الانتهاء من هذا التحليل في 16 أبريل 2024 وتم تحليل بيانات المشاركة في 11 موقع ويكي مشارك من 18 فبراير 2024 حتى 4 أبريل 2024.