Crecimiento/Experimento para una activación constructiva
Experimento para la activación constructiva
Experimentos para aumentar el porcentaje de nuevos/as usuarios/as que editan de forma constructiva
|
Como parte del Plan Anual 2024/2025 del equipo de Crecimiento , este equipo estudiará diversas formas de aumentar la activación constructiva en móvil.
Esta página del proyecto documenta la experimentación del equipo de Crecimiento relacionada con el Plan Anual 2024-2025 de la Fundación Wikimedia, específicamente el Resultado Clave Experiencias Wiki 1.2.
Estatus actual
- junio de 2024 - planificar y compartir la hipótesis inicial
- septiembre de 2024 - pruebas de usuario de prototipos de diseño
- noviembre de 2024 - iniciar consultas comunitarias con nuestras wikis piloto
- diciembre de 2024 - conduct a temporary test at pilot wikis
- Próximo - conduct A/B test at pilot wikis
Resumen
Las formas de edición actuales de páginas completas requieren demasiado contexto, paciencia y ensayo y error para que las personas novatas puedan contribuir de forma constructiva. To support a new generation of volunteers, we will increase the number and availability of smaller, structured, and more task-specific editing workflows (e.g. Edit check and Structured Tasks ). The Growth team will primarily focus on Structured Tasks, while working closely with the Editing team to ensure our work integrates well with Edit Check.
Este proyecto pretende mitigar el siguiente problema de usuario:
Empezar a editar en Wikipedia es difícil y especialmente frustrante en dispositivos móviles. Quiero que la interfaz de edición me proporcione la política y la orientación técnica que necesito en el momento, para que mis esfuerzos iniciales no se reviertan.
Este proyecto pretende lograr el siguiente resultado para las personas usuarias:
Como nuevo persona voluntaria en Wikipedia, siento confianza y entusiasmado por contribuir al movimiento Wikimedia editando artículos de Wikipedia. Las herramientas proporcionadas me guían paso a paso, limitan las distracciones y me permiten aprender progresivamente para poder contribuir con éxito desde mi dispositivo móvil.
Contexto
¿Cómo encaja este trabajo en el Plan Anual de la Fundación Wikimedia?
Experiencias Wiki 1: Experiencia de los colaboradores objetivo
Bajo el Objetivo de Infraestructura de la Fundación Wikimedia, y dentro del grupo de objetivos centrados en Experiencias Wiki, se encuentra un objetivo relacionado con la mejora de la experiencia de las personas colaboradoras:
- Experiencias Wiki 1: Experiencia del colaborador Objetivo - Tanto las personas colaboradoras experimentadas como las nuevas se reúnen en línea para construir una enciclopedia fiable, con más facilidad y menos frustraciones.
Experiencias Wiki 1.2 Resultado clave
Dentro del objetivo Experiencia del contribuyente, hay un resultado clave centrado en aumentar la activación constructiva de las personas recién llegadas en el móvil:
- Experiencias Wiki 1.2 (WE1.2) Resultado clave - La implantación generalizada de intervenciones ha demostrado que provoca un aumento relativo interanual del 10% en el porcentaje de personas recién llegadas que publican ≥1 edición constructiva en el espacio de nombres principal en un dispositivo móvil, medido mediante experimentos controlados.
Varios equipos de la Fundación Wikimedia se han comprometido a trabajar en proyectos bajo el resultado clave WE1.2: Hipótesis del proyecto.
Growth Team Hypotheses
El objetivo inicial del equipo de Crecimiento es presentar las Tareas Estructuradas a las personas llegadas de nuevas formas:
Hipótesis del equipo de crecimiento | Cronología | Tarea principal de Phabricator |
---|---|---|
Experiencias Wiki 1.2.3:
Si llevamos a cabo pruebas de usuario en dos o más prototipos de diseño introduciendo Tareas Estructuradas a las personas recién registradas dentro/cerca del Editor Visual, entonces podemos aprender rápidamente qué diseños funcionarían mejor para esas personas novatas, mientras que también permite al equipo evaluar la viabilidad técnica y estimar el esfuerzo para cada enfoque. |
-
|
T362584 |
Wiki Experiencia 1.2.6:
Si presentamos a las personas recién registradas la Tarea estructurada «Añadir un enlace» en los artículos de Wikipedia, esperamos aumentar el porcentaje de personas novatas que se activan constructivamente desde el móvil en un 10% en comparación con la línea de base. |
2024-10-01 -
2024-03-31 |
T368187 |
Este año, los equipos de la Fundación Wikimedia están abordando la planificación anual de forma más iterativa, por lo que, en lugar de comprometernos con proyectos anuales de mayor envergadura, nuestra primera hipótesis tiene un alcance bastante limitado. Esto nos permitirá aportar valor poco a poco a lo largo del año, al tiempo que nos aseguramos de tener la flexibilidad necesaria para realizar cambios a medida que aprendemos.
WE1.2.3 es sólo un primer paso, mientras que la hipótesis de WE1.2.6 se refiere a la aplicación de lo aprendido en las pruebas de usuario de WE1.2.3. El experimento inicial se centrará únicamente en las personas con cuentas nuevas con cero contribuciones. Más adelante podremos trabajar en el desarrollo de nuevos tipos de tareas estructuradas.
¿Cómo definimos activación constructiva?
Para la WE1.2 nos estamos centrando en nuevos/as usuaris/as en móvil, por lo que activación constructiva se define como una persona recién llegada que hace al menos una edición en un artículo en el espacio de nombres principal de un proyecto de Wikipedia desde un dispositivo móvil dentro de las 24 horas siguientes a su registro (también desde dispositivo móvil) y que esa edición no sea revertida dentro de las 48 horas siguientes a su publicación. Esto se medirá por plataforma (mediremos la activación de la web móvil y de la aplicación móvil por separado).
¿En qué investigaciones y datos se basan estos experimentos?
Este trabajo se guía por las siguientes observaciones y los datos e investigaciones asociados: La mayoría de los titulares de cuentas nuevas en Wikipedia nunca llegan a realizar ni siquiera una edición inicial.
Los flujos de trabajo estructurados y específicos para cada tarea hacen que más personas novatas publiquen una edición constructiva.
- Investigación de tareas estucturadas - Añadir un enlace & Añadie una imagen
- Investigación de la página de discusión - Herramienta de respuesta & Herramienta de nuevo tema
- Análisis experimental de las tareas de las personas recién llegadas
A las personas recién llegadas les cuesta darse cuenta, comprender y aplicar las políticas que dan forma a Wikipedia.
Cada vez se registran menos editores nuevos en Wikipedia.
- Estadísticas de Wikimedia: Nuevos usuarios registrados
- Investigar la caída de Nuevos Editores T351759
La mayoría de las páginas vistas en Wikipedia proceden de móviles.
Discusión comunitaria
Hemos discutido el concepto más amplio detrás de este proyecto con las comunidades como parte de la Discusión sobre el plan anual de la WMF de Producto y Tecnología, recogimos feedback entre quienes asistieron a Wikimania, y también iniciaremos una consulta comunitaria más detallada con nuestras wikis piloto (Wikipedia en árabe y español) tan pronto como los diseños iniciales estén disponibles para compartir. (T372957)
Diseño
Hemos explorado tres enfoques diferentes para mostrar tareas estructuradas, y hemos considerado qué momentos del proceso de edición eran los más apropiados para presentar una sugerencia de edición. Decidimos probar y avanzar con dos enfoques durante la experiencia de lectura (capturas de pantalla 1 y 2), y otro durante el proceso de edición, dentro del Editor Visual (3).
-
(1)
-
(2)
-
(3)
Realizamos pruebas de usuario no moderadas con participantes familiarizados con Wikipedia, pero con experiencia limitada en cuanto a edición y contribución a la misma. Los objetivos principales eran:
- Entender cuál de los tres diseños era el más prometedor para los/as usuarios/as,
- Corroborar si es más o menos probable que se planteen editar en el futuro sabiendo que disponen de este tipo de ayuda, y
- Reconocer cuáles de las opciones de texto resuenan mejor entre quienes participan.
Perspectivas de las pruebas de usuarios/as
En general, la idea de presentar una sugerencia de edición en el Editor visual fue bien recibida. Todos las personas participantes (6/6) expresaron que probablemente considerarían la posibilidad de editar sabiendo que este tipo de ayuda está disponible, y que sentirían motivación para completar una edición. En cuanto a los distintos enfoques, «el enfoque uno fue el más prometedor para la mayoría de las personas participantes» (4/6).
«La primera experiencia es mejor, ofrece ayuda en línea con la edición».
Sin embargo, surgieron muchas dudas sobre el significado real de la etiqueta amarilla. Quienes participaron asumieron diferentes significados, por ejemplo que la etiqueta era representativa de un enlace roto, un bot o un texto editado recientemente.
Para el enfoque dos, los participantes apreciaron las etiquetas de dificultad + estimación de tiempo.
«Si sólo se tarda de 2 a 3 minutos, no es para tanto. Si dice que es fácil, entonces es más probable que lo haga».
El tercer enfoque no tuvo mucho éxito, pero «los participantes expresaron su satisfacción».
«No me pareció [el modo] confuso ni intrusivo. Creo que, de hecho, fue alentador».
«Me sentiría inclinado [a editar], sobre todo si se diera una situación en la que me olvidara de que estaba editando o aún no hubiera terminado de editar. Así que sin duda es un buen recordatorio».
«Me inclinaría más por hacer clic en 'Ayuda para añadir un enlace' porque creo que casi lo haría por mí, y siento que he conseguido algo»
En cuanto al texto, presentamos 4 opciones y pedimos a las personas participantes que mencionaran qué versión del texto les parecía más atractiva. Estas fueron las dos opciones más acertadas, descritas como cautivadoras, concisas y atractivas:
«¿Debería enlazarse este texto? Este artículo viene con una sencilla sugerencia de edición para añadir enlaces que le guía paso a paso por el proceso. ¿Le gustaría revisarlo?» «Conecta el conocimiento: Enlaza este artículo con otros y mejora la red de información de Wikipedia.»
Próximos pasos
Como estamos planificando nuestro trabajo futuro, estas pruebas nos ayudaron a comprender y reconocer posibles mejoras adicionales. Algunas de ellas son:
- Mejorar el texto
- Replanteamiento de la etiqueta amarilla para el enfoque uno
- Considerar la posibilidad de añadir etiquetas de estimación de dificultad+tiempo a todos los enfoques.
Medición y Resultados
Metrics grid from the Measurement Plan (T377096)
Metric | Timeline | Metric type | Notes, questions, and documentation |
---|---|---|---|
Impressions a: views of articles where a “Add a link” task is surfaced. | Q2 Alpha test
Q3 experiment |
Secondary | On how many pages are tasks surfaced? |
Impressions b: views of structured tasks on an article page. | Q2 Alpha test
Q3 experiment |
Secondary | How many tasks are being surfaced? |
Task CTR: click/tap on the “YES" on the pop-up | Q2 Alpha test
Q3 experiment |
Primary | How many newcomers both SEE the initial highlighted suggestion, and click through to the "Add a link" task? (# of yes clicks / # task impressions b) *100 |
Constructive Activation on mobile | Q2 Alpha - if time allows
Q3 experiment |
Primary | A newcomer making at least one edit to an article in the main namespace on a mobile device within 24 hours of registration, through the module, with that edit not being reverted within 48 hours of publication. Details: T360829#9903872 |
Newcomer Retention | Q3 experiment | Secondary | If we increase constructive activation, but that doesn’t flow into retained users, then the impact of this work will be limited; Ensure newcomer retention remains stable or improves. |
Revert Rate | Q3 experiment | Guardrail | |
Task status | Q3 experiment | Guardrail |