Wikimedia Apps/Team/Android/Machine Assisted Article Descriptions
Pozadí projektu
Android aplikace Wikipedie nabízí možnosti pro přidávání krátkých popisků od roku 2017. V roce 2019 tým vývojářů zpřístupnil nástroj pro přidávání krátkých popisků přihlášeným uživatelům. O současném stavu nástroje návrhu editací pro krátké popisky si můžete přečíst více zde.
V březnu 2022 tým pro Android zpřístupnil možnost editace krátkých popisků krátce registrovaným editorům, a to na základě zpětné vazby od uživatelů anglické Wikipedie, kteří si přáli, aby uživatelé, zejména noví, zlepšili kvalitu svých krátkých popisků.
V květnu 2022 vytvořila Výzkumná část Švýcarského institutu, známá také jako EPFL, strojový model nazvaný Descartes, který navrhuje krátké popisky článků Wikipedie. Po nezávislém testování modelu Descartes se EPFL obrátila na Nadaci Wikimedia a nabídla tento model, který pomáhá s tvorbou krátkých popisků, wikipedistům. S ohledem na žádosti o zlepšení kvality krátkých popisků, zejména od nových editorů, Android tým rozhodl, že by mohl nabídnout strojové návrhy využívající model Descartes na podporu uživatelů, pouze pokud nástroj Descartes přinese podobné slibné výsledky u wikipedistů jako při počátečním testování EPFL.
V období od ledna do dubna 2023 tým vytvořil uživatelské rozhraní a změny na straně klienta modelu Descartes a zároveň zavedl ochranné prvky proti rizikům, poté od poloviny května do poloviny června 2023 nasadil upravenou verzi modelu. Verze modelu, kterou uživatelé viděli v aplikaci pro Android, obsahovala kontroly kvality. Návrhy byly navíc skryty v nabídce, kdy uživatelé museli aktivně kliknout, aby si prohlédli strojové návrhy, a poté se rozhodnout, zda jeden z nich využijí, nebo ručně zadají jeho krátký popis.
Translated with DeepL.com (free version)
By the end of June the feature was removed from the app. In Mid June thru the end of July, the Android team conducted outreach to various language communities inviting them to serve as graders and patrollers for the edits produced through the tool during the experiment duration. Volunteers that responded to the call for support via onwiki email participated in the experiment as evaluators. Experienced editors evaluated what app editors published during the experiment time with machine suggestions, in conjunction with human generated short descriptions. Volunteers were encouraged to revert errors. Volunteer grading ended in early August 2023.
Po počátečním přezkoumání dat měl tým dostatek poznatků, aby navrhl migraci modelu Descartes z dočasného prostoru na Cloud VPS na trvalý hostingový prostor LiftWing. Po důkladnější analýze dat, kterou provedl datový analytik našeho týmu, náš výzkumný tým a výzkumný tým EPFL, jsme se cítili dostatečně přesvědčeni o výsledcích, abychom upravenou verzi modelu nabídli trvale v aplikaci jako návrhy lidským editorům, až po schválení jazykovými komunitami a po setkáních, na kterých jsme zjistili, zda by bylo možné provést další změny, které by model vylepšily tak, aby splňoval svůj zamýšlený účel – podpořit editory při psaní kvalitnějších krátkých popisků.
Současný stav
V srpnu 2024 jsme zveřejnili výsledky experimentu a informace o tom, jaké úpravy na straně aplikace byly provedeny v cloudové verzi modelu pro účely kvality, a nabídli jsme návrhy, zda by měla daná jazyková komunita zvážit přijetí této funkce. V období od září do listopadu 2024 budeme provádět informační kampaň, abychom informovali produktový tým systému Android o tom, jaká další vylepšení lze provést a zda by komunity chtěly funkci přijmout. Ačkoli máme doporučení, zda by funkce mohla být na základě údajů užitečná, přijetí je ponecháno výhradně na členech příslušné jazykové komunity. Uvědomujeme si, že s krátkými popisy se v různých jazykových komunitách zachází různě, a kroky k zajištění krátkých popisů článků se v průběhu let vyvíjely, proto přistupujeme k oslovování jednotlivých komunit.