Een toenemend probleem bij het publiceren van werk over AI is dat het publicatieproces veel langzamer is dan het proces voor werkdocumenten, dus wanneer artikelen eindelijk volledige peer reviews krijgen, worden auteurs gevraagd om rekening te houden met nieuwere artikelen die zijn gebaseerd op het artikel dat in review is! Er zijn geen echte normen rondom dit onderwerp.
En het gerelateerde probleem is dat de oorspronkelijke werkdocumenten vaak over eerdere modellen zijn geschreven. AI-vaardige beoordelaars vragen om de documenten bij te werken voor de nieuwste modellen, maar dat verandert vaak de bevindingen - publiceer je historisch waarheidsgetrouwe dingen, of vereis je updates?
Belangrijke opmerking voor niet-academici: je krijgt geen vaste aanstelling of promotie voor preprints. Je hebt gepubliceerde peer-reviewed artikelen nodig.
Papieren moeten steeds vaker worden opgesteld voor gemakkelijke updates naarmate er nieuwe modellen uitkomen. Dat betekent ook dat de "AI kan taak X niet goed uitvoeren"-papieren in plaats daarvan herschreven moeten worden over de trendlijn, omdat het tegen de tijd dat je publiceert, heel goed taak X kan uitvoeren.
195