Konferencja BOSC 2026 wdrożyła system do wstępnej oceny abstraków autorskich przy użyciu generatywnego AI, starając się zmierzyć z lawiną przychodzących zgłoszeń. Zespół konferencji miał już gotowy szczegółowy rubryk do oceny abstraków na wielu kryteriach: dostępność kodu, prawidłowość licencji open source i runnability (łatwość pobrania, zbudowania i uruchomienia projektu).
Do tego celu powstał bosc-pre-review - system agenticzny oceniający sześć kryteriów recenzji oraz Runabilly, który buduje i testuje każdy projekt w izolowanym kontenerze Docker dla bezpieczeństwa. Kluczowe było, że AI jedynie zbierało dowody dla recenzentów - wszystkie ostateczne decyzje o przyjęciu abstraków podejmowali ludzie. To podejście pokazuje pragmatyczne podejście do integracji AI z istniejącymi procesami akademickimi.
Po zakończeniu recenzji badacze przeprowadzili ankietę wśród recenzentów. Większość respondentów uznała wstępną ocenę za użyteczną, ale wolała sprawdzać wnioski AI na podstawie własnych analiz zamiast je bezwarunkowo akceptować. Wynik ten sugeruje, że AI może wspierać ludzi w czasochłonnych zadaniach, ale w krytycznych procesach decyzyjnych ludzie chcą pozostać niezależnymi i weryfikować rekomendacje sztucznej inteligencji.