Google Research udostępnił Agile Deliberation - framework do budowania klasyfikatorów obrazów wokół koncepcji subjektywnych, takich jak zdrowa żywność, inspirująca sztuka czy clickbait w moderacji treści. Zamiast założenia, że użytkownicy znają już granice pojęcia, system pomaga im je odkryć i zdefiniować. Działa poprzez API modeli Gemini 2.5 Pro i Gemini 2.5 Flash bez konieczności fine-tuningu, może działać w notebooku Jupyter lub Colab, a retrieval wykorzystuje embeddingi CLIP z indeksem FAISS dostępnym na CPU lub GPU.
Framework zmienia niejasne pojęcie w ustrukturyzowaną definicję tekstową, która służy dwóm celom - jest czytelną dla człowieka polityką i promptem dla klasyfikatora opartego na modelu wizyjnym. W każdej rundzie system zachowuje definicję kandydata z najlepszym wynikiem F1 na etykietach użytkownika. Podejście pochodzi z wywiadów z ekspertami moderacji treści, którzy najpierw zakreślali koncepcję, a następnie ją ulepszali na obrazach z pogranicza kategorii. Ta iteracyjna procedura stanowiła wąskie gardło poprzedniego procesu.
Wyniki są zachęcające - framework osiąga średnio 10,5 punktów F1 powyżej baseline'u zero-shot z Gemini 2.5 Flash na dwóch koncepcjach i 18 sesjach live. Na zadaniu "paid to play" metrika F1 wyniosła 0,59 wobec 0,48 w wariancie zero-shot, a precyzja wzrosła z 0,35 do 0,57 (przyrost 22 punktów). Są jednak kompromisy - recall spadł 17 punktów na "paid to play" i 15 punktów na koncepcji "healthy food". Despite tych ograniczeń, rozwiązanie adresuje rzeczywisty problem w moderacji treści i skaluje się do przypadków użytku, gdzie granice pojęć nie są wcześniej znane.