Lokalne modele AI testowane przy przeglądzie dokumentów prawnych

Autorzy porównują otwarte modele generatywne z użyciem ContractNLI oraz dwóch zbiorów NLI4Wills. Najlepszy model generatywny osiągnął według nich trafność 81,2%, natomiast podejścia zero-shot nie przewyższają pod względem trafności nadzorowanego punktu odniesienia. Badanie ma znaczenie dla poufnych procesów wykorzystujących modele lokalne. Wyniki benchmarków nie dowodzą wiarygodności na gruncie prawa serbskiego; jest to preprint badawczy, a nie gwarancja przydatności wdrożenia.