Elganayni et al. – Exploiting LLM-as-a-Judge Disposition on Free Text Legal QA via Prompt Optimization
Sprachmodelle werden zunehmend auch eingesetzt, um juristische Antworten anderer Modelle zu bewerten. Mohamed Hesham Elganayni, Runsheng Chen, Sebastian Nagl und Matthias Grabmair untersuchen, wie sich diese Bewertungen auf die automatische Optimierung von Eingabeanweisungen auswirken. Die als Preprint veröffentlichte Studie zeigt, dass die Ergebnisse wesentlich davon abhängen, welches Modell die Rückmeldungen liefert und wie streng es bewertet.
