Benchmark Gaius-Haystack · porównanie
Gaius-Lex vs Open WebUI: 22 wygrane, 10 remisów, 0 przegranych.
Open WebUI to popularny otwarty interfejs czatu, w którym praca na dokumentach jest jedną z wielu funkcji. Na 5000 plików kancelarii odpowiedział w pełni poprawnie 6 razy na 32, a na dwa pytania dał poprawną odpowiedź tylko w jednym z dwóch powtórzeń.
FAQ
Gaius-Lex i Open WebUI: pytania i odpowiedzi.
Czy Open WebUI można używać jako RAG na dużym zbiorze dokumentów?
Można go tak skonfigurować, ale w naszym teście na 5000 plików średni wynik wyniósł 18,8%. To najniższy wynik w zestawieniu, razem z Dify.
Dlaczego to samo pytanie dało dwa różne wyniki?
Odpowiedzi modeli językowych nie są w pełni powtarzalne, dlatego każde pytanie zadaliśmy dwa razy. Na N1 i A8 Open WebUI raz odpowiedział poprawnie, raz błędnie. Gaius-Lex na obu pytaniach odpowiedział poprawnie dwa razy.
Zobacz Gaius-Lex na dużym zbiorze dokumentów.
Pokażemy, jak agent szuka i liczy po tysiącach umów, aneksów i faktur. Bez slajdów sprzedażowych.
Rozmowa bez zobowiązań.