Złap błąd AI
Odpowiedź brzmi przekonująco. Czy zgadza się ze źródłem? Przeczytaj, zdecyduj i zajrzyj do uzasadnienia.
Dane jeszcze nie są gotowe
Do tego laboratorium potrzebny jest komplet przypadków i wyników modeli. Gdy zostaną dołączone, pojawi się pierwsza sprawa.
Czy ta odpowiedź spełnia regułę oceny?
JEV zwraca prawdopodobieństwo, Luna deklaruje ocenę w skali 0–1. Kalibracji żadnego z modeli nie sprawdziliśmy na tym zbiorze.
Wszystkie sprawy przejrzane.
To zgodność z jawną regułą tego zestawu, nie ogólny pomiar twoich umiejętności ani jakości modeli.
To pokaże rozwiązania.
Porównanie korzysta ze wszystkich spraw, także tych, których jeszcze nie oceniono. Zobaczysz wyniki modeli i listę ich błędów.
Ile błędów przejdzie dalej?
Wyższy próg zatrzymuje więcej odpowiedzi. Sprawdź, ile z nich należało zatrzymać, a ile było poprawnych.
Przepuszczamy odpowiedź, gdy wynik modelu jest równy progowi lub wyższy. Reguła referencyjna pozostaje bez zmian.
Kalibracji modeli nie sprawdziliśmy na tym zbiorze. Ten sam próg dla dwóch modeli nie musi oznaczać takiego samego poziomu ryzyka. Liczymy wyłącznie przypadki z tego zestawu.