Precyzja (precision)
Odsetek zwróconych wyników, które są faktycznie trafne: ile z tego, co system oznaczył albo znalazł, było słuszne.
Precyzja to liczba trafnych wskazań podzielona przez wszystko, co system zwrócił jako trafne. Filtr spamu o wysokiej precyzji rzadko wrzuca dobry mail do spamu; wyszukiwanie o wysokiej precyzji zwraca mało nietrafnych fragmentów. Nic nie mówi o tym, co zostało pominięte, bo to mierzy czułość, a podnoszenie jednej zwykle obniża drugą. W wyszukiwaniu i RAG podaje się ją często jako precision@k: odsetek trafnych pozycji wśród pierwszych k wyników.
Powiązane hasła
- Czułość (recall): Odsetek wszystkich trafnych pozycji, które system faktycznie znalazł: ile wyłapał z tego, co powinien był wyłapać.
- F1 score (miara F1): Jedna liczba łącząca precyzję i czułość jako ich średnia harmoniczna, więc jest wysoka tylko wtedy, gdy obie są wysokie.
- Macierz pomyłek (confusion matrix): Tabela, która liczy trafne i błędne decyzje klasyfikatora według rodzaju: prawdziwe i fałszywe alarmy, prawdziwe i fałszywe pominięcia.
- Context precision (precyzja kontekstu): Metryka wyszukiwania w RAG: czy fragmenty trafne dla pytania są na górze listy tego, co zostało znalezione.
- Ewaluacje (evals): Powtarzalny zestaw testów, który ocenia funkcję AI, żeby zmiany mierzyć, a nie zgadywać.
