Quality Power
Jak sprawdzać odpowiedzi AI
Sprawdzanie wszystkiego kasuje oszczędność. Sprawdzanie niczego kończy się błędem u klienta. Gdzie jest środek.
Przy weryfikacji wyników są dwie skrajności i obie są kosztowne. Sprawdzanie każdego zdania z równą uwagą oznacza, że szybciej byłoby napisać samemu. Niesprawdzanie niczego kończy się błędem, który trafia do klienta. Rozsądek polega na tym, żeby wiedzieć, co sprawdzać zawsze, a co można przeczytać pobieżnie.
Podział według kosztu błędu
| Element | Jak sprawdzać |
|---|---|
| Liczby, kwoty, wymiary | Zawsze, przy źródle |
| Daty i terminy | Zawsze |
| Nazwy własne i cytaty | Zawsze — sprawdź, czy istnieją |
| Powołania na przepisy | U specjalisty, nie samodzielnie |
| Parametry techniczne | Porównać z dokumentacją |
| Argumentacja i struktura | Zwykłe przeczytanie |
| Styl i język | Przeczytanie, ewentualna korekta |
Trzy pierwsze wiersze to zwykle kilka elementów w całym tekście. Ich sprawdzenie zajmuje minuty, a pokrywa niemal wszystkie błędy, które kosztują pieniądze — reszta tekstu wymaga tylko przeczytania, czyli tego, co i tak byś zrobił przed wysłaniem.
Trzy metody, które działają
- Sprawdzanie u źródła — liczby z dokumentacji, przepisy od specjalisty, dane z Twojego systemu. Nie u tego samego narzędzia, które odpowiedziało.
- Pytanie o źródło i sprawdzenie, czy istnieje. Podane, nieistniejące źródło to sygnał, że reszta też wymaga weryfikacji.
- Porównanie dwóch odpowiedzi na to samo pytanie. Rozbieżność wskazuje miejsce, które trzeba zweryfikować.
Czego nie robić: nie pytaj narzędzia, czy jego odpowiedź jest poprawna. Potwierdzenie własnej odpowiedzi nie jest weryfikacją i nie wnosi żadnej nowej informacji.
Jak to ułożyć, żeby się utrzymało
Kontrola, która wymaga decyzji przy każdym tekście, przestaje być stosowana po dwóch tygodniach. Zasada musi być prosta na tyle, by nie wymagać zastanowienia — na przykład: wszystko, co zawiera liczbę, datę albo powołanie na przepis, sprawdzam u źródła przed wysłaniem.
Przy dużej liczbie powtarzalnych treści działa inna metoda: kontrola na losowej próbce. Dziesięć sztuk ze stu, sprawdzone dokładnie — jeśli wszystko się zgadza, reszta też, bo błędy w takich zadaniach są systematyczne, nie przypadkowe. Opisuję to w tekście o opisach produktów w katalogu.
Dlaczego błędne odpowiedzi brzmią przekonująco, wyjaśniam w tekście o błędnych odpowiedziach narzędzi.
Test wiedzy — sprawdź się
Odpowiedz w myślach, potem rozwiń odpowiedź. Na końcu policz trafienia.
1. Jaka jest główna zasada weryfikacji?
- Sprawdzać wszystko po kolei
- Sprawdzać według kosztu ewentualnego błędu
- Sprawdzać co dziesiąty tekst
Sprawdź odpowiedź
Sprawdzać według kosztu ewentualnego błędu
Liczby i daty zawsze, argumentacja tylko przez przeczytanie.
2. Gdzie weryfikować liczby i przepisy?
- U tego samego narzędzia
- U źródła i u specjalisty
- W innym narzędziu AI
Sprawdź odpowiedź
U źródła i u specjalisty
Potwierdzenie przez to samo narzędzie nie jest weryfikacją.
3. O czym świadczy podane, nieistniejące źródło?
- O pomyłce technicznej
- O tym, że reszta też wymaga sprawdzenia
- O starych danych
Sprawdź odpowiedź
O tym, że reszta też wymaga sprawdzenia
To jeden z najpewniejszych sygnałów ostrzegawczych.
4. Jaka kontrola utrzymuje się w praktyce?
- Wymagająca decyzji przy każdym tekście
- Prosta zasada niewymagająca zastanowienia
- Kontrola losowa raz w miesiącu
Sprawdź odpowiedź
Prosta zasada niewymagająca zastanowienia
Skomplikowana przestaje być stosowana po dwóch tygodniach.
5. Jak kontrolować dużą liczbę powtarzalnych treści?
- Czytać wszystkie
- Sprawdzać losową próbkę
- Ufać narzędziu
Sprawdź odpowiedź
Sprawdzać losową próbkę
Błędy w takich zadaniach są systematyczne, nie przypadkowe.
Twój wynik
- 5 na 5 — Zostaje zapisać jedną prostą zasadę kontroli dla zespołu.
- 3–4 — Dobrze; najczęściej pomijane jest sprawdzanie, czy podane źródła istnieją.
- 0–2 — Zapamiętaj jedno: liczba, data albo przepis — sprawdzasz u źródła.
Kontrola, która zostaje po szkoleniu
Ustalamy, co w Waszych treściach trzeba sprawdzać zawsze, a co wystarczy przeczytać. Zasada musi być prosta, bo tylko taka jest stosowana po trzech tygodniach od szkolenia.
Najczęstsze pytania
Jak sprawdzać wyniki pracy AI?
Według kosztu ewentualnego błędu: liczby, daty, nazwy i powołania na przepisy zawsze u źródła, argumentację i styl zwykłym przeczytaniem.
Czy można zapytać narzędzie, czy jego odpowiedź jest poprawna?
Nie. Potwierdzenie własnej odpowiedzi nie jest weryfikacją i nie wnosi nowej informacji.
Co oznacza podane, nieistniejące źródło?
Że pozostała część odpowiedzi również wymaga sprawdzenia — to jeden z najpewniejszych sygnałów ostrzegawczych.
Jak kontrolować setki powtarzalnych treści?
Sprawdzając dokładnie losową próbkę — błędy w takich zadaniach są systematyczne, więc widać je już na kilkunastu sztukach.
