Jak działa AI, której używasz · Lekcja 6 z 6 · 8 min
Jak sprawdzić odpowiedź AI: 5 kroków
W skrócie
Pięć kroków, które warto przejść, zanim uwierzysz odpowiedzi czatu AI, i ćwiczenie: znajdź błędne zdanie. Na końcu darmowy certyfikat z zewnątrz.
Wiesz już, że czat AI pisze to, co prawdopodobne (lekcja 2), losuje (lekcja 3), widzi tylko okno kontekstu (lekcja 4) i potrafi pewnym tonem zmyślać (lekcja 5). Nie znaczy to, że nie warto go używać. Znaczy, że jego odpowiedź to szkic do sprawdzenia, a nie wyrok. Oto pięć kroków, które zajmują kilka minut.
Pięć kroków
- Źródło pierwotne. Czy odpowiedź wskazuje źródło i czy to źródło naprawdę to mówi? Otwórz link i przeczytaj, nie poprzestawaj na tym, że link jest.
- Przelicz każdą liczbę. Procenty, sumy, daty, jednostki. Model zgaduje liczby tak samo jak słowa.
- Zapytaj inaczej. Zadaj to samo pytanie innymi słowami albo w nowej rozmowie. Jeśli odpowiedź się zmienia, nie była pewna.
- Sprawdź datę. Model wie tyle, ile było w danych do nauki. O tym, co stało się później, może nie wiedzieć, chyba że czat przeszukał internet.
- Ucząc się, proś o wyjaśnienia, nie o gotowce. Gotowa odpowiedź daje poczucie, że rozumiesz. Wyjaśnienie, pytanie zwrotne i własna próba dają zrozumienie.
Krok 5 ma poparcie w badaniach. W eksperymencie z udziałem prawie 1000 licealistów w Turcji ci, którzy ćwiczyli matematykę z czatem podającym gotowe odpowiedzi, po jego odebraniu wypadli na sprawdzianie o 17% gorzej niż grupa bez czatu (Bastani i in., PNAS 2025).
Spróbuj: złap błąd
Niżej jest odpowiedź czatu na pytanie o temperaturę z lekcji 3. Jedno zdanie jest błędne. Przejdź przez pięć kroków: które zdanie nie wytrzymuje sprawdzenia z tym, co widziałeś w eksperymencie?
Częsty błąd
„Skoro AI podało źródło, to źródło to mówi.” Nie zawsze. Model potrafi dopisać prawdziwy link do zdania, którego w tym źródle nie ma, a nawet zmyślić tytuł artykułu albo numer strony. Źródło sprawdza się dopiero wtedy, gdy je otworzysz i znajdziesz w nim to zdanie.
Złap błąd AI
Tak odpowiedział chatbot. Jedno zdanie jest merytorycznie błędne. Które?
Pytanie: Czy niska temperatura sprawia, że czat odpowiada zgodniej z prawdą?
Pokaż błędne zdanie
Błędne zdanie: Dlatego niska temperatura sprawia, że odpowiedzi są zgodniejsze z faktami.
Niska temperatura daje odpowiedź najbardziej prawdopodobną, a nie najprawdziwszą: jeśli model nauczył się czegoś błędnie, powtórzy ten błąd pewniej i za każdym razem. Dlatego krok 3 tu nie wystarczy, bo ten sam błąd wraca w każdej rozmowie. Zostają kroki 1 i 2: źródło i przeliczenie.
Quiz
Trzy pytania na sprawdzenie się. Wybierz odpowiedź albo rozwiń odpowiedź pod pytaniem. Z klawiatury: strzałki wybierają, Enter albo spacja zatwierdza.
Najważniejsze wnioski
- Odpowiedź czatu to szkic do sprawdzenia, a nie wyrok.
- Pięć kroków: źródło pierwotne, przeliczone liczby, pytanie zadane inaczej, data, wyjaśnienia zamiast gotowców.
- Podany link to nie dowód: otwórz źródło i znajdź w nim to zdanie.
- Ucząc się z AI, proś o wyjaśnienia; gotowce dają złudzenie zrozumienia.
Co dalej?
To ostatnia lekcja ścieżki. Kilka spokojnych następnych kroków — wybierz jeden.
- Kurs ML od zera skąd to wszystko się bierze: od pierwszego modelu do modelu językowego, w krótkich lekcjach
- Kurs: modele językowe od środka jak model językowy jest zbudowany i jak go zmierzyć: dla osób po kursie NN, z kodem w numpy
Więcej ćwiczeń „Złap błąd AI”
W kursie ML są kolejne odpowiedzi czatu z jednym błędem:
Darmowy certyfikat z zewnątrz
Jeśli chcesz pójść dalej i mieć potwierdzenie ukończenia: AI Fluency: Framework & Foundations (Anthropic). Kurs jest bezpłatny i kończy się testem oraz certyfikatem ukończenia. Materiały są po angielsku, a zapis wymaga założenia konta w serwisie Skilljar. Uczy pracy z AI na co dzień: kiedy powierzyć zadanie, jak je opisać, jak ocenić odpowiedź i jak korzystać odpowiedzialnie. Dobrze uzupełnia tę ścieżkę, która pokazuje mechanizm.
Sprawdzone . ML Atlas nie jest powiązany z Anthropic. Certyfikat potwierdza ukończenie kursu; nie jest dyplomem ani uprawnieniem.
Więcej w Atlasie
Hasła encyklopedii o pojęciach z tej lekcji: