ML Atlas

Jak działa AI, której używasz · Lekcja 6 z 6 · 8 min

Jak sprawdzić odpowiedź AI: 5 kroków

W skrócie

Pięć kroków, które warto przejść, zanim uwierzysz odpowiedzi czatu AI, i ćwiczenie: znajdź błędne zdanie. Na końcu darmowy certyfikat z zewnątrz.

Wiesz już, że czat AI pisze to, co prawdopodobne (lekcja 2), losuje (lekcja 3), widzi tylko okno kontekstu (lekcja 4) i potrafi pewnym tonem zmyślać (lekcja 5). Nie znaczy to, że nie warto go używać. Znaczy, że jego odpowiedź to szkic do sprawdzenia, a nie wyrok. Oto pięć kroków, które zajmują kilka minut.

Pięć kroków

  1. Źródło pierwotne. Czy odpowiedź wskazuje źródło i czy to źródło naprawdę to mówi? Otwórz link i przeczytaj, nie poprzestawaj na tym, że link jest.
  2. Przelicz każdą liczbę. Procenty, sumy, daty, jednostki. Model zgaduje liczby tak samo jak słowa.
  3. Zapytaj inaczej. Zadaj to samo pytanie innymi słowami albo w nowej rozmowie. Jeśli odpowiedź się zmienia, nie była pewna.
  4. Sprawdź datę. Model wie tyle, ile było w danych do nauki. O tym, co stało się później, może nie wiedzieć, chyba że czat przeszukał internet.
  5. Ucząc się, proś o wyjaśnienia, nie o gotowce. Gotowa odpowiedź daje poczucie, że rozumiesz. Wyjaśnienie, pytanie zwrotne i własna próba dają zrozumienie.

Krok 5 ma poparcie w badaniach. W eksperymencie z udziałem prawie 1000 licealistów w Turcji ci, którzy ćwiczyli matematykę z czatem podającym gotowe odpowiedzi, po jego odebraniu wypadli na sprawdzianie o 17% gorzej niż grupa bez czatu (Bastani i in., PNAS 2025).

Spróbuj: złap błąd

Niżej jest odpowiedź czatu na pytanie o temperaturę z lekcji 3. Jedno zdanie jest błędne. Przejdź przez pięć kroków: które zdanie nie wytrzymuje sprawdzenia z tym, co widziałeś w eksperymencie?

Częsty błąd

„Skoro AI podało źródło, to źródło to mówi.” Nie zawsze. Model potrafi dopisać prawdziwy link do zdania, którego w tym źródle nie ma, a nawet zmyślić tytuł artykułu albo numer strony. Źródło sprawdza się dopiero wtedy, gdy je otworzysz i znajdziesz w nim to zdanie.

Złap błąd AI

Tak odpowiedział chatbot. Jedno zdanie jest merytorycznie błędne. Które?

Pytanie: Czy niska temperatura sprawia, że czat odpowiada zgodniej z prawdą?

Odpowiedź chatbota

Pokaż błędne zdanie

Błędne zdanie: Dlatego niska temperatura sprawia, że odpowiedzi są zgodniejsze z faktami.

Niska temperatura daje odpowiedź najbardziej prawdopodobną, a nie najprawdziwszą: jeśli model nauczył się czegoś błędnie, powtórzy ten błąd pewniej i za każdym razem. Dlatego krok 3 tu nie wystarczy, bo ten sam błąd wraca w każdej rozmowie. Zostają kroki 1 i 2: źródło i przeliczenie.

Quiz

Trzy pytania na sprawdzenie się. Wybierz odpowiedź albo rozwiń odpowiedź pod pytaniem. Z klawiatury: strzałki wybierają, Enter albo spacja zatwierdza.

1. Czat podał źródło do swojej odpowiedzi. Co robisz?
Pokaż odpowiedź

Poprawna odpowiedź: Otwieram źródło i szukam w nim zdania z tej odpowiedzi

Model potrafi dopisać prawdziwy link do zdania, którego w źródle nie ma; sprawdza się, otwierając źródło.

2. Zadajesz to samo pytanie w nowej rozmowie i dostajesz inną odpowiedź. Co to mówi?
Pokaż odpowiedź

Poprawna odpowiedź: Że odpowiedź nie była pewna i trzeba ją sprawdzić u źródła

Losowanie i zgadywanie dają różne wersje; zmienna odpowiedź to sygnał, żeby sprawdzić.

3. Uczysz się z pomocą czatu AI. Jak z niego korzystać, żeby naprawdę się nauczyć?
Pokaż odpowiedź

Poprawna odpowiedź: Prosić o wyjaśnienia i pytania, a zadania robić samemu

W badaniu licealiści ćwiczący z czatem podającym gotowe odpowiedzi wypadli potem o 17% gorzej niż grupa bez czatu.

Najważniejsze wnioski

  • Odpowiedź czatu to szkic do sprawdzenia, a nie wyrok.
  • Pięć kroków: źródło pierwotne, przeliczone liczby, pytanie zadane inaczej, data, wyjaśnienia zamiast gotowców.
  • Podany link to nie dowód: otwórz źródło i znajdź w nim to zdanie.
  • Ucząc się z AI, proś o wyjaśnienia; gotowce dają złudzenie zrozumienia.

Co dalej?

To ostatnia lekcja ścieżki. Kilka spokojnych następnych kroków — wybierz jeden.

Więcej ćwiczeń „Złap błąd AI”

W kursie ML są kolejne odpowiedzi czatu z jednym błędem:

Darmowy certyfikat z zewnątrz

Jeśli chcesz pójść dalej i mieć potwierdzenie ukończenia: AI Fluency: Framework & Foundations (Anthropic). Kurs jest bezpłatny i kończy się testem oraz certyfikatem ukończenia. Materiały są po angielsku, a zapis wymaga założenia konta w serwisie Skilljar. Uczy pracy z AI na co dzień: kiedy powierzyć zadanie, jak je opisać, jak ocenić odpowiedź i jak korzystać odpowiedzialnie. Dobrze uzupełnia tę ścieżkę, która pokazuje mechanizm.

Sprawdzone . ML Atlas nie jest powiązany z Anthropic. Certyfikat potwierdza ukończenie kursu; nie jest dyplomem ani uprawnieniem.

Więcej w Atlasie

Hasła encyklopedii o pojęciach z tej lekcji: