Jak weryfikować odpowiedzi AI

Odpowiedzi AI brzmią płynnie, logicznie i często są bezbłędne. Właśnie dlatego te błędne bywają tak zdradliwe: zmyślona statystyka wygląda równie wiarygodnie, co prawdziwa. Nie musisz weryfikować wszystkiego, ale potrzebujesz szybkiego, sprawdzonego schematu działania w ważnych sprawach. W tym poradniku dowiesz się, jak to robić.

Dlaczego sztuczna inteligencja popełnia błędy?

• Przewiduje prawdopodobny tekst. Model językowy generuje słowa, które najlepiej pasują do kontekstu; nie sprawdza faktów w bazie danych, chyba że korzysta z wyszukiwarki. Z naszego poradnika o tym, jak działają chatboty AI, dowiesz się więcej na ten temat.
• Jej wiedza ma datę graniczną. Ceny, przepisy prawa, osoby na stanowiskach, wersje oprogramowania czy rozkłady jazdy zmieniają się po zebraniu danych treningowych.
• Potrafi zmyślać źródła. Tytuły, autorzy, numery stron, linki czy wyroki sądowe mogą zostać sfabrykowane w łudząco realistyczny sposób.
• Zwykle ci przytakuje. Pytanie z tezą, np. „Czy to prawda, że...?”, może skłonić model do potwierdzenia twoich wcześniejszych przekonań.
• Myli pojęcia. Dwie osoby o podobnych nazwiskach, dwie podobne ustawy czy dwie wersje tego samego programu łatwo zlewają się w jedno.

Oceń, co naprawdę wymaga weryfikacji

Dopasuj wysiłek do stawki. Prosta zasada:

Największej uwagi wymagają konkretne dane: liczby, daty, nazwiska, cytaty, ustawy, dawki leków, ceny, specyfikacje techniczne i bibliografia.

Weryfikacja faktów w 5 krokach

1. Rozbij odpowiedź na pojedyncze twierdzenia

Poproś AI, by wykonała pierwszą część pracy za ciebie:

Wypisz w punktach każde stwierdzenie faktyczne z twojej poprzedniej odpowiedzi.
Przy każdym określ poziom pewności (wysoki, średni lub niski) oraz wskaż,
jakie źródło pozwoliłoby je zweryfikować.

Same deklaracje pewności nie są w pełni wiarygodne, bo modele potrafią z pełnym przekonaniem podawać bzdury, ale taka lista wskaże ci dokładnie, co sprawdzić.

2. Sięgnij do źródła pierwotnego

Dla każdego kluczowego faktu znajdź jego pochodzenie. Wybieraj źródła pierwotne: urząd statystyczny dla liczb, oficjalny dziennik ustaw dla przepisów, publikację naukową w czasopiśmie, instrukcję producenta czy oficjalną stronę danej instytucji. Artykuł w mediach czy na blogu, który cytuje daną liczbę, to już źródło z drugiej ręki.

3. Czytaj horyzontalnie (ang. lateral reading)

Profesjonalni weryfikatorzy faktów nie oceniają źródła po jego wyglądzie. Otwierają nowe karty w przeglądarce i sprawdzają, co o danej informacji — oraz o samym źródle — mówią inne rzetelne strony. Jeśli kilka niezależnych, zaufanych serwisów potwierdza to samo, jesteś na pewnym gruncie.

4. Upewnij się, że źródła istnieją i mówią to, co twierdzi AI

Jeśli sztuczna inteligencja poda ci publikację naukową lub książkę, wyszukaj dokładny tytuł w wyszukiwarce lub bazie naukowej. Następnie otwórz ten tekst i upewnij się, że rzeczywiście potwierdza daną tezę. AI potrafi powołać się na prawdziwe badanie, przypisując mu wnioski, których w nim nie ma.

5. Sprawdź datę

Czy informacja jest aktualna? Zobacz, kiedy źródło powstało lub kiedy je ostatnio zaktualizowano. Sprawdź też, czy od tego czasu nic się nie zmieniło: przepisy, wersje oprogramowania czy cenniki.

Prompty ułatwiające sprawdzanie faktów

Sposób sformułowania zapytania pozwala uniknąć błędów, zanim jeszcze powstaną:

Słaby:
Jakie są skutki uboczne [leku]?

Lepszy:
Jakie są powszechnie wymieniane skutki uboczne [leku]? Oddziel
niepodważalne fakty od kwestii mniej pewnych i napisz wprost, jeśli
czegoś nie wiesz. Wskaż oficjalny dokument, np. ulotkę dla pacjenta,
w którym sprawdzę te informacje.

Inne przydatne formuły do dopisania na końcu:

• „Jeśli nie masz pewności, powiedz to wprost, zamiast zgadywać”.
• „Odpowiadaj wyłącznie na podstawie wklejonego poniżej tekstu. Jeśli w tekście nie ma odpowiedzi, poinformuj mnie o tym”.
• „Jakich kontrargumentów użyliby krytycy tej tezy?”.
• „Które fragmenty tej odpowiedzi mogą być już nieaktualne?”.

Generowanie odpowiedzi wyłącznie z dostarczonego tekstu jest wyjątkowo skuteczne. Wklej dokument i zadawaj z niego pytania lub użyj narzędzia do streszczania, a potem wyrywkowo porównaj wynik z oryginałem. Możesz też otworzyć gotowy prompt do weryfikacji faktów na czacie, by zaplanować sprawdzanie informacji.

Sygnały ostrzegawcze w odpowiedziach AI

• Bardzo precyzyjne liczby bez podania źródła, np. wartości procentowe z jednym miejscem po przecinku.
• Cytaty przypisywane znanym osobom, których nie da się znaleźć nigdzie indziej.
• Podejrzane dane bibliograficzne: czasopismo o innej tematyce, autor niezwiązany z daną dziedziną, link, który nie działa.
• Odpowiedź, która diametralnie się zmienia po kliknięciu „Wygeneruj ponownie” lub po zapytaniu „Czy na pewno?”.
• Twierdzenia prawne lub medyczne bez wskazania kraju, dawkowania czy szerszego kontekstu.
• Informacje o niedawnych wydarzeniach bez podania konkretnej daty.

Pytanie „Czy na pewno?” bywa pouczające, ale nie traktuj nowej odpowiedzi automatycznie jako poprawnej. Pod wpływem presji modele potrafią wycofać się nawet z trafnych informacji. Sprawdź to poza czatem.

Czy warto zapytać inny model AI?

Porównanie odpowiedzi z różnych stylów modeli w menu czatu lub w innej usłudze AI pozwala wychwycić rozbieżności, które warto zbadać. Modele AI uczą się jednak na podobnych zbiorach danych i mogą powielać te same błędy — zgodność między dwoma systemami nie jest żadnym dowodem. Używaj ich do znalezienia wątpliwych punktów, a nie do samej weryfikacji.

Uczniowie i naukowcy znajdą więcej wskazówek w poradnikach: AI dla uczniów i studentów, ChatG dla naukowców oraz w gotowych promptach do nauki.

Gdzie weryfikować poszczególne informacje?

FAQ

Jak często sztuczna inteligencja się myli?

To zależy od modelu, dziedziny i rodzaju pytania, więc trudno o jedną uniwersalną liczbę. Powszechnie znane tematy wypadają zazwyczaj znacznie lepiej niż wiedza niszowa, najświeższe newsy, dokładne dane liczbowe i bibliografia.

Czy korzystanie z AI w sprawach medycznych i prawnych jest bezpieczne?

AI świetnie pomaga zrozumieć trudne pojęcia, przygotować pytania do specjalisty i zdobyć ogólne rozeznanie. Nie podejmuj jednak na jej podstawie decyzji o leczeniu, dawkowaniu leków, krokach prawnych czy finansach bez konsultacji z profesjonalistą. W nagłych wypadkach dzwoń pod numer alarmowy.

Czy warto prosić AI o podanie źródeł?

Tak, bo to daje punkt zaczepienia do dalszych poszukiwań. Zawsze jednak samodzielnie otwórz każde podane źródło — AI potrafi generować pozycje bibliograficzne, które nie istnieją lub w ogóle nie poruszają danego tematu.

Dlaczego linki podawane przez AI czasami nie działają?

Jeśli model nie przeszukał akurat sieci, link w jego odpowiedzi jest po prostu tekstem wygenerowanym na podstawie prawdopodobieństwa. Może prowadzić do strony, którą usunięto, albo do adresu, który brzmi realistycznie, ale nigdy nie istniał. Zamiast klikać w link, wyszukaj tytuł artykułu lub nazwę instytucji.

Jak najszybciej zweryfikować pojedynczy fakt?

Wpisz konkretną informację w wyszukiwarkę i poszukaj pierwotnego lub powszechnie uznanego źródła wśród pierwszych wyników. Jeśli nie znajdziesz potwierdzenia w ciągu kilku minut, nie opieraj się na tej informacji.