Preparing your workspace
Jobbit
Poradniki13 min czytania

Dlaczego AI zmyśla: 7 sprawdzeń, które wyłapują halucynację

Dlaczego AI zmyśla, bez matematyki: czym jest halucynacja, jak często występuje w 2026 roku, ile kosztowała trzy firmy i 7 sprawdzeń, które ją wyłapują.

Dlaczego AI zmyśla: 7 sprawdzeń, które wyłapują halucynację
Czytaj w języku:

AI zmyśla, ponieważ model językowy jest zbudowany tak, by tworzyć najbardziej prawdopodobne kolejne słowa, a nie by sprawdzać, czy są prawdziwe, oraz dlatego, że sposób trenowania i oceniania modeli nagradza pewny strzał bardziej niż szczere „nie wiem". Ten przewodnik wyjaśnia mechanizm prostym językiem, pokazuje, jak często zdarza się to obecnym modelom, ile kosztowało trzy firmy i jakie siedem sprawdzeń to wyłapuje.

Pewnie to widziałeś: chatbot powołuje się na przepis, który nie istnieje, cytuje statystykę, której żadne badanie nie podało, albo wymienia dostawcę, którego nie sposób znaleźć. To się nazywa halucynacja i nie jest to błąd, który usunie następna aktualizacja. Badacze samego OpenAI napisali we wrześniu 2025 roku, że modele wytwarzają „overconfident, plausible falsehoods" (pewne siebie, wiarygodnie brzmiące fałsze), bo ich trenowanie i ocena „reward guessing over acknowledging uncertainty" (nagradzają zgadywanie, a nie przyznanie się do niepewności). Zrozumienie, dlaczego AI zmyśla, to różnica między narzędziem, które oszczędza ci dzień w tygodniu, a takim, które podsuwa klientowi, bankowi albo sądowi fałszywą liczbę.

Poniżej znajdziesz wyjaśnienie, którego potrzebuje zapracowany właściciel firmy, a nie wykład z informatyki: jak maszyna naprawdę działa, gdzie skupiają się błędy, trzy prawdziwe przypadki z rachunkiem do zapłaty, co o tym mówią sami dostawcy oraz siedem sprawdzeń. Ostatnia sekcja pokazuje, jak agent AI, który pokazuje źródła i swoją przeglądarkę, zmienia ten problem i czego nadal nie zrobi za ciebie.

Chcesz zobaczyć źródła, zamiast wierzyć odpowiedzi na słowo? Agent Jobbit szuka informacji w przeglądarce, którą możesz obserwować, i przynosi linki, z których skorzystał, w darmowym planie ze 100 kredytami dziennie, bez karty.

Jak sprawdziliśmy ten przewodnik

  1. Wyłącznie źródła pierwotne dla mechanizmu: artykuł badawczy OpenAI z 4 września 2025 roku oraz oświadczenia regulatorów, które cytują dostawców.
  2. Zmierzone wskaźniki z publicznego rankingu odczytane 22 października 2026 roku, z podaną metodą, bo wskaźnik halucynacji bez metody sam jest rodzajem halucynacji.
  3. Akta sądowe i rządowe dla trzech przypadków, a nie streszczenia z prasy.
  4. Strony pomocy samych dostawców, czyli to, co ChatGPT i Claude mówią o swoich ograniczeniach.
  5. Sprawdzenia, które może wykonać osoba nietechniczna w mniej niż minutę, bez żadnego narzędzia poza wyszukiwarką.

Czym jest halucynacja i dlaczego się pojawia

Duży model językowy działa, przewidując tekst, który najprawdopodobniej następuje po otrzymanym tekście. Gdy Solicitors Regulation Authority (organ regulujący zawód radcy prawnego w Anglii i Walii) ostrzegał środowisko prawnicze w listopadzie 2023 roku, ujął to wprost: te narzędzia „work by anticipating the text that should follow the input they are given, but do not have a concept of 'reality'" (działają, przewidując tekst, który powinien następować po otrzymanych danych, ale nie mają pojęcia „rzeczywistości"). Poproś o sprawę popierającą twoją argumentację, a model wytworzy coś, co wygląda jak sprawa: wiarygodną nazwę, wiarygodny rok, wiarygodny cytat. Nic w środku nie sprawdza, czy ta sprawa istnieje, bo nic w środku nie zostało do tego zbudowane.

Druga przyczyna to sposób oceniania modeli. W artykule „Why language models hallucinate" z września 2025 roku czterech badaczy OpenAI wykazało, że standardowe testy nagradzają pewną odpowiedź i nie dają nic za przyznanie się do niepewności, więc „under binary grading, abstaining is strictly sub-optimal" (przy ocenie zero-jedynkowej powstrzymanie się od odpowiedzi jest zawsze gorszym wyborem). Model, który zgaduje, dostaje więcej punktów niż model, który mówi, że nie wie, tak samo jak uczeń zgadujący w teście wielokrotnego wyboru wygrywa z tym, który zostawia pytanie puste. Nawyk zgadywania jest wyuczony i jest wyuczony dlatego, że się opłaca.

Liczby, które OpenAI opublikowało razem z artykułem, pokazują ten kompromis. W jednym teście wiedzy faktograficznej model dostrojony do powstrzymywania się od odpowiedzi odmówił odpowiedzi na 52% pytań, trafił w 22% i pomylił się w 26%; wcześniejszy model, który prawie nigdy nie odmawiał, trafił w 24% i pomylił się w 75%. Mniej błędnych odpowiedzi wzięło się z większej liczby „nie wiem", a nie z większej wiedzy. To cała historia w jednej tabeli i dlatego sprawdzenia poniżej zaczynają się od pozwolenia na odpowiedź „nie".

Jak często to się zdarza w 2026 roku

Uczciwa odpowiedź brzmi: „na tyle często, że zawsze warto sprawdzać". Ranking halucynacji Vectara, zaktualizowany 22 października 2026 roku, ocenia modele w jednym wąskim zadaniu: streść dokument, który dostały, i policz, jak często streszczenie zawiera coś, czego dokument nie mówi. Nawet mając fakty przed oczami, popularne modele zmyślały treść w mierzalnym odsetku streszczeń.

Model (nazwa w rankingu)Odsetek streszczeń z zmyśloną treścią
Llama 3.3 70B4.1%
Gemini 2.5 Pro7.0%
GPT-5.4 (marzec 2026)7.0%
GPT-4o (sierpień 2024)9.6%
Claude Sonnet 4 (maj 2025)10.3%
GPT-5 high (sierpień 2025)15.1%

Rzucają się w oczy dwie rzeczy. Nowszy i większy nie znaczy bezpieczniejszy: konfiguracja GPT-5 z sierpnia 2025 roku wypadła w tym teście gorzej niż starsze o rok GPT-4o. Poza tym są to wyniki dla zadań z podanym źródłem; gdy model musi przywoływać fakty z pamięci, odsetki są wyższe.

Badania specjalistyczne to potwierdzają. Autorzy publikujący w Annals of the Royal College of Surgeons of England podali w kwietniu 2026 roku, że w 108 odpowiedziach chatbotów na pytania chirurgiczne, zawierających 1,249 odnośników, najgorsze modele zmyśliły lub nie potrafiły uzasadnić od 25% do 34% cytowań, a najlepsze nie zmyśliły żadnego. List w The Lancet z maja 2026 roku wykazał, że około jedna na 277 niedawnych prac w PubMed zawierała zmyślone odnośniki, wobec jednej na 2,828 w 2023 roku. Badanie Stanford nad narzędziami do wyszukiwania prawniczego, które korzystają z mechanizmu wyszukiwania źródeł, pokazało, że i one halucynowały w od 17% do 33% przypadków. Wyszukiwanie pomaga, ale nie rozwiązuje sprawy.

Ile to kosztowało: trzy przypadki

Nowy Jork, czerwiec 2023. W sprawie Mata v Avianca dwóch prawników złożyło pismo zawierające sprawy, które nie istniały, wygenerowane przez ChatGPT, a sąd nałożył karę 5,000 dolarów. Był to pierwszy szeroko opisywany przypadek, a dziś to jedno z ponad 2,200 orzeczeń sądowych na świecie dotyczących zmyślonych cytowań z AI, które śledzi publiczna baza prowadzona przez prawnika Damien Charlotin.

Londyn, czerwiec 2025. W sprawach Ayinde v Haringey i Al-Haroun v Qatar National Bank High Court rozpatrzył dwie sprawy naraz: w jednym piśmie powołano pięć spraw, które nie istniały, w drugim 45 źródeł, z których 18 było zmyślonych. Przewodniczący King's Bench Division napisał, że narzędzia generatywne „are not capable of conducting reliable legal research" (nie są zdolne do rzetelnych badań prawniczych) i „may cite sources that do not exist" (mogą cytować źródła, które nie istnieją), że prawnicy mają zawodowy obowiązek „to check the accuracy of such research by reference to authoritative sources" (sprawdzać rzetelność takich badań na podstawie źródeł miarodajnych), a skutki zaniechania mogą obejmować postępowanie o obrazę sądu i skierowanie sprawy do policji. Od tamtej pory Solicitors Regulation Authority wydał ostrzeżenie (17 sierpnia 2026 roku), wymieniając „fictitious cases, references or seemingly factual assertions" (fikcyjne sprawy, odnośniki lub pozornie faktograficzne twierdzenia) i przypominając radcom prawnym, że nadal odpowiadają za wynik.

Canberra, październik 2025. Deloitte Australia dostarczył departamentowi rządowemu raport w ramach umowy wartej AU$440,000. Zawierał zmyślony cytat przypisany wyrokowi sądu oraz odwołania do prac naukowych, które nie istniały. Firma opublikowała poprawioną wersję 3 października 2025 roku, po raz pierwszy ujawniła, że użyto modelu Azure OpenAI, i zwróciła ostatnią ratę, około AU$98,000. Pracę wykonała duża firma doradcza z procesem recenzji. Zmyślenie mimo to przeszło, bo nikt nie otworzył odnośników.

Żadna z tych osób nie była nieostrożnym amatorem. To zapracowani profesjonaliści, którzy uznali płynny tekst za sprawdzony. Tego błędu trzeba unikać i da się go uniknąć.

Co mówią sami dostawcy

Dokumentacja Anthropic dla Claude wymienia standardowe środki zaradcze, w tym pozwolenie modelowi na odpowiedź „nie wiem", prośbę o zacytowanie fragmentu przed odpowiedzią i ograniczenie go do dostarczonych dokumentów, a następnie dodaje, że „don't eliminate them entirely. Always validate critical information." (nie eliminują ich całkowicie. Zawsze weryfikuj ważne informacje.) Jej artykuł pomocy o błędnych odpowiedziach, zaktualizowany w marcu 2026 roku, mówi wprost, że Claude „can occasionally produce responses that are incorrect or misleading" (może czasem tworzyć odpowiedzi błędne lub wprowadzające w błąd) i nie należy traktować go jako „a singular source of truth" (jedynego źródła prawdy). Strona pomocy OpenAI o tym, czy ChatGPT mówi prawdę, głosi to samo: może zmyślać cytowania, więc trzeba weryfikować. ICO (brytyjski urząd ochrony danych) w swoich pracach z 2024 roku nad generatywną AI zauważył, że nawet dokładne dane treningowe „will not stop" (nie powstrzymają) modeli przed tworzeniem fałszywych stwierdzeń, a październikowy przegląd FCA (brytyjskiego nadzoru finansowego) z 2026 roku dotyczący AI w usługach finansowych powtarza, że firmy „remain responsible for consumer outcomes" (nadal odpowiadają za skutki dla konsumentów), niezależnie od tego, jakie narzędzie je wytworzyło.

Czytane razem, przesłanie od osób, które te narzędzia budują i nadzorują, jest spójne: używaj ich i sprawdzaj je.

7 sprawdzeń, które wyłapują halucynację

SprawdzenieCo robiszCo wyłapuje
1. Poproś o źródło i otwórz je„Podaj mi adres URL lub dokument dla tego twierdzenia", a potem kliknijZmyślone sprawy, prace, statystyki
2. Zweryfikuj każde imię, liczbę, datę i cytatWyszukaj każdy element w oryginalnym źródle, a nie w innym chatbocieBłędne liczby, źle przypisane cytaty
3. Zapytaj dwa razy albo zapytaj drugi modelPrzeformułuj pytanie albo wklej je do innego narzędziaOdpowiedzi, które zmieniają się wraz z brzmieniem pytania
4. Daj mu dokument i zamknij go w jego ramach„Odpowiedz tylko na podstawie załączonego pliku i zacytuj linijkę, z której korzystasz"Błędy z pamięci; model ma fakty przed oczami
5. Pozwól mu powiedzieć „nie wiem"„Jeśli nie masz pewności, powiedz o tym i napisz, co trzeba byłoby sprawdzić"Pewny siebie strzał
6. Przelicz to jeszcze razZsumuj kolumnę, przelicz procent, sprawdź datyRachunki, które wyglądają dobrze, a są błędne
7. Pieniądze, prawo, zdrowie i reputację traktuj jak szkicOsoba zatwierdza wszystko, co trafia do klienta, HMRC, banku lub sąduKosztowne pomyłki

1. Poproś o źródło i otwórz je

Model chętnie poda odnośnik na życzenie; test polega na tym, czy odnośnik się otwiera i czy mówi to, co model twierdzi. Raport Deloitte miał odnośniki. Nikt ich nie otworzył. Jeśli link jest martwy, praca nie istnieje albo strona mówi coś innego, podejrzana jest cała odpowiedź, nie tylko ta linijka.

2. Weryfikuj osobno imiona, liczby, daty i cytaty

W tych czterech kategoriach zmyślenia skupiają się najczęściej, bo to części zdania, które trudno przewidzieć z kontekstu. Cytat najłatwiej sprawdzić: wklej go do wyszukiwarki w cudzysłowie. Statystyka powinna prowadzić do badania z próbą i datą, tak jak ten przewodnik podaje badanie Royal College of Surgeons i jego 1,249 odnośników.

3. Zapytaj dwa razy albo zapytaj drugi model

Fakt, który przetrwa przeformułowanie, jest bardziej prawdopodobnie faktem. Zadaj to samo pytanie innymi słowami albo wklej je do drugiego produktu (ChatGPT, Claude, Gemini, Microsoft Copilot, Manus czy Muse od Meta zachowują się inaczej przy tym samym poleceniu). Zgodność dwóch modeli nie jest dowodem, ale rozbieżność dwóch modeli to wiarygodny sygnał, by sprawdzić.

4. Daj mu dokument i zamknij go w jego ramach

Wyniki rankingu powyżej to najlepszy przypadek, z podanym źródłem; przywoływanie z pamięci wypada gorzej. Dlatego dostarcz źródło. Załącz umowę, arkusz lub przepis, powiedz modelowi, by odpowiadał tylko na jego podstawie i cytował linijkę, z której skorzystał, a potem przeczytaj cytat. Jeśli nie potrafi zacytować linijki, odpowiedź nie pochodzi z dokumentu.

5. Pozwól mu powiedzieć „nie wiem"

Skoro trenowanie nagradza zgadywanie, trzeba zmienić punktację w poleceniu. „Jeśli nie jesteś pewien, powiedz o tym i napisz, co trzeba byłoby sprawdzić" to najskuteczniejsze zdanie w tym przewodniku; jest pisemnym odpowiednikiem modelu powstrzymującego się od odpowiedzi z tabeli OpenAI i nic cię nie kosztuje.

6. Przelicz to jeszcze raz

Modele językowe przewidują tekst; nie liczą, chyba że uruchamiają kod. Suma, która jest przesunięta o jedną pozycję, procent z niewłaściwej podstawy, data o rok nietrafiona: wyglądają dobrze, bo zdanie wokół jest poprawne. Zsumuj kolumnę sam albo poproś agenta, który wykona obliczenie w arkuszu i je pokaże.

7. Pieniądze, prawo, zdrowie i reputację traktuj jak szkic

Prawnikom w Londynie i konsultantom w Canberze nie brakowało inteligencji; brakowało im reguły. Reguła brzmi: wszystko, co trafia do klienta, regulatora, kredytodawcy lub sądu, jest szkicem, dopóki wskazana osoba nie sprawdzi zawartych w tym faktów. Zapisz tę regułę, a poradnik AI Policy for Small Business: A Free Template da ci wersję na jedną stronę.

Gdzie małe firmy wpadają najczęściej

  • Wyceny i kosztorysy. Model poproszony o „typowe ceny" wymyśla typowe ceny. Użyj własnego cennika albo źródła z cenami.
  • Sformułowania prawne i podatkowe. Progi, terminy i kary zmieniają się co kwiecień; pamięć modelu może mieć dwa lata. Sprawdzaj na GOV.UK.
  • Dane dostawców i produktów. Numery modeli, zgodność i specyfikacje to dokładnie ten gęsty, trudny do przewidzenia tekst, który bywa zmyślany.
  • Opinie i referencje. Nigdy nie pozwól modelowi napisać opinii ani cytatu od klienta. Poza tym, że są zmyślone, fałszywe opinie są w Wielkiej Brytanii nielegalne na mocy Digital Markets, Competition and Consumers Act 2024.
  • Tłumaczenia liczb. Gdy model tłumaczy dokument, liczby mogą się zmienić. Porównaj każdą liczbę w wersji przetłumaczonej z oryginałem.

Jak agent AI zmienia ten problem

Chatbot daje odpowiedź i zostawia sprawdzanie tobie. Agent może część sprawdzania wykonać w ramach zadania, dlatego przy wyborze liczy się mechanika.

  • Pokazuje swoje źródła. Agent, który przegląda internet, zwraca przeczytane strony, więc sprawdzenie 1 staje się kliknięciem, a nie wyszukiwaniem. Jobbit Research dołącza źródła do każdego ustalenia w raporcie, który pisze.
  • Działa w przeglądarce, którą możesz obserwować. Gdy agent otwiera stronę, widzisz tę stronę. Liczbę w raporcie można wyśledzić do ekranu, z którego pochodzi.
  • Pracuje na twoich dokumentach. Załącz umowę lub arkusz w projekcie Jobbit, a agent odpowie z pliku, z zacytowaną linijką, czyli sprawdzenie 4 jest wykonane domyślnie.
  • Liczy w arkuszu, a nie w prozie. Poproś o prognozę przepływów pieniężnych, a agent zbuduje arkusz i pokaże formuły; rachunek da się odtworzyć.
  • Pyta, zanim wyda lub wyśle. Agent, który czeka na zatwierdzenie przed wysłaniem e-maila, daje sprawdzeniu 7 wbudowany punkt zatrzymania.
  • Można mu kazać powstrzymać się od odpowiedzi. Instrukcje projektu, takie jak „mów, gdy nie jesteś pewien, i wypisz, co zweryfikować", obowiązują w każdej rozmowie, więc sprawdzenie 5 ustawiasz raz.

ChatGPT, Claude, Gemini, Microsoft Copilot, Manus i Muse od Meta dobrze redagują teksty, a kilka z nich przegląda już internet i podaje źródła. Żadne z nich nie znosi końcowego sprawdzenia przez człowieka, i Jobbit też nie. To, co dodaje Jobbit, to sieć ludzi: gdy zadaniem jest umowa najmu, zeznanie podatkowe albo roszczenie medyczne, agent może przekazać sprawdzenie zweryfikowanemu specjaliście w ramach tego samego zlecenia, zamiast tobie o jedenastej wieczorem.

Twój plan na ten tydzień

  • Poniedziałek: zapisz jedną regułę. „Wszystko, co trafia do klienta, HMRC, banku lub sądu, jest szkicem, dopóki wskazana osoba nie sprawdzi faktów." Wpisz ją do polityki AI i do instrukcji projektu.
  • Wtorek: dodaj linijkę o powstrzymaniu się. Wpisz „jeśli nie jesteś pewien, powiedz o tym i napisz, co sprawdzić" do stałych instrukcji każdego narzędzia, z którego korzystasz.
  • Środa: wykonaj sprawdzenie 1 na wynikach z zeszłego tygodnia. Weź ostatnie trzy dokumenty napisane przez AI, których użyłeś, i otwórz każdy odnośnik. Policz te, które zawodzą.
  • Czwartek: przenieś jedno zadanie do trybu opartego na źródle. Wybierz zadanie, w którym błędy kosztują najwięcej, załącz prawdziwe dokumenty i wymagaj zacytowanych linijek.
  • Piątek: zdecyduj, co nigdy nie wychodzi bez sprawdzenia. Sporządź listę (ceny, sformułowania prawne, twierdzenia zdrowotne, cytaty klientów) i przekaż ją każdemu, kto używa AI w twojej firmie.

Czytaj dalej

Najczęstsze pytania

Dlaczego AI zmyśla?

Ponieważ model językowy generuje najbardziej prawdopodobne kolejne słowa, zamiast sprawdzać fakty, a testy używane do trenowania i oceniania modeli nagradzają pewny strzał bardziej niż przyznanie się do niepewności. Badacze samego OpenAI opisali w 2025 roku wynik jako „overconfident, plausible falsehoods". Płynność i trafność powstają w tym samym procesie, dlatego błędna odpowiedź brzmi dokładnie jak dobra.

Czym jest halucynacja AI?

Odpowiedzią płynną i wiarygodną, ale fałszywą: zmyśloną sprawą, statystyką, której żadne badanie nie podało, cytatem, którego nikt nie wypowiedział, produktem, który nie istnieje. To nie usterka, tylko normalne zachowanie modelu poproszonego o coś, czego nie wie.

Jak często ChatGPT zmyśla?

Zależy od zadania. W publicznym teście opartym na źródle, odczytanym w październiku 2026 roku, popularne modele zmyślały treść w około 4% do 15% streszczeń dokumentów, nawet gdy źródło było podane; badania cytowań w chirurgii i prawie wykazały odsetki zmyśleń od 17% do 34% u najgorszych. Bezpieczne założenie brzmi: „na tyle często, by sprawdzać każde imię, liczbę, datę i cytat".

Czy można całkowicie zatrzymać halucynacje AI?

Nie. Dostarczenie dokumentu źródłowego, prośba o cytaty, pozwolenie na „nie wiem" i użycie agenta, który pokazuje źródła, zmniejszają odsetek błędów, a dokumentacja samego Anthropic mówi, że te środki „don't eliminate them entirely". Ostateczne sprawdzenie wszystkiego, co ważne, należy do człowieka.

Czy ktoś dostał karę za halucynacje AI?

Tak. Sąd w Nowym Jorku nałożył w 2023 roku karę 5,000 dolarów za fałszywe sprawy w piśmie; High Court w Londynie ostrzegł w czerwcu 2025 roku, że zmyślone cytowania mogą prowadzić do postępowania o obrazę sądu i skierowania sprawy do policji; a Deloitte Australia zwrócił ostatnią ratę rządowej umowy wartej AU$440,000 w październiku 2025 roku po tym, jak okazało się, że jego raport zawiera zmyślone odnośniki.

Czy agent AI jest bardziej niezawodny niż chatbot?

Agent, który przegląda internet, podaje źródła i pracuje na twoich dokumentach, przyspiesza sprawdzenia i ułatwia wyśledzenie błędów, ale nadal potrzebuje człowieka, który zatwierdzi wszystko, co dotyczy pieniędzy, prawa lub zdrowia. Agent Jobbit pokazuje podczas pracy swoją przeglądarkę i źródła, a gdy zadanie tego wymaga, może przekazać ostateczne sprawdzenie zweryfikowanemu specjaliście.

Powiązane poradniki