Sådan faktatjekker du svar fra AI

Svar fra AI-chats er velskrevne, overskuelige og ofte helt rigtige. Netop derfor er de forkerte svar så risikable: En opdigtet statistik ser præcis lige så overbevisende ud som en ægte. Du behøver ikke tjekke alt, men du har brug for en hurtig og pålidelig rutine til det, der virkelig betyder noget. Den får du i denne guide.

Hvorfor AI-svar kan være forkerte

• Den forudsiger sandsynlig tekst. En sprogmodel genererer ord, der passer ind i sammenhængen; den slår ikke fakta op, medmindre den bruger et søgeværktøj. Vores guide om hvordan AI-chatbots fungerer forklarer hvorfor.
• Dens viden har en udløbsdato. Priser, love, politikere, softwareversioner og køreplaner ændrer sig, efter træningsdataene er blevet indsamlet.
• Den kan opfinde kilder. Titler, forfattere, sidetal, links og retssager kan blive fabrikeret i et fuldstændig realistisk format.
• Den har tendens til at give dig ret. Et ledende spørgsmål som "Er det ikke sandt, at...?" kan få den til at bekræfte det, du allerede tror.
• Den blander ting sammen. To personer med ens navne, to lignende love eller to versioner af det samme software.

Vurdér hvad der skal tjekkes

Afstem din indsats med, hvad der er på spil. Brug denne tommelfingerregel:

Konkrete påstande kræver mest opmærksomhed: tal, datoer, navne, citater, love, doseringer, priser, tekniske specifikationer og kildehenvisninger.

En faktatjek-rutine i fem trin

1. Opdel svaret i konkrete påstande

Bed AI'en om at klare den første del for dig:

Lav en nummereret liste over alle faktuelle påstande i dit forrige svar.
Angiv for hver påstand, hvor sikker du er (høj, mellem eller lav), og
hvilken type kilde der vil kunne bekræfte den.

Sikkerhedsniveauerne er ikke pålidelige i sig selv, da modeller sagtens kan tage fejl med stor overbevisning, men listen viser dig præcis, hvad du skal tjekke.

2. Find den oprindelige kilde

Find ud af, hvor hver vigtig påstand stammer fra. Gå altid efter primærkilder: Danmarks Statistik for tal, Retsinformation for lovtekster, selve forskningsartiklen i tidsskriftet, producentens manual eller organisationens egen hjemmeside. En nyhedsartikel eller en blog, der citerer et tal, er allerede et led væk fra kilden.

3. Læs på tværs (lateral læsning)

Professionelle faktatjekkere vurderer ikke en kilde ud fra, hvor professionel den ser ud. De åbner nye faner og undersøger, hvad andre pålidelige kilder siger om påstanden og om kilden selv. Hvis flere uafhængige, troværdige kilder er enige, står du på sikker grund.

4. Tjek at kilderne eksisterer og siger det påståede

Hvis AI'en giver dig en kildehenvisning, så søg efter den præcise titel i en søgemaskine, på biblioteket eller i en akademisk database. Åbn den, og bekræft, at den rent faktisk underbygger påstanden. AI kan finde på at citere en ægte forskningsartikel for noget, der slet ikke står i den.

5. Tjek datoen

Er informationen opdateret? Se hvornår kilden blev udgivet eller senest opdateret, og om der er sket ændringer siden da: nye regler, nye versioner eller nye priser.

Prompts der gør svar nemmere at tjekke

Måden du spørger på, kan begrænse fejl på forhånd:

Svag:
Hvad er bivirkningerne ved [medicin]?

Stærkere:
Hvad er de mest almindelige bivirkninger ved [medicin]? Adskil
veldokumenterede fakta fra ting, du er mindre sikker på, og sig det
tydeligt, hvis du ikke ved det. Fortæl mig, hvilket officielt dokument,
f.eks. indlægssedlen, jeg bør tjekke for at bekræfte det.

Andre gode sætninger, du kan tilføje:

• "Hvis du er i tvivl, så sig det frem for at gætte."
• "Svar udelukkende ud fra den tekst, jeg indsætter herunder. Hvis det ikke fremgår af teksten, så giv mig besked."
• "Hvad ville en person, der er uenig i dette svar, sige?"
• "Hvilke dele af dette svar kan være forældede?"

At få svar baseret på tekst, du selv leverer, er særligt pålideligt. Indsæt dokumentet og stil spørgsmål til det, eller brug vores tekst-opsummering, og lav stikprøver mod originalen bagefter. Du kan også åbne en prompt til faktatjek i chatten for at planlægge dine tjek.

Advarselslamper i et AI-svar

• Meget præcise tal uden kildeangivelse, f.eks. en procentsats med én decimal.
• Citater tillagt kendte personer, som du ikke kan finde andre steder.
• Kildehenvisninger med mærkelige detaljer: et tidsskrift, der slet ikke dækker emnet, en forfatter, der arbejder inden for et helt andet felt, eller et link, der ikke virker.
• Et svar, der ændrer sig fuldstændigt, hvis du genererer det igen eller spørger "Er du sikker?"
• Juridiske eller medicinske udsagn uden angivelse af land, dosering eller forudsætninger.
• Information om nylige begivenheder, der præsenteres uden dato.

At spørge "Er du sikker?" kan være afslørende, men tag ikke det ændrede svar som det rigtige. Modeller kan også trække korrekte svar tilbage under pres. Tjek det altid uden for chatten.

Hjælper det at spørge en anden AI?

At sammenligne svar fra forskellige modeltyper i chatmenuen eller fra en anden AI-tjeneste kan afsløre uoverensstemmelser, der er værd at undersøge. Men AI-systemer trænes på overlappende data og kan dele de samme fejl, så enighed mellem to AI'er er intet bevis. Brug det til at finde ud af, hvad der skal tjekkes – ikke som selve tjekket.

Studerende og forskere kan finde mere inspiration i AI til studerende, ChatG til forskere og vores studie-prompts.

Hvor du tjekker forskellige typer påstande

Ofte stillede spørgsmål

Hvor ofte tager AI fejl?

Det varierer meget afhængigt af model, emne og typen af spørgsmål, så der findes ikke ét enkelt, sandt tal. Velkendte emner håndteres generelt bedre end nicheemner, nylige begivenheder, præcise tal og kildehenvisninger.

Er det sikkert at bruge AI til medicinske eller juridiske spørgsmål?

Brug det til at forstå begreber, forberede spørgsmål og få et overblik. Brug det aldrig til at træffe beslutninger om behandling, medicin, retssager eller økonomi uden en fagperson. I nødstilfælde skal du altid ringe 112 eller kontakte lægevagten.

Bør jeg bede AI'en om kilder?

Ja, for det giver dig en idé om, hvad du skal lede efter. Men åbn altid hver enkelt kilde selv, for AI kan finde på kildehenvisninger, der slet ikke findes, eller som ikke indeholder det, den påstår.

Hvorfor virker links i AI-svar nogle gange ikke?

Medmindre AI'en rent faktisk har slået en side op, er et link i svaret genereret tekst ligesom alt andet. Det kan pege på en side, der er flyttet, eller på en adresse, der aldrig har eksisteret, men bare ser rigtig ud. Søg efter titlen eller organisationen i stedet for at stole blindt på linket.

Hvad er den hurtigste måde at tjekke et enkelt faktum på?

Søg efter den specifikke påstand, og kig efter en primærkilde eller en yderst troværdig kilde blandt de første resultater. Hvis du ikke kan finde en inden for et par minutter, bør du ikke stole på påstanden.