Så upptäcker du en AI-fuskare

Hitta rätt ledtrådar

”Ändå var jag här, överraskad eftersom en student trodde att det skulle vara acceptabelt att skicka in ett AI-utkast till en skrivtävling”.

Frågan är då hur vi effektivt ska upptäcka fuskarna – och vilka signaler vi kan identifiera.

Det finns alltså verktyg, men teknik ensam kommer inte att räcka till för att möta denna utmaning, menar O´Brien.

”Har verktyg”

”När det gäller elevfusk är den goda nyheten att lärare och pedagoger redan har befintliga verktyg och strategier som kan hjälpa dem att kontrollera uppsatser”, skriver hon.

Exempelvis släppte Turnitin, ett programvaruföretag som arbetar med att förebygga plagiat på utbildningsinstitutioner, AI-skrivdetektering i april.

Gratis AI-avslöjare

Det finns även de verktyg som nämns ovan – Copyleaks, Sapling, ZeroGPT och Winston AI.

De flesta är gratis att använda och enkla att nyttja. Du klistrar helt enkelt in text på deras webbplatser för ett resultat.

Vidare släppte OpenAI, skaparen av ChatGPT, sin egen “AI-klassificerare” i januari.

Två nyckelmått

“Perplexity” och “Burstiness” är de två nyckelmåtten i AI-textsökning. Låga nivåe av dem tyder på AI-inblandnng.

Den första mäter hur väl en text presterar när det gäller att skriva bra, grammatiskt korrekta, möjliga meningar.

”Burstiness” hänvisar till variationen i texten. I skriven text tenderar AI att vara mer enhetlig över hela linjen.

Dess meningsstruktur och längd är i allmänhet regelbunden och mindre kreativ och texterna saknar den variation av ord och blomstrande stil som en mänskligt skriven text normalt skulle visa.

AI bättre och bättre

Samtidigt blir AI allt bättre på att likna oss – medan verktygen att avslöja den har sina fortsatta brister.

I en ny artikel av forskare vid Stanford University visade GPT-detektorer partiskhet mot icke-infödda engelska författare.

De utvärderade prestandan hos sju allmänt använda GPT-detektorer på 91 TOEFL-uppsatser (Test of English as a Foreign Language) från ett kinesiskt forum och 88 amerikanska åttondeklassuppsatser från Hewlett Foundations ASAP (Automated Student Assessment Prize) dataset.

Detektorerna mätte de amerikanska studentuppsatserna korrekt men märkte felaktigt mer än hälften av TOEFL-uppsatserna som “AI-genererade”.

Kolla källorna

Frågan i vardagen och i yrkeslivet är ändå vilken AI-kontroll man kan göra själv?

I sin bok ”The Truth Detective” har Alex O´Brien försökt gå igenom hur man kan förbättra sitt kritiska tänkande.

Det här är de grundläggande frågorna man ska ställa sig, enligt henne.

Din första uppgift är att verifiera. Kan du verifiera och kontrollera källorna? Kan du kontrollera bevisen – både skriftliga och visuella? Hur gör du det här, skriver hon.

”Om du inte kan dubbelkontrollera eller hitta stödmaterial från andra välrenommerade källor bör dina misstankar väckas”.

Passar texten?

Nästa steg är att titta närmare på texten. Du kan hitta vissa ledtrådar i stavning och grammatik och i hur skiljetecken används.

”Om stavningen och grammatiken inte är lämplig för publikationen eller författaren som skriver den, fråga: varför? Innehåller det citat? Om så är fallet, vem är citaten av – finns dessa personer eller institutioner?” är frågor O´Brien rekommenderar.

Gör det för alla referenser som används i texten och kontrollera deras datum, föreslår hon.

AI är nämligen fortfarande begränsad i sina datakällor och från och till omedveten om de senaste nyheterna på en rad områden.

Tonen och rösten

”Kontrollera slutligen tonen, rösten och skrivstilen”, understryker O´Brien.

Det finns språkliga mönster som fortfarande är uppstyltade i AI-genererad text, påpekar hon.

Det viktigaste?

”När vi alla glider in i en artificiellt utformad framtid kommer ett mänskligt ifrågasättande tänkesätt att behövas. Faktum är att våra undersökande färdigheter och kritiska tänkande kan bli mer efterfrågade än någonsin”, avslutar Alex O´Brien.

Läs även: Ny studie: ChatGPT blir sämre med nya uppdateringar

Läs även: Apple begränsar anställdas användning av ChatGPT