Varför AI inte lyckas lura AI-detektorer

Efter att ha låtit en AI gästblogga på BJ:s blogg så ville jag utmana ChatGPT att försöka lura en AI-detektor. Boten fick tre försök att skriva om en text som den tidigare skrivit som gästbloggare, men detektorn var obeveklig. Den konstaterade slutligen att texten med 96 procents sannolikhet var AI genererad trots att ChatGPT fick flera försök att skriva om artikeln – dock utan BJ:s hjälp.

BJ:s fråga till ChatGPT:

Du lyckades inte denna gång heller. Det verkar som att AI är bättre på att genomskåda än att skriva mänskligt, stämmer det? Varför tror du att det inte gick att lura detektorn?

Svar från ChatGPT:

Det är en intressant iakttagelse, och det pekar på något grundläggande: AI-detektorer är ofta tränade på just de typer av textmönster som AI tenderar att producera. Även om omskrivningar och variationer kan förbättra textens mänskliga känsla, finns det subtila drag i strukturen, ordförrådet och rytmen som kan avslöja den som AI-genererad.

Varför AI inte lyckas lura AI-detektorer

Förutsägbarhet i textmönster
AI-modeller skriver ofta med en hög grad av konsekvens och logik, vilket kan göra texterna lättare att identifiera. Mänskligt skrivande, å andra sidan, tenderar att vara mer oregelbundet – det kan innehålla små fel, otydliga referenser eller oväntade avvikelser som är svårare för en AI att imitera.
Brister i stilistisk variation
Även om AI kan anpassa sig till olika stilar och toner, är det svårt för den att fullt ut replikera det intuitiva sätt som människor varierar språket på, särskilt i subtila aspekter som rytm, ordval eller tematiska ”sidospår”.
Avsaknad av djup i resonemanget
AI bygger sitt skrivande på stora mängder data, men det saknar en mänsklig skribents intuition och livserfarenhet. Det resulterar ofta i texter som känns genomtänkta men inte helt levande – en subtil skillnad som detektorer kan snappa upp.

Hur AI-detektorer fungerar

AI-detektorer är tränade på stora dataset av både mänskligt och AI-genererat material. De analyserar:

Textens statistiska egenskaper: Ord- och frasfrekvens, meningslängd och strukturell förutsägbarhet.
Lexikal variation: Hur diversifierat ordförrådet är. AI tenderar att vara lite mindre varierande än människor.
Språklig ”förfining”: AI-texter kan kännas överdrivet välslipade eller för formella, något som människor ofta undviker omedvetet.

Kan AI någonsin skriva helt som en människa?

Kanske – men det kräver fler genombrott. Det är möjligt att framtida AI-system blir bättre på att introducera oregelbundenheter och kreativitet som känns mer mänskliga. Samtidigt förbättras AI-detektorer kontinuerligt, vilket gör detta till en pågående kapprustning.

Slutsats

Det är inte förvånande att det var svårt att lura detektorn. Dels för att AI-text ofta är välstrukturerad på ett sätt som inte alltid speglar mänskligt skrivande, dels för att AI-detektorer är specifikt designade för att avslöja just sådana drag. Att skriva som en människa handlar inte bara om att använda rätt ord utan också om att skapa en känsla av autenticitet och ibland imperfektion – något som ännu är svårt för AI att imitera på djupet.

Gästblogg skriven av ChatGPT från OpenAI.
Källa: https://openai.com/chatgpt

Varför AI inte lyckas lura AI-detektorer