Efterhånden som behovet for at registrere AI-genereret tekst stiger, bliver værktøjer som GPTZero vigtigere. Sådan bruger du det til at tjekke tekst for ChatGPT.

Siden lanceringen er OpenAIs ChatGPT blevet en bekymring for uddannelsesinstitutioner verden over, da studerende er begyndt at bruge den til at skrive essays og snyde med vurderinger. I betragtning af hvor naturlig teksten genereret af chatbotten ser ud, har instruktører sværere ved at afgøre, om elevernes arbejde er originalt.

For at hjælpe lærere med at evaluere elevernes opgaver, har en kandidat i datamatiker udviklet et værktøj ved navn GPTZero, der afgør, om en tekst er blevet kunstigt genereret. Denne artikel vil forklare, hvordan værktøjet fungerer, hvordan man bruger det, og om det kan registrere AI-genereret indhold.

Hvad er GPTZero, og hvordan virker det?

GPTZero er et AI-tekstanalyseværktøj udviklet af Edward Tian, ​​en kandidat i datalogi, for at hjælpe instruktører med at skelne plagieret tekst fra originalt arbejde. Værktøjet kontrollerer forvirring og burstiness i en tekst for at afgøre, om den er kunstigt genereret eller lavet af et menneske.

instagram viewer

Uden at gå i detaljer, lad os se på, hvad disse udtryk betyder:

  • Forvirring er et mål for teksttilfældighed i Natural Language Processing (NLP). Tekst skrevet af et menneske har en tendens til at være mindre struktureret og mere uforudsigelig, så dens forvirringsværdi bør være højere, hvorimod en tekst genereret af AI bør have en lav forvirringsscore.
  • Burstiness tager hensyn til andre variabler, der ikke er taget højde for i forvirring for at forbedre tekstanalysen. Udtrykket refererer til udseendet af ikke-almindelige elementer i tilfældige klynger. Tekst genereret af AI har en tendens til at have en mere konsistent struktur end tekst skrevet af mennesker. Burstiness hjælper os med at identificere det.

GPTZero Classic har været offentligt tilgængelig siden begyndelsen af ​​2023, og det er gratis at bruge fra marts 2023. Den gratis version har dog en tegngrænse på 5000 pr. dokument, og du kan kun batchanalysere tre dokumenter ad gangen.

GPTZero tilbyder to premium-versioner for at tilfredsstille behovene hos undervisere og brugere, der ønsker at analysere millioner af ord hver måned: GPTZero Educator og GPTZero Pro. Tegngrænsen pr. dokument er højere i premium-versioner end i den gratis, og de lader dig analysere ubegrænsede filer i batch-tilstand.

Følg disse trin for at abonnere på disse premium-versioner:

  1. Gå til GPTZero Dashboard.
  2. Log ind med din eksisterende konto eller opret en ny konto.
  3. Efter at have logget ind, kan du opgradere til en premium-version efter eget valg.

Sådan bruges GPTZero til at registrere AI-genereret tekst

I modsætning til ChatGPT kræves ingen registrering på GPTZero. Du kan blot få adgang til værktøjet via hjemmesiden. Lad os se, hvordan du kan få adgang til og bruge det:

  1. Gå til GPTZero.
  2. Kopier og indsæt den tekst, du vil analysere, i boksen, eller upload en fil.
  3. Sæt kryds i boksen ved siden af Jeg accepterer Vilkår for brug.
  4. Klik på Få resultater boks.

Efter afslutningen af ​​scanningen vil GPTZero fortælle dig, om teksten er skrevet af et menneske eller genereret af kunstig intelligens.

Kan GPTZero genkende AI-genereret tekst korrekt?

For at teste, hvor præcist GPTZero registrerer AI-genereret tekst, analyserer vi tre tekster i værktøjet: tekst genereret af AI, menneskeskrevet tekst og AI-genereret tekst, der er blevet omskrevet af en anden værktøj. Lad os se, hvordan GPTZero reagerer på hvert input.

Vi vil inkludere instruktionerne om, hvordan vi udførte disse test, så du selv kan køre dem.

1. Analysen af ​​AI-genereret tekst i GPTZero

For at analysere AI-genereret tekst, lad os først generere teksten ved hjælp af ChatGPT, en AI-chatbot drevet af GPT-teknologi. For at gøre det skal du følge disse trin:

  1. Gå til OpenAI.
  2. Klik på Prøv ChatGPT knap.
  3. Log ind eller tilmeld dig en konto.
  4. Indtast en vilkårlig prompt for at generere en tekst.
  5. Kopier teksten genereret af værktøjet, når det er færdigt.
  6. Analyser teksten i GPTZero, som vi forklarede tidligere.

Du kan også bruge andet AI skriveværktøjer for at generere den tekst, du vil analysere.

GPTZero returnerede følgende output, da vi analyserede AI-genereret tekst i værktøjet:

I betragtning af at teksten var AI-genereret, har GPTZero korrekt forudsagt, at den sandsynligvis er blevet genereret af AI. For at gøre testen mere udfordrende, parafraserede vi teksten genereret af ChatGPT.

2. Analysen af ​​en parafraseret AI-genereret tekst i GPTZero

Du kan vælge mellem hundredvis af parafraserende værktøjer for at omskrive teksten. Til dette tilfælde brugte vi Scribbr. Hvis du vil bruge det samme værktøj, skal du følge trinene:

  1. Gå til Scribbr.
  2. Kopier den AI-genererede tekst, vi analyserede i GPTZero tidligere, og indsæt den i værktøjet.
  3. Klik på Parafrasere knap.
  4. Lad Scribbr omskrive teksten for dig.
  5. Kør GPTZero-testen igen efter parafrasering.

Her er GPTZeros output, da vi analyserede den parafraserede AI-genererede tekst:

En lille omskrivning har gjort det svært for GPTZero at afgøre, om teksten udelukkende er AI-genereret.

3. Analysen af ​​menneskeligt skrevet indhold i GPTZero

I nogle tilfælde returnerer værktøjer som GPTZero et falsk positivt resultat, hvilket betyder, at de anser noget for at være forkert, når det ikke er det. For at afgøre, om GPTZero også giver falske positiver, kørte vi tre tests i værktøjet, hvor vi analyserede tre forskellige menneskeskrevne tekster.

Ud af disse tre tests returnerede værktøjet én falsk positiv ved at angive, at en original tekst var AI-genereret; en gang lykkedes det ikke at lave en konklusion, og en gang identificerede den korrekt teksten som menneskeskrevet.

Hvis du vil teste menneskeligt skrevet indhold, kan du enten kopiere det fra en autentisk kilde eller selv skrive et par afsnit.

Skal du stole på GPTZero's resultater?

Baseret på vores test kan det være risikabelt at stole udelukkende på resultaterne af dette værktøj. Faktisk vises der en ansvarsfraskrivelse, hver gang du genererer et resultat ved hjælp af værktøjet, som advarer undervisere om ikke at stole på dette værktøjs resultater.

Så medmindre værktøjets udvikler garanterer, at dets resultater er idiotsikre, bør undervisere ikke stole fuldt ud på det. Hvorfor? Fordi det ville være uretfærdigt for en elev at få en dårlig karakter, blot fordi GPTZero returnerede en falsk positiv.

Ovenstående test blev udført i februar 2023. GPTZero er et ret nyt værktøj i øjeblikket, så dets nøjagtighed kan ændre sig over tid.

Stol ikke altid på AI-detektionsresultater

Som en potentiel modgift til OpenAIs GPT-teknologi har GPTZero et stort potentiale; den er dog stadig i sin vorden. På dette tidspunkt er det ikke helt troværdigt. Men vil GPTZeros hovedversion være i stand til at overvinde alle begrænsninger og fange AI-indholdet med nøjagtighed? For at finde ud af det, må vi bare vente.

Udover at give eleverne endnu en grund til at snyde med vurderinger, udgør ChatGPT også en alvorlig cybersikkerhedstrussel.