Nøgle takeaways
- Plagiatet opdaget i et essay og en programmeringskode genereret af ChatGPT var relativt lavt, hvilket indikerer, at det typisk ikke kopierer sådant indhold fra onlinekilder.
- Plagiatraten var en smule højere, når man beregnede en matematisk løsning. Dette kan skyldes, at matematisk ræsonnement normalt er ens på tværs af kilder, så svarene kan matche andre materialer.
- ChatGPTs svar på spørgsmål om information, der er offentlig tilgængelig på blogs, viste højere plagieringsprocenter.
Mens ChatGPT kan besvare ethvert spørgsmål, du måtte have, spekulerer nogle brugere på, om dets svar indeholder plagiat. For at undersøge dette genererede vi fire forskellige typer tekster ved hjælp af ChatGPT og evaluerede derefter deres originalitet ved hjælp af forskellige plagieringsdetektionsværktøjer.
Hvad er plagiat præcist, og hvordan fungerer LLM’er?
For at afgøre, om ChatGPT er skyldig i plagiat, bør du først forstå, hvad der udgør plagiat. Plagiat involverer at bruge en anden persons ord, ideer eller arbejde uden korrekt tilskrivning. Dette inkluderer direkte kopiering af tekst fra en kilde uden citat eller nøje omskrivning af andres ideer uden anerkendelse.
ChatGPT er ligesom andre store sprogmodeller (LLM’er) trænet på store datasæt, for det meste fra offentligt tilgængeligt indhold. Men indsamling af så store mængder data rejser etiske spørgsmål, da de oprindelige skabere ikke har givet samtykke til, at deres arbejde bliver brugt til at træne LLM’erne. Dette fører til debatter om etikken og lovligheden af sådan praksis.
Selvom ChatGPT genererer svar baseret på de prompter, det modtager, ligger problemet i den bredere kontekst af, hvordan OpenAI (ChatGPTs udvikler) opnåede de data, der blev brugt til at træne det, hvilket involverer brug af indhold uden korrekt samtykke. Mange ser dette som plagiat og, for mange hjemmesider, indholdstyveri. Det er dog vanskeligt at udpege de nøjagtige kilder til plagiat.
I resten af denne artikel vil vi koncentrere os om, hvorvidt ChatGPT plagierer sit output fra andre kilder uden at dykke ned i detaljerne om, hvor dets svar kommer fra. Lad os tjekke originaliteten af ChatGPTs svar ved hjælp af forskellige plagieringsdetektionsværktøjer for at se, om chatbotten bruger tekst fra onlinekilder direkte.
Plagierer ChatGPT essays?
I dette første eksempel gav vi ChatGPT til opgave at komponere et 300-ords essay om psykiske problemer.
Efter det brugte vi forskellige plagiatdetektionsværktøjer til at vurdere originaliteten af essayet, der blev genereret af chatbot. Disse værktøjer omfattede Quetext plagiatchecker, Microsoft Words indbyggede plagiatchecker, Grammarlys plagiatchecker og Duplichecker plagiatscanner.
Microsofts indbyggede lighedskontrol rapporterede nul procent lighed med onlinekilder. Niveauerne af plagiat opdaget af andre værktøjer var også minimale: Grammarlys plagiatdetektor fandt fire procent, QueTexts plagiatdetektor fandt fem procent, og Duplicheckers plagiatscanner viste nul procent.
I betragtning af den lille procentdel af opdaget plagiat ser det ud til, at ChatGPT ikke direkte kopierer essays fra eksisterende kilder.
Plagierer ChatGPT kode?
For at vurdere om ChatGPT plagierer kode, gav vi chatbotten til opgave at skrive kode til en lommeregner i Python.
Efter dette gennemførte vi en plagiatkontrol af koden ved hjælp af en specialiseret programmeringsplagiatkontrol kaldet Dolos, som opdagede nul procent lighed. Da vi også tjekkede koden ved hjælp af generelle tekstplagiatdetektionsværktøjer nævnt ovenfor, var resultaterne konsistente, og næsten ingen af programmerne opdagede mere end fire procent plagiat.
Da vi bad ChatGPT om at generere en kode til en lommeregner fra forskellige konti, så svarene anderledes ud. Denne observation og resultaterne fra plagiatkontrollen indikerer, at ChatGPT ikke blot replikerer koder fra onlinekilder. I stedet trækker den på det datasæt, den blev trænet i, til at generere kode uafhængigt.
Plagierer ChatGPT matematiske løsninger?
Under den tredje test gav vi chatbotten til opgave at løse et matematisk problem og give en detaljeret begrundelse for hvert trin.
For at kontrollere originaliteten af svaret testede vi dets output ved hjælp af flere akademisk-specifikke plagiatdetektionsværktøjer, herunder PapersOwl plagiatchecker, AI-drevet Trinka plagiatscanner samt generelle plagiatkontrolværktøjer såsom Grammarly, Duplichecker og QueText.
PapersOwls plagiatdetektor indikerede en næsten 46 procent lighed mellem chatbottens genererede ræsonnement og onlinekilder. På samme måde rapporterede Trinka plagiatdetektoren mere end 10 procent lighed. Derudover opdagede Grammarlys plagiatdetektor 14 procent lighed, QueText fandt 17 procent, og Duplichecker viste syv procent.
Påvisningen af højt plagiat i det genererede svar tyder ikke på, at chatbot’en direkte kopierer begrundelse for matematiske spørgsmål fra onlinekilder. Dette skyldes primært, at løsninger og begrundelser for matematiske problemer ofte er standard og bredt tilgængelige online.
Så selvom ChatGPT kommer med sine egne svar, er det muligt at finde de samme svar og ræsonnementer online, hvilket kan have tilføjet de høje plagieringsprocenter.
Bruger ChatGPT indhold fra blogs?
For at kontrollere, om ChatGPT bruger indhold fra onlineblogs, bad vi chatboten om at give tip til at opretholde en bærbar batteritilstand.
Microsoft Word registrerede 10 procent plagiat i den genererede tekst. Duplichecker viste fire procent, Grammarlys plagiatchecker viste 14 procent, men Quetext fandt 58 procent plagiat i teksten. Efter at have gravet videre, svarede noget af teksten i chatbot’ens svar til indholdet på nogle blogs.
For at dobbelttjekke, om afsløringen af høj plagiat ikke kun var tilfældig, stillede jeg chatbotten nogle flere spørgsmål om information, der er let tilgængelig online. Plagiatprocenten i de genererede svar var meget højere. Baseret på vores test ser det ud til, at chatbotten nogle gange bruger sætninger og tekst fra onlinekilder, hvilket er ret overraskende.
Skal du bruge ChatGPT til arbejde eller skole?
Selvom mange gratis online plagiatcheckere ikke har opdaget større plagiat i ChatGPTs svar, bør du ikke bruge det til akademiske eller professionelle formål.
Brug ikke ChatGPT til dine skoleopgaver, hvis du er studerende. Instruktører kan bruge værktøjer som GPTZero og Turnitins AI-skrivedetektor til at spotte AI-genereret indhold. Hvis dit arbejde bliver markeret som AI-genereret af sådanne værktøjer, kan du fejle opgaven eller endda blive bortvist fra skolen. Selvom mange GPT-detektionsværktøjer specifikt angiver, at de ikke bør bruges til dette formål, er de det, og det kan bringe dig i problemer. For ikke at nævne, du snyder virkelig kun dig selv ved ikke at studere emnet ordentligt.
Kan du bruge chatbotten til at forbedre din arbejdsindsats? Det afhænger af. Hvis du ønsker at forbedre dit skriveflow i e-mails eller andre tekstformer, kan brug af AI spare dig for tid og kræfter. Du bør dog kun bruge det som et værktøj til at hjælpe dig med dine opgaver i stedet for at stole på, at det udfører hele jobbet for dig.
I modsætning hertil, hvis dit job, som professionel skrivning, forbyder brug af sådanne værktøjer, bør du helt undgå at bruge ChatGPT eller ethvert andet værktøj.
Forhåbentlig har vores test givet dig indsigt i, i hvilket omfang ChatGPT kan trække på ressourcer, der er tilgængelige på nettet. Det er dog vigtigt at bemærke, at vi har brugt gratis plagiatværktøjer og kun testet et begrænset datasæt. Så selvom vores resultater kan være nyttige, bør de ikke tages som absolutte fakta.
Støt vores arbejde ❤️
Hvis du kunne lide denne artikel, kan du overveje at give drikkepenge for at hjælpe os med fortsat at udgive kvalitetsindhold.
