DetectGPT vs. ChatGPT – KI-basierte Texte entlarven
Die Detektionssoftware analysiert das zugrundeliegende Sprachmodell eines Textes. | Getty Images
Mensch oder Maschine?
Ein Forschungsteam von der Standford University in Kalifornien entwickelte eine erste Software, die Texte von ChatGPT erkennen soll. DetectGPT – wie sollte die Software auch anders heißen – kann laut Anbieter sogar einzelne Sätze oder ganze Aufsätze analysieren und entschlüsseln.
ChatGPT ist inzwischen fast jedem ein Begriff. Auch der Einfluss des allwissenden Schreibpartners auf die Bildungslandschaft wird breit diskutiert. Die Frage nach einer Software, die KI-basierte Texte entlarvt, liegt daher fast schon auf der Hand. Eric Mitchell und sein Forschungsteam haben DetectGPT entwickelt, sodass jeder selbst überprüfen kann, ob ein vorliegender Text aus der Feder einer KI oder eines Menschen stammt.
Wie funktioniert DetectGPT?
Bei künstlichen Intelligenzen wie ChatGPT basiert das Texten im Grunde auf statistischer Wahrscheinlichkeit in puncto Wortabfolge. Mehr zu ChatGPT und dessen Funktion erfahren Sie hier. Die Detektionssoftware analysiert deshalb das zugrundeliegende Sprachmodell eines Textes oder eines Satzes und weiß so, ob es sich um einen menschlichen oder künstlichen Text handelt.
Bei KI-basierten Texten findet DetectGPT eine auffallend hohe statistische Wahrscheinlichkeit in den Wörtern. Menschen wiederum wählen oft originelle oder „weniger wahrscheinliche“ Wörter beim Texten, was zu einem niedrigeren Wahrscheinlichkeitswert führt. Bei der Textüberprüfung erstellt das Programm im Hintergrund viele verschiedene mehr oder weniger „wahrscheinliche“ Textvarianten. Als Resultat kann DetectGPT anzeigen, ob bereits der Text vorliegt, welcher statistisch am wahrscheinlichsten wäre. Wenn ja, handelt es sich um einen KI-basieren Text. Wenn nein, deklariert die Software den Text als menschlich. Ein Vorteil von DetectGPT ist, dass das Programm – im Gegensatz zu anderen KI-basierten Detektionsmethoden – nicht durch große Text- und Datenmengen trainiert werden muss, um zu funktionieren
Wer seinem technischen Interesse an KI nachkommen möchte und über gute Englischkenntnisse verfügt, kann im offiziellen Paper des Forschers nachlesen, wie DetectGPT genau funktioniert.
Ist das Geheimnis um ChatGPT jetzt gelüftet?
DetectGPT steckt noch in den Kinderschuhen. Hundertprozentig sicher funktioniert die Software noch nicht und es kommt manchmal zu Fehlinterpretationen. Ein weiterer Nachteil: DetectGPT entlarvt nur Texte von ChatGPT 2. Bisher gibt es noch keine offizielle Version des Programms, doch seit Anfang Februar existiert eine erste Testversion auf der offiziellen Website des Forschungsteams. Hier können Texte probeweise eingefügt und analysiert werden. Der Hinweis zur Testversion auf der Webseite ist aber eindeutig: „Diese Demo ist experimentell; ihre Vorhersagen sollten nicht zur Rechtfertigung von Entscheidungen in der realen Welt herangezogen werden.“
Textquellen
- Süddeutsche Zeitung, Hauptausgabe, 23.02.2023
- HAI, Website Standford Universität https://hai.stanford.edu/news/human-writer-or-ai-scholars-build-detection-tool