Mit über 100 Millionen aktiven Nutzern hat ChatGPT eine wahre Revolution in Sachen künstlicher Intelligenz ausgelöst. Zuvor haben wir erklärt, wie man diesen Chatbot mit dem Web verbindet und wie man eine mehr oder weniger flüssige Konversation führt... aber es gibt auch viele Konflikte. Einer davon ist die Verwendung von ChatGPT zum Schreiben von Aufsätzen, Lösen von Problemen und Vorbereiten von Prüfungen in der Schule. Die traditionelle Bildung fühlt sich bedroht, aber ihre „High-Tech-Lösung" ist nichts anderes, als künstliche Intelligenzen einzusetzen, um generierte Inhalte zu erkennen. Heute erkunden wir zwei kostenlose Optionen.
ChatGPT: Der neue „Rincón del Vago 2.0"?
Die Geschichte des „Rincón del Vago" ist wirklich fabelhaft. Das ursprüngliche Projekt wurde von zwei Studenten ins Leben gerufen, die es leid waren, gegen veraltete Programme anzukämpfen, und in kurzer Zeit erlangte das Portal Weltruhm und war in mehrere Skandale verwickelt von hohem Profil. Heute ist die Stimmung unter den Nutzern, dass ein „Rincón del Vago 2.0" entstanden ist... und es heißt ChatGPT. Obwohl niemand leugnet, dass der Chatbot eine enorme Anzahl von Fehlern macht (und einige sehr grobe), deuten die letzten Experimente darauf hin, dass er gut genug ist, um Prüfungen in verschiedenen Fächern zu bestehen... und die Lehrer sind nicht glücklich.
Lösungen? Die beliebteste Meinung ist, eine künstliche Intelligenz einzusetzen, um eine andere zu erkennen. Natürlich ist das nicht ohne Herausforderungen, und ein zu strenger Algorithmus könnte eine Welle falscher Positiver erzeugen. Wir haben jedoch bereits zwei Detektoren zur Verfügung. Der erste ist AI Text Classifier, entwickelt von OpenAI, demselben Schöpfer von ChatGPT. Und der zweite ist GPTZero, entworfen von Edward Tian von der Princeton University. Beide sind kostenlos, und sie verlangen nur die Anmeldung mit einem Konto (oder alternativen Anmeldedaten wie Google).
Detektoren für KI-Inhalte: Wie gut funktionieren sie?
Mein „Benchmark" basiert auf fünf Themen: Superdeterminismus, das Element Uran, die Caesar-Salat, der französische Dienst Minitel, und die Volksempfänger-Radio des Nazi-Deutschlands. Nachdem ich ChatGPT um eine Beschreibung zu jedem gebeten hatte, kopierte und fügte ich den Text jedes einzelnen (du kannst ihn hier sehen) in AI Text Classifier und GPTZero ein.
AI Text Classifier
Wir stoßen sofort auf eines der größten Probleme, mit denen diese Detektoren konfrontiert werden (und lösen müssen): Ihre Schlussfolgerungen sind begrenzt. AI Text Classifier sagte, dass seine Analyse über den Text zum Superdeterminismus „unclear" ist, also konnte er nicht klar bestimmen, ob er von einer künstlichen Intelligenz geschrieben wurde. Für den Text über Uran verwendete er den Ausdruck „likely", aber beim Caesar-Salat entdeckten wir eine weitere Einschränkung: Der Text muss 1.000 Zeichen oder mehr haben. Schließlich wurden die Texte über Minitel und Volksempfänger als „possibly" eingestuft. Die fünf Beschreibungen von AI Text Classifier sind „very unlikely", „unlikely", „unclear", „possibly" und „likely".
GPTZero
GPTZero ist in seiner Analyse etwas transparenter. Am unteren Rand der Oberfläche erklärt es, dass es zwei Indizes verwendet: einen für Perplexität und einen für „Explosion" oder Burstiness. Die Perplexität eines Dokuments ist das Maß für Zufälligkeit im Text, während die „Explosion" die Variation der Perplexität misst. Mit einer Kombination dieser Indizes bewertete GPTZero vier Texte mit „likely" und für den Text über Uran verwendete es den Ausdruck „may include parts". Was seine Einschränkungen betrifft, so hat GPTZero eine lockerere Position und verlangt vom Benutzer mindestens 250 Zeichen im Text.
Zusammenfassung
Fassen wir zusammen: Beginnen wir mit dem Offensichtlichen: Der Geist ist aus der Flasche entkommen. Millionen von Schülern auf der ganzen Welt werden versuchen, ChatGPT und andere Modelle zu nutzen, um ihre Verpflichtungen zu reduzieren. Einige Lehrer haben bereits mit einer „Rückkehr" zu mündlichen Prüfungen und handschriftlichen Arbeiten reagiert, aber das ist langfristig eine unhaltbare Strategie. Darüber hinaus kann die Information angepasst werden, und nichts hindert einen Schüler mit guten Englischkenntnissen daran, eine Zusammenfassung von ChatGPT zu erhalten, um dann eine eigene Übersetzung zu präsentieren, die praktisch nicht erkennbar ist.
In diesen Momenten weisen sowohl AI Text Classifier als auch GPTZero in die richtige Richtung, aber sie sind nicht in der Lage, den Lehrern Garantien zu geben, ganz im Gegenteil. Die Detektoren werden an Fähigkeit und Genauigkeit gewinnen, aber dasselbe wird mit den Chatbots passieren. Wenn man mir die Übertreibung erlaubt, „die Katze und die Maus" bereiten sich darauf vor, sich mit Algorithmen zu bewerfen. Fortsetzung folgt...
AI Text Classifier: Klicke hier
GPTZero: Klicke hier