Wie sicher erkennt GPTZero KI-generierte Texte?
Spätestens seit Anfang 2023 sind ChatGPT und andere GPT in aller Munde. Diese Programme sind über das Internet für die meisten Schüler:innen und für nahezu alle Studierende zugänglich. Für Schulen und Universitäten bedeutet dies, dass Sie bei Hausarbeiten, Referaten etc. gerne erkennen würden, ob die eingereichten Texte selbst oder von einer KI verfasst worden sind.
Aus diesem Grund interessieren sich viele Schulen und Hochschulen für Programme, die in der Lage sind, KI-generierte Texte zu erkennen. Ein solches Programm ist beispielsweise GPTZero. Doch wie gut ist die Erkennung?
Erkennung von menschlichen und AI-generierten Texten by GPTZero.
In diesem Applet siehst du in Grün die Wahrscheinlichkeit P("KI-generierte Texte als solche erkannt"), in Orange die Wahrscheinlichkeit P("KI-generierte Texte nicht als solche erkannt"), in Rot die Wahrscheinlichkeit P("von Menschen verfasste Texte als KI-Text etikettiert") und in Blau die Wahrscheinlichkeit P("von Menschen verfasste Texte als solche erkannt"). Diese Wahrscheinlichkeiten kannst du (indirekt) über die Schieberegler verändern.
- Erläutere, wie man im Quadrat die bedingten Wahrscheinlichkeiten P(B|A), P(B|nicht A), P(A|B) und P(A| nicht B) "sieht".
- Erläutere, woran man mit Hilfe des Applets stochastisch unabhängige Ereignisse erkennt.
Quellen
- Journal of Korean Medical Science: GPTZero Performance in Identifying Artificial Intelligence-Generated Medical Texts: A Preliminary Study. 2023 Sep 14;38(38):e319. 10.3346/jkms.2023.38.e319