▸ KI generierte Texte erkennen: Anleitung für Einsteiger

Es gibt einige Gründe, warum das nicht so leicht ist und es wird immer schwieriger werden:

Ständige Weiterentwicklung: Moderne KI-Systeme, insbesondere solche, die auf neuronalen Netzwerken basieren, sind darauf trainiert, menschliche Schreibstile und -muster zu imitieren. Sie lernen aus riesigen Mengen von Daten und können daher menschenähnliche Texte produzieren, die schwer von denen eines Menschen zu unterscheiden sind. Wenn du den Schreibstil anpassen möchtest, kannst du das bereits jetzt tun. Wie das geht, habe ich in meinem Artikel: ➥ ChatGPT: Prompts verbessern beschrieben.

Verständnis bei der Kommunikation: KI kann nicht nur syntaktische Muster lernen, sondern auch semantische Kontexte verstehen und anwenden. Wenn du längere Texte generiert und mehrere Fragen dazu gestellt hast, merkst du an den Antworten, dass sich vieles auf das vorher geschriebene bezieht. Auch das Thema wird meist erkannt. Dadurch wird der Text einzigartiger.

Grammatik- und Rechtschreibfehler: Vielleicht erkennt man im Alltag die Texte einer künstlichen Intelligenz daran, dass es so gut wie keine Grammatik- oder Rechtschreibfehler gibt. Spaß beiseite. Die „Kinderkrankheiten“, als die KI noch fehlerhafte Text abgeliefert hat, sind weitestgehend vorbei.

Überzeugende Erzählungen: Einige KI-Modelle können überzeugende Geschichten erzählen. Diese klingen meist menschenähnlich. Leider haben sich oft falsche Informationen im Text „eingeschlichen“. Ich kann dir nur empfehlen, die Sachverhalte immer zu überprüfen.

▸ Für wen ist es wichtig, KI-Texte zu erkennen?

Bereits jetzt gibt es Tools, die die Erkennung von KI-Texten erleichtern. Einige davon stelle ich dir hier vor und beschreibe, wie gut die Texte erkannt werden. Natürlich sind die Detektoren auch wiederum eine KI.

Es wird ein ständiges Katz und Maus Spiel werden, vermute ich. Die KI-generierten Texte werden besser und die Tools zur Erkennung auch. Ich habe die nachfolgenden KI-Text-Erkenner mit drei verschiedenen Texten getestet. Zwei KI-Texte, ein in Teilen veränderter und ein von mir geschriebener Text. Die Bewertung bezieht sich auf die Erkennungsrate. Hinweis: wie immer, sei vorsichtig, dass du keine sensiblen Texte dort eingibst.

GPTZero behauptet von sich, dass die KI-Text-Erkennung von mehreren unabhängigen Quellen als der genaueste KI-Detektor bestätigt wurde. Ob das stimmt, kann ich nicht nachprüfen. Das Tool soll speziell für Schreibarbeiten von Schülern und akademische Prosa optimiert worden sein.

ChatGPT, GPT-3, GPT-2, LLaMA und weitere Modelle, die darauf basieren

Alle Text wurden als vom Menschen geschrieben erkannt. Das stimmt leider nicht. Die KI Texte wurden auch in Teilen nicht erkannt. Durchgefallen

Zusätzlich zu der Einordnung, ob es sich um einen durch KI geschriebenen Text handelt, werden die verdächtigen Textpassagen gelb markiert. Die Analyse von bis zu 5.000 Zeichen ist kostenlos.

Meine Bewertung: ★ ☆ ☆ ☆ ☆

Versuche es selbst einmal. Vielleicht ist das Ergebnis bei dir ein anderes. ➥ GPTZero.me

Scribbr ist eine Online-Plattform, die eine Reihe von Dienstleistungen für Studierende und Akademiker anbietet. Sie konzentriert sich auf das Lektorat und Korrekturlesen von wissenschaftlichen Arbeiten wie Hausarbeiten, Bachelorarbeiten und Masterarbeiten. Darüber hinaus bietet Scribbr eine Plagiatsprüfung an. Interessant finde ich auch den Zitiergenerator. Damit kannst du Zitate und Literaturverzeichnisse in verschiedenen Stilen erstellen. Und natürlich findest du dort auch die Erkennung von KI-Texten.

Es wird nur GPT-3 und GPT-2 unterstützt.

Von den KI-Texten wurde keiner erkannt.

Du kannst bis zu 500 Worte kostenlos eingeben. Sribbr bietet noch einiges mehr an, wie zum Beispiel ein Lektorat oder eine Plagiatsprüfung. Diese kostet dann bei bis zu 7.499 Wörter knapp 18 Euro.

Meine Bewertung: ★ ☆ ☆ ☆ ☆

Link zum Anbieter: ➥ Scribbr.de

Smodin ist eine Online-Plattform, die unter anderem Textumformulierungen, Plagiatsprüfung, KI-gestütztes Schreiben und vieles mehr anbietet. Smodin will Nutzerinnen und Nutzer helfen, schneller zu recherchieren, kreative Hindernisse zu überwinden, detaillierte Antworten auf Fragen zu erhalten und damit professionelle Dokumente zu erstellen. Unter anderem kannst du dort auch prüfen, ob ein Text von der KI geschrieben wurde.

Texte von ChatGPT, Bard oder anderen KI-Tools

Die Ergebnisse waren wirklich erstaunlich. Bei den KI - Texten wurden die Passagen farblich markiert und die Erkennung schwankte zwischen 53% und 80%. Die menschlichen Texte wurden auch erkannt.

Kostenlos und ohne Account kannst du 5 Texte die Woche prüfen lassen. Registrierst du dich, sind das 5 pro Tag. Auch kostenlos. Du kannst bis zu 5.000 Zeichen eingeben.

Meine Bewertung: ★ ★ ★ ★ ★

Link zum Anbieter: ➥ Smodin

Ein interessantes Projekt gibt es auf Github. Der Originaltitel lautet: Binoculars: Zero-Shot Detection of LLM-Generated Text. Diese KI-Texterkennung geht einen anderen Weg und ich finde den sehr interessant.

Es wird oft angenommen, dass es schwierig ist, Texte zu erkennen, die von modernen großen Sprachmodellen generiert werden, da sowohl LLMs als auch Menschen eine Vielzahl von komplexen Verhaltensweisen aufweisen können. Das Besondere an Binoculars ist, dass keine modellspezifischen Modifikationen erforderlich sind. Nach eigenen Angaben erkennt „Binoculars“ über 90% der von ChatGPT (und anderen LLMs) generierten Proben bei einer Falsch-Positiv-Rate von 0,01%, obwohl es nicht auf ChatGPT-Daten trainiert wurde.

Wenn du mehr darüber nachlesen möchtest, wie das funktioniert, schau dir die Seite auf GitHub an. Falls du es einmal ausprobieren möchtest, habe ich eine Seite bei huggingface.co gefunden.

Modelle, die auf LLMs basieren, z.B. ChatGPT

Die von ChatGPT generierten Texten wurden erkannt. Der Text generierte Text von Copilot allerdings nicht.

Ein interessanter Ansatz mit mittleren bis guten Ergebnissen.

Meine Bewertung: ★ ★ ★ ★ ☆

Link zum Code: ➥ GitHub

Aktuelle Meldung (Zitat OpenAI): Ab dem 20. Juli 2023 ist der KI-Klassifikator aufgrund seiner geringen Genauigkeit nicht mehr verfügbar. Wir arbeiten an der Einbeziehung von Feedback und erforschen derzeit effektivere Verfahren zur Herkunftsbestimmung von Text. Außerdem haben wir uns verpflichtet, Mechanismen zu entwickeln und einzusetzen, die es den Nutzern ermöglichen zu erkennen, ob Audio- oder visuelle Inhalte von KI stammen.

Eine 100%ige Erkennung von KI-Texten gibt es nicht. Die Werkzeuge, die ich ausprobiert habe, mit Ausnahme von Smodin und Binoculars, waren nicht sehr gut in der Erkennungsrate. Vielleicht liegt das an meinen ausgewählten Texten oder aber an der deutschen Sprache. Ich vermute, die Anbieter arbeiten mit einem Übersetzungstool.

Erstaunlich und sehr gut fand ich die Ergebnisse bei Smodin. Hier wurden die „verdächtigen“ Textpassagen markiert. Zusätzlich gibt es eine prozentuale Einschätzung, ob es sich um einen durch die KI generierten Text handelt.

Beobachten sollte man auch die Entwicklung von Binoculars. Ein interessanter Ansatz. Ob die KI-Texterkennung allerdings sehr gut ist, wird sich noch zeigen.

Solch eine Bewertung durch das Tool und die Erfahrung, die man mit der Zeit bei KI-Texten bekommt, können zu einer guten Erkennungsrate führen. Wenn die Texte allerdings etwas verändert wurden, wird es schwieriger. Aber dann ist der Text ja auch zu einem gewissen Anteil vom Menschen geschrieben.

Kurz: Es bleibt spannend, wie sich das weiter entwickelt und ob wir von KI-Texten überschwemmt werden. Oder es vielleicht schon sind.

Hinweis: Du willst sicherlich manchmal wissen, ob die Fotos oder Bilder, die du siehst, von der KI generiert wurden. Es gibt jetzt eine Initiative von Adobe, um diese Bilder mit einem fälschungssicheren Wasserzeichen zu versehen. Das Ganze heißt Content Credentials und du kannst mehr darüber in meinem Artikel: ➥ Inhaltsnachweise und digitale Inhalte nachlesen.