Funktionieren KI-Schreibdetektoren tatsächlich? 5 auf Genauigkeit getestete Werkzeuge

4

Wir leben in einer Zeit, in der ein einfaches Scrollen durch soziale Medien Paranoia auslösen kann. Hat das ein Mensch geschrieben? Oder hat es ein LLM ausgespuckt?

Die Antwort ist wichtig. Ganz gleich, ob Sie Aufsätze benoten, Autoren einstellen oder es einfach nur satt haben, sterile Inhalte online zu lesen, Sie wollen die Wahrheit wissen. Angeblich hinterlässt KI Fingerabdrücke. Der Geviertstrich ist der übliche Verdächtige. Monotoner Ton. Der andere.

Aber können Tools diese Tics tatsächlich zuverlässig erkennen?

Ich habe fünf beliebte KI-Detektoren einem kontrollierten Experiment unterzogen. Auf der einen Seite: vier Artikel, die ich von Hand geschrieben habe (keine Bots). Auf der anderen Seite: 150-Wörter-Intros, erstellt von ChatGPT, Gemini und Claude basierend auf meinen Artikeltiteln.

Die Ergebnisse? Einige Werkzeuge haben es geschafft. Andere haben das Ziel deutlich verfehlt.

Pangram: Der selbstbewusste Checker

Pangram behauptet, der Detektor zu sein, der „tatsächlich funktioniert“. Es ist nicht für immer kostenlos, aber die kostenlose Stufe ermöglicht vier Schecks pro Tag. Bezahlte Pläne beginnen bei 20 $.

Folgendes ist passiert:
* Mein Schreiben: 100 % menschlich. Hohes Selbstvertrauen.
* ChatGPT/Claude-Text: 100 % KI.

Pangram hat jede Probe korrekt identifiziert. Es wurden sogar bestimmte Werbegeschenke hervorgehoben, wie die sich wiederholende Struktur „von dem Moment an, in der Sie…“ in den KI-Beispielen.

Urteil: 4/4 richtig.

Grammarly: Der Grammatikriese betritt den Chat

Sie verwenden wahrscheinlich Grammarly für Tippfehler. Jetzt wird auch KI angezeigt. Kostenlose Konten erhalten täglich drei Schecks. Bezahlte Pläne beginnen bei 12 $.

Meine Proben? Null Prozent KI. Keine Muster. Sauberer Schiefer.

Die KI-Proben? Nicht so schwarz-weiß.
* Claude: 68 % KI.
* Zwillinge: 66 % KI.

Grammarly hat die KI-Fingerabdrücke entdeckt. Aber es war nicht völlig überzeugt. Es erkannte die Muster, zögerte jedoch bei der Entscheidung. Trotzdem hat es den richtigen Anruf getroffen.

Urteil: 4/4 richtig.

GPTZero: Den Menschen bewahren

Die Mission von GPTZero besteht darin, „das Menschsein zu bewahren“. Kostenlose Benutzer können 10.000 Wörter pro Monat scannen. Bezahlte Pläne beginnen bei etwa 24 $.

Beim dritten Werkzeug wurde ich übermütig. Mein Schreibstil muss eindeutig nicht-KI sein. GPTZero stimmte zu. „Ich bin sehr zuversichtlich, dass dieser Text völlig menschlich ist.“

Als man die KI-Proben verfütterte, fing es sie auch. Es wurde sogar darauf hingewiesen, welche Sätze am roboterhaftesten aussahen. Es fiel mir schwer, das Muster zu erkennen. Vielleicht ist es da. Vielleicht auch nicht. Aber das Tool hat sie nicht verfehlt.

Urteil: 4/4 richtig.

Scribbr: Der freie Ausreißer

Scribbr bietet Bearbeitungsdienste und einen kostenlosen Detektor. Kein Konto erforderlich. Einfach einfügen und prüfen.

Mein Schreiben? Als 100 % menschlich eingestuft. Gut.

Die KI-Proben? Auch als 100 % von Menschen geschrieben gekennzeichnet.

Hier ist es kaputt gegangen. Scribbr behauptete, die ChatGPT- und Claude-Texte seien völlig menschlich. Das Tool schien sich seiner falschen Antwort sehr sicher zu sein. Was auch immer sein Algorithmus ist, er braucht ein Update.

Urteil: 2/4 richtig.

Copyleaks: Der halbrechte Anwärter

Copyleaks prüft Texte, Bilder und Videos. Vier kostenlose Scans. Bezahlte Stufen beginnen bei 17 $.

Mein Text? 100 % menschenfrei.

Der KI-Test? Gemischte Tüte.
* Zwillinge: 100 % KI (richtig).
* Claude: 0 % KI (falsch).

Copyleaks hat einen Bot erwischt, den anderen jedoch durchgehen lassen. Je nachdem, welches Modell Sie testen, scheint es Probleme mit der Kalibrierung zu geben.

Urteil: 3/4 ​​richtig.

Der letzte Imbiss

Ich war mir nicht sicher, was mich erwarten würde. Deshalb habe ich sie getestet. Aber jetzt? Es ist klarer.

KI-Detektoren sind nicht perfekt.

Sie haben konsequent daran gearbeitet, meine menschliche Schrift zu identifizieren. Jedes einzelne Tool hat meinen Text als menschlich gekennzeichnet. Es scheint einfacher zu sein, zu bestätigen, was keine KI ist, als was es ist.

Das Gegenteil war nicht der Fall. Scribbr ist völlig gescheitert. Copyleaks hat die Hälfte der Bots übersehen. Die anderen waren in dieser winzigen Probe perfekt.

Wenn Sie es ernst meinen, KI-Schreiben zu erlernen, vertrauen Sie nicht einem einzigen Tool. Verwenden Sie zwei oder drei im Tandem. Suchen Sie nach Mustern. Und vielleicht ein Upgrade zur detaillierten Begründung, wenn viel auf dem Spiel steht.

Gibt es eine definitive Aussage? Vielleicht. Oder vielleicht ist es nur ein Katz-und-Maus-Spiel, das sich mit jedem Modell-Update ändert.

Offenlegung: Die Muttergesellschaft von Popular Science verklagte OpenAI im April 2024 wegen Urheberrechtsverletzung. Dieser Kontext kann die Landschaft beeinflussen, obwohl die oben genannten Testergebnisse die Leistung der Tools isoliert widerspiegeln.

Попередня статтяWie die KI-Optimierung zu einer Verschlechterung der NAEP-Score-Stagnation führen kann