Pangram 4 im Test: Was die Aussage „1 von 24.000“ wirklich bedeutet

Was Pangram 4 tatsächlich ist

Pangram Labs macht genau eine Sache: einen Klassifikator, der ein Dokument liest und angibt, welche Teile davon wahrscheinlich von einem Sprachmodell geschrieben wurden. Pangram 4 ist die vierte Generation, und der Launch-Beitrag nennt es „unseren bislang leistungsfähigsten und genauesten KI-Detektor“.

Das Unternehmen brachte das Produkt gemeinsam mit einer am selben Tag angekündigten Finanzierungsrunde über 9 Mio. $ unter Führung von Menlo Ventures heraus. Mitgegründet wurde es von Max Spero, CEO, und Bradley Emi, CTO. Sie lernten sich in einem Erstsemester-Wohnheim in Stanford kennen. Speros X-Bio lautet „slop janitor @pangram“, was ungefähr zeigt, wie das Unternehmen seine eigene Aufgabe sieht.

Die Produktfläche ist breiter, als der Name vermuten lässt. Es gibt die oben gezeigte Web-App, eine Browser-Erweiterung, eine Google Docs-Integration, einen in kostenpflichtigen Plänen enthaltenen Plagiatsprüfer, eine API und, seit demselben Launch, einen Bilderkennungs-Detektor in der Research-Preview, der 99,8 % Genauigkeit beansprucht. Namentlich genannte Kunden auf der Startseite sind Substack, Quora, Google Classroom und Wiki Education. Der Substack-Rollout ist später wichtig, denn er erklärt, warum die meisten Beschwerden aus 2026 von Newsletter-Autoren statt von Studierenden kommen.

Wer neu in diesem Bereich ist, findet die Kurzfassung des Mechanismus in meinem Leitfaden zu KI-Content-Detektoren. Wer Tools vergleicht statt einen einzelnen Test zu lesen, findet auch eine laufend gepflegte Liste von Erkennungstools.

Zwei weitere Tools tauchen in denselben Gesprächen ständig auf. Writers Content-Detektor ist das kostenlose Tool, das die meisten zuerst ausprobieren, und meine Notizen zur Auswahl eines Erkennungstools zeigen, worauf man achten sollte, bevor man für eines davon bezahlt.

Wie Pangram 4 ein Dokument liest

Das ist der Teil, den ich wirklich interessant fand, denn Pangram 4 ist nicht ein einzelner Klassifikator mit einer einzelnen Ausgabe. Die Model Card beschreibt eine Sparse-Mixture-of-Experts-Basis mit vier separaten aufgesetzten Köpfen: einem 15-Klassen-Kopf, der den gesamten KI-Anteil in einem Fenster schätzt, einem Drei-Klassen-Kopf, der jedes einzelne Token als Mensch, KI-unterstützt oder KI-generiert klassifiziert, einem binären Kopf, der prüft, ob das Segment gemischt ist, und einem Vier-Klassen-Humanizer-Kopf.

Lange Dokumente werden in überlappende 512-Token-Fenster zerlegt. Jedes Fenster wird bewertet, ein Conditional Random Field fügt die tokenweisen Entscheidungen zu einer einzigen Etikettenfolge über das gesamte Dokument zusammen, und ein Nachbearbeitungsschritt richtet das Ergebnis an Satzgrenzen aus, mit einem zusammenhängenden Mindestlauf von etwa zwei Sätzen. Das ist eine echte Verbesserung gegenüber Pangram 3, das Text während der Vorverarbeitung in Blöcke zerteilte und gröbere Blöcke lieferte.

Das erklärt auch ein Verhalten, das ständig gemeldet und als Bug gedeutet wird. Weil die Bewertung fensterweise geschieht und danach glattgezogen wird, kann derselbe Absatz je nach Umgebung eine andere Farbe zurückbekommen. Pangram nennt das selbst unter den eigenen Einschränkungen: „Gelegentlich erhält ein Teilbereich eines längeren Textes je nachdem, ob er isoliert oder im umgebenden Dokument eingebettet betrachtet wird, unterschiedliche Vorhersagen.“ Das ist ehrlich, und es ist auch der Mechanismus hinter der Hälfte der verwirrten Forenbeiträge über Pangram.

Zwei API-Details sollte man kennen, bevor man darauf etwas aufbaut, denn sie werden leicht falsch verstanden. Der ai_assistance_score wird als P(AI-Generated) + 0.5 × P(AI-Assisted) berechnet, und die Model Card sagt klar, dass er „nicht die Wahrscheinlichkeit des angezeigten diskreten Labels“ sei. Das Feld confidence liefert High, Medium oder Low, und die Karte sagt, es „ist keine kalibrierte Wahrscheinlichkeitsschätzung“. Man kann confidence: High also nicht als 95%ige Sicherheit behandeln. Wer die Erkennung in einen Workflow einbaut, für den ist genau diese Unterscheidung entscheidend. Meine Notizen zum Aufbau einer KI-Content-Pipeline zeigen, wo ein solches Gate eigentlich hingehört.

Die Zahlen, die Pangram veröffentlicht

Man muss anerkennen: Pangram veröffentlicht mehr eigene Evaluationsdetails als jeder andere Detektor, den ich mir angesehen habe, inklusive eines technischen Berichts und eines arXiv-Papers. Hier die wichtigsten Zahlen.

Die Falsch-Negativ-Tabelle nach Generator ist das zitierfähigste Element der Model Card. Grok 4.3 ist für Pangram 4 mit 0,605 % das schwerste zu erkennende Modell, Claude Haiku 4.5 mit 0,130 % das leichteste. Gemini verbesserte sich zwischen den Versionen am stärksten, von einer Familien-Verpassrate von 5,138 % bei Pangram 3.3.2 auf 0,498 %. Pangram berichtet außerdem, es gebe keine bedeutsame Korrelation zwischen dem Erscheinungsdatum eines Modells und dessen Erkennbarkeit, eine kühnere Aussage, als sie klingt, und sie widerspricht der üblichen Annahme, dass neuere Modelle schwerer zu erkennen seien.

Eine Ungenauigkeit, die man beim Zitieren kennen sollte: Der Kernergebnisblock des technischen Beitrags gibt die Falschmelderate bei KI-Überarbeitung mit 0,009 % an, während ein weiter unten stehender Abschnitt auf derselben Seite 0,01 % nennt. Klein, aber genau die Art von Detail, die dazu bringt, den Rest noch einmal zu prüfen.

Wo die Schlagzeilenzahl nicht mehr trägt

Jetzt zu dem Teil, mit dem eine faire Rezension meiner Meinung nach führen sollte, statt ihn zu verstecken.

Jede Zahl oben ist eine englische Zahl, gemessen an langformatiger Prosa in vollständigen Sätzen. Pangram veröffentlicht auch die Tabelle nach Sprache, und die Streuung ist groß.

Über 18 Sprachen liegt die mehrsprachige Falsch-Negativ-Rate bei 1,24 % gegenüber 0,3396 % bei Englisch. Pro Sprache reicht sie von Tschechisch mit 0,2760 % bis zu Urdu mit 5,3169 %, ungefähr dem 16-Fachen des englischen Werts. Bei den Falsch-Positiven sieht es deutlich besser aus, die meisten Sprachen liegen bei 0,0000 %, Ukrainisch ist mit 0,0361 % das schlechteste, die mehrsprachige Schwäche liegt also bei den Verpassungen und nicht bei falschen Beschuldigungen. Pangram nennt 24 unterstützte Sprachen und verschweigt davon nichts, was ich anerkenne. Aber „ein Fehlalarm bei 24.000“ und „wir unterstützen 24 Sprachen“ sind zwei wahre Aussagen, die viele als eine einzige Aussage lesen werden, obwohl sie es nicht sind.

Dann gibt es noch die Liste der Einschränkungen, direkt aus der Model Card zitiert:

"Short conversational replies, answers to questions with a single factual answer, source code, tables of contents, reference sections, templated or automated writing, instructions and technical manuals, and text dominated by mathematical notation are outside the model's primary scope or may be more susceptible to errors."

Pangram 4 model card

Lies das noch einmal mit einem echten Workflow im Kopf. Support-Textbausteine sind Vorlagentexte. Release-Notes sind nahe an technischen Handbüchern. Eine Produkt-FAQ sind Antworten auf Fragen mit einer einzigen faktischen Antwort. Alles unter 50 Wörtern wird gar nicht erst bewertet. Pangram empfiehlt außerdem, Kopf- und Fußzeilen vor dem Scannen zu entfernen, und bevorzugt .docx oder reinen Text gegenüber PDF, weil das PDF-Parsing Artefakte einführt.

Bevor man also auf ein Pangram-Urteil hin handelt, lohnt es sich, dieselben vier Prüfungen durchzugehen, die ich selbst mache:

Was unabhängige Forscher tatsächlich fanden

Ich habe nach jemandem außerhalb von Pangram Labs gesucht, der das gemessen hat. Die Antwort ist interessanter als entweder „es ist verifiziert“ oder „es ist Marketing“.

Drei unabhängige Teams haben Pangram getestet, und keines von ihnen maß für Pangram eine höhere Falsch-Positiv-Rate als für irgendeinen anderen kommerziellen Detektor. In zwei der drei Fälle war es eindeutig am niedrigsten; in der VUB-Studie lag es mit 0 % gleichauf mit Turnitin und Copyleaks. Das ist ein konsistentes Ergebnis über unterschiedliche Korpora und unterschiedliche Metriken.

• Jabarian und Imas an der UChicago Booth (NBER Working Paper 34223) testeten 1.992 menschliche Textpassagen von vor 2020 plus die KI-Gegenstücke über sechs Genres und vier Modelle und erklärten keine Interessenkonflikte und keine Finanzierung durch Pangram. Pangram erreichte eine Falsch-Positiv-Rate von 0,001 gegenüber 0,002 bei Originality.ai und 0,007 bei GPTZero und war „das einzige Tool, das eine strenge Obergrenze (FPR ≤ 0,005) erfüllte, ohne Genauigkeit zu opfern“.
• Eine peer-reviewte Studie der Vrije Universiteit Brussel im International Journal for Educational Integrity testete 160 wissenschaftliche Arbeiten von jeweils mindestens 4.000 Wörtern. Bei vollständig menschlich geschriebenen Arbeiten von Doktoranden lieferte Pangram 0 % KI-Anteil. Bei vollständig von KI geschriebenen Arbeiten produzierte Turnitin in 100 % der Fälle Falsch-Negative, und Pangrams Median lag am nächsten an der Wahrheit. Ihr Fazit: „Von den vier hier untersuchten KI-Erkennungstools lieferte zu diesem Zeitpunkt nur [Pangram] zufriedenstellende Ergebnisse.“
• Epoch AI testete Pangram 3.3.2 an 495 menschlichen Textpassagen von 99 namentlich genannten Autoren von vor 2022 und erhielt 0 Falsch-Positive.

Die Richtung ist also klar. Jetzt zur Rechenarithmetik, den Teil, den niemand laut ausspricht.

Keine unabhängige Studie ist groß genug, um eine so kleine Zahl wie 0,0041 % zu prüfen. Null Falsch-Positive in 1.992 Passagen begrenzt die Rate auf etwa 0,15 %. Null in 495 begrenzt sie auf etwa 0,6 %. Jeder veröffentlichte unabhängige Datensatz ist um eine bis zwei Größenordnungen zu klein, und das ist eine Aussage über Stichprobengrößen, keine Kritik an irgendjemandes Methodik.

Und keiner von ihnen testete Pangram 4. Epoch AI nennt explizit Version 3.3.2. Die UChicago-Studie lief Mitte 2025. Pangram 4 erschien am 29. Juli 2026, das Modell, das die Schlagzeilenzahl trägt, wurde also von niemandem außerhalb des Unternehmens benchmarkt.

Drei weitere Erkenntnisse sollten Käufer abwägen:

• Epoch AI fand heraus, dass Pangram 3.3.2 insgesamt 10 % des in einem namentlich genannten Autorenstil geschriebenen KI-Texts verpasste, und 25 % der wissenschaftlichen KI-generierten Texte unter Stilimitation, ansteigend auf 48 % bei von Gemini generierten wissenschaftlichen Textpassagen. Die Geschichte der Falsch-Positiven ist stark. Die der Falsch-Negativen unter feindlichem Prompting nicht.
• Ein CMU-angegliedertes Team (arXiv:2605.19516) zeigte, dass Text von Basismodellen als menschlich gelesen wird, während instruktionsoptimierter Text vom selben Modell das nicht tut, und brachte einzelne Textpassagen mit zwei Runden Umformulierung von 0 % menschlich auf 100 % menschlich. Ihr Urteil ist ein Zitat wert: „Aktuelle Detektoren verfolgen eher Artefakte der Instruktionsoptimierung und des lokalen Kontexts als irgendeinen invarianten Begriff von maschinengeneriertem Text.“ Die Autoren legen offen, dass Pangram und GPTZero die API-Credits gespendet haben.
• Pangram fehlt im RAID, der einzigen großen Detektor-Rangliste, die nicht von einem Detektor-Anbieter selbst betrieben wird. GPTZero ist dort mit einem AUROC von 0,984 aufgeführt. Es gibt keinen neutralen Ort, an dem man Pangrams Zahl neben denen seiner Konkurrenten auf einem Datensatz nachschlagen kann, den keiner von ihnen kontrolliert.

Ein Teil des Grunds, warum diese Beleglage dünn ist, sind die Kosten, und das ist ein struktureller Punkt, kein Vorwurf. Eine Gruppe der TU Darmstadt (arXiv:2606.04906) ließ Pangram komplett aus einem Sechs-Datensatz-Benchmark heraus und schrieb, das Testen der proprietären Detektoren „ist bei den aktuellen Preisen nicht durchführbar (insgesamt über 1.500 $)“. Wenn die API-Preise eines Detektors Wissenschaftler vom Prüfen ausschließen, findet die Prüfung nicht statt.

Man sollte es klar sagen: Pangrams eigene Elf-Benchmark-Tabelle ist als Drittanbieter-Benchmarks gekennzeichnet, und die Datensätze sind tatsächlich von Dritten, aber die Bewertung stammt von Pangram selbst. Das ist eine schwächere Aussage als unabhängige Ergebnisse, und zwei Zeilen in Pangrams eigener Tabelle widersprechen dem Marketing. Bei DetectRL schlägt eine feinabgestimmte RoBERTa-Baseline Pangram 4 (99,75 gegenüber 96,93 F1 im Multi-Domain-Split), und Pangram 4 schneidet bei jedem DetectRL-Split schlechter ab als Pangram 3. Das Upgrade ist nicht durchgängig, und Pangram hat das trotzdem veröffentlicht.

Was die Falsch-Positiv-Geschichten gemeinsam haben

Suche Pangram in einem beliebigen Schreibforum, und du findest Menschen, deren eigene Arbeit markiert wurde. Der Reflex ist, das als Ausflüchte suchende Betrüger abzutun. Nachdem ich einige hundert davon gelesen habe, glaube ich nicht, dass das trägt, denn die Geschichten gruppieren sich nach Register, nicht nach Können.

"Writing professor here. I've been teaching composition for 25 years. To be honest, I'm alarmed by Pangram. It said my writing is AI-generated, with a 100% degree level of certainty. I write comedy. Comedic writing has very specific rules, such as the "rule of three" (or comic triple), a classic comedic technique. As a comic writer, I have to tighten and re-tighten my writing over and over and over and over again, line by line. It's torturous. […] I might just abandon writing at this point."

Rare-Information5080, r/academia, Reddit

Der Mechanismus dahinter ist überprüfbar und kein Bauchgefühl: Prosa, die auf eine formale Einschränkung hin verdichtet wurde, nähert sich denselben oberflächlichen Statistiken an wie generierte Prosa. Der bestdokumentierte Fall überhaupt betrifft nur eine Variable, berichtet von einer Lehrkraft, die Pangram sonst als Beste in ihrer Klasse einstuft.

"Turns out, I had a section in the text with three bullet points. I removed the bullets (literally just the bullets themselves, no actual text) and it passed as human."

pinnate, Hacker News

Dieselbe Familie: Epigrafen, geschrieben als knappe Tatsachenaussagen, zwanzig Jahre Marketingtexte, akademische Prosa mit korrekter Grammatik und einer Vorliebe für Gedankenstriche. Wer einen bewussten Hausstil pflegt, ist näher an der Grenze als jemand, der locker schreibt. Das ist eine etwas triste Erkenntnis über das eigene Handwerk, und sie erklärt den perversen Anreiz, den viele beschreiben: sauberere Prosa schneidet schlechter ab, als fehlerfreies Schreiben es eigentlich sollte.

Deshalb taucht auch „baue wieder ein paar Fehler ein“ ständig als Volksweisheit auf, und deshalb gibt es ein ganzes Genre von Anleitungen zur Erkennungsvermeidung. Einen Score auf diese Weise zu jagen ist der falsche Hebel, und es macht den Text für den Leser schlechter, um den es eigentlich ging.

Ich würde lieber sehen, dass Menschen in einen echten Redaktionsprozess und in echte Persönlichkeit im Text investieren. Zu besseren Prompts bin ich zu demselben Schluss gekommen: Reparier den Input, nicht den Score.

Die stärkste Kritik ist allerdings keine dieser Anekdoten. Sie ist Rechenarithmetik, von einem namentlich genannten Wissenschaftler.

"Suppose every instructor started using an AI detector on all student work. I'd estimate that students submit 500 – 1,000 written works in the course of a 4 year education […] If each of these were run through an AI detector with a FPR of 1 / 10,000, you'd have 5–10% of your student body falsely accused of cheating at least once."

Arvind Narayanan, LinkedIn

Dieses Argument überlebt den Kontakt mit Pangrams Zahlen, weil es sie akzeptiert. Pangrams Mitgründer Bradley Emi antwortete im selben Thread auf X, das ist also ein zweiseitiger Austausch und keine einseitige Attacke. Der verwandte statistische Punkt aus einem Hacker-News-Thread ist, dass eine Falsch-Positiv-Rate keine Falscherkennungsrate ist, und die Zahl, die Leute zitieren, ist nicht die Zahl, die sie meinen: Wenn man 50 echte Positive und 10 falsche markiert, kann die FPR bei 1 zu 10.000 liegen, während die Wahrscheinlichkeit, dass eine bestimmte Markierung falsch ist, bei 1 zu 6 liegt.

Pangrams eigener Ethikabschnitt weicht dem nicht aus, und ich zitiere ihn lieber, als ihn zu umschreiben:

"False accusations of AI usage can lead to serious consequences, including reputational damage, emotional trauma, and other undue harm. We acknowledge that our model has a non-zero error rate and its errors may result in such harms."

Pangram 4 model card

Es gibt in der Community auch einen Workflow, der tatsächlich funktioniert, und das war das Nützlichste, was ich diese Woche gelesen habe. Ein Professor lässt die Aufgabenstellung zuerst durch mehrere Modelle laufen, sammelt alles andere und behandelt den Detektor als letzten Schritt statt als ersten.

"I state that the AI detector is a "last chance at exoneration" and only comes after all the due diligance from before. If the detector says its real (even if it's a false negative) I drop it and don't report it. […] But when I point out that the detector is the last step and not the first step, this past year I have gone 24-for-24 in academic integrity submissions"

tilteddriveway, r/Professors, Reddit

Detektor zuletzt, nie zuerst. Das ist der eine Punkt, in dem sich beide Lager dieser Debatte tatsächlich einig sind.

Preise: das 10-Fache, das niemand angekündigt hat

Pangrams Pläne sind einfach. Die Änderung dahinter ist es nicht.

Die Plagiatserkennung ist die Bezahlgrenze: bei Free nicht vorhanden, bei jedem kostenpflichtigen Plan enthalten. Das monatliche API-Kontingent von 200 $ gibt es nur bei Professional, nicht bei Individual oder Team. LMS-Integrationen für Canvas, Brightspace, Moodle und Google Classroom sind Institutional vorbehalten. Nullspeicherung und Ratenlimits über 5 QPS sind Enterprise vorbehalten, beide ohne Preisangabe.

Jetzt zum interessanten Teil. Pangram 4 änderte die abrechenbare Einheit von einem Scan pro aufgerundeten 1.000 Wörtern auf einen Scan pro 100 Wörter. Das ist eindeutig eine gute Änderung, und Pangram bezeichnete sie als etwas, das es erlaubt, „die eigenen Credits besser auszunutzen“. Gleichzeitig wurden die monatlichen Obergrenzen halbiert: Individual von 600.000 auf 300.000 Wörter, Professional von 3.000.000 auf 1.500.000.

Diese beiden Änderungen ziehen in entgegengesetzte Richtungen, und der Break-even liegt bei einem 500-Wort-Dokument. Darunter gewinnt man, bis zu fünffach bei einem 100-Wort-Ausschnitt. Darüber verliert man, bis zur Hälfte bei allem ab 1.000 Wörtern. Pangrams eigene Darstellung der API-Seite passt dazu: Die Änderung „stellt eine Preisänderung von 1-2x für kurze Dokumente und bis zu 10x für langformatige Dokumente dar“.

Bei der API ist die Rechnung direkter. Der Dollarbetrag hat sich nicht verändert, er liegt in beiden Fällen bei 0,05 $, aber die Einheit ist um das Zehnfache geschrumpft.

Die Pangram-4-API kostet pro Wort 7,5-mal mehr als das Individual-Abo und 11,5-mal mehr als das jährliche Professional-Abo. Wer mit dem Volumen innerhalb von 1.500.000 Wörtern pro Monat bleibt, ist mit einem Abo deutlich günstiger unterwegs. Die API ist für das Einbetten von Erkennung in ein Produkt kalkuliert, nicht für massenhaftes Self-Service-Scannen. Es lohnt sich, das gegen den Rest des Stacks abzuwägen, da ein Detektor selten der größte Posten der Kosten eines KI-Blog-Writers ist.

Eine Falle, die die Preisseite nicht erwähnt. Pangram 3 wird bis zum 30. September 2026 unterstützt, und bis dahin werden API-Aufrufe, die das Argument model weglassen, weiterhin zur alten Abrechnung an Pangram 3 geroutet. Nach diesem Datum wird derselbe Aufruf stillschweigend zehnmal teurer pro Wort. Wer ein Skript hat, das Pangram aufruft, sollte jetzt model="pangram-4" festlegen und sich eine Erinnerung im Kalender setzen, anstatt es über eine Rechnung zu erfahren. Mein Beitrag zur Blog-Writer-API enthält die breitere Version dieser Lektion zum Fixieren von Versionen.

Humanizer-Erkennung, und warum ich dabei nicht neutral bin

Hier höre ich auf, neutral zu sein, denn eesel betreibt seinen eigenen Blog-Writer als Content-Engine, und Pangram ist das letzte Tor, das jeder Entwurf vor der Veröffentlichung durchläuft. Das sind ein paar hundert Entwürfe aus erster Hand mit genau diesem Detektor, und das Gate sitzt an einer festen Stelle in meinem Blog-Schreibworkflow, statt frei herumzuschwimmen.

Das mit Abstand Nützlichste, was ich lernte, ist etwas, das Pangram zugutekommt. Umschreiben um des Stils willen bewegt den Score überhaupt nicht. Nicht die Stimme, nicht der Rhythmus, nicht Ich-Anekdoten, nicht das Entfernen von Standardphrasen. Ich habe alles ausprobiert. Was Pangram liest, ist, wie vorhersehbar jedes Token ist, Segment für Segment, was bedeutet, dass polierte Modellausgabe genau deshalb markiert wird, weil sie weiterhin das wahrscheinlichste nächste Wort wählt. Diese Erkenntnis kostete mich Wochen, und sie ist, ärgerlicherweise, ein Punkt zu Pangrams Gunsten: Was es misst, ist kein Oberflächenstil, den man einfach übermalen kann.

Pangram 4 geht noch einen Schritt weiter. Der Vier-Klassen-Humanizer-Kopf klassifiziert Text nun als Mensch, KI-generiert, KI-bearbeitet oder humanisierte KI, und die API liefert einen Boolean is_humanized, der standardmäßig bei einem humanizer_score von 0,91 auslöst. Pangram berichtet, KI-Beteiligung in humanisierter Ausgabe in 98,83 % der Fälle über 13 kommerzielle Tools hinweg zu erkennen. Damit ist eine ganze Kategorie von Umwegen, die den Content-Humanisierungs-Toolmarkt und Dinge wie den Surfer-Humanizer speist, jetzt ein eigenes markiertes Ausgabefeld statt eine unentdeckte Lücke. Pangram legte hier auch etwas Ehrliches offen: In Ablationen, bei denen die Gradienten des Humanizer-Kopfs das Basismodell erreichten, blieb die Gesamt-Falsch-Positiv-Rate stabil, aber die Ablation „konzentrierte die Fehlschläge auf bestimmte Register: akademisches Schreiben und ESL-Aufsätze“. Sie froren den Kopf ein, um das zu vermeiden. Nur sehr wenige Anbieter veröffentlichen das Experiment, das nicht funktioniert hat.

Sie führten auch ein Red-Team-Verfahren ordentlich durch. Sie gaben einem Agenten, Codex GPT 5.6 Sol, 24 Stunden lang Live-API-Zugriff mit dem expliziten Ziel, wiederholbare Falsch-Negative zu konstruieren. Er fand genau eine Umgehung, indem er diktierte chirurgische Pathologiebefunde nachahmte, was Pangram anschließend als außerhalb des Anwendungsbereichs erklärte, weil die Ausgabe knappe Aufzählungspunkte statt offener Prosa war. Diese Ausnahmeregelung ist der weichste Moment einer sonst rigorosen Seite. Der Angriff funktionierte trotzdem.

Und die Schlussfolgerung, die ich daraus tatsächlich ziehe, hat nichts mit Detektoren zu tun. eesels Traffic bewegte sich mit Änderungen der Suchrichtlinien, nicht mit Detektor-Scores. Googles Vorgaben zielen auf wenig hilfreichen Content ab, unabhängig davon, wie er entstand, was eine andere Frage ist als die der Herkunft, und ich habe die Analysedaten, die zeigen, dass beide sich nicht parallel entwickeln. Ein niedriger Pangram-Score ist Hygiene. Er ist keine Strategie, und er wird keine Seite retten, die niemand brauchte. Der ehrliche Hebel ist der langweilige: das Thema richtig recherchieren, einen Menschen redigieren lassen und eine echte Frage beantworten. Genau darum geht es in meinen Notizen zu E-E-A-T-konformem Content und zu Entwürfen, die nicht ranken, und aus demselben Grund schlägt Content sicher skalieren das schnelle Skalieren.

Pangram 4 im Vergleich zu anderen Detektoren

Pangram ist hier mit Abstand die teuerste Option, und bei der gemessenen Falsch-Positiv-Rate ist es auch das Beste unter den von unabhängigen Teams getesteten. Beides ist wahr.

Ein Muster, das man benennen sollte: Kein Anbieter hier veröffentlicht eine glaubwürdige Genauigkeitszahl und eine dazu passende Falsch-Positiv-Rate mit derselben Methodik zusammen. Winston beansprucht die höchste Genauigkeit ohne jede FPR-Angabe. Copyleaks beansprucht die niedrigste FPR, begrenzt die Genauigkeit aber auf internes Englisch-Testing. Turnitin veröffentlicht die am besten validierte FPR und keine Genauigkeitsschlagzeile. Zwei von ihnen unterlaufen ihre eigene Zahl auf derselben Seite. Pangram ist der einzige, der beide mit Konfidenzintervallen und Stichprobengrößen veröffentlicht, und diese Transparenz ist der Hauptgrund, warum es den Vorteil des Zweifels bekommt.

Fazit: Pangram, wenn man Herkunftsnachweise braucht und es sich leisten kann. GPTZero, wenn man eine günstigere Zweitmeinung will, und es steht auf RAID, was etwas zählt. Turnitin, wenn man eine Institution ist und die Workflow-Integration wichtiger ist als der Score. Kostenlose und Open-Source-Detektoren überspringen: Die UChicago-Studie maß bei einer offenen RoBERTa-Baseline eine Falsch-Positiv-Rate von 0,50 und nannte sie „ungeeignet für risikobehaftete Anwendungen“, was großzügig ist.

Wer das eigentlich kaufen sollte

Kaufe es, wenn du eine Plattform, ein Verlag oder ein Journal bist, die wissen müssen, wie eine Einreichung wahrscheinlich entstanden ist, auf Englisch, in Textlänge, und ihr habt einen Bestätigungsschritt nach dem Score. Für diese Aufgabe ist Pangram das beste Tool, und es ist nicht knapp.

Kaufe das Abo, nicht die API, außer du bettest die Erkennung in ein Produkt ein. Bei 7,5-fachen Kosten pro Wort lohnen sich API-Credits nur, wenn man die Integration braucht, nicht das Volumen.

Denk gut nach, wenn du Lehrkraft bist. Das Tool ist stark, und die Grundraten-Mathematik spricht bei institutioneller Skala weiterhin gegen dich, weshalb Pangrams eigener Ethikabschnitt und die lautesten Kritiker zum selben Schluss kommen. Setze es zuletzt ein, nie zuerst.

Überspringe es, wenn dein Content größtenteils nicht englisch, größtenteils kurz, größtenteils vorlagenbasiert oder größtenteils Code und Referenzmaterial ist. Die veröffentlichten Zahlen beschreiben diese Population nicht, und Pangram selbst sagt das auch.

Überspringe es, wenn du eigentlich Content willst, der rankt. Ein Detektor sagt dir nichts darüber, ob eine Seite existieren sollte. Dafür lies über KI-Content-Erstellung und wähle stattdessen ein Content-Generierungstool.

Wenn Letzteres tatsächlich deine Situation ist, sind die nützlichen Vergleiche mein Überblick über KI-Content-Generatoren und meine Shortlist von KI-Writer-Tools. Teams, die das in ein wiederholbares System einbauen wollen, brauchen meist ein Content-Pipeline-Tool statt einer weiteren Einzellösung.

Eine letzte Anmerkung zur Rezensionsbasis, weil sie mich überrascht hat. Pangrams G2-Eintrag existiert mit null Rezensionen. Capterra hat gar keinen Eintrag. Die Chrome-Erweiterung liegt bei 5,0 aus 19 Bewertungen mit 20.000 Nutzern, und Suchtreffer setzen Trustpilot bei rund 2,4 von 5 aus 13 Rezensionen an, obwohl sich die Seite selbst bei jedem Ladeversuch weigerte. Es gibt hier also in keiner Richtung einen breiten Rezensionskorpus, und wer bei diesem Produkt „die Rezensionen“ zitiert, zitiert etwa dreißig Personen. Das eigentliche Signal steckt in wissenschaftlichen Arbeiten und Forenthreads, was ungewöhnlich ist und für ein forschungsgeführtes Unternehmen irgendwie passt.

Probiere eesel für den Teil, den ein Detektor nicht kann

Pangram sagt dir, wie ein Entwurf wahrscheinlich geschrieben wurde. Es kann dir nicht sagen, ob der Entwurf es wert war, geschrieben zu werden, und nach einigen hundert Beiträgen durch dieses Tor bin ich überzeugt, dass die zweite Frage diejenige ist, die den Traffic bewegt.

Das ist die Aufgabe, die eesel erfüllt. Der eesel-Blog-Writer recherchiert ein Thema aus Primärquellen, schreibt mit Markenstimmen-Training, baut den internen Link-Graph auf und liefert einen Entwurf, den ein menschlicher Redakteur fertigstellen kann, statt ihn retten zu müssen. Es ist dieselbe Pipeline, die diesen Beitrag hervorgebracht hat, Detektor-Gate inklusive, was so ehrlich ist wie ich es demonstrieren kann.

Du kannst dir automatisiertes Blog-Schreiben ansehen, es in meiner KI-Blog-Writer-Rezension mit dem Feld vergleichen und dann eesel kostenlos ausprobieren. Wenn dein Maßstab speziell die Suchperformance ist, starte lieber mit dem SEO-Blog-Writer-Ansatz.