Eigene Daten
Wir haben einen KI-Detektor an 18 Texten in drei Sprachen geprüft
Jede Detektor-Übersicht wiederholt denselben Satz: Diese Werkzeuge sind unzuverlässig, nimm den Wert als Signal, nicht als Urteil. Fast keine zeigt, wie diese Unzuverlässigkeit in Zahlen aussieht. Wir haben sie gemessen — an einem Korpus, bei dem wir für jeden einzelnen Text sicher wissen, ob ihn ein Mensch oder eine Maschine geschrieben hat.
Das Ergebnis
Zählt man jeden Wert ab 50% als Urteil „KI", lag der Detektor bei 6 von 18 Texten richtig. Bei einer Ja-Nein-Frage ist das schlechter als ein Münzwurf.
Der entscheidende Punkt: die Sprache
Für Deutsch und Polnisch gab der Detektor bei jedem maschinell geschriebenen Text exakt 0,0% aus — kein „unsicher", sondern ein sicheres Urteil „von Menschen geschrieben". Gleichzeitig bewertete er echte polnische Lexikonartikel im Schnitt mit 74% KI. Für das Polnische ist er weniger unzuverlässig als schlicht invertiert.
| Sprache | erkannte KI | Fehlbeschuldigungen | Ø Wert bei KI-Texten | Ø Wert bei menschlichen |
|---|---|---|---|---|
| Englisch | 2/3 | 2/3 | 45,4% | 69,0% |
| Polnisch | 0/3 | 2/3 | 0,0% | 73,8% |
| Deutsch | 0/3 | 1/3 | 0,0% | 33,3% |
Jeder Text, jeder Wert
Der vollständige Korpus, damit Sie den Test selbst beurteilen können, statt uns zu glauben. „Erwartet" ist der uns bekannte Sachstand; „Wert" ist der rohe Prozentsatz des Detektors.
| Text | Herkunft | Erwartet | Detektorwert | Urteil |
|---|---|---|---|---|
| Englisch · 170 Wörter | unser Artikel · en-are-we-in-an-ai-bubble.md | KI | 58,6% | richtig |
| Englisch · 170 Wörter | unser Artikel · en-best-ai-detectors-2026.md | KI | 20,8% | falsch |
| Englisch · 170 Wörter | unser Artikel · en-biggest-ai-companies-2026.md | KI | 56,8% | richtig |
| Polnisch · 170 Wörter | unser Artikel · pl-czy-mamy-banke-ai.md | KI | 0,0% | falsch |
| Polnisch · 170 Wörter | unser Artikel · pl-najlepsze-detektory-ai-2026.md | KI | 0,0% | falsch |
| Polnisch · 164 Wörter | unser Artikel · pl-najwieksze-spolki-ai-2026.md | KI | 0,0% | falsch |
| Deutsch · 170 Wörter | unser Artikel · de-ki-blase-2026.md | KI | 0,0% | falsch |
| Deutsch · 170 Wörter | unser Artikel · de-beste-ki-detektoren-2026.md | KI | 0,0% | falsch |
| Deutsch · 170 Wörter | unser Artikel · de-groesste-ki-unternehmen-2026.md | KI | 0,0% | falsch |
| Englisch · 170 Wörter | Wikipedia, Version 2020-05-31 · Baltic Sea | Mensch | 100,0% | falsch |
| Englisch · 170 Wörter | Wikipedia, Version 2020-05-30 · Wind power | Mensch | 40,9% | richtig |
| Englisch · 170 Wörter | Wikipedia, Version 2020-05-25 · Lighthouse | Mensch | 66,1% | falsch |
| Polnisch · 170 Wörter | Wikipedia, Version 2020-04-08 · Morze Bałtyckie | Mensch | 88,2% | falsch |
| Polnisch · 170 Wörter | Wikipedia, Version 2020-04-05 · Latarnia morska | Mensch | 100,0% | falsch |
| Deutsch · 170 Wörter | Wikipedia, Version 2020-05-30 · Ostsee | Mensch | 0,0% | richtig |
| Deutsch · 170 Wörter | Wikipedia, Version 2020-05-18 · Windenergie | Mensch | 100,0% | falsch |
| Deutsch · 170 Wörter | Wikipedia, Version 2020-04-11 · Leuchtturm | Mensch | 0,0% | richtig |
| Polnisch · 170 Wörter | Wikipedia, Version 2020-05-16 · Wisła | Mensch | 33,2% | richtig |
Wie der Korpus entstand
Der Korpus besteht aus 18 Texten zu je rund 170 Wörtern, sechs pro Sprache. Neun stammen von einem Sprachmodell: Es sind Auszüge aus Artikeln dieses Portals, ihre Herkunft ist also keine Vermutung. Die anderen neun sind von Menschen geschrieben und stammen aus Wikipedia-Versionen von vor Juni 2020 — lange vor der heutigen Modellgeneration, was sie überhaupt erst als Kontrollgruppe brauchbar macht. Jeder Text wurde einmal eingereicht, notiert wurde der rohe Prozentwert.
Was dieser Test nicht zeigt
- Ein Detektor, in der kostenlosen Variante, auf kleiner Stichprobe. Das ist kein Marktranking, sondern die Prüfung einer einzigen Behauptung.
- Die kostenpflichtigen Werkzeuge (Sapling, GPTZero, Copyleaks) verlangen ein Konto, wurden daher nicht getestet, und wir veröffentlichen keine Zahlen zu ihnen.
- Lexikonprosa liest sich anders als Blogtexte; Detektoren können auf dieses Register anders reagieren.
- Wikipedia ist in den Trainingsdaten der Modelle stark vertreten, was die Bewertung zusätzlich beeinflussen kann.
Verwendung dieser Ergebnisse
Zitieren oder übernehmen Sie diese Tabelle mit Link auf diese Seite. Die menschliche Hälfte des Korpus stammt aus Wikipedia und steht unter CC BY-SA; die maschinelle sind unsere eigenen veröffentlichten Texte.