Können KI-Detektoren eine KI-Übersetzung erkennen? Wir haben Pangram und GPTZero getestet

„Wird mein Buch als KI-generiert eingestuft?“ ist die Frage, die wir am häufigsten von Autorinnen und Autoren hören, die ihre Romane selbst übersetzen. Dahinter steht ein Bild: Ein Leser, ein Lektor oder ein Händler kopiert ein Kapitel in einen KI-Detektor – und zurück kommt ein roter Balken.

Deshalb haben wir im Oktober den Test am eigenen Text gewagt.

Was haben wir getestet?

Wir haben Textpassagen aus Vitaliis Roman genommen – einer satirischen Fantasy, die noch keinen Titel hat – und sie mithilfe von KI zwischen dem Ukrainischen, Englischen und Chinesischen in beiden Richtungen übersetzt. Anschließend haben wir jede Übersetzung den beiden Detektoren vorgelegt, nach denen sich Autoren bei uns am häufigsten erkundigen, und zwar in den im Oktober 2026 aktuellen Versionen: Pangram 4, erschienen im Juli, und GPTZero 4o, gestartet im September.

Beide Detektoren führen Ukrainisch und Chinesisch unter den von ihnen unterstützten Sprachen auf (Pangram, GPTZero).

Was haben die Detektoren gesagt?

Jede einzelne Textprobe wurde als von Menschenhand verfasst eingestuft – von beiden Detektoren und in jeder Sprachrichtung. Das galt auch für die Kontrollgruppe: Die unbearbeitete ChatGPT-Übersetzung erzielte einen Wert von 100 % menschlich verfasst.

GPTZero 4o bei 1.704 aus dem Ukrainischen übersetzten Wörtern: 97 % menschlich.

Eine weitere Szene, 1.593 Wörter: 98 % menschlich.

Pangram 4 bei 1.261 aus dem Englischen ins Ukrainische übersetzten Wörtern: 100 % menschlich verfasst.

Warum haben sie „menschlich“ gesagt?

Weil das nach ihren eigenen Regeln die richtige Antwort ist. Ein Detektor beantwortet genau eine Frage: Hat ein Modell diesen Text verfasst? Die Übersetzung eines Romans behält die Entscheidungen des Autors bei: die Handlung, die Reihenfolge der Szenen, wer spricht, wo die Pointe sitzt, wie lang ein Satz läuft, bevor er abbricht. Das Modell wählt in der anderen Sprache lediglich die Worte für Dinge, die bereits ein Mensch so sagen wollte.

Pangram hält das schriftlich fest. Der technische Bericht zu Pangram 4 führt „wörtliche Übersetzung“ neben leichtem Lektorat und Rechtschreibkorrekturen als eine KI-Hilfe auf, die so geringfügig ist, dass der Text weiterhin als menschlich gilt. Das ist eine Neuerung: Pangrams Vorgängermodell stufte Übersetzungen noch als leichte KI-Unterstützung ein. GPTZero veröffentlicht unseres Wissens nach keine explizite Regel zu übersetzten Texten, und die Tipps für Studierende deuten darauf hin, dass es „stark KI-beeinflusste Abschnitte“ nach wie vor markieren kann. Bei unseren Testproben stimmte das Ergebnis jedoch mit Pangram überein.

Die gleiche Logik greift auch umgekehrt. Eine Übersetzung verschleiert keinen Text, den ein Modell verfasst hat: Pangram gibt an, KI-Text auch nach einer Übersetzung zu erkennen – doppelte Übersetzung eingeschlossen –, und laut eigenem Bericht gehörten wiederholte Übersetzungsschritte zu den Tricks, die das Red-Team vergeblich versuchte. Ein Detektor prüft, wer das Buch geschrieben hat. Wer es übersetzt hat, ist eine ganz andere Frage.

Kann man dem Ergebnis eines Detektors überhaupt trauen?

Betrachten Sie es als die Momentaufnahme eines einzelnen Tools an einem bestimmten Tag.

• Detektoren verändern sich. GPTZero erklärte 2023, dass sein Modell alle zwei Wochen aktualisiert wird, und Pangram hat den Umgang mit Übersetzungen zwischen Version 3 und 4 grundlegend geändert.
• Sie haben Unschuldige beschuldigt. Im Jahr 2023 stuften Detektoren 61 % der Essays von Nicht-Muttersprachlern als KI-generiert ein (Liang et al.). Im selben Jahr zeigte ein Test mit 14 Erkennungstools, dass diese weder präzise noch verlässlich waren – bei maschinell übersetzten Texten menschlicher Autoren kam es sogar noch häufiger zu falschen Verdächtigungen (Weber-Wulff et al.). Neuere Modelle geben an, dieses Problem behoben zu haben. Ein Grund mehr, ein solches Ergebnis keinesfalls als Beweis zu betrachten.
• Der bekannteste Detektor wurde zurückgezogen. OpenAI nahm seinen eigenen KI-Textklassifikator im Juli 2023 aufgrund mangelnder Genauigkeit wieder vom Netz.
• Manche verstehen Ihre Sprache nicht. Der KI-Bericht von Turnitin funktioniert nur für Englisch, Spanisch, Japanisch und Arabisch – ein Manuskript auf Ukrainisch oder Chinesisch erhält also überhaupt kein Ergebnis.

Zudem kann ein Detektor keine Qualität beurteilen. Er fällte über die unbearbeitete ChatGPT-Übersetzung dasselbe Urteil wie über unsere: Ein „menschliches“ Ergebnis sagt folglich rein gar nichts darüber aus, ob sich eine Übersetzung auch gut liest.

Müssen Sie es Amazon also trotzdem mitteilen?

Ja. Ein Detektor fragt, wer den Text geschrieben hat. Amazon fragt, wie er entstanden ist. Die Inhaltsrichtlinien von KDP definieren KI-generierte Inhalte als Texte, Bilder oder Übersetzungen, die mit einem KI-basierten Tool erstellt wurden – und eine KI-Übersetzung bleibt selbst dann KI-generiert, „wenn Sie sie danach umfassend bearbeitet haben“. Wenn Sie also ein Buch auf KDP veröffentlichen, das Sie mit KI übersetzt haben, geben Sie dies an – ganz egal, was ein Detektor über den Text sagt.

Wenn Sie mit einem Verlag oder einer Agentur zusammenarbeiten, ist die Frage nicht Gegenstand eines Detektors, sondern Ihres Vertrags. Fragen Sie nach, bevor Sie beginnen; auf unserer Seite zur Übersetzung von Belletristik erfahren Sie, wie andere Autoren das handhaben.

Was bedeutet das für Ihr Buch?

• Nutzen Sie einen Detektor nicht als Test für Ihre Übersetzung. Er beantwortet lediglich eine Frage zur Autorschaft – und bei einem übersetzten Roman sind der Autor immer noch Sie.
• Zahlen Sie nicht für einen „Humanizer“. Er ändert nichts an Ihrer Angabepflicht, und bei der Übersetzung Ihres eigenen Werks gibt es für ihn ohnehin nichts zu korrigieren.
• Prüfen Sie, was den Lesern auffällt: ein Name, dessen Schreibweise sich mittendrin ändert, eine ausgelassene Zeile oder Dialoge, die plötzlich flach wirken. Ein Glossar für Namen und ein Korrekturdurchlauf im Abgleich mit dem Ausgangstext fangen das meiste davon ab; der Rest fällt Ihnen auf, wenn Sie jede Zeile selbst durchlesen.
• Geben Sie KI-Übersetzungen überall dort an, wo eine Plattform danach fragt.

Was dieser Test nicht zeigt

• Ein Roman, ein Genre, Textpassagen bis zur Länge einer Szene. Ganze Bücher haben wir nicht getestet.
• Zwei Detektoren im Oktober 2026. Beide werden häufig aktualisiert, sodass ein erneuter Test im nächsten Monat schon anders ausfallen könnte.
• Wir haben weder Originality.ai, Copyleaks noch Turnitin (das weder Ukrainisch noch Chinesisch versteht) getestet.
• Unsere Testproben waren Übersetzungen von Texten menschlicher Autoren. Von Grund auf durch ein Modell generierte Texte sind der eigentliche Anwendungsfall, für den Detektoren entwickelt wurden – und laut Pangram ändert auch eine Übersetzung nichts an deren Urteil.

Wir werden den Test wiederholen, sobald die Detektoren aktualisiert werden.