KI-Fachtexte prüfen: Qualitätscheck für Fakten, Quellen, Verständlichkeit und menschliche Stimme

Der Entwurf ist fertig. Die Gliederung steht, der Text klingt professionell und die wichtigsten Quellen sind verlinkt. Trotzdem bleibt eine entscheidende Frage offen: An welcher Stelle könnte der KI-Fachtext scheitern?

Gemeint ist hier ein Fachtext, bei dessen Recherche, Strukturierung oder Formulierung KI in unterschiedlichem Umfang eingesetzt wurde.

Viele Qualitätsprüfungen suchen vor allem nach sichtbaren Fehlern. Schwieriger sind Schwächen, die sich hinter überzeugenden Formulierungen verbergen:

• Eine Zahl stimmt, gilt aber nur unter bestimmten Bedingungen.
• Eine Quelle behandelt das richtige Thema, belegt jedoch nicht die konkrete Aussage.
• Eine Einschränkung steht im Text, wird beim schnellen Lesen aber übersehen.
• Ein Absatz klingt professionell, könnte jedoch von fast jedem Unternehmen stammen.

Fehlerhafte Inhalte können glaubwürdig wirken. Das Bundesamt für Sicherheit in der Informationstechnik weist darauf hin, dass Herkunft und Qualität der Trainingsdaten generativer KI oft nicht vollständig geprüft werden können. Plausible Formulierungen sind daher kein Beleg für sachliche Richtigkeit. Genannte Quellen müssen im Original geprüft werden: Stützen sie die konkrete Aussage tatsächlich?

Ein Qualitätscheck sollte nicht nur fragen: Ist der Text korrekt? Hilfreicher ist der Versuch, den Entwurf gezielt zu widerlegen, falsch zu verstehen oder seiner vermeintlichen Individualität zu berauben.

Dieser Beitrag stellt dafür vier Belastungsproben vor:

1. die Behauptungsprobe,
2. die Belegprobe,
3. die Fehlleseprobe und
4. die Stimmenprobe.

Der Ansatz beginnt dort, wo mein Beitrag „KI im Content-Workflow: Was KI gut kann und wo redaktionelles Urteil entscheidend bleibt“ endet. Dort geht es um die Verteilung von Aufgaben und Verantwortung. Hier geht es um einen fast fertigen, KI-gestützt erarbeiteten Fachtext, der einer kritischen Prüfung standhalten muss.

Ein Beispieltext für den Qualitätscheck

Als fiktives Beispiel dient ein Softwareanbieter. Eine KI hat für seine Website folgenden Absatz formuliert:

Unsere intelligente Plattform hilft kleinen Unternehmen, ihre Verwaltungsprozesse effizienter zu gestalten. Automatisierte Workflows sparen bis zu 40 Prozent Arbeitszeit und reduzieren Fehler. Höchste Datenschutzstandards sorgen dafür, dass sensible Informationen jederzeit geschützt sind. So können sich unsere Kunden auf das konzentrieren, was wirklich zählt: das Wachstum ihres Unternehmens.

Der Absatz ist grammatikalisch korrekt und leicht verständlich. Trotzdem löst fast jeder Satz Rückfragen aus:

• Was macht die Plattform konkret?
• Woher stammen die 40 Prozent?
• Was wurde als Fehler erfasst?
• Was bedeutet „höchste Datenschutzstandards“?
• Kann ein jederzeitiger Schutz zugesichert werden?
• Ist Unternehmenswachstum tatsächlich eine nachgewiesene Folge?

Die vier Belastungsproben untersuchen diese Schwächen aus unterschiedlichen Richtungen.

Belastungsprobe 1: Was müsste geschehen, damit die Aussage falsch ist?

Bei der Behauptungsprobe wird zunächst bestimmt, was der jeweilige Satz überhaupt behauptet. Im Beispieltext heißt es: „Automatisierte Workflows sparen bis zu 40 Prozent Arbeitszeit.“

Die Gegenfrage lautet: Unter welchen Umständen wäre diese Aussage falsch oder irreführend? Das wäre etwa der Fall, wenn die Zeitersparnis nur bei einem einzelnen Arbeitsschritt gemessen wurde, der Satz aber eine Verringerung der gesamten Arbeitszeit nahelegt. Auch ein Höchstwert, den nur wenige Testpersonen erreicht haben, dürfte nicht wie ein allgemein zu erwartendes Ergebnis wirken.

Die Gegenfrage macht damit sichtbar, wie weit die Behauptung reicht: Für wen gilt sie, auf welche Tätigkeit bezieht sie sich und unter welchen Bedingungen trifft sie zu?

Beobachtung, Messung, Bewertung oder Versprechen?

Aussagen lassen sich für die Prüfung in vier Arten unterteilen:

• Beobachtbare Aussagen: Sie beschreiben Funktionen oder Vorgänge, die sich unmittelbar kontrollieren lassen: Die Plattform ordnet eingehende Anfragen einem Bearbeitungsstatus zu. Die genannte Funktion kann am Produkt oder in der aktuellen Dokumentation nachvollzogen werden.
• Gemessene Aussagen: Sie nennen ein quantitatives Ergebnis: Automatisierte Workflows sparen bis zu 40 Prozent Arbeitszeit. Hier muss geklärt werden: Was wurde gemessen? Womit wurde verglichen? Wer nahm an der Messung teil? Handelt es sich um einen Durchschnitt, einen Höchstwert oder einen Einzelfall?
• Bewertende Aussagen: Sie ordnen einen Sachverhalt ein: Die Plattform gestaltet Verwaltungsprozesse effizienter. „Effizienter“ setzt ein Kriterium voraus: Zeitaufwand, Kosten, Fehlerquote, Zahl der Arbeitsschritte oder eine andere messbare Größe.
• Versprechen: Sie erzeugen eine Erwartung an ein Ergebnis: Sensible Informationen sind jederzeit geschützt. Die Wörter „sind“ und „jederzeit“ machen aus einer Beschreibung ein umfassendes Versprechen. Der Hinweis auf technische Schutzmaßnahmen würde diese Zusage nicht automatisch rechtfertigen.

Das belastete Wort finden

Häufig trägt ein einzelnes Wort den größten Teil der Beweislast:

• immer
• nachweislich
• sicher
• garantiert
• führend
• deutlich
• vollständig
• gesetzeskonform

Aus „Die Software verhindert Fehler“ könnte nach der Prüfung werden: „Die Software kontrolliert, ob alle Pflichtfelder ausgefüllt wurden.“

Die zweite Formulierung beschreibt eine konkrete Funktion. Ob sie tatsächlich Fehler verhindert, lässt sich gesondert untersuchen.

Bei längeren Texten sollte die stärkste Behauptung zuerst geprüft werden: Welche Aussage wäre am schwierigsten zu verteidigen, wenn ein Kunde oder eine Fachperson nach dem Beleg fragt?

Im Beispiel wären das wahrscheinlich die Zeitersparnis und der permanente Schutz sensibler Informationen.

Belastungsprobe 2: Wie weit entfernt sich die Aussage von ihrer Quelle?

Eine seriöse Quelle kann eine falsche oder zu weit gefasste Aussage glaubwürdiger erscheinen lassen. Entscheidend ist deshalb nicht allein, ob ein Link vorhanden ist, sondern wie groß der Abstand zwischen Quelle und Formulierung ist.

Fünf mögliche Abstände

• Gegenstandsabstand: Die Quelle untersucht einen anderen Sachverhalt.
• Zielgruppenabstand: Die untersuchten Personen unterscheiden sich von der Zielgruppe des Textes.
• Zeitabstand: Die Quelle beschreibt nicht mehr den aktuellen Stand.
• Bedeutungsabstand: Ähnliche Begriffe werden gleichgesetzt, obwohl sie Unterschiedliches bezeichnen.
• Sicherheitsabstand: Die Quelle formuliert vorsichtiger als der Artikel.

So kann aus „kann unter bestimmten Bedingungen reduzieren“ im Text unbemerkt „reduziert“ werden. Zwei gleichzeitig beobachtete Entwicklungen werden vorschnell als Ursache und Wirkung dargestellt. Ein Wert, der nur im besten Fall erreicht wurde, erscheint plötzlich als übliches Ergebnis.

Ein Beispiel für wachsenden Belegabstand

Angenommen, ein interner Test mit zwölf Personen zeigt, dass sich die Bearbeitungszeit für einen bestimmten Arbeitsschritt mit einer neuen Software im Durchschnitt um 40 Prozent verkürzte.

Im Text entsteht daraus: „Unsere Kunden sparen mit der Plattform 40 Prozent Arbeitszeit.“

Zwischen Test und Veröffentlichung haben sich mehrere Dinge verändert:

• Aus zwölf Testpersonen werden alle Kunden.
• Aus einem Arbeitsschritt wird die gesamte Arbeitszeit.
• Aus einem Durchschnittswert wird eine allgemeine Einsparung.
• Die Bedingungen der Messung verschwinden.

Die Zahl kann rechnerisch korrekt sein und im veröffentlichten Satz trotzdem etwas Falsches vermitteln. Eine belastbare Formulierung müsste die Reichweite der Messung sichtbar lassen:

In einem internen Test mit [Anzahl] Personen verkürzte sich die Bearbeitungszeit für [Arbeitsschritt] im Zeitraum [Zeitraum] durchschnittlich von [Ausgangswert] auf [Vergleichswert].

Diese Formulierung ist nur sinnvoll, wenn alle Angaben dokumentiert sind. Fehlen sie, sollte die Zahl nicht veröffentlicht werden.

Die Quelle rückwärts lesen

Ein einfacher Test verhindert, dass eine gewünschte Aussage in die Quelle hineingelesen wird:

1. Öffnen Sie die Originalquelle.
2. Fassen Sie nur das relevante Ergebnis in einem Satz zusammen.
3. Vergleichen Sie diese Zusammenfassung mit dem Artikel.

Ist der Artikel weiter gefasst, muss die Aussage eingegrenzt oder ein passenderer Beleg gefunden werden.

Die Europäische Kommission empfiehlt, wichtige Informationen anhand vertrauenswürdiger oder offizieller Quellen zu kontrollieren und zusätzlich zu prüfen, ob die Aussage inhaltlich plausibel ist. Mehrere Artikel bilden dabei nicht automatisch mehrere unabhängige Belege. Mitunter geben sie lediglich dieselbe ursprüngliche Quelle wieder.

Wie sich Quellen bereits vor dem Schreiben systematisch erschließen lassen, beschreibe ich in meinem Beitrag „Aus Fachwissen wird Content: Vom Gespräch, Whitepaper oder internen Dokument zum verständlichen Beitrag“. Die Belegprobe setzt später an: Sie kontrolliert, ob der fertige Text den dokumentierten Informationsstand noch korrekt wiedergibt.

Belastungsprobe 3: Welche falsche Schlussfolgerung legt der Text nahe?

Ein Satz kann wörtlich korrekt sein und trotzdem missverständlich wirken. Die Fehlleseprobe untersucht deshalb, wie der Text wahrscheinlich falsch verstanden werden könnte: Welche Schlussfolgerung könnte eine eilige oder fachfremde Person ziehen, obwohl sie dort nicht ausdrücklich steht?

Aussagen wirken über ihre Nachbarschaft hinaus

Im Beispiel folgen zwei Sätze direkt aufeinander:

Automatisierte Workflows sparen bis zu 40 Prozent Arbeitszeit und reduzieren Fehler. Höchste Datenschutzstandards sorgen dafür, dass sensible Informationen jederzeit geschützt sind.

Durch diese Reihenfolge kann der Eindruck entstehen, alle genannten Wirkungen seien gleichermaßen gemessen und nachgewiesen. Vielleicht existiert jedoch nur eine interne Zeitmessung, während sich die Datenschutzaussage auf einzelne technische Funktionen bezieht. Die Nähe der Aussagen verbindet sie stärker, als es ihre Belege möglicherweise erlauben.

Einschränkungen müssen beim Versprechen stehen

Ein Problem entsteht, wenn eine starke Aussage im Haupttext steht und ihre Einschränkung erst später folgt:

Die Software reduziert den Bearbeitungsaufwand um 40 Prozent.

Einige Absätze später heißt es:

Die Ergebnisse können abhängig vom Einsatzgebiet variieren.

Formal ist die Einschränkung vorhanden. Beim schnellen Lesen bleibt jedoch vor allem die konkrete Zahl hängen. Voraussetzungen und Grenzen sollten deshalb dort stehen, wo die Erwartung entsteht.

Den Text auf der verkürzten Lesespur prüfen

Lesen Sie den Artikel testweise nur über folgende Elemente:

• Überschrift,
• Einstieg,
• Zwischenüberschriften,
• hervorgehobene Aussagen,
• Bildunterschriften und
• Call-to-Action.

Diese Elemente bilden eine verkürzte Fassung des Artikels. Vermitteln sie allein einen zutreffenden Eindruck? Oder klingt diese Kurzfassung eindeutiger und erfolgreicher als der vollständige Text?

Eine präzise Einschränkung im Fließtext kann eine überzogene Überschrift nicht vollständig ausgleichen.

Die Drei-Satz-Probe

Eine außenstehende Person kann den Text mit drei Satzanfängen wiedergeben:

• „Ich habe verstanden, dass …“
• „Das gilt unter der Voraussetzung, dass …“
• „Unklar geblieben ist mir …“

Die Antworten zeigen, welches Verständnis tatsächlich entsteht.

Bei Anleitungen oder Entscheidungshilfen hilft zusätzlich die Frage: Was würde eine Person aufgrund dieses Textes als Nächstes tun?

Führt der Inhalt voraussichtlich zu einer falschen Auswahl oder unrealistischen Erwartung, liegt ein Qualitätsproblem vor – auch wenn jeder Satz für sich verständlich ist.

Belastungsprobe 4: Was bleibt, wenn die glatte Sprache verschwindet?

Eine menschliche Stimme entsteht nicht allein durch persönliche Anrede oder die Verwendung des Wortes „ich“. Auch KI kann solche Merkmale nachbilden. Aussagekräftiger ist, ob im Text Entscheidungen erkennbar werden, die auf wirklichem Wissen, einer eigenen Beobachtung oder einer begründeten Haltung beruhen.

Der Austauschbarkeitstest

Ersetzen Sie den Namen des Unternehmens durch den eines Wettbewerbers. Funktioniert der Absatz weiterhin inhaltlich, vermittelt er wahrscheinlich keine eigene redaktionelle Perspektive.

Das betrifft häufig Formulierungen wie:

• innovative Lösungen
• maßgeschneiderte Konzepte
• höchste Qualität
• ganzheitliche Beratung
• nachhaltiger Erfolg
• Konzentration auf das Wesentliche

Im Beispieltext könnte fast jeder Softwareanbieter behaupten, Prozesse effizienter zu gestalten und Kunden mehr Zeit für das Wesentliche zu geben.

Beispiel aus meiner Praxis: Für vergleich.org schrieb ich einen Produktratgeber über Ozongeneratoren. Der vorgesehene Einstieg erschien mir zu generisch. Deshalb begann ich den Text mit einer zugespitzten Leseransprache: „Stinkt es Ihnen auch manchmal gewaltig? Sind Sie es leid, dass Sie Ihr Auto zehn Meter gegen den Wind riechen können? In Ihrer Wohnung stinkt es zum Himmel?“ Anschließend leitete ich zum Produkt über: „Wenn Sie der Geruchsbeseitigung Herr werden wollen, könnte ein Ozongenerator genau das Richtige für Sie sein.“ Jahre später, als ich schon nicht mehr dort arbeitete, entfernte die Redaktion die einleitenden Fragen. Heute beginnt der Ratgeber direkt mit dem Wenn-Satz, der ebenfalls aus meiner damaligen Fassung stammt. Ohne den ursprünglichen Einstieg wirkt der Text jedoch sachlicher und etwas generischer. Das Beispiel zeigt, wie stark Einstieg, Rhythmus und Reihenfolge die Eigenständigkeit eines Textes prägen.

Die Adjektivprobe

Entfernen Sie alle wertenden Adjektive und Werbeformeln.

Aus

Unsere intelligente Plattform hilft kleinen Unternehmen, ihre Verwaltungsprozesse effizienter zu gestalten.

bleibt sinngemäß:

Unsere Plattform hilft Unternehmen, ihre Prozesse zu gestalten.

Der Satz verliert fast seinen gesamten Inhalt. Substanz entsteht, wenn stattdessen überprüfbare Unterschiede genannt werden:

Die Plattform führt Anfragen, Zuständigkeiten und Bearbeitungsstände an einem Ort zusammen. Offene Vorgänge bleiben sichtbar, ohne dass mehrere getrennte Listen abgeglichen werden müssen.

Auch diese Aussagen dürfen nur verwendet werden, wenn sie die tatsächlichen Funktionen korrekt beschreiben.Anmeldedaten für Inhalte anzeigen

Die Herkunftsprobe

Jede persönliche Aussage sollte eine erkennbare Herkunft besitzen:

• eine tatsächlich gemachte Erfahrung,
• eine dokumentierte Beobachtung,
• eine bewusst getroffene Entscheidung,
• eine fachlich begründete Bewertung oder
• einen konkreten Arbeitsprozess.

Bei der Herkunftsprobe ist deshalb zu fragen: Welche redaktionelle Entscheidung steckt hinter einer Formulierung? Beruht sie auf einer tatsächlichen Erfahrung, einer dokumentierten Beobachtung, einer bewussten Entscheidung oder einer fachlich begründeten Bewertung? Oder erzeugt sie lediglich den Anschein von Persönlichkeit?

Die Gegenpositionsprobe

Formulieren Sie eine plausible Gegenposition. Ist kaum erkennbar, was jemand an der Aussage bestreiten könnte, bleibt sie wahrscheinlich zu allgemein. Beispielsweise:

KI bietet zahlreiche Chancen, bringt jedoch auch Herausforderungen mit sich.

Der Satz ist schwer zu bestreiten und besitzt gerade deshalb wenig Erkenntniswert. Eine konkrete Position kann stattdessen in einer präzisen Unterscheidung liegen:

Für einen KI-Fachtext genügt es nicht, richtige Informationen zu sammeln. Entscheidend ist, ob jede veröffentlichte Formulierung die Reichweite ihrer Belege einhält.

Menschliche Stimme entsteht dort, wo jemand auswählt, unterscheidet und Grenzen zieht. Nicht dort, wo ein Text lediglich menschlich klingen soll.

Wenn sich die vier Prüfungen gegenseitig beeinflussen

Eine Korrektur auf einer Ebene kann an anderer Stelle ein neues Problem erzeugen:

• Eine genauere Aussage kann schwerer verständlich werden.
• Eine verständliche Überschrift kann mehr versprechen, als der Beleg hergibt.
• Eine markante Formulierung kann die gesicherte Aussage unzulässig zuspitzen.
• Zusätzliche Quellen können Scheinsicherheit erzeugen.

Nach jeder größeren Korrektur sollte deshalb mindestens die angrenzende Belastungsprobe wiederholt werden:

• Eine geänderte Behauptung benötigt eine neue Belegprüfung.
• Eine fachliche Einschränkung benötigt eine Fehlleseprobe.
• Eine zugespitzte Formulierung benötigt eine erneute Behauptungsprobe.
• Eine sprachliche Glättung benötigt den Austauschbarkeitstest.

Wie KI bei den Belastungsproben helfen kann

KI kann eine produktive Gegenrolle übernehmen. Dafür benötigt sie eng begrenzte Prüfaufträge.

• Prompt für die Behauptungsprobe: Zerlege den Text in überprüfbare Aussagen. Benenne für jede Aussage das Wort mit der größten Beweislast und eine Bedingung, unter der sie falsch oder irreführend wäre. Bewerte die Aussagen nicht abschließend.
• Prompt für die Belegprobe: Vergleiche ausschließlich die folgende Aussage mit dem beigefügten Quellenausschnitt. Prüfe Gegenstand, Zielgruppe, Zeitraum, Bedeutung und Grad der Sicherheit. Ergänze keine Informationen aus deinem allgemeinen Wissen.
• Prompt für die Fehlleseprobe: Nenne drei plausible Schlussfolgerungen, die eine eilige oder fachfremde Person aus diesem Absatz ziehen könnte. Markiere, welche der Text tatsächlich belegt und welche nur nahegelegt werden.
• Prompt für die Stimmenprobe: Markiere Formulierungen, die ohne inhaltliche Änderung auch auf der Website eines Wettbewerbers stehen könnten. Erkläre, welche konkrete Information, Unterscheidung oder reale Erfahrung fehlt. Erfinde keine Ergänzungen.

Die Ergebnisse sind Hinweise, keine Freigabe. Sie machen mögliche Angriffspunkte sichtbar, die anschließend am Produkt, an den Quellen oder mit Fachleuten überprüft werden müssen.

Der abschließende Sollbruchstellen-Check

Behauptung

• Welche Aussage wäre am schwierigsten zu verteidigen?
• Welches Wort trägt die größte Beweislast?
• Handelt es sich um eine Beobachtung, Messung, Bewertung oder ein Versprechen?

Beleg

• Welche Passage stützt die Aussage?
• Stimmen Gegenstand, Zielgruppe, Zeitraum und Sicherheitsgrad überein?
• Ist der Text weiter gefasst als die Quelle?

Mögliche Fehldeutung

• Welche falsche Schlussfolgerung liegt besonders nahe?
• Stehen Einschränkungen dort, wo die Erwartung entsteht?
• Vermitteln Überschrift und Zwischenüberschriften einen zutreffenden Eindruck?

Menschliche Stimme

• Könnte der Absatz unverändert bei einem Wettbewerber stehen?
• Besitzen persönliche Aussagen eine reale Herkunft?
• Bleibt ohne Werbeadjektive eine konkrete Aussage übrig?

Zum Schluss bleibt eine Frage: Welcher Satz würde den größten Schaden verursachen, wenn er falsch verstanden oder widerlegt würde?

Dieser Satz erhält die letzte Prüfung.

Fazit: Ein guter Qualitätscheck sucht nicht nach Bestätigung

Ein KI-Text wirkt schnell belastbarer, als er tatsächlich ist. Die Qualitätskontrolle darf sich deshalb nicht auf kleinere Korrekturen beschränken.

Die Behauptungsprobe untersucht, was ein Satz zusichert. Die Belegprobe misst den Abstand zwischen Quelle und Formulierung. Die Fehlleseprobe sucht nach naheliegenden falschen Schlussfolgerungen. Die Stimmenprobe zeigt, ob hinter der glatten Sprache eine konkrete Perspektive erkennbar bleibt.

Der Text ist nicht deshalb veröffentlichungsreif, weil keine Auffälligkeit sofort ins Auge fällt. Er ist veröffentlichungsreif, wenn seine stärksten Aussagen einem gezielten Angriff standhalten.

Unterstützung bei der Prüfung Ihrer KI-Fachtexte

Sie haben bereits einen KI-gestützten Fachtext, sind aber unsicher, ob seine Aussagen belastbar, seine Quellen passgenau und seine Formulierungen unverwechselbar genug sind?

Ich unterstütze Unternehmen, Selbstständige und Organisationen dabei, komplexe Inhalte redaktionell zu prüfen und zu überarbeiten. Dabei verbinde ich fachliche Quellenprüfung, verständliche Kommunikation und dramaturgisches Denken mit einem kontrollierten Einsatz von KI.

Weitere Informationen und Kontaktmöglichkeiten finden Sie auf marius-janz.de.

Den Beitrag habe ich auch auf LinkedIn veröffentlicht.

#KIContent #Qualitätskontrolle #Fachkommunikation