3/4+150 XP

Substantiation Files und die Belege hinter jeder Aussage

# Substantiation Files und die Belege hinter jeder Aussage

Ein Prüfer muss zur Zeile „40 % weniger Revisionen" nur eine Frage stellen: Zeigen Sie mir die Seite. Nicht den Studientitel, die Seite. Die Tabelle, die Bezeichnung der Studienarme, das Nachbeobachtungsfenster, das Konfidenzintervall. Wenn diese Seite länger als eine Minute braucht, ist die Aussage schon angreifbar. Wenn auf der Seite etwas Engeres steht als in der Broschüre, stoppt die Kampagne, und mit ihr jedes Asset, das auf diesem Satz aufbaut.

Was ein Substantiation File tatsächlich ist

Ein Substantiation File (auch Claims Dossier oder Evidence File) ist das geordnete Paket an dokumentarischen Belegen hinter jeder werblichen Aussage Ihres Unternehmens. Eine Aussage, eine nachvollziehbare Quelle, abgelegt dort, wo ein Prüfer sie erreicht, ohne einen Kollegen fragen zu müssen, wo sie geblieben ist.

Zwei Regeln bestimmen die gesamte Disziplin:

Prior Substantiation: Der Beleg existiert, *bevor* die Aussage verwendet wird. Ihn erst nach einer Beanstandung zusammenzustellen, ist selbst schon der Befund.
Claim-to-Evidence-Match: Der Beleg stützt den *genauen* Wortlaut, die Population, den Comparator und den Zeitraum der Aussage.

„Kliniker sagen uns" und „das sagen alle" sind keine Referenzen. Die Verbote, die diese zwei Regeln durchsetzbar machen, liegen bei den Behörden und Kodizes, die die Grundlagenlektion abbildet; diese Lektion bleibt innerhalb des Ordners.

Die Referenz bewerten, nicht nur finden

Die meisten gebrochenen Aussagen sind nicht unbelegt. Sie sind durch etwas belegt, das schwächer ist, als der Satz suggeriert. Bewerten Sie jede Referenz, bevor Sie sie anhängen.

| Tier | Was es ist | Was es tragen kann |

|---|---|---|

| 1 | Peer-reviewte Publikation, vorab festgelegter primärer Endpunkt, Population passend zur Indikation | Die Aussage im formulierten Wortlaut |

| 2 | Peer-reviewt, aber sekundärer Endpunkt, Post-hoc-Subgruppe, einarmig oder Register | Nur enger, abgesicherter Wortlaut |

| 3 | Kongress-Abstract oder Poster | Vorläufiger Wortlaut, und nur bis das Full Paper vorliegt |

| 4 | Data on file: interner Bericht, Validierungsstudie, unveröffentlichte Analyse | Aussagen, die Sie auf Anfrage verteidigen können, mit dem Bericht in der Hand |

| 5 | Review-Artikel, KOL-Foliensatz, Broschüre eines anderen Unternehmens | Nichts |

Bei Tier 3 verrotten Files unauffällig. Ein Abstract hat ein paar hundert Wörter ohne vollständigen Methodenteil, und Zahlen verschieben sich zwischen Poster und Publikation. Wenn Ihre Broschüre den Posterwert zitiert und das Paper später etwas Kleineres berichtet, verbreiten Sie Druckmaterial, das seiner eigenen Primärquelle widerspricht.

Tier 5 ist der häufigere Fehler. Jemand zitiert ein Review, das die Studie zitiert. Das Review liest sich gut, also prüft niemand nach. Wenn das Primärpaper korrigiert, ersetzt oder zurückgezogen wird, liest sich das Review weiter gut, und die Aussage läuft weiter.

Babylon Health hat gezeigt, was eine falsch eingestufte Referenz kostet. Beim Launch-Event 2018 wurde ein Score von rund 80 % bei Fragen ähnlich der MRCGP-Prüfung als Beleg präsentiert, dass das Triage-System auf dem Niveau eines Hausarztes arbeitet. Die zugrunde liegende Arbeit war eine interne Evaluation, nicht unabhängig validiert, und Kliniker haben sie in The Lancet genau auf dieser Grundlage zerlegt: kleines Fragenset, keine externen Testdaten, Ergebnisse öffentlich gemacht vor jeder Prüfung. Eine Tier-4-Referenz sollte einen Tier-1-Satz tragen, auf der Bühne, mit Journalisten im Raum.

Die drei Evidenzarten hinter einer Aussage

1. Klinische Daten

Evidenz aus Studien am Menschen: randomisierte Studien, Register, klinische Nachbeobachtung nach Marktzugang.

„Reduziert die postoperative Infektionsrate" ist ein klinisches Outcome. Das braucht eine klinische Studie, idealerweise vergleichend, in der Population, für die das Produkt tatsächlich indiziert ist.

2. Bench-Daten

Labor- oder Ingenieurstests, keine Patienten. Zugfestigkeit, Flussraten, Akkulaufzeit, Sterilität, Verschleißsimulation.

„Hält 10 Millionen Verschleißzyklen aus" ist eine Bench-Aussage. Das braucht ein validiertes Testprotokoll und die Rohergebnisse, keine Studie.

Lassen Sie ein Bench-Ergebnis nie für einen klinischen Nutzen einstehen. „Übersteht 10 Millionen Zyklen in vitro" erlaubt nicht „hält 15 Jahre im Patienten". Dieser Sprung ist einer der ältesten Befunde zu irreführenden Aussagen überhaupt.

3. Vergleichende Daten

Jede Aussage, die einen Wettbewerber oder eine Kategorie nennt („gegenüber der führenden Marke", „das einzige Gerät, das", „40 % weniger Revisionen als Standardversorgung"). Höchstes Risiko, weil sie sowohl regulatorische Aufmerksamkeit als auch die Beschwerde eines Rivalen anzieht.

Das braucht Head-to-Head-Evidenz oder einen indirekten Vergleich, der einer Prüfung standhält: gleiche Endpunktdefinition, vergleichbare Populationen, vergleichbare Nachbeobachtung. Ihr Best-Case-Ergebnis gegen den Worst Case eines Wettbewerbers ist eine garantierte Niederlage.

Eine Aussage bis zu ihrer Seite zurückverfolgen

Arbeiten Sie rückwärts, so wie ein Prüfer es tun wird.

| Frage | Was das File enthalten muss |

|---|---|

| 40 % gegenüber was? | Benannter Comparator oder definierte Standardversorgung |

| Bei wem? | Population passend zur Indikation |

| Über welchen Zeitraum? | Dauer der Nachbeobachtung (2 Jahre? 10 Jahre?) |

| Statistisch belastbar? | p-Wert oder Konfidenzintervall, Stichprobengröße |

| Gleiche Messung? | Identische Definition von „Revision" in beiden Armen |

Wenn die Studie Revisionen nach 24 Monaten gemessen hat und die Broschüre Lebensdauer suggeriert, ist die Aussage gebrochen. Wenn „Revision" in den beiden Armen unterschiedlich definiert war, gebrochen. Wenn die 40 % kein Intervall haben und die Stichprobe 30 Patienten umfasste, wahrscheinlich gebrochen.

Eine verteidigungsfähige Version liest sich so: „In einer 24-monatigen randomisierten Studie (n=420) war die Revisionsrate um 40 % niedriger gegenüber [benannter Comparator] (95 % KI, p<0,01)." Weniger knackig, deutlich überlebensfähiger.

Der schwierigere Fehlerfall ist, wenn die Evidenz echt ist und die Aussage dennoch übers Ziel hinausgeht. Grails Galleri-Bluttest erkennt ein Krebssignal, und die PATHFINDER-Studie stützt das: Bei etwa 1 % der 6.662 Teilnehmer wurde ein Signal erkannt, und bei weniger als der Hälfte davon wurde Krebs bestätigt. Was bislang keine abgeschlossene randomisierte Studie gezeigt hat, ist, dass ein Screening damit die Krebssterblichkeit senkt, und genau deshalb gibt es die NHS-Galleri-Studie mit rund 140.000 Menschen in England. Das File stützt „erkennt ein gemeinsames Krebssignal über viele Krebsarten hinweg". Es stützt nicht „erkennt Krebs früh genug, um Ihr Leben zu retten". Dasselbe Dossier, zwei Sätze, einer davon ungedeckt.

Die Claims-Matrix und wo die Referenzen liegen

|---|---|---|---|---|---|

Was die Matrix funktionieren lässt, ist langweilige Disziplin, nicht das Spreadsheet:

Nichts gelangt ohne Claim ID in ein Asset.
Die Quellspalte nennt die Seite, Tabelle oder Abbildung, nicht nur das Paper. Prüfer, die suchen müssen, fangen an zu raten.
Jede Referenz wird als gesperrte Kopie in einem Repository abgelegt, mit der annotierten Version, die zeigt, welche Passage welche Aussage stützt. Nie ein Link auf eine Journal-Website; Zugänge ändern sich, Paywalls verschieben sich, und PDFs werden stillschweigend ersetzt.
Aufbewahrung ist eine rechtliche Pflicht, keine Ordnungsarbeit. In der britischen Pharmabranche müssen zertifiziertes Material und sein Zertifikat mindestens drei Jahre nach der letzten Verwendung aufbewahrt werden. In den USA gehen Werbematerialien für verschreibungspflichtige Arzneimittel bei erster Verwendung per Form 2253 an die FDA, das heißt, die Behörde hat bereits eine Kopie von dem, was Sie lieber vergessen würden.
Aussagen laufen aus Gründen ab, die nichts mit Ihren Daten zu tun haben. Eine Label-Änderung beim Comparator, eine neue Leitlinie, eine frische Studie eines Wettbewerbers: Ihre Studie von 2019 ist unverändert und Ihre Aussage ist jetzt veraltet.

🎬 [VIDEO: „How the FDA Regulates Medical Device Advertising" - youtube.com - ein Durchgang in einfacher Sprache durch die Werberegeln und den False-or-Misleading-Standard für Medizinprodukte]

Das Referenzpaket, das mit dem Asset reist

Jedes freigegebene Asset kommt mit seinem eigenen Paket: der Claim-Liste, den bewerteten Referenzen, den annotierten Seiten. Die Sign-off-Reihenfolge und wer welche Signatur verantwortet, gehören in die Lektion zum Pre-Launch-Review. Hierher gehört, was danach mit dem Paket passiert, denn dort brechen Files.

Übersetzungsdrift. „40 % weniger Revisionen nach 24 Monaten" wird in einer lokalen Adaption zu einem Superlativ, und die Affiliate hat das Parent-Paket, aber nicht den Parent-Wortlaut.
Format-Kompression. Ein Banner hat keinen Platz für die Einschränkung, also liegt die Einschränkung einen Klick entfernt. Das File muss die eingeschränkte Version so zeigen, wie der Leser ihr tatsächlich begegnet, Screenshot inklusive.
Field Decks. Ein Rep ergänzt eine Folie mit einer Lieblingsgrafik aus einem Kongressposter. Keine Claim ID, kein Paket, und es ist jetzt das am häufigsten genutzte Asset in der Region.
Brüche in der Referenzkette. Das Quelldokument wird überarbeitet und unter neuer Nummer neu herausgegeben, und vierzig Aussagen zeigen weiter auf die alte.

Die Zielgruppe verändert, was die Evidenz tragen muss

Der Test ist, ob der angesprochene Leser in die Irre geführt wird, und das verschiebt sich mit dem Leser. Eine dichte Hazard-Ratio-Aussage, gerichtet an interventionelle Kardiologen, kann in Ordnung sein. Dieselbe Aussage auf einer Verbraucherseite für ein Heimmessgerät kann einen Laien in die Irre führen, also braucht sie einfacheren Wortlaut und oft mehr Evidenz, nicht weniger. Die Fairness- und Transparenzpflichten gegenüber diesen Zielgruppen behandelt die Lektion zur Fair Treatment; für das File zählt, dass ein Dossier einen Fachsatz stützen und bei einem Verbrauchersatz scheitern kann.

Vier Fallen wiederholen sich:

Implizite Aussagen. Ein Foto eines Patienten, der einen Marathon läuft, macht ohne Worte eine Aussage zur Mobilität. Das Bild braucht seine eigene Referenz.
Superlative. „Beste", „fortschrittlichste", „Goldstandard". Jedes braucht einen Beleg oder fliegt raus.
Cherry-Picking bei Endpunkten. Den Endpunkt berichten, der Signifikanz erreicht hat, und die weglassen, die es nicht taten.
Surrogate, verkleidet als Outcomes. Ein Biomarker hat sich bewegt. Niemand hat länger gelebt. Sagen Sie, was Sie gemessen haben.

Wissenscheck

1. Ein Marketingteam stellt die stützenden Studien erst zusammen, nachdem ein Regulierer eine veröffentlichte Aussage beanstandet hat. Welches Prinzip der Substantiation wurde verletzt?

2. Eine Broschüre behauptet, ein Implantat liefere „40 % weniger Revisionen", aber die zugrunde liegende Studie hat eine andere Population gemessen als die, auf die die Werbung zielt. Welche Substantiation-Regel ist gefährdet?

3. Warum genügt der Maßstab „Kliniker sagen uns, es funktioniert" für ein Substantiation File nicht?

MEHRFACHAUSWAHL

4. Wählen Sie ALLE richtigen Antworten dazu, wie die Werbeaufsicht in den Vereinigten Staaten aufgeteilt ist.

Wählen Sie alle richtigen Antworten aus.

MEHRFACHAUSWAHL

5. Wählen Sie ALLE richtigen Antworten, die den Kernzweck und den Aufbau eines Substantiation File beschreiben.

Wählen Sie alle richtigen Antworten aus.

Wenn das File versagt: die Kosten

In den USA kann die FDA einen Untitled Letter oder den schwerer wiegenden Warning Letter ausstellen und die Rücknahme von Materialien fordern, in schweren Fällen auch korrigierende Kommunikation an die Zielgruppe, die sie gesehen hat. Diese werden in der Warning-Letters-Datenbank veröffentlicht, ein Werbeverstoß wird also dauerhaft durchsuchbar. Wettbewerber reichen ebenfalls Beschwerden ein, in den USA oft bei der National Advertising Division (NAD) der BBB National Programs, deren Entscheidungen schnell, öffentlich und unangenehm rückabzuwickeln sind.

Theranos ist der Extremfall: ein Unternehmen, das hunderte Bluttests vermarktet und zum Analysegerät dahinter fast nichts Peer-reviewtes veröffentlicht. Als Regulierer 2016 schließlich das Labor in Newark inspizierten, wurde dessen CLIA-Zertifikat entzogen, und das Unternehmen annullierte oder korrigierte zwei Jahre an Testergebnissen. Elizabeth Holmes wurde im Januar 2022 in vier Fällen des Betrugs schuldig gesprochen und zu mehr als elf Jahren verurteilt. Es existierte kein Substantiation File zum Vorlegen, und genau deshalb hielten sich die Aussagen intern so lange: Niemand hatte ein Dokument, dem er widersprechen konnte.

Die leisere Variante ist lehrreicher. Babylon Health bewarb weiterhin die Triage-Performance, während ein Kliniker öffentlich Sicherheitsbedenken zu den Ausgaben des Chatbots dokumentierte, was 2020 die Aufmerksamkeit der britischen Regulierer nach sich zog. Sobald die ursprüngliche Evidenz in einem Journal angegriffen wurde, ist jedes darauf aufbauende Asset exponiert, auch die, an deren Freigabe sich niemand erinnert.

Ein einfacher Rechenbeispiel-Check

Sie brauchen keine Statistik, um eine vergleichende Aussage auf Plausibilität zu prüfen. Probieren Sie das bei jeder „X % besser"-Zeile:

Claim: "40% fewer revisions"

Schritt 1  Absolute Raten?       Comparator 5,0%  →  Produkt 3,0%
Schritt 2  Absolute Differenz    5,0% - 3,0% = 2,0 Prozentpunkte
Schritt 3  Relative Reduktion    2,0 / 5,0   = 40%
Schritt 4  Frage: welches Framing nutzt die Broschüre, und ist es klar?

Beide Zahlen sind wahr. Aber „40 % weniger" klingt weit größer als „2 von 100 weniger". Prüfer erwarten zunehmend die absolute Zahl neben der relativen. Wenn Ihr File nur das relative Framing stützt, markieren Sie es, bevor es jemand anders tut.

Die wichtigsten Punkte

Eine Aussage, eine nachvollziehbare Quelle, zusammengestellt vor der Veröffentlichung und abgelegt dort, wo ein Prüfer sie ohne Hilfe öffnen kann.
Bewerten Sie die Referenz. Ein Poster, eine Subgruppenanalyse und „Data on file" stützen jeweils einen engeren Wortlaut als ein vorab festgelegter primärer Endpunkt. Ein Review statt des Primärpapers zu zitieren, ist der Weg, auf dem veraltete Aussagen überleben.
Passen Sie die Evidenzart zur Aussage: klinisch für Patientenoutcomes, Bench für technische Spezifikationen, Head-to-Head für jede Nennung eines Wettbewerbers. Ein Bench-Ergebnis impliziert nie einen klinischen Nutzen.
Echte Evidenz kann trotzdem übers Ziel hinausgehen. Grails Test erkennt ein Signal; das ist nicht derselbe Satz wie eine Senkung der Sterblichkeit, und das File muss den Unterschied kennen.
Das Paket muss Übersetzung, Format-Kompression und Field Decks überleben. Die meisten gebrochenen Aussagen waren am Tag ihrer Freigabe konform.

Zurück

Regeln zu fairem Umgang und Verbraucherschutz für Patienten und Behandler

Weiter

Den Marketing-Compliance-Check vor dem Launch durchführen