Was kann ein Effectiveness Check über eine CAPA aussagen?

Im März und April 2025 inspizierte die US-amerikanische Food and Drug Administration den Arzneimittelhersteller Liebel-Flarsheim Company LLC in Raleigh, North Carolina. Im amendierten Warning Letter vom 17. Oktober 2025, MARCS-CMS 711508, beanstandete die FDA unter anderem Untersuchungen zu mikrobiologischen Überschreitungen und OOS-Ergebnissen als unzureichend sowie die ermittelten Ursachen als wissenschaftlich nicht hinreichend begründet.

Nach Darstellung der FDA sollte den während der Inspektion festgestellten Fehlern jeweils eine CAPA einschließlich Effectiveness Check zugeordnet werden. An einer vorgesehenen Wirksamkeitsprüfung fehlte es also nicht. Die Behörde hielt die Antwort dennoch für unzureichend, weil bereits die zugrunde liegenden Investigations keine tragfähige Grundlage geschaffen hatten.

Wie konkret dieses Problem werden kann, zeigt ein OOS-Endotoxinbefund aus demselben Warning Letter. Die Untersuchung nahm eine versehentliche Kreuzkontamination einer Ausgangsverdünnung an, ohne deren Quelle zu identifizieren. Als Corrective Action erhielt der Analyst ein zusätzliches Awareness-Training. Die FDA stellte jedoch fest, dass diese Maßnahme der eigenen anfänglichen Bewertung widersprach, nach der Analyst und Verfahren nicht Ursache des OOS gewesen seien.

Der Warning Letter ist keine Auslegung deutschen Arzneimittelrechts, sondern ein US-amerikanischer Behördenbefund, der anschließend anhand von AMWHV, EU-GMP und ICH Q9 eingeordnet wird.

Damit verschiebt sich die Frage: Ein Effectiveness Check kann vorgesehen und später sogar formal durchgeführt werden. Seine Aussagekraft hängt trotzdem davon ab, welche Ursache oder Schwachstelle die CAPA überhaupt adressieren sollte.

Für deutsche Arzneimittelhersteller beginnt die Einordnung im Qualitätsmanagementsystem. § 3 Abs. 1 AMWHV verlangt ein funktionierendes QM-System entsprechend Art und Umfang der durchgeführten Tätigkeiten. Es muss vollständig dokumentiert sein und auf seine Funktionstüchtigkeit kontrolliert werden. Nach § 3 Abs. 2 AMWHV gilt Teil I des EU-GMP-Leitfadens zur Auslegung der Grundsätze der Guten Herstellungspraxis.

EU-GMP Chapter 1 Nr. 1.4(xiv) verbindet Investigation, Root Cause, CAPA und Effectiveness unmittelbar miteinander. Bei Deviations, suspected product defects und anderen Problemen soll ein angemessenes Maß an Root Cause Analysis angewendet werden. Als Reaktion auf die Untersuchung sollen geeignete Corrective und/oder Preventive Actions identifiziert und umgesetzt werden. Deren Effectiveness soll anschließend überwacht und bewertet werden.

Diese Reihenfolge ist mehr als ein formaler Workflow. Eine CAPA wird nicht abstrakt wirksam. Sie soll einen Zustand beeinflussen, der in der Investigation als Ursache, Ursachenfaktor oder relevante Schwachstelle verstanden wurde. Wird etwa Training gewählt, liegt darin eine andere fachliche Logik als bei einer technischen Änderung oder der Beseitigung eines konstruktiven Prozessfehlers.

Für diesen Beitrag lässt sich diese Verbindung als Annahme beschreiben: Wenn eine bestimmte Ursache oder Schwachstelle relevant ist und durch eine bestimmte Maßnahme beeinflusst wird, sollte sich eine dazu passende Veränderung beobachten lassen. „Annahme" ist dabei keine regulatorische Kategorie und keine neue Anforderung der Guten Herstellungspraxis (GMP). Der Begriff dient hier nur als analytisches Modell für die Verbindung, die bereits hergestellt sein muss, wenn später die Effectiveness einer Maßnahme beurteilt werden soll. Ebenso wenig verlangt dieses Modell einen formalen Hypothesentest.

Der Liebel-Befund zeigt, warum diese Trennung nützlich ist. Ein Effectiveness Check kann vorgesehen sein. Wenn aber noch unklar bleibt, welche Schwachstelle die CAPA eigentlich adressiert oder warum die gewählte Maßnahme zu dieser Schwachstelle passen soll, fehlt dem späteren Check ein eindeutiger Bezugspunkt.

Daraus folgt nicht, dass eine CAPA erst nach zweifelsfreier Ermittlung der einen wahren Root Cause zulässig wäre. Gerade diese Schlussfolgerung trägt EU-GMP Chapter 1 Nr. 1.4(xiv) nicht. Die Regelung berücksichtigt ausdrücklich den Fall, dass sich die tatsächliche Root Cause nicht bestimmen lässt. Dann sollen die wahrscheinlichsten Ursachen identifiziert und adressiert werden.

Eine Investigation kann mit begrenztem Wissen arbeiten und trotzdem eine fachlich begründete Arbeitshypothese entwickeln. Problematisch wird es, wenn eine Ursachenannahme so unbestimmt bleibt, dass sich nicht mehr erklären lässt, warum gerade die gewählte Maßnahme auf das untersuchte Problem wirken soll.

Genau an dieser Stelle ist der OOS-Befund bei Liebel-Flarsheim aufschlussreich. Die FDA beanstandete nicht nur, dass die Quelle der angenommenen Kreuzkontamination nicht festgestellt worden war. Sie stellte zusätzlich den logischen Bezug der Corrective Action infrage: Ein Awareness-Training für den Analysten stand neben der eigenen anfänglichen Feststellung, dass Analyst und Verfahren nicht Ursache des OOS seien.

Training ist deshalb nicht pauschal eine schwache CAPA. ICH Q9(R1), Annex II.1, nennt die periodische Beurteilung vorangegangener Schulungen einschließlich ihrer Effectiveness ausdrücklich als mögliche Anwendung von Quality Risk Management. Der Anhang weist zugleich darauf hin, dass seine Beispiele keine neuen regulatorischen Erwartungen schaffen. Die Frage ist also nicht, ob Training grundsätzlich wirksam sein kann. Sie lautet, welche konkrete Schwachstelle durch dieses Training beeinflusst werden soll.

Damit rückt die erwartete Wirkung nach vorne. Wer eine CAPA plant, braucht keinen universellen KPI. Er braucht aber eine Vorstellung davon, was nach der Maßnahme anders sein soll.

Bei einer angenommenen Wissenslücke könnte eine spätere Beobachtung darauf gerichtet sein, ob die betreffende Tätigkeit fachlich richtig ausgeführt wird. Bei einer technischen Schwachstelle wäre eine reine Wissensabfrage dagegen möglicherweise kaum aussagekräftig. Und wenn ein Fehlermechanismus nur bei bestimmten Prozesskonstellationen auftreten kann, sagt eine lange fehlerfreie Zeitspanne wenig, wenn dieser Mechanismus in dieser Zeit kaum Gelegenheit hatte, erneut wirksam zu werden.

Der Zusammenhang liegt nicht in der Art des Nachweises, sondern davor. Die beobachtete Veränderung muss zur Annahme passen, auf deren Grundlage die Maßnahme gewählt wurde. Erst dann lässt sich beurteilen, ob die spätere Information tatsächlich etwas über die Wirkung dieser Maßnahme aussagt.

Der EU-GMP-Leitfaden gibt in Teil I, Chapter 1 Nr. 1.13 dafür keinen festen Prüfplan vor. Die Bewertung von Qualitätsrisiken soll auf wissenschaftlicher Kenntnis und Prozesserfahrung beruhen; Aufwand, Formalität und Dokumentation des Quality Risk Management sollen dem Risikoniveau angemessen sein. Daraus folgt keine allgemeine Pflicht zu einer bestimmten Laufzeit, einer bestimmten Batch-Zahl oder einem bestimmten Kennwert für jeden Effectiveness Check.

Das schützt zugleich vor der umgekehrten Vereinfachung. Eine formal aufwendige Wirksamkeitsprüfung ist nicht automatisch belastbarer. Entscheidend bleibt, ob sie die Veränderung beobachten kann, die nach der gewählten CAPA überhaupt erwartet werden durfte.

Ein häufiger Kurzschluss lautet: Der Fehler ist seit Umsetzung der CAPA nicht wieder aufgetreten, also war die CAPA wirksam. Das kann starke Evidenz sein. Es kann aber auch fast nichts bedeuten.

Die Aussage hängt davon ab, welche Gelegenheit für ein Wiederauftreten bestand. Wenn ein zuvor häufiger Fehler nach zahlreichen vergleichbaren Prozessdurchläufen ausbleibt, besitzt diese Beobachtung eine andere Aussagekraft als sechs fehlerfreie Monate bei einem Ereignis, das ohnehin nur sehr selten auftreten konnte. Der relevante Beobachtungsraum ergibt sich damit aus dem Problem und nicht aus einem pauschalen Kalenderintervall.

Dasselbe gilt beim Wiederauftreten. Ein ähnliches Ereignis kann die ursprüngliche Annahme infrage stellen, ohne automatisch zu beweisen, dass jede Maßnahme wirkungslos war. Vielleicht lag ein weiterer Ursachenfaktor vor. Vielleicht wurde eine Maßnahme nicht nachhaltig aufrechterhalten. Vielleicht handelt es sich um einen anderen Mechanismus mit gleichem Erscheinungsbild. Der neue Befund ist deshalb zunächst Evidenz, die in die ursprüngliche Bewertung zurückgeführt werden muss.

Quantitative Daten können dabei sehr hilfreich sein, wenn das Problem eine quantitative Betrachtung trägt. ICH Q9(R1), Annex I.9, nennt statistische Werkzeuge als Unterstützung für Data Assessment und verlässlichere Entscheidungen. Daraus folgt aber keine allgemeine KPI-Pflicht. Eine qualitative Beobachtung kann fachlich stärker sein als eine Kennzahl, wenn sie näher an der erwarteten Veränderung liegt.

Der Effectiveness Check beantwortet deshalb nicht sechs getrennte Standardfragen zu Zeit, Wiederholung, Trend, Training, Statistik und Risiko. Er beantwortet eine einzige: Welche Beobachtung ist geeignet, die konkrete Annahme über die Wirkung dieser CAPA zu stützen oder infrage zu stellen?

Die Wirksamkeitsbewertung endet nicht zwingend mit dem administrativen Abschluss eines CAPA-Vorgangs. ICH Q9(R1) Nr. 4.6 behandelt Risk Review als fortlaufenden Bestandteil des Qualitätsmanagements. Ergebnisse sollen unter Berücksichtigung neuer Erkenntnisse und Erfahrungen erneut betrachtet werden, wenn geplante oder ungeplante Ereignisse die ursprüngliche risikobasierte Entscheidung beeinflussen können.

EU-GMP Chapter 1 Nr. 1.10(iv) führt dieselbe Perspektive in den Product Quality Review. Dort sollen signifikante Deviations oder Non-Conformances, die dazugehörigen Investigations und die Effectiveness der daraus resultierenden CAPAs überprüft werden. Ein früherer positiver Effectiveness Check wird dadurch nicht bedeutungslos. Er bleibt eine Bewertung auf Grundlage des damals verfügbaren Beobachtungsraums. Spätere Informationen können jedoch die damalige Annahme neu bewertbar machen.

Im FDA Warning Letter an Liebel-Flarsheim findet sich dafür ein zweiter, getrennt zu behandelnder Sachverhalt. Die FDA beschreibt eine seit 2019 festgestellte mikrobielle Belastung im Betrieb. CAPA und Change Control zur Behebung von Environmental Excursions waren 2023 und 2024 eingeleitet worden; bei der Inspektion 2025 stellte die Behörde weiterhin mikrobielle Präsenz fest.

Daraus lässt sich nicht ableiten, dass die zuvor erwähnten Effectiveness Checks zu den während der Inspektion festgestellten Fehlern bereits gescheitert wären. Es handelt sich um einen anderen Teil des Warning Letters. Der Befund zeigt aber, warum neue Evidenz nicht außerhalb einer CAPA-Betrachtung stehen darf: Frühere Maßnahmen und spätere Beobachtungen können eine erneute fachliche Beurteilung erforderlich machen, ohne dass allein das Wiederauftreten schon die gesamte Kausalfrage beantwortet.

Auch ICH Q9(R1) Nr. 4.4 setzt Risk Control nicht mit vollständiger Risikobeseitigung gleich. Risk Control kann auf Reduktion eines Risikos auf ein akzeptables Niveau gerichtet sein; selbst gute Risikomanagementpraxis kann Risiken nicht in jedem Fall vollständig eliminieren. Eine CAPA ist deshalb nicht erst dann wirksam, wenn ein Fehler technisch unmöglich geworden ist. Entscheidend ist, welche Risikoreduktion oder Beherrschung mit der Maßnahme beabsichtigt war und welche Evidenz dafür vorliegt.

PIC/S PI 041-1 Nr. 12.1.1.3 formuliert im besonderen Kontext erheblicher Data-Integrity-Probleme einen engen Wirkungsbezug: CAPA Effectiveness Checks sollen beobachten, ob die getroffenen Maßnahmen das identifizierte Problem beseitigt haben. Diese Passage ist keine allgemeine Definition für jede CAPA. Sie zeigt aber besonders deutlich, dass der Check auf die Wirkung einer konkreten Maßnahme gegenüber einem konkreten Problem gerichtet ist.

Damit lässt sich auch der Ausgangsfall neu lesen. Liebel-Flarsheim hatte angekündigt, den während der Inspektion festgestellten Fehlern CAPAs einschließlich Effectiveness Checks zuzuordnen. Die FDA hielt die Antwort dennoch für unzureichend, weil die Investigations selbst keine hinreichend belastbare Grundlage geschaffen hatten. Bei einem OOS-Fall stand zudem eine Trainingsmaßnahme in Spannung zur eigenen Ursachenbewertung.

Der interessante Unterschied verläuft deshalb nicht mehr nur zwischen „Action completed" und „Action effective". Dazwischen liegt eine fachliche Verbindung, die im CAPA-System leicht unsichtbar werden kann: Warum sollte gerade diese Maßnahme gerade diese Schwachstelle verändern, und welche spätere Beobachtung kann diese Erwartung tragen?

Ein Effectiveness Check kann eine unsichere Ursachenannahme stützen, korrigieren oder widerlegen. Er kann aber nicht nachträglich bestimmen, welche Wirkung ursprünglich überhaupt geprüft werden sollte, wenn diese Verbindung zuvor unbestimmt geblieben ist.

Für die betriebliche Praxis verschiebt sich damit der interessanteste Prüfpunkt nach vorne. Bei einer geschlossenen CAPA würde ich nicht nur fragen, ob alle Actions umgesetzt und der Effectiveness Check bestanden wurden. Ich würde zuerst nachvollziehen wollen, welche Annahme zwischen Investigation und Maßnahme stand.