Statusrückmeldungen der Projektverantwortlichen (1)
Angaben der Projektverantwortlichen, nicht redaktionell geprüft.
Wir haben das Signal zu Epilepsie weiter verfolgt und unsere Ergebnisse dazu veröffentlicht: https://doi.org/10.1093/europace/euad087.
Der Beschluss des Innovationsausschusses
Transferempfehlung vom 20.08.2021
Der Beschluss in Kürze
Der Innovationsausschuss leitet die Erkenntnisse des Projekts PV-Monitor an das BfArM und das Paul-Ehrlich-Institut weiter. Beide werden gebeten, die Projekterkenntnisse gegebenenfalls im Rahmen einer Validierung zu prüfen und eine weitere Nutzbarmachung für die datengestützte Risikosignalerkennung zu erwägen. Beschluss und Ergebnisbericht werden veröffentlicht.
Zusammenfassung von MVF, KI-gestützt aus dem Beschluss.
Begründung
Das Projekt erforschte statistische Methoden und entwickelte Deep-Learning-Algorithmen für die Pharmakovigilanz auf Basis von GKV-Abrechnungsdaten. Die Simulationsstudie zum Vergleich der Lernverfahren führte nicht bei allen Fragestellungen zum Ziel. Erfolgreich wurden dagegen zwei Verarbeitungsketten aufgebaut.
„Insgesamt konnte das Projekt anhand neu entwickelter methodischer Ansätze zeigen, dass die Anwendung der Verarbeitungsketten zur Signaldetektion auf Abrechnungsdaten der GKV das Potenzial aufweist, UAWs zu identifizieren.“ Beschlusstext, S. 2 ↗
Hindernisse laut Beschluss (3)
- nachsehen Auswertung und Statistik: Die Simulationsstudie zum Vergleich der maschinellen Lernverfahren führte nicht bei allen Fragestellungen zum Ziel
Zitat aus dem Beschluss
„Es zeigte sich, dass die Simulationsstudie nicht bei allen Fragestellungen zum Ziel führte.“ Beschlusstext, S. 1 ↗
- nachsehen Studienanlage: Stark exploratives Vorgehen; Methoden in frühem Entwicklungsstadium
Zitat aus dem Beschluss
„Das methodische Vorgehen des Projektes war insgesamt stark explorativ und die neuen statistischen Methoden und Verfahren befinden sich in einem frühen Stadium.“ Beschlusstext, S. 1 ↗
- nachsehen Übertragbarkeit: Ein bisher unbekanntes Risikosignal wurde identifiziert, ist aber noch nicht verifiziert; vor praktischer Anwendung sind weitere Expertenkonsultationen und Einzelfallprüfungen in pharmakoepidemiologischen Studien erforderlich
Zitat aus dem Beschluss
„Darüber hinaus konnte ein unbekanntes Risikosignal identifiziert werden, welches noch nicht in entsprechenden pharmakoepidemiologischen Validierungsstudien verifiziert wurde. Hierzu bedarf es weiterer Expertenkonsultationen sowie für jeden Einzelfall weitere Überprüfungen mit Hilfe von weiteren pharmakoepidemiologischen Studien bevor das methodische Vorgehen praktische Anwendung findet.“ Beschlusstext, S. 1 ↗
Kennzeichen: belegt · nachsehen · bestritten · ungeprüft. Bedeutung →
Was der Beschluss positiv vermerkt (4)
- belegt Zwei Verarbeitungsketten zur Signalgenerierung auf GKV-Abrechnungsdaten entwickelt und am Beispiel der DOAKs angewandt
Zitat aus dem Beschluss
„Für die Signalgenerierung auf Basis von GKV -Abrechnungsdaten wurden erfolgreich zwei Verarbeitungsketten entwickelt und im Rahmen einer Machbarkeitsstudie am Beispiel der direkten oralen Gerinnungshemmer (DOAKs) angewandt, um potenzielle unerwünschte Arzneimittelwirkung (UAWs) zu identifizieren.“ Beschlusstext, S. 1 ↗
- belegt Neue Forschungsansätze aufgezeigt; generierte Risikosignale spiegeln bereits bekannte Signale wider
Zitat aus dem Beschluss
„Gleichwohl konnte das Projekt PV -Monitor neue Forschungsansätze aufzeigen und anhand der generierten Risikosignale zeigen, dass diese bereits b ekannte Signale widerspiegeln.“ Beschlusstext, S. 1 ↗
- belegt Ein bisher unbekanntes Risikosignal identifiziert (noch nicht verifiziert)
Zitat aus dem Beschluss
„Darüber hinaus konnte ein unbekanntes Risikosignal identifiziert werden, welches noch nicht in entsprechenden pharmakoepidemiologischen Validierungsstudien verifiziert wurde.“ Beschlusstext, S. 1 ↗
- belegt Potenzial der Verarbeitungsketten zur Identifikation von UAWs auf GKV-Abrechnungsdaten gezeigt
Zitat aus dem Beschluss
„Insgesamt konnte das Projekt anhand neu entwickelter methodischer Ansätze zeigen, dass die Anwendung der Verarbeitungsketten zur Signaldetektion auf Abrechnungsdaten der GKV das Potenzial aufweist, UAWs zu identifizieren.“ Beschlusstext, S. 2 ↗
Übertragbarkeit laut Beschluss
Eine praktische Anwendung setzt nach dem Beschluss weitere Expertenkonsultationen und für jeden Einzelfall weitere pharmakoepidemiologische Überprüfungen voraus; gefundene Signale sollten stets von Expertinnen und Experten begutachtet werden. Die Übernahme in die datengestützte Risikosignalerkennung soll von BfArM und PEI geprüft werden.
Adressaten und ihre Rückmeldung (2)
Stand des Rückmeldungsdokuments: 26.10.2023. Je Adressat eingestuft, was er aus der Empfehlung gemacht hat. Gezählt und erklärt in der Auswertung Transfer der Ergebnisse →
- belegt Bundesinstitut für Arzneimittel und Medizinprodukte (BfArM)geprüft und nicht aufgegriffen
Auftrag: Die Projekterkenntnisse ggf. im Rahmen einer Validierung prüfen.
In einer gemeinsamen Stellungnahme mit dem PEI berichtet das BfArM über eine komplementäre Analyse der Spontanberichte in EudraVigilance, die das vom PV-Monitor generierte Epilepsie-Signal unter DOAK nicht bestätigt hat. Die Signalerkennung aus GKV-Daten wird als möglicher weiterer Ansatz zum Signalmanagement betrachtet; eine Übernahme in ein Verfahren wird nicht benannt.Zitat aus der Rückmeldung
„Das vom PV-Monitor detektierte Signal zum Risiko des Auftretens von Epilepsie im Zusammenhang mit der Anwendung von DOAK aus den Abrechnungsdaten von gesetzlichen Krankenversicherungen (GKV) konnte durch die komplementäre Analyse von Spontanberichten nicht bestätigt werden.“ Rückmeldung, S. 8 ↗
- belegt Paul-Ehrlich-Institut (PEI) Bundesinstitut für Impfstoffe und biomedizinische Arzneimittelgeprüft und nicht aufgegriffen
Auftrag: Die Projekterkenntnisse ggf. im Rahmen einer Validierung prüfen.
Das PEI hat die gemeinsame Stellungnahme mit dem BfArM abgegeben, nach der das Epilepsie-Signal durch die komplementäre Analyse nicht bestätigt wurde. Die Signaldetektion in GKV-Daten wird als Quelle erster Hinweise gewertet; eine Übernahme in ein Verfahren wird nicht benannt.Zitat aus der Rückmeldung
„Das vom PV-Monitor detektierte Signal zum Risiko des Auftretens von Epilepsie im Zusammenhang mit der Anwendung von DOAK aus den Abrechnungsdaten von gesetzlichen Krankenversicherungen (GKV) konnte durch die komplementäre Analyse von Spontanberichten nicht bestätigt werden.“ Rückmeldung, S. 8 ↗
Wie es ausging
0 Hauptziele, davon 0 signifikant zugunsten der neuen Versorgung. Dazu 8 Nebenziele, 2 davon signifikant zugunsten.
| Rolle | Endpunkt laut Bericht | Befund | p | Seite |
|---|
Alle 8 Nebenziele anzeigen
| Rolle | Endpunkt laut Bericht | Befund | p | Seite |
|---|---|---|---|---|
| Nebenziel | Gastrointestinale Blutung (Positivkontrolle), Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | signifikant zuungunsten statistisch signifikant zuungunsten der Intervention | <.001 | 54 |
| Nebenziel | Intrakranielle Blutung (Positivkontrolle), Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | signifikant zugunsten statistisch signifikant zugunsten der Intervention | <.001 | 54 |
| Nebenziel | Akute Leberschädigung, Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | signifikant zugunsten statistisch signifikant zugunsten der Intervention | <.001 | 54 |
| Nebenziel | Akute Nierenschädigung, Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | kein Unterschied kein statistisch signifikanter Unterschied | 0.629 | 55 |
| Nebenziel | Zystitis, Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | signifikant zuungunsten statistisch signifikant zuungunsten der Intervention | 0.002 | 55 |
| Nebenziel | Epilepsie, Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | signifikant zuungunsten statistisch signifikant zuungunsten der Intervention | <.001 | 56 |
| Nebenziel | Glaukom, Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | kein Unterschied kein statistisch signifikanter Unterschied | 0.143 | 57 |
| Nebenziel | Sepsis, Einzelnutzung eines DOAKs am Indextag Familie: Arzneimitteltherapie und Arzneimittelsicherheit belegt | signifikant zuungunsten statistisch signifikant zuungunsten der Intervention | 0.039 | 58 |
Fallzahl
Geplant: – nicht angegeben · ausgewertet: 33.001 Versicherte
- Ausgewertet: „Zum Trainieren der Modelle konnten 26.798 Versicherte (UAW: 257, Tod: 1.155) genutzt werden und zur temporalen Validierung 33.001 Versicherte (UAW: 320, Tod: 1.398).“ Ergebnisbericht, S. 30 ↗
Das Vorhaben
Beschreibung aus der Projektdatenbank des GBA
Unerwünschte Arzneimittelwirkungen zählen zu den häufigen Todesursachen. Immer wieder kommt es zu Marktrücknahmen bei Arzneimitteln, da schwerwiegende Nebenwirkungen vor der Zulassung nicht erkannt wurden. Um diese Risiken aufzudecken, überwacht die sogenannte Pharmakovigilanz systematisch die Arzneimittelsicherheit nach der Zulassung. Ärzte und Betroffene melden unerwünschte Arzneimittelwirkungen an ein Melderegister. Diese sogenannten Spontanmeldedaten sind jedoch nur begrenzt geeignet, um potenzielle Sicherheitsrisiken zu identifizieren. Über den tatsächlichen Gesundheitszustand der betreffenden Patienten ist zudem wenig bekannt. In diesem Projekt werden neue Methoden zur Anwendung in der Pharmakovigilanz erforscht, die auf Abrechnungsdaten von Krankenkassen zurückgreifen. Aus den Abrechnungsdaten lassen sich sowohl Informationen zur Art der abgegebenen Arzneimittel als auch zum Auftreten von Diagnosen erschließen. Dementsprechend bestehen die Ziele in der Methodenentwicklung unter Ausnutzung von Analogien zur genetischen Epidemiologie und der Erschließung dieser Methoden für die Pharmakovigilanz, und zwar (1) zur Vermeidung falsch-positiver Signale für Arzneimittelrisiken, (2) zur Erkennung seltener Risiken und (3) zur Ermittlung von Risikoprofilen von Patienten und Patientinnen. Im Rahmen einer Machbarkeitsstudie werden neue orale Gerinnungshemmer untersucht, die von Patienten und Patientinnen mit Vorhofflimmern genutzt werden. Das Projekt wird für 42 Monate mit ca. 1,2 Millionen Euro gefördert. Ein auf Abrechnungsdaten basierender Ansatz stellt eine sinnvolle Ergänzung zu dem bestehenden Melderegister dar und kann zur Verbesserung der Patientensicherheit beitragen. Insbesondere die hohe Bevölkerungszahl in Deutschland ermöglicht zeitnahe Analysen zu neuen, seltener verordneten Arzneimitteln nach deren Zulassung.
Die Berichte im Wortlaut
Die Berichte werden geladen …
Wo Beschluss und Berichte auseinandergehen
Ein Beschluss des Innovationsausschusses ist eine politische Entscheidung, keine Messung: Versorgungsrelevanz, Umsetzbarkeit, Stellungnahmen und Prioritäten gehen mit ein. Was hier steht, ist deshalb meist kein Widerspruch, sondern ein Unterschied zweier Maßstäbe.
wird geladen …
Wo die Berichte sich selbst widersprechen
Beim vollständigen Lesen fällt auf, was beim Lesen eines einzelnen Kapitels nicht auffällt. Das ist kein Vorwurf an das Vorhaben, sondern die Angabe, wie belastbar die Zahlen sind.
wird geladen …