Beginnend mit Elektrokardiogramm-Algorithmen, die im Gesundheitswesen eingesetzt werden, wird Dandelion Health Algorithmen auf seinen Datensatz – der 10 Millionen Patienten umfasst – ausführen, um die Leistung und Voreingenommenheit der künstlichen Intelligenz über wichtige rassische, ethnische und geografische Untergruppen hinweg zu messen.
WARUM ES WICHTIG IST
Dandelion aggregiert und anonymisiert klinische Daten über sein Konsortium aus drei großen Gesundheitssystemen – Sharp HealthCare in San Diego, Sanford Health in Sioux Falls, South Dakota und Texas Health Resources in Arlington, Texas –, um Algorithmen zu validieren, heißt es in der heutigen Ankündigung.
Das New Yorker Start-up-Unternehmen mit Sitz in New York, auch bekannt als Dandelion Health Data Consortium, gibt an, dieses kostenlose Programm entwickelt zu haben, das Gesamtleistungsmetriken und solche für vorab festgelegte Interessengruppen im Rahmen eines offenen, offenen Programms liefern kann, bei dem die Privatsphäre der Patienten an erster Stelle steht -Access-Modell.
Dandelion sagt, dass der erste Dienst seiner Art die grundlegende Herausforderung angeht, die Leistung von Algorithmen anhand der beabsichtigten Bevölkerungsgruppen zu validieren – die Sicherung hochwertiger klinischer Datensätze, die verschiedene Bevölkerungsgruppen umfassen und die Privatsphäre der Patienten an die erste Stelle setzen, verursacht hohe Kosten und ist schwer zu finden.
Das Unternehmen verspricht, es möglichst vielen Algorithmenentwicklern zugänglich zu machen, die an prädiktiven Analysen für die Kardiologie unter Verwendung von Elektrokardiogramm-Wellenformen arbeiten.
Jeder Forscher oder jedes Unternehmen, das dazu berechtigt ist, kann seinen EKG-Algorithmus auf eine HIPAA- und SOC-2-konforme Plattform hochladen und die Leistungsmetriken angeben, die er abfragen möchte.
Benutzer unterzeichnen einen Vertrag zum Schutz ihrer IP-Adresse, verarbeiten den Algorithmus anhand der bereitgestellten Beispieldaten vor, schreiben mithilfe einer Vorlage etwa 10 Zeilen Wrapper-Code, übermitteln den Container und bestätigen, dass sie zur Validierung bereit sind. Anschließend führt Dandelion den Algorithmus für etwa 500.000 Datensätze aus, sammelt und berechnet die Ergebnisse und sendet den Bericht.
„Wenn ein Algorithmus anhand eines Datensatzes aus Cambridge oder Palo Alto trainiert und dann auf andere Bevölkerungsgruppen angewendet wird – eine andere Geographie, ein anderes Pflegeumfeld oder eine andere Rassen- und ethnische Mischung von Patienten – kann sich die Leistung des Algorithmus dramatisch verschlechtern.“ “, sagte Elliott Green, CEO und Mitbegründer von Dandelion Health.
„Es ist wichtig zu wissen, wie Algorithmen funktionieren, sowohl insgesamt als auch für die am stärksten gefährdeten Patientengruppen, die normalerweise nicht in Algorithmus-Trainingsdatensätzen vertreten sind. Unser Pilotprogramm beantwortet die Frage: Tut Ihr Algorithmus das, was er tun soll? Und tut er das?“ es fair, für alle?
Das Unternehmen gibt an, dass die Namen der teilnehmenden Forscher und Unternehmen niemals veröffentlicht werden und die Ergebnisse nur an Algorithmenentwickler weitergegeben werden, es sei denn, sie erteilen anderen die Erlaubnis.
Es heißt auch Sendhil Mullainathan, Mitbegründer und Berater und Professor für Computer- und Verhaltenswissenschaften der Roman Family University am Chicago Booth, und Dr. Ziad Obermeyer, Mitbegründer und wissenschaftlicher Leiter sowie außerordentlicher Professor und angesehener Professor des Blue Cross of California Die Berkeley School of Public Health wird das kostenlose KI-Validierungsprogramm beaufsichtigen.
Dandelion wird ab dem 15. Juli für einen ersten Zeitraum von drei Monaten damit beginnen, EKG-Wellenformalgorithmen, die repräsentativ für die US-Bevölkerung sind, von Entwicklern weltweit zur Validierung zu akzeptieren. Zukünftige Pläne über das Pilotprojekt hinaus umfassen die Hinzufügung klinischer Datenmodalitäten wie klinische Notizen und radiologische Bildgebung.
DER GRÖSSERE TREND
Angesichts des rasanten Wachstums, der Entwicklung und der Integration von KI-Tools im Gesundheitswesen haben die US-amerikanische Food and Drug Administration, die Coalition for Health AI und andere Methoden zur strengen Messung und Validierung der Sicherheit und Wirksamkeit von Algorithmen gefordert.
Auf der HIMSS23 diskutierte Sonya Makhni, medizinische Leiterin der Mayo Clinic Platform, über die Bedeutung der Validierung und plattformbasierten Zusammenarbeit bei der Entwicklung und Bereitstellung effektiver KI im Gesundheitswesen. Auf der Entwicklungsplattform der Klinik stimmen die Mitarbeiter Datenstandards zu und behalten das Eigentum an ihren Daten, während sie zusammenarbeiten, um Ökosysteme zu trainieren und zu validieren, erklärte sie.
Sie sagte, dass die Mayo Clinic durch den Zugriff auf nicht identifizierte 10,4 Millionen Längsschnittpatientenakten externe Innovationen in einem viel schnelleren Tempo ermöglicht. Diese Plattform setzt validierte Algorithmen – etwa EKG-Algorithmen – ein und integriert sie in die Arbeitsabläufe der Klinik.
Sharp Healthcare und Sanford Health, das größte ländliche Gesundheitssystem in den Vereinigten Staaten, sind im August dem Dandelion Health Data Consortium beigetreten, um Vielfalt in der Datenwissenschaft aufzubauen.
„Menschen mit großartigen Ideen können nicht auf sichere und prinzipielle Weise auf KI-fähige Daten in Forschungsqualität zugreifen. Das bedeutet, dass keine KI-Produkte entwickelt werden, die die klinische Versorgung grundlegend verändern könnten“, sagte Obermeyer letztes Jahr.
AUF DEM RECORD
„Es besteht großes Interesse an Algorithmen, die Elektrokardiogramm-Wellenformen eingeben – die die Funktion des Herzens durch Messung seiner elektrischen Aktivität testen – und Vorhersagen über Arrhythmien, Laborwerte oder die Ergebnisse anderer, teurerer Tests wie Echokardiogramme ausgeben“, sagte Obermeyer ein Statement.
„Fragen zur Datenqualität und zum Datenschutz von Patienten sind zu einem weltweiten Gespräch in der Wissenschaft und im Gesundheitswesen, bei Regierungen und in der Öffentlichkeit geworden. Das Ziel unseres Pilotprogramms besteht darin, Entwicklern einen einfachen Einblick in die Gesamtleistung ihrer Algorithmen zu ermöglichen – und.“ für bestimmte Interessengruppen – unter Verwendung eines wissenschaftlich strengen Validierungsprozesses, der die Privatsphäre der Patienten schützt und im Einklang mit dem Gemeinwohl steht.“
Andrea Fox ist leitende Redakteurin von Healthcare IT News.
E-Mail: [email protected]
Healthcare IT News ist eine Publikation von HIMSS Media.
