Skip to content

Import clinical Synthea cases through editable Excel templates - #54

Merged
astruebi merged 96 commits into
developfrom
codex/52-synthea-diagnoses
Sep 18, 2026
Merged

astruebi merged 96 commits into
developfrom
codex/52-synthea-diagnoses

Conversation

@astruebi

@astruebi astruebi commented Sep 12, 2026 •

Copy link
Copy Markdown
Collaborator

Ergebnis

Der Docker-Workflow erzeugt aus Synthea bearbeitbare deutsche Excel-Dateien und daraus KDS-orientierte FHIR-R4-Testdaten einschließlich Rückvergleich und Validierungsberichten. Excel und CSV verwenden denselben Java-Konverter. README und Anleitungen beschreiben Docker-Aufruf, manuelle Bearbeitung und Architektur.

Die versionierten Zuordnungen behandeln 333 Diagnose-, 429 Prozedur- und 495 Medikamentenkonzepte des gepinnten Synthea-Standes. Die Prozedurtabelle enthält alle 428 Procedure-State-Konzepte und ein zusätzlich in generierten Fällen vorkommendes CT-Konzept. Medikamente erhalten echte deutsche PZN, deutsche Präparatbezeichnungen, Darreichungsformen, Wirkstoffe und ATC 2026. RxNorm bleibt interner Mapping-Schlüssel. MMI oder Medication Graph werden nicht zur Laufzeit benötigt.

Prozeduren verwenden offizielle OPS-Einzelbeschreibungen. Kombinierte CT-Untersuchungen werden nach Körperregion aufgeteilt; Radiochemotherapie erzeugt Bestrahlungsfraktionen und Chemotherapieblöcke anhand zugehöriger Verabreichungen, Wirkstoffe und Behandlungstage. Aufgeteilte Maßnahmen enthalten keinen kombinierten SNOMED-Zusatzcode. Quell-IDs, Zeitfenster, Excel-Zeilen und synthetische Annahmen stehen im Mappingbericht. In der Krankenhauskohorte steigt die OPS-Abdeckung von 46 auf 390 Zeilen mit 29 verschiedenen OPS-Codes. Nicht belastbar zuordenbare Maßnahmen bleiben mit SNOMED erhalten.

Kontakte entstehen aus Fachabteilung und Ortsangaben; sekundäre OP-/Behandlungskontakte können parallel zum Stationsaufenthalt laufen. Vorlagen enthalten feldbezogene Auswahllisten und explizite Data Absent Reasons. Codes steht als letztes Blatt. AllergyIntolerance und Device werden mit Ressourcen-ID im Verlustbericht ausdrücklich ausgeschlossen. Options- und Zeitfehler werden gesammelt geprüft. Die vorhandene outputSynthea/converter-options.config bleibt geschützt und wird je Lauf dokumentiert.

Unter Linux startet der vollständige Containerworkflow mit UID/GID des gemounteten Ausgabeordners. Dadurch kann dessen Eigentümer private Laufordner lesen und die erzeugten Excel-Dateien bearbeiten. Ein Linux-Regressionstest prüft Lesen, Bearbeiten und Löschen unter einer getrennten Benutzer-ID.

Validierung

  • mvn test package: 89 Java-Tests und Paketbau bestanden; HAPI FHIR 8.12.1 integriert.
  • Python: 104 Tests, davon 103 lokal bestanden und ein Linux/root-Test lokal übersprungen. Dieser Test wurde zusätzlich im Linux-Container erfolgreich ausgeführt.
  • Vollständiger Offline-Workflow unter UID1001 erfolgreich. Ein separater Prozess unter dieser ID konnte den Bericht lesen und die Excel-Datei bearbeiten.
  • Alle zehn Krankenhausfälle neu durch LibreOffice/UNO, Excel, Java und FHIR verarbeitet: 8.817 Ressourcen, vollständige Importe, integrierte und unabhängige Abgleiche bestanden.
  • 161 OPS-Ziele einschließlich Aufteilungs- und Chemotherapievarianten gegen den offiziellen OPS-2026-Katalog samt Einzelbeschreibung geprüft.
  • Alle übrigen Ressourcentypen außer Procedure und Encounter sind gegenüber dem vorherigen Review inhaltlich unverändert. Die bestehenden Vorlagen wurden nicht verändert.
  • Frühere Produktprüfungen umfassten Standardworkflow, Krankenhausrezept, manuelle Excel-Änderung mit erneuter Konvertierung, Excel-Demo und direkten CSV-Einstieg. Letzterer meldet Import-/Validierungsprobleme mit Fehler-Exitcode.

Die Validierung meldet bekannte Terminologielücken als NOT_CHECKED mit Exitcode 1. Vollständige Terminologiekonformität wird nicht behauptet.

Offene Punkte

Der Generator ist für #55 auf astruebi/synthea mit Commit 869182a0a5e54f090066d9fc4a971cf14e3d3dbf gepinnt; die Sicherheitskorrekturen liegen in Synthea-PR #1712. Der lokal aus diesem Commit gebaute vollständige Workflow besteht Import und Rückvergleich. Trivy meldet ohne Ignore-Liste keine HIGH/CRITICAL-Befunde in Java; 113 Debian-Befunde ohne verfügbare Korrektur fallen unter die bestehende CI-Regel ignore-unfixed. Keine neuen Ausnahmen oder abgeschwächten Checks. Nach Upstream-Übernahme können Quelle und Pin gemeinsam zurückgestellt werden. Menschlicher Review betrifft synthetische Mappingannahmen, Präparate, Dosierungen, Kontakte und Spaltenbreiten. Lange Beschreibungen sind vollständig in den Zellen gespeichert, können in den unveränderten schmalen Vorlagenspalten aber abgeschnitten erscheinen. Spätere Fehlwert- und Kontaktabschlussstrategien sind zurückgestellt.

Refs #52, #55

@astruebi astruebi changed the title Preserve Synthea diagnoses through Excel and represent emergency contacts Import Synthea diagnoses through Excel with approximate ICD-10-GM mapping Sep 12, 2026
@astruebi
astruebi marked this pull request as ready for review September 12, 2026 09:55
@astruebi astruebi changed the title Import Synthea diagnoses through Excel with approximate ICD-10-GM mapping Import clinical Synthea cases through editable Excel templates Sep 12, 2026
return issues;
}
if (!newRoot && state.primary != null && (places || department != null)) {
if (start.before(state.primary.start()) || (!state.derived && state.primary.end() != null && start.before(state.primary.end())))
@astruebi
astruebi force-pushed the codex/52-synthea-diagnoses branch from d3ed297 to bf51036 Compare September 16, 2026 17:02
@astruebi
astruebi merged commit f62d7d2 into develop Sep 18, 2026
6 checks passed
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment

Labels

None yet

Projects

None yet

Development

Successfully merging this pull request may close these issues.

2 participants