Data Engineer – 100% — HUG

Vollständige Beschreibung

Als Data Engineer entwerfen und entwickeln Sie die Datenverarbeitung für Datenmigration und Business Datamarts. Bei der Durchführung Ihrer Missionen setzen Sie auf Technologien wie SQL, Python, MongoDB sowie Orchestrierungstools wie Airflow. Sie sind Teil eines Teams von 12 Personen und beteiligen sich an einem bundesweiten Projekt zur Freigabe medizinischer Daten aus den fünf Schweizer Universitätskliniken, um ein nationales Netzwerk von interoperablen, sicheren und dedizierten Gesundheitsdaten für die medizinische Forschung zu schaffen. In diesem Zusammenhang tauschen Sie sich aus und beteiligen sich an der Definition des gemeinsamen Datenformats. Sie gewährleisten die Integration von Daten aus verschiedenen Quellen (Datenbanken, Data Warehouses, Microservices API, Kafka Feed) und gleichzeitig deren Qualität, Konsistenz und Integrität. Als solches richten Sie Überwachungsmechanismen für Datenpipelines ein und überwachen deren Leistung, insbesondere bei großen Mengen. Ihre Rolle umfasst auch die strenge Validierung der Datenqualität mit Geschäftsteams, die Implementierung von Tools zur Erleichterung des Datenabrufs und der Datenauswertung sowie die Einhaltung ethischer, regulatorischer und datenschutzrechtlicher Standards. Schließlich entwickeln Sie sich dank Ihrer Anpassungsfähigkeit und Autonomie erfolgreich in einer dynamischen und anregenden Umgebung, um Ihre Projekte durchzuführen.