Senior Data Ingénieur (all genders) — PRODYNA (Schweiz) AG

Description complète

Chez PRODYNA, nous concevons, implémentons et exploitons des logiciels numériques modernes et des plates-formes de données pour les moyennes et grandes entreprises. Nous aidons nos clients à déverrouiller la valeur de leurs données grâce à des architectures évolutives, des analyses avancées et des technologies cloud tout en fournissant des solutions à l'épreuve de l'avenir basées sur Microsoft Azure. Dans le cadre de notre équipe en pleine croissance de Data Engineering à Athènes, vous concevez et construisez des plates-formes de données de qualité entreprise, des architectures modernes de Lakehouse et des pipelines de données haute performance qui alimentent l'analyse et la charge de travail en AI. En étroite collaboration avec les architectes, les ingénieurs en logiciels et les spécialistes du cloud, vous aiderez les clients à transformer des exigences opérationnelles complexes en solutions de données fiables, évolutives et sécurisées. Vos tâches

• Concevoir, construire et maintenir des pipelines de données en continu et en lots évolutives en utilisant Python, Apache Spark et Azure Databricks. Concevoir, construire et maintenir des pipelines de données en continu et en lots évolutives en utilisant Python, Apache Spark et Azure Databricks.
• Développer des architectures modernes ETL/ELT capables de traiter des ensembles de données d'entreprise à grande échelle.
• Concevoir et mettre en œuvre des solutions Lakehouse en utilisant Delta Lake et d'autres formats de table modernes.
• Construire des API et des services de données robustes pour les consommateurs internes et externes.
• Optimiser les applications Spark grâce au réglage des performances, aux stratégies de cloisonnement et à l'analyse des goulots d'étranglement.
• Mettre en œuvre des modèles de données dimensionnelles, des dimensions en évolution lente, l'évolution des schémas et des contrôles de la qualité des données.
• Développer des solutions de streaming en temps réel en utilisant Spark Structured Streaming.
• Collaborer avec Cloud Architects et Software Engineers pour concevoir des plateformes de données de bout en bout basées sur Azure.
• Construire l'infrastructure comme code en utilisant Terraform/Terragrunt et soutenir l'automatisation CI/CD.
• Assurer l'observation par l'exploitation forestière, la surveillance et les mesures opérationnelles.
• Appliquer les meilleures pratiques de sécurité, y compris le chiffrement, la gestion des secrets et la protection des données sensibles.
• Participer à des ateliers clients, des discussions sur l'architecture et des activités de consultation technique.

Votre profil

• 6+ ans d'expérience professionnelle en Data Engineering.
• Expérience éprouvée dans la conception de plateformes de données à l'échelle de l'entreprise.
• Expertise approfondie en optimisation des performances Spark.
• Forte expérience avec les architectures de streaming et Spark Structured Streaming.
• Expérience des technologies Lakehouse comme Delta Lake, Apache Iceberg ou Apache Hudi.
• Connaissance avancée de la modélisation des données, de l'évolution des schémas et de l'architecture des données d'entreprise.
• Expérience de la mise en oeuvre de l'infrastructure comme code en utilisant Terraform/Terragrunt.
• Connaissance de l'observation, du suivi et des opérations de production.
• Bonne compréhension de la sécurité, du chiffrement, de la gestion des clés et de la gestion RGPD/PI.
• Capacité d'encadrement des ingénieurs et de leadership technique.
• Expérience en travaillant directement avec les clients et les parties prenantes de l'entreprise.
• Connaissance de l'anglais.

Pourquoi PRODYNA

• Apprentissage continu & développement professionnel avec un budget dédié
• 25 jours de vacances avec un contrat permanent à partir du premier jour
• Sélection de matériel gratuit
• Assurance vie et santé privée
• Initiatives de santé et de bien-être, de la participation au marathon aux défis de bien-être qui nous maintiennent actifs et motivés
• Événements d'équipe et activités sociales, de notre fête de Noël mondiale aux randonnées en équipe et autres expériences mémorables
• Réseau mondial : Collaborer avec des clients et collègues internationaux à travers les pays et les cultures
• Rafraîchissements au bureau : dégustez le déjeuner, les collations et les fruits frais au bureau
• Prime d'aiguillage des employés: Recommandez un grand talent, développez notre équipe, et gagnez un bonus pour les références réussies

Questions sur cette offre