Senior Data Engineer H/F/X

Description de la fonction

Smals réalise des projets ICT innovants dans l'e-gouvernement et l'e-santé pour les institutions de la sécurité sociale et des soins de santé. Pour Smals, "ICT for society" n'est pas qu'un slogan : tous nos projets profitent à la société. Smals contribue au portail de la sécurité sociale et à la plateforme eHealth. Les projets novateurs sont notre spécialité : Student@Work, Orgadon, digitalisation des prescriptions médicales, consultation de l'historique de la carrière, transmission plus rapide des résultats de test à son médecin...
En tant que Senior Data Engineer, vous faites partie de l'équipe Information Delivery Services (IDS), chargée de l'implémentation de la plateforme de données commune chez un client qui est un acteur important de la sécurité sociale pour les domaines du chômage, de l'interruption de carrière et du crédit-temps. Vous combinez une approche analytique et une expertise technique pour concevoir, construire et maintenir des pipelines de transformation. Vous participez activement à la phase d'ingestion du cycle de vie des données - depuis divers systèmes sources vers la Data Platform, qui utilise l'architecture en médaillon - et au traitement des données dans les deux premières zones du lakehouse. En collaboration avec les Data Analytics Engineers de l'équipe, vous veillez à l'orchestration afin que les données soient précises, accessibles et adaptées aux besoins de l'organisation. Vous travaillez de manière pragmatique et Agile. Vos tâches ? . Développer une logique de transformation stratifiée avec dbt, axée sur la maintenabilité, les performances et la rentabilité. . Configurer le source-to-target mapping pour convertir les données brutes en composants Data Vault (y compris les hubs, les liens, les satellites et les tables PIT). . Générer automatiquement des structures Data Vault avec VaultSpeed . Mettre en place une orchestration des flux de données avec Dagster pour une livraison fiable et ponctuelle. . Réaliser des tests de validation afin de garantir la qualité et l'utilisabilité des jeux de données. . Résoudre les problèmes et les goulots d'étranglement liés aux performances afin d'optimiser les pipelines de données. . Collaborer via Git et les pipelines CI/CD pour la gestion des versions et l'intégration continue.

Profil

Vous êtes titulaire d'un diplôme de master en informatique ou pouvez démontrer un niveau équivalent grâce à une expérience pertinente. Vous êtes expert en SQL et dbt, et disposez d'une connaissance approfondie des méthodologies ETL/ELT et Data Vault. Vous possédez en outre une grande expérience dans la création et la gestion de pipelines de données dans des outils tels que Airbyte, Dagster, Databricks et Python. Vous pouvez gérer des versions via Git et travailler dans des environnements CI/CD, ce qui vous permet de travailler de manière structurée et axée sur la qualité. La connaissance de la modélisation dimensionnelle (Kimball) et de VaultSpeed est considérée comme un atout précieux, mais n'est pas strictement nécessaire. En outre, vous possédez une connaissance de base de Power BI, vous permettant de bien collaborer avec les équipes BI et de comprendre les besoins en matière de reporting. Vous pouvez travailler de manière autonome et efficace, mais vous appréciez également le travail en équipe. Vous avez le sens des responsabilités, faites preuve de flexibilité et pouvez prendre des initiatives dans un environnement de travail dynamique. Vous avez le don de la communication, êtes capable d'échanger des idées et appréciez la concertation. Vous maîtrisez parfaitement le français, tant à l'oral qu'à l'écrit. Enfin, vous possédez une connaissance passive du néerlandais et une bonne connaissance de l'anglais.

Compétences linguistiques

• Français (atout)

  • Comprendre : Expérimenté - (C1)
  • Écrire : Expérimenté - (C1)
  • Lire : Expérimenté - (C1)
  • Parler : Expérimenté - (C1)

Envie d'en apprendre davantage sur ce métier ou sur un métier proche de celui-ci ? Parcourez toutes les informations utiles sur Panorama des métiers. Panorama des métiers