Description de fonction
L'Office des Etrangers est en pleine transformation digitale. à cette fin, nous recherchons un Data Engineer
Le Data Engineer est un acteur clé dans les projets de transformation des données à l'échelle de l'organisation. Vous serez impliqué dans le développement et l'automatisation de pipelines de traitement de données pour la modélisation, l'analyse et le reporting à partir de différentes sources de données. La responsabilité principale de ce poste est d'aider à mettre en place l'architecture Delta Lake et de fournir des solutions basées sur les données.
Description de fonction
Participer à la conception architecturale, développer, documenter et implémenter des pipelines de données end-to-end et des solutions basées sur les données.
Construire des flux de données pour l'acquisition, l'agrégation et la modélisation des données, en utilisant à la fois des paradigmes batch et streaming.
Effectuer l'analyse des données, le profilage des données, le nettoyage des données, le lignage des données, le mappage des données et la transformation des données.
Développer un code de haute qualité pour le core data stack, y compris le hub d'intégration de données, le data warehouse et les pipelines de données sous Azure
Collaborer avec d'autres développeurs au sein d'une équipe SCRUM afin d'assurer la productivité de l'équipe.
Fournir une assistance technique sur les problèmes de données avec des recommandations et des solutions.
Analyser de manière critique les besoins en informations.
Vous aidez à déterminer les KPI, à mettre en place le monitoring et à implémenter les alertes au niveau des données.
Description de profil
Vous êtes titulaire d'un diplôme d'un Bachelor ou d'un Master
Vous avez au moins 3 ans d'expérience dans une fonction similaire
Vous avez de belles compétences en analyse détaillée mais vous pouvez également traduire vos résultats en une synthèse perspicace et une implémentation pragmatique.
Vous avez de bonnes connaissances/expériences professionnelles dans les domaines suivants :
Must have : Microsoft Azure Data Platform (Azure Delta Lake, Databricks, Azure Data Factory)
Must have: Azure Devops: CI/CD implementatie, Automatisering Azure Data Factory Deployments
Expertise dans la construction d'ETL et de pipelines de données sur Databricks en utilisant les langages d'ingénierie de données Python et SQL sur Azure.
Microsoft SQL Server On-Premise (y compris Transact SQL, stored procédures, Analysis Services, indexation,...)
Concepts et implémentation de la BI - modélisation de schémas en étoile de préférence.
Vous avez une bonne compréhension de Microsoft Fabric et pouvez comparer de manière critique cette technologie avec des alternatives telles que Databricks dans le cadre d'une architecture de données moderne.
Vous travaillez de manière autonome
Vous êtes collégial et avez l'esprit d'équipe
Vous avez l'esprit critique et pouvez mener des discussions de fond (concernant les informations de gestion) à tous les niveaux de l'organisation.
Vous gérez les deadlines /priorités et travaillez de manière Agile.
Vous êtes francophone avec une connaissance du Néerlandais
Nous offrons
Notre gouvernement fédéral est en pleine transformation digitale, des défis de la cybersécurité à la communication numérique, des améliorations du réseau pour soutenir notre nouvelle façon de travailler aux projets de développement complexes et à l'optimisation des applications existantes. Vous souhaitez participer à ce processus et créer une valeur ajoutée sociétale, tout en travaillant à votre développement personnel et en allant au bout de vos ambitions ?
Nous vous offrons un contrat à durée indéterminée assorti d' un objectif clair dans un environnement stimulant et un package salarial très compétitif assorti d'une série d'avantages extralégaux et d'un budget mobilité (assurance hospitalisation, télétravail, chèques repas, mobilité, fonds de pension, etc.) Nous attachons également une grande importance à un équilibre sain entre vie professionnelle et vie privée et nos bureaux sont facilement accessibles par les transports publics