Data Engineer (m/f) (réf. E00039157)

Informations générales

Qui recrute ?

Missions

• Le Data Engineer (Ingénieur de Données) joue un rôle clé dans la transformation numérique de l’organisation en intégrant des technologies avancées de données dans les offres et services du Centre des technologies de l’information de l’Etat (CTIE);
• Il a notamment pour rôle de proposer, concevoir, mettre en œuvre, déployer, maintenir et opérer des plateformes de données innovantes qui répondent aux besoins stratégiques de l’État luxembourgeois. En tant que membre essentiel de l’unité « Ingénierie des Données », il contribue aux différents projets « data » avec son expertise et/ou accompagne les équipes de projet de sorte à assurer une exploitation optimale des plateformes;
• En mettant en œuvre des pratiques de DataOps, il conseille les différents intervenants quant à la construction des flux, pipelines et modèles de données ; éventuellement, il les construit lui-même si besoin. De plus, il contribue à mettre à disposition les jeux de données pour répondre aux différentes demandes des consommateurs (autorisés) des données.

• Ses missions seront les suivantes:
  • Architecture : définir, mettre en place et faire évoluer l’architecture des plateformes de données (Data Platform), incluant les divers composants logiciels de collecte, stockage, traitement et présentation des données (et métadonnées), l’infrastructure sous-jacente, la sécurisation et la documentation;
  • Mise en œuvre : concevoir, réaliser et déployer des solutions Data robustes et évolutives pour divers projets (architecture, modèle de données, flux/pipelines de données, etc.);
  • Mise en place de traitements additionnels des données : assurer la qualité, l’harmonisation, la consolidation, l’anonymisation, la pseudonymisation, le chiffrement (« encryption ») des données, la définition des autorisations;
  • Collaboration interdisciplinaire : travailler en étroite collaboration avec les collègues de l’unité, les autres unités du service, les autres services et divisions, les équipes de projet pour intégrer les solutions Data de manière harmonieuse;
  • Fédération et gouvernance : construire et faire respecter un référentiel unique de données, définir les conventions et bonnes pratiques et assurer leur respect, contribuer à la définition des politiques de l’unité et du service et de la gouvernance des données et des plateformes de données;
  • Optimisation et évolutivité : veiller à l’évolutivité et l’optimisation des plateformes, des infrastructures sous-jacentes, et des modèles afin de permettre la gestion de volumes de données et des traitements conséquents;
  • Gestion : gérer, maintenir et opérer les plateformes de données dont le monitoring (sur base d’alertes à définir), la résolution de problèmes, les mises-à-jour/mises-à-niveau, la gestion ou l’aide à la gestion des accès et autorisations/permissions, le maintien à jour de la documentation;
  • Veille Technologique : effectuer une veille technologique pour rester à jour avec les dernières avancées du monde de la Data et de l’Intelligence Artificielle, et discuter l’intégration des innovations dans la plateforme avec l’équipe Architecture du CTIE;
  • Formation et mentorat : documenter les procédures, développer des supports de formations et des présentations pour diffusion interne au CTIE ou à des fins de diffusion interne à l’Etat, encadrer et former les collaborateurs du CTIE et le métier sur les meilleures pratiques en Data et sur les nouvelles technologies et plateformes, promouvoir les méthodes en place au CTIE dont la méthode de gestion de projet, briefer les équipes de projets.
• Ces missions permettent de garantir que les plateformes de données sont constamment opérationnelles, sécurisées, performantes, et alignées avec les besoins et objectifs stratégiques de l’État.

Profil

Compétences techniques

• Connaissances approfondies en DataOps;
• Connaissance de SQL et Python;
• Connaissances en collecte et traitement de données : Apache Airflow, Apache Spark, Apache NiFi, Talend, SAP Data Services;
• Connaissances de la mise en œuvre des processus de pseudonymisation, d’anonymisation des données (y compris la création de données synthétiques);
• Connaissances en matière de la virtualisation des données;
• Connaissances en gestion et stockage des données : bases de données relationnelles, NoSQL, graph (ex. Neo4J);
• Connaissance de JSON et XML;
• Connaissances en stockage de données à des fins d’usage secondaire : Data Warehouse, Data Lake (dont Object Storage), Data Lakehouse + « open table format (OTF) » (Apache Iceberg, Delta Lake, etc.);
• Connaissances en matière de contrôle (data quality, cleansing) et de transformation (métier ou autre) des données;
• Connaissances en Cloud Computing: Expérience avec les plateformes cloud comme AWS, Azure, et Google Cloud;
• Bonnes notions des solutions de conteneurisation (Docker, Podman…) et d’orchestration de conteneurs (OpenShift et/ou Kubernetes);
• Connaissances en matière de la création et de la mise à jour des architectures décisionnelles;
• Connaissances en technologies Big Data;
• Maîtrise de l’anglais et/ou du français.

Compétences comportementales

• Être passionné de nouvelles technologies et avoir le goût de l’innovation;
• Savoir exposer un problème ainsi que sa solution de manière concise à des non-initiés;
• Savoir travailler de façon fiable et autonome en tant que membre d’une équipe pluridisciplinaire;
• Avoir la connaissance des processus de collecte, de la consolidation, de la modélisation, de l’analyse, de la sécurité et de la restitution des informations décisionnelles ainsi que des outils et méthodes qui les supportent.

Atouts

• Connaissances en matière d’exploitation d’applications informatiques;
• Connaissances d’autres langages de programmation, dont R, et des algorithmes de prédiction;
• Connaissances en matière d’outils du data scientist (Dataiku, Jupyter, etc.);
• Connaissances dans le fonctionnement du secteur public au Luxembourg;
• Maîtrise de l’Allemand et/ou du Luxembourgeois.

Conditions d’admission

Poste d'employé de l'État

Obtenez plus de détails sur les conditions d'admission des employés de l'État.

Diplômes

Vous êtes titulaire d’un grade ou diplôme délivré par un établissement d’enseignement supérieur reconnu par l’État du siège de l’établissement et sanctionnant l’accomplissement avec succès d’un master en informatique ou de son équivalent.

Le grade ou diplôme requis doit correspondre au moins au niveau 7 tel que défini par le Cadre luxembourgeois des qualifications.

Expérience

Vous avez une expérience d'au moins 3 ans dans le domaine.

Langues

Vous répondez aux exigences des connaissances de 3 langues administratives pour le groupe d'indemnité A1. Une dispense de deux des trois langues administratives peut être accordée sous certaines conditions.

Nationalité

Vous êtes ressortissant d’un État membre de l’Union européenne.

Documents à fournir

Lettre de motivation, copie du diplôme et CV renseignant les informations suivantes:

• Nom(s) et prénom(s)
• Numéro d’identification (càd. le numéro de matricule nationale ou, à défaut, la date de naissance)
• Nationalité
• Adresse électronique
• Liste des établissements d’enseignement fréquentés et leur pays d’implantation (veuillez indiquer le nom complet des établissements, les abréviations n'étant pas permises)
• Diplômes (veuillez indiquer l'intitulé des diplômes)
• Expérience professionnelle
• Connaissances en langues parlées et écrites

Pour ce poste, vous devez obligatoirement postuler en ligne via MyGuichet, les candidatures via courriel ou via courrier postal n’étant pas acceptées. Les documents sont à introduire via MyGuichet en format pdf (taille maximale 20 Mo).