Data Engineer (m/f) (réf. E00031902)

Qui recrute ?

Missions

• Le Data Engineer (Ingénieur de Données) joue un rôle clé dans la transformation numérique de l’organisation en intégrant des technologies avancées de données dans les offres et services du Centre des technologies de l’information de l’Etat (CTIE).

• Il a notamment pour rôle de proposer, concevoir, mettre en œuvre, déployer, maintenir et opérer des plateformes de données innovantes qui répondent aux besoins stratégiques de l’État luxembourgeois. En tant que membre essentiel de l’unité « Ingénierie des Données », il accompagne les projets avec son expertise de sorte à assurer une exploitation Optimale des plateformes.

• En mettant en œuvre des pratiques de DataOps, il conseille les différents intervenants quant à la construction des flux et modèles de données ; éventuellement, il les construit lui-même si besoin. De plus, il contribue à mettre à disposition les jeux de données pour répondre aux différentes demandes des consommateurs (autorisés) des données.

• Ses missions principales seront les suivantes :
  • Architecture : définir, mettre en place et faire évoluer l’architecture des plateformes Data, incluant les divers composants logiciels de collecte, stockage, traitement et présentation des données (et métadonnées), l’infrastructure sous-jacente, la sécurisation et la documentation;
  • Mise en œuvre : concevoir, réaliser et déployer des solutions Data robustes et évolutives pour divers projets (architecture, modèle de données, flux de données etc);
  • Mise en place de traitements additionnels des données : assurer la qualité, l’harmonisation, la consolidation, l’anonymisation, la pseudonymisation, le chiffrement (« encryption ») des données, la définition des autorisations;
  • Collaboration interdisciplinaire : travailler en étroite collaboration avec les collègues de l’unité, les autres unités du service, les autres services et divisions, les équipes de projet pour intégrer les solutions Data de manière harmonieuse;
  • Fédération et gouvernance : construire et faire respecter un référentiel unique de données, définir les conventions et bonnes pratiques et assurer leur respect, contribuer à la définition des politiques de l’unité et du service et de la gouvernance Data;
  • Optimisation et évolutivité : veiller à l’évolutivité et l’optimisation des plateformes, des infrastructures sous-jacentes, et des modèles afin de permettre la gestion de volumes de données et des traitements conséquents;
  • Gestion : gérer, maintenir et opérer les plateformes Data dont le monitoring (sur base d’alertes à définir), la résolution de problèmes, les mises à niveaux, la gestion ou l’aide à la gestion des accès et autorisations/permissions, le maintien à jour de la documentation;
  • Veille Technologique : effectuer une veille technologique pour rester à jour avec les dernières avancées du monde de la Data et de l’Intelligence Artificielle, et discuter l’intégration des innovations dans la plateforme avec l’équipe Architecture du CTIE;
  • Formation et mentorat : documenter les procédures, développer des supports de formations et des présentations pour diffusion interne au CTIE ou à des fins de diffusion interne à l’Etat, encadrer et former les collaborateurs du CTIE et le métier sur les meilleures pratiques en Data sur les nouvelles technologies et plateformes, promouvoir les méthodes en place au CTIE dont la méthode de gestion de projet, briefer les équipes de projets.
• Ces missions permettent de garantir que les plateformes de données sont constamment opérationnelles, sécurisées, performantes, et alignées avec les besoins et objectifs stratégiques de l’État.

Profil

Compétences techniques

• Être passionné de nouvelles technologies et avoir le gout de l’innovation;
• Savoir exposer un problème ainsi que sa solution de manière concise à des non-initiés;
• Savoir travailler de façon fiable et autonome en tant que membre d’une équipe pluridisciplinaire;
• Connaissances des processus de collecte, la consolidation, la modélisation, l’analyse, la sécurité et la restitution des informations décisionnelles.

Compétences comportementales

• Connaissances approfondies en DataOps;
• Connaissances en gestion et stockage des données : bases de données relationnelles, NoSQL, graph database (ex. Neo4J);
• Connaissances de SQL, JavaScript, XML, JSON etc;
• Connaissances en collecte et traitement de données : Talend, SAP Data Services, Apache Spark, Apache Airflow, Apache NiFi etc;
• Connaissances de la mise en œuvre de processus d’anonymisation et de pseudonymisation;
• Connaissances en matière de virtualisation des données;
• Connaissances en stockage de données à des fins d’usage secondaire : Data Warehouse, Data Lake, Data Lakehouse + « open table format (OTF) » (Apache Iceberg, Delta Lake etc);
• Connaissances en matière de contrôle (data quality, cleansing) et de transformation (métier ou autre) des données;
• Connaissances en Cloud Computing: expérience avec les plateformes cloud comme AWS, Azure, et Google Cloud;
• Notions de base des solutions de conteneurisation et d’orchestration de conteneurs (OpenShift et/ou Kubernetes);
• Connaissances en matière de création et de mise à jour des architectures décisionnelles;
• Connaissances en technologies Big Data;
• Maîtrise de l’anglais et/ou du français.

Atouts

• Connaissances en matière d’exploitation d’applications informatiques;
• Connaissances d’autres langages de programmation;
• Connaissances en matière de plateformes de data science (Dataiku, Jupyter, etc);
• Connaissances en algorithmes de prédiction (R, Python etc.);
• Connaissances du fonctionnement du secteur public luxembourgeois;
• Maîtrise de l’Allemand et/ou du Luxembourgeois.

Conditions d’admission

Poste d'employé de l'État

Obtenez plus de détails sur les conditions d'admission des employés de l'État.

Diplômes

Vous êtes titulaire d’un grade ou diplôme délivré par un établissement d’enseignement supérieur reconnu par l’Etat du siège de l’établissement et sanctionnant l’accomplissement avec succès d’un master en tant qu'ingénieur en informatique ou de son équivalent.

Expérience

Vous avez une expérience d'au moins 3 ans dans le domaine.

Langues

Vous répondez aux exigences des connaissances de 3 langues administratives pour le groupe d'indemnité A1. Une dispense de deux des trois langues administratives peut être accordée sous certaines conditions.

Nationalité

Vous êtes ressortissant d’un État membre de l’Union européenne.