DGDDI (DNSCE) - Data Engineer H/F

L’équipe DATA de la DNSCE est une équipe transverse qui comprend des compétences infrastructures et de développement. Elle regroupe des métiers variés (ingénieurs cloud, ingénieurs ETL, tech lead, data engineers ou développeurs fullstack). Le/La Data Engineer (DE) intégrera l’équipe de trois DE sous le pilotage d’un(e) chef(fe) de projet local. Son périmètre d’intervention est axé sur les dispositifs de collecte de la donnée et de son traitement, sa mise en forme, sa transformation, et parfois sa restitution. Il/Elle prend en charge le développement des nouvelles ingestions et l’entretien de celles qui sont opérationnelles. Il/Elle prépare les données et contribue à leur mise en qualité afin d’en faciliter l’exploitation par les équipes utilisatrices. La mise en œuvre de l’infrastructure de traitement de la donnée fait l’objet de nombreuses expérimentations (POC) pour sélectionner les outils et les processus les mieux adaptés aux cas d’usages, et les DE sont mobilisés dans le processus de sélection et d’implémentation des services ad-hoc. Il/elle pourra être amené(e) ponctuellement à réaliser de la data visualisation. Il/Elle est doté(e) d’une forte capacité d’adaptation et d’apprentissage, d’un esprit curieux et constructif, d’une approche pragmatique, et porte un intérêt réel à la matière et les objectifs finaux. Largement autonome et responsabilisé sur son domaine d’intervention, le/la Data Engineer participe à l’évolution de l’offre de services en matière de mise à disposition et mise en qualité des données, proposées par la DNSCE. Responsabilités opérationnelles : Sous le pilotage du responsable du pôle développement de la DNSCE, l’agent(e) aura tout particulièrement la charge de : - Participer à la mise en œuvre des workflows de traitement des données (Extract Transform Load, Master Data Management…) - Développer les solutions techniques de collecte des données (structurées et non structurées) produites par les différentes sources internes ou externes, ponctuellement ou de manière automatique - Assurer le maintien en condition opérationnelle des traitements de collecte existants - Superviser, contrôler le bon fonctionnement des échanges de données et fournir des indicateurs d’activité et de performance - Structurer la donnée - Mettre en œuvre les traitements de nettoyage de données (élimination des doublons, etc.) - Procéder aux contrôles qualité des données retraitées - Réaliser la préparation des données pour les besoins des cas d’usages - Réaliser le maintien en condition opérationnelle des traitements de data préparation des cas d’usages existants - Cartographier et documenter les flux de données - Participer à l’entretien du référentiel de données - Assurer une veille technologique - Participer à l’enrichissement et à la mise à jour de la documentation