Offre d'emploi

Ingénieur en systèmes distribués - Plateforme de données (H/F) Réf :  
Référence
228SCI20250122

Ingénieur en systèmes distribués - Plateforme de données (H/F)

Description courte

Les flux de données traités par la DGSE sont massifs et hétérogènes, et sont essentiels à la production du renseignement et au soutien des opérations. En tant qu'ingénieur en systèmes distribués intégré à la Direction Technique et de l'Innovation, vous serez chargé de construire et opérer la plateforme de données de la DGSE.

Notre équipe a la responsabilité de fournir une infrastructure Data Lakehouse fiable, évolutive et hautement disponible, permettant l'ingestion, le stockage et le traitement des données. Nous développons également les services fondamentaux permettant aux moteurs de requêtes de découvrir les tables et données, de stocker les données en utilisant le format de table Apache Iceberg, d'authentifier les utilisateurs et de s'assurer qu'ils disposent des droits sur la donnée conformément au cadre légal.

Rejoignez-nous et contribuez à transformer un flux de données massif en renseignements précieux.

À retenir

Réference de l'offre :  
Référence
228SCI20250122
Localisation :  
Localisation
Paris
Type de contrat :  
Type de contrat
CDD
Domaine de métier :  
Domaine métier
Sciences et technologies
Niveau d'étude :  
Niveau d'étude
Niveau 7 : Master, DEA, DESS, diplôme d’ingénieur
Description longue

Vos missions

Vous serez en charge des activités suivantes :

  • Construire et opérer le cluster de stockage Apache Ozone

  • Gérer l'architecture d'exécution des traitements (Yarn, Kubernetes),

  • Construire et opérer le Data Lakehouse au format de table Apache Iceberg et le REST catalog associé,

  • Optimiser le stockage et le traitement des données (partitionnement, tri, compactage),

  • Fournir des connecteurs Spark / Flink / Trino pour les traitements en batch et streaming,

  • Mettre en oeuvre une stack d'observabilité, de monitoring et d'alerting facilitant la détection proactive de problèmes,

  • Collaborer avec les équipes de Data Engineers, Data Analysts et Data Scientists afin de comprendre leurs besoins et faciliter leurs interactions avec le Lakehouse,

  • Assurer une veille technologique constante et contribuer au maintien de l'état de l'art dans notre domaine.

Votre profil

Vous êtes titulaire d'un diplôme en informatique, niveau master ou école d'ingénieur et avez au moins un an d'expérience dans la conception et le maintien de systèmes distribués à grande échelle.

Vous possédez les compétences et qualités suivantes :

  • Vous possédez de l'expérience dans des technologies de systèmes distribués comme Spark, Flink, Kafka, Iceberg, Hive, Ozone, HDFS, S3,

  • Vous maîtrisez au moins un langage de la stack JVM (Scala, Java, Kotlin),

  • Vous êtes compétent dans la conception et le développement d'APIs scalables et fiables,

  • Vous aimez créer du code compréhensible, simple et propre,

  • Vous êtes à l'aise dans un environnement agile, autonome et souple, vous savez vous adapter rapidement aux nouvelles exigences,

  • Vous avez d'excellentes capacités de communication et collaboration.

En nous rejoignant, vous découvrirez :

  • Un environnement unique, qu'aucune autre structure ne peut vous proposer,

  • Un métier proche du renseignement et de l'opérationnel.

Les plus de l'offre

  • Au coeur du secret

  • Technologies à la pointe

  • Missions uniques

Vos avantages à rejoindre la DGSE

  • La satisfaction de travailler pour votre pays et la défense de ses valeurs  

  • Plus de 1000 formations linguistiques et thématiques

  • Nombreuses activités culturelles et sportives

  • Restaurants et points de vente à emporter fait maison

  • 48 à 50 jours de congés annuels

Pour connaître les autres avantages, consultez notre site sur https://www.dgse.gouv.fr/fr/la-dgse/nos-actualites/rejoindre-la-dgse-de-nombreux-atouts-au-quotidien