Développeur Big Data / Data Engineer F/H - Système, réseaux, données (H/F)

Informations clés

• Localisation : Lyon (07)
• Télétravail : 2 jours par semaine
• Expérience requise : 3 ans minimum

Présentation du poste

Et si votre prochain projet vous permettait de participer à la modernisation complète d'un environnement data stratégique ?

Nous recherchons un.e Développeur Big Data / Data Engineer pour rejoindre les équipes de l'un de nos clients. Vous n'intervenez pas sur un projet "from scratch" déconnecté du terrain, mais sur un SI fortement utilisé avec des traitements critiques et une transformation Big Data ambitieuse en cours.

L'objectif est de faire évoluer l'existant vers des architectures modernes autour de Spark et Databricks.

Vos missions

Phase 1 : Modernisation des traitements existants

Dans un premier temps, vous participerez à la transformation progressive des traitements historiques :

• Migrer des traitements Informatica et PL/SQL vers Spark Java.
• Optimiser les traitements existants pour améliorer leurs performances.
• Maintenir et faire évoluer des traitements SQL / PL-SQL critiques.
• Comprendre les enjeux métier derrière les flux de données.
• Sécuriser la qualité et la robustesse des traitements.

Phase 2 : Participation à la transformation cloud

Vous intégrerez ensuite les travaux autour de la migration vers Databricks :

• Conception de pipelines de données modernes.
• Industrialisation des traitements.
• Mise en place des bonnes pratiques Big Data.
• Évolution des architectures data de l'équipe.

Votre quotidien dans l'équipe

Au-delà du développement, vous contribuerez à la vie technique de l'équipe : partage de connaissances, amélioration continue, documentation, participation aux réflexions d'architecture et contribution à la guilde technique.

Profil recherché

Stack technique

Spark, Java, Ceph, Tableau Server, Oracle, Informatica, Maven, Control-M, Git, Jenkins, Terraform.

Compétences indispensables

• Maîtrise de Spark, SQL / PL-SQL.
• Maîtrise d'un langage orienté objet (Java ou Python).
• Capacité à construire et maintenir des traitements de données fiables dans des environnements complexes.

Compétences appréciées (bonus)

• Expérience sur Databricks.
• Expérience en migration Big Data.
• Maîtrise des problématiques de RUN et d'industrialisation.
• Maîtrise de Python.

Ce qu'il faut savoir avant de postuler

Le poste comporte une vraie dimension RUN (investigation, correction, amélioration et stabilisation). Si vous recherchez uniquement du développement neuf ou des projets très théoriques, ce contexte risque de ne pas vous convenir. En revanche, si vous aimez les environnements techniques concrets et les projets de transformation, ce poste est fait pour vous.