Data Engineer Senior / Expert – AWS / Spark / Iceberg / dbt (H/F)

Dans le cadre du renforcement de l'équipe Marketing Data, au sein d'un pôle Data Fabric, nous recherchons un Data Engineer Senior / Expert pour accompagner l'un de nos clients grands comptes dans la conception, l'industrialisation et l'exploitation de solutions Data.

Vous évoluerez dans un environnement Lakehouse AWS, avec des enjeux forts autour de la performance, de la qualité des données, de la fiabilité des traitements et de leur maintien en conditions opérationnelles.

Nous recherchons un profil technique, autonome et expérimenté, capable d'intervenir sur l'ensemble du cycle de vie des pipelines Data, de leur conception jusqu'à leur exploitation en production.

• Concevoir, développer, optimiser et industrialiser des pipelines de données.

• Développer des traitements Big Data avec Spark/PySpark, Python, SQL et dbt.

• Exploiter des données au format Apache Iceberg dans une architecture Lakehouse / Medallion.

• Concevoir et orchestrer des workflows avec Airflow.

• Déployer et maintenir les traitements sur AWS (S3, Glue, EMR).

• Contribuer à l'automatisation des infrastructures avec Terraform.

• Mettre en place des tests automatisés, des contrôles de Data Quality et des mécanismes d'observabilité.

• Participer au RUN, à l'analyse des incidents et à la résolution des problèmes de production.

• Contribuer à la documentation technique et fonctionnelle, au Data Lineage, aux Data Contracts et au Data Catalog.

• Collaborer avec les Product Owners et les équipes métier pour traduire les besoins Marketing en solutions Data robustes et maintenables.

Profil recherché

Vous justifiez d'au moins 8 ans d'expérience en Data Engineering, avec une expertise confirmée dans la conception et l'industrialisation de pipelines Big Data.

Compétences indispensables :

• Expertise en Spark / PySpark, Python et SQL.

• Solide maîtrise de l'environnement AWS, notamment Glue, EMR et S3.

• Expérience concrète des architectures Lakehouse et d'Apache Iceberg.

• Maîtrise de dbt pour la transformation et la modélisation des données.

• Bonne compréhension des enjeux de performance, de qualité et de fiabilité des traitements Data en production.

Compétences complémentaires appréciées :

• Airflow et Terraform.

• Trino / Starburst.

• Datadog et outils d'observabilité.

• Data Quality, Data Contracts, Data Lineage et Data Catalog.

• Connaissance des problématiques métiers Marketing.

Au-delà de votre expertise technique, vous faites preuve d'autonomie, de rigueur, d'esprit d'analyse et d'une réelle culture de l'amélioration continue.