Data Engineer / Développeur ETL Python Sophia Antipolis
Description
Data Engineer / Développeur ETL Python Sophia Antipolis
Description :
Contexte de la mission
Nous recherchons un Data Engineer / Développeur ETL disposant de 3 à 5 ans d’expérience pour concevoir,
développer et maintenir des pipelines de données. Le profil devra maîtriser un outil ETL de manière opérationnelle.
Une expérience sur Semarchy est particulièrement appréciée, sans être obligatoire.
Réalisation technique
• Concevoir, réaliser, tester et livrer les pipelines de données.
• Développer les mécanismes d’injection et de chargement des données en Python.
• Réaliser les transformations et orchestrations de données au moyen d’un outil ETL, idéalement Semarchy.
• Garantir la qualité, la fiabilité, la sécurité et la performance des traitements.
• Assurer la maintenance, le suivi et l’optimisation des flux existants.
• Proposer des améliorations continues et des innovations en matière de gestion et d’analyse des données.
• Documenter les développements, les règles de transformation et les procédures d’exploitation.
Compétences techniques et méthodologiques requises
Compétences indispensables
• Data management : bonnes connaissances en BI et en intégration de données.
• ETL : expérience confirmée et opérationnelle sur au moins un outil ETL. Semarchy est apprécié ; une expertise sur
Talend, Informatica, ODI, SSIS ou DataStage peut également convenir.
• SQL : maîtrise obligatoire pour l’exploitation, le contrôle et l’optimisation des données.
• Python : maîtrise obligatoire pour les mécanismes d’injection et de chargement des données. Python n’est pas
l’outil principal de transformation.
• Data Engineering : compréhension des concepts de pipelines, de flux, de qualité des données et d’architecture de
données.
• Méthodologies Agile : pratique de Scrum et/ou Kanban.
Profil recherché
• 3 à 5 ans d’expérience en Data Engineering, développement ETL ou intégration de données.
• Expérience concrète dans la conception, le développement et la maintenance de flux ETL.
• Capacité à travailler avec des interlocuteurs techniques et fonctionnels.
• Excellentes capacités de communication, d’analyse et de synthèse.
• Autonomie, rigueur, sens du service et capacité à proposer des améliorations.
Point d’attention pour le sourcing
Le besoin ne correspond pas à un développeur Python pur. Le critère principal est une expérience solide sur un outil
ETL. Python est utilisé pour l’injection des données, tandis que les transformations sont réalisées via l’ETL. Semarchy
constitue un avantage différenciant
• Outils de travail : Jira, VS Code et Git.
Compétences appréciées
• Expérience de Semarchy pour la transformation et l’intégration des données.
• Connaissance de SAS.
• Pratique des méthodologies DevOps et des chaînes CI/CD.
• Expérience de l’industrialisation et de la supervision de pipelines de données