DESCRIPTION :
Nous recherchons un (e) Data Engineer Confirmé(e) afin de participer au développement et à l'industrialisation de solutions Data à fort enjeu métier.
Vous rejoindrez une équipe Agile intervenant sur des projets innovants autour de la valorisation des données, de l'optimisation des traitements et de la mise en production de plateformes Data modernes.
Votre rôle couvrira l'ensemble du cycle de vie des produits Data : conception, développement, industrialisation, exploitation, amélioration continue et support de niveau avancé.
Vos missions
Développement Data (Build)
Vous participerez à la conception et à la réalisation des solutions Data en :
- Analysant les besoins fonctionnels et techniques.
- Participant aux ateliers de conception.
- Développant des traitements et pipelines de données.
- Réalisant les tests unitaires et automatisés.
- Contribuant à l'industrialisation des développements.
- Participant aux cérémonies Agile Scrum.
Exploitation et support (Run)
Vous assurerez le maintien en conditions opérationnelles des applications Data :
- Support technique de niveau N2/N3.
- Analyse et résolution d'incidents complexes.
- Réalisation d'analyses de causes racines (RCA).
- Mise en œuvre des actions correctives.
- Accompagnement des équipes d'exploitation lors d'incidents majeurs.
Industrialisation & DevOps
Vous contribuerez à l'amélioration continue de la plateforme Data :
- Développement et optimisation des pipelines CI/CD.
- Automatisation des tâches récurrentes.
- Mise en place d'outils de supervision et d'observabilité.
- Déploiement et amélioration des tableaux de bord de monitoring.
- Maintenance des scripts d'automatisation.
Documentation & qualité
Vous participerez à la qualité des projets en :
- Rédigeant la documentation technique.
- Documentant les architectures et les flux de données.
- Produisant les procédures d'exploitation.
- Formalisant les retours d'expérience et analyses d'incidents.
- Contribuant aux standards de développement.
Contribution technique
Selon votre niveau d'expérience, vous pourrez :
- accompagner les autres Data Engineers,
- partager les bonnes pratiques,
- participer aux choix techniques,
- intervenir comme référent technique sur certains projets.
Environnement technique
Vous évoluerez sur une plateforme Data moderne autour des technologies suivantes :
Langages :Python, SQL, NoSQL, Scala, TypeScript, JavaScript
Data & Cloud : Apache Spark, Databricks, Unity Catalog, Azure Data Lake, Azure Synapse Analytics
DevOps : Jenkins, Git, GitLab, Ansible, CI/CD
Monitoring : Datadog, Supervision, Observabilité
Méthodologie : Agile Scrum, Jira
Profil recherché
Diplômé(e) d'un Bac+5 (ou équivalent), vous disposez d'au moins 4 années d'expérience en Data Engineering.
Vous êtes à l'aise aussi bien sur les activités de développement que sur l'exploitation de plateformes Data en production.
Vous appréciez les environnements techniques exigeants, les architectures distribuées et les projets à forte composante Cloud et DevOps.
Une expérience dans des environnements à fort volume de données ou sur des plateformes Data industrielles sera particulièrement appréciée.
Compétences attendues
Vous maîtrisez tout ou partie des technologies suivantes :
- Python
- SQL / NoSQL
- Spark
- Databricks
- Azure Data Lake
- Azure Synapse
- Git / GitLab
- Jenkins
- CI/CD
- Ansible
- Datadog
- Support N2/N3
- Industrialisation des traitements Data
- Développement de pipelines de données
ASTEINS, société de services et de conseil en Ingénierie spécialisée dans l'accompagnement des grandes entreprises sur leurs projets de transformation, d'ingénierie et d'innovation technologique.