Ingénieur Devops / Data

Descriptif de la mission

Notre client recherche un Ingénieur DataOps / Big Data Ops afin d'intégrer ses équipes.

Lors de cette mission, votre collaborateur devra effectuer les tâches suivantes :
- Assurer le maintien en conditions opérationnelles des plateformes Data
- Gérer les incidents et les demandes des équipes projets ainsi que des utilisateurs finaux (support N2/N3)
- Administrer les plateformes Dataiku, DBT et Starburst/Trino
- Assurer le troubleshooting, l'optimisation des performances et le monitoring des environnements Big Data
- Participer à l'implémentation et à l'automatisation des solutions DataOps
- Réaliser les déploiements sur les environnements d'intégration, de préproduction et de production
- Contribuer à l'amélioration continue des outils d'exploitation, d'administration et de déploiement
- Administrer et superviser les traitements via Airflow, Control-M et Kafka
- Participer aux activités DevOps et CI/CD avec GitLab et Kubernetes
- Assurer le monitoring des plateformes à l'aide de Grafana
- Communiquer régulièrement avec le Product Owner -et les équipes projets
- Participer aux rituels Agile ainsi qu'aux instances de suivi des incidents, des changements et des mises en production

Les compétences attendues sont les suivantes :
- 2 à 5 ans d'expérience en exploitation Big Data ou DataOps avec un niveau de support N2/N3
- Expérience confirmée sur Dataiku et/ou DBT
- Bonne maîtrise de Starburst/Trino (administration, optimisation des performances et troubleshooting)
- Maîtrise des outils CI/CD, notamment GitLab
- Expérience sur Kubernetes
- Bonne connaissance d'Airflow (operators, scheduling, dépendances, XCom, gestion des retries)
- Bonne maîtrise de Control-M (création de jobs, calendriers, dépendances, profils de connexion)
- Expérience sur Kafka, Kafka Connect et le monitoring Kafka
- Maîtrise de Grafana pour le monitoring et la supervision
- Bonne connaissance des environnements Cloud Public (AWS et/ou Azure)
- Connaissance des principes Agile (Scrum) et de la culture DevOps
- Expérience dans la gestion des incidents, des changements et des mises en production
- Bonnes capacités rédactionnelles et excellent relationnel
- Anglais courant, aussi bien à l'écrit qu'à l'oral

Mission renouvelable

Environnement technique de la prestation

- Dataiku, DBT, Starburst / Trino, Kafka & Kafka Connect
- AWS, Azure, Kubernetes
- GitLab, Git, CI/CD, DevOps
- Airflow, Control-M
- Grafana / Kafka