1- Descriptif de besoin
La prestation de Data Engineering s’appuyera sur les recommandations d’architecture du client pour mettre en œuvre les alimentations de données sous GCP.
EIle veillera à mettre en œuvre les outils de monitoring continu de la qualité opérationnelle (Build & Run) et à atteindre le niveau de performance attendu du produit.
Elle travaillera en collaboration avec les Data Analysts & Scientists pour implémenter les traitements de mise à disposition des données
2- Livrables
Notre prochain Data Engineer devra :
- Mettre en place les chaînes de traitement de la data, de l’ingestion à l’exposition, sur la Plateforme GCP selon les préconisations du client
- Garantir la robustesse et la performance des alimentations et traitements mis en œuvre
- Mettre en place les dashboards de monitoring de disponibilité, la supervision, les rapports d’usage et de performance
- Résoudre les anomalies sur les chaines d’alimentation et de traitement de données
- Documenter l’architecture, les traitements et la supervision mis en œuvre
- Préparer les déploiements techniques de nouveaux pays.
3- Savoir- faire
Une expérience d’au moins 5 ans en Data Engineering est requise, en plus des éléments suivants :
- Capacité à travailler de manière créative, collaborative, adaptive et itérative dans un environnement complexe au sein d’une équipe agile
- Expérience en alimentation et traitement de données sous GCP
- Expérience avec les user stories JIRA et la documentation sous Confluence
- Expérience en supervision et devops
- Expérience en optimisation des performances
- Maitrise des développements en Python
- Certification Google Data Engineer indispensable
- Anglais courant