Platform engineering data

Contexte

Opérateur de transport public (8 000 employés). Équipes data (30 personnes) sans plateforme self-service. Chaque data engineer configure son propre environnement (notebooks, clusters, dépendances). Onboarding de 4 semaines, time-to-delivery de 6 semaines par projet.

Problème & Défi

30 data engineers sans plateforme commune, chacun gère son propre setup Onboarding d'un nouveau data engineer : 4 semaines pour être productif Time-to-delivery de 6 semaines par projet data → 40% passé en configuration d'environnement Aucune reproductibilité - résultats différents entre environnements dev/staging/prod Gestion des dépendances chaotique - conflits de versions fréquents, 20% des déploiements échouent Direction IT veut standardiser et accélérer → objectif : onboarding 3 jours, delivery 2 semaines

Solution & Livrables

– Platform engineering data opérationnelle (Databricks + Terraform + templates projet standardisés) – Onboarding divisé, passant de 4 semaines à 3 jours – environnement prêt en 1 clic – Time-to-delivery abaissé de 6 à 2 semaines - templates de projets pré-configurés – Reproductibilité totale : environnements dev/staging/prod identiques via Infrastructure as Code – Déploiements échoués abaissés de 20% à 2%, gestion des dépendances centralisée – Catalogue de composants réutilisables → 30% du code mutualisé entre projets

Technologies