Disponible en freelance · Toulouse, France
Olivier Manns.
Senior DataOps Engineer · Consultant indépendant @ ignitabl
Je vous aide à concevoir, développer et réussir vos projets data les plus exigeants.
À propos
Des plateformes data, de l’idée à la production.
Je suis data engineer et je construis des plateformes data qui tiennent la route en production. Depuis plus de dix ans, je conçois des pipelines, des infrastructures cloud et des systèmes distribués pour des entreprises des paris sportifs, de la distribution, de l’automobile et de la finance, de la donnée brute jusqu’aux tableaux de bord et aux modèles qui l’exploitent.
Je travaille actuellement avec Betclic en tant que Senior DataOps Engineer. Je conçois et construis leur plateforme data unifiée sur AWS selon les principes du data mesh, avec des pipelines streaming et batch sur Apache Flink, Airflow, dbt et Snowflake. Quand un service très sollicité devient trop lent ou trop coûteux, je réécris les parties critiques en Rust et garde Python pour le machine learning.
Ingénieur de formation, j’ai appris à programmer en autodidacte et je prends toujours plaisir à découvrir de nouveaux langages et outils. J’ai travaillé aussi bien dans des équipes de production exigeantes que dans de petites équipes d’innovation, et mon bagage en data science et en machine learning me permet de travailler main dans la main avec les data scientists. Je suis convaincu que partager ses connaissances et aider les autres est la meilleure façon de progresser, et de construire des équipes qui durent.
- Expérience
- 12+ ans
- Secteurs
- Paris sportifs, distribution, automobile, finance
- Basé à
- Toulouse, France
- Statut
- Disponible en freelance
Services
Ce que je fais.
-
Architecture de plateformes data
Conception de plateformes data unifiées sur AWS selon les principes du data mesh, avec des data products portés par chaque domaine sur un socle commun en libre-service.
-
Pipelines streaming et batch
Pipelines temps réel avec Apache Flink et Kafka, traitements batch avec Airflow et dbt, le tout dans Snowflake. Du besoin à la production, testés et supervisés.
-
Performance et maîtrise des coûts
Le Big Data, c’est aussi la vitesse. Optimisation des jobs Flink et Spark, des requêtes SQL et des workloads Snowflake, réécriture des parties critiques en Rust, sans perdre de vue la facture cloud.
-
DataOps et Infrastructure as Code
Des environnements prêts pour la production avec Terraform, CI/CD, tests automatisés et alerting, pour une plateforme data qui grandit sans mauvaises surprises.
-
Machine learning en production
Main dans la main avec les data scientists pour transformer les modèles en services fiables au cœur de votre produit, en combinant Python et Rust.
-
Expertise et conseil
Revues d’architecture, audits et accompagnement de vos équipes sur le data engineering, l’infrastructure cloud, la sécurité et les bonnes pratiques.
Témoignages
Ils en parlent.
Olivier allie compétences techniques poussées, esprit de curiosité et un grand sens de la rigueur. Travailler avec lui a été un plaisir et je le recommande sans hésiter à tout recruteur à la recherche de talents big data avec coloration cloud et AI.
Olivier has a strong data background, is passionate about his work and has this curiosity and thirst for learning. In a matter of days, he has quickly become invaluable within the team, someone I could truly rely on. Beyond his technical knowledge, Olivier is involved in the business and knows how to leverage the value in the data and discuss it with the stakeholders.
Nicolas T.Continental
Parcours
12 ans de data engineering.
Expériences
-
2023 – Aujourd’hui
Senior DataOps Engineer · Betclic
Industrialiser et faire passer à l’échelle les services data d’une plateforme data :
- Conception et mise en œuvre de l’architecture d’une plateforme data unifiée reposant sur les principes du data mesh. Déploiement des services data sur AWS.
- Amélioration et maintien d’un environnement de production en infrastructure as code, s’appuyant sur les services AWS et une stack big data pour passer à l’échelle.
- Gestion des données batch et streaming avec Apache Flink, Apache Airflow, dbt et Snowflake.
- Optimisation des performances et des coûts de services backend très sollicités, avec Rust pour la vitesse et Python pour le machine learning.
- Collaboration étroite avec les data scientists et data analysts pour intégrer des services de machine learning dans l’application mobile de Betclic.
- Expertise et conseil auprès des équipes.
-
2020 – 2023
Data Engineer · Clas Ohlson
Industrialiser et faire passer à l’échelle un projet de machine learning pour des remises mieux ciblées, la gestion des prix et la fidélisation client :
- Mise en place d’un environnement de production en infrastructure as code, s’appuyant sur une stack big data pour passer à l’échelle.
- Extraction de données depuis différents systèmes sources (CRM, analytics…).
- Plus de 6 sources de données chargées chaque jour, entièrement automatisées avec tests et alertes, en combinant services Azure et dbt pour limiter les coûts.
- Déploiement d’un orchestrateur (Prefect) pour simplifier la gestion des pipelines data et ML.
- Expertise, formation et conseil auprès des équipes sur le data engineering, l’infrastructure cloud, la sécurité réseau et les bonnes pratiques.
-
2017 – 2020
Big Data Engineer · Continental
Prolonger la durée de vie des composants Continental grâce aux données véhicules :
- Conception et déploiement d’un pipeline data complet et scalable, de la collecte à l’analyse et la visualisation interactive.
- Entièrement construit sur AWS avec Terraform.
- Anticipation des volumes de données avec des traitements et des requêtes serverless et distribués.
- Nombreux sujets de machine learning sur des problématiques automobiles, dont l’analyse statistique de grands volumes de données.
- Création et optimisation de modèles de machine learning, feature engineering pour affiner les modèles physiques du moteur et des émissions polluantes.
Résultats : Plus de 20 pipelines et des téraoctets de données structurées interrogés chaque jour par plus de 100 ingénieurs automobile. 2 brevets, de nombreux modèles.
Expériences précédentes (2014 – 2017)
-
2017
Data Engineer · CGI – La Banque Postale
- Développements ETL.
- Implémentation d’un algorithme de détection de fraude.
-
2016 – 2017
Data Engineer · CGI – Société Générale
- Transformation et chargement complexes de plusieurs téraoctets de données.
- Spécifications et expertise auprès d’une équipe de développeurs.
- Optimisation de requêtes SQL pour améliorer les performances.
-
2016 – 2017
Data Engineer · CGI – Thales
- Développement et supervision d’outils BI et ETL.
- Analyse de données et expertise SQL.
-
2015
Data Miner · CEA
Faire le lien entre chercheurs et industriels pour valoriser la recherche du CEA :
- Data mining sur des brevets et des publications scientifiques.
- Vérifier la brevetabilité d’une invention, dresser un panorama technique du marché, identifier des applications concrètes, analyser la concurrence.
-
2014
BI Engineer · University of Nevada, Las Vegas
Membre de l’équipe business intelligence pour le Nevada Department of Transportation :
- Administration de bases de données, transformation et chargement des données pour construire des tableaux de bord pertinents.
- Indicateurs statistiques et scripts de map matching géographique.
Formation
-
2015
Diplôme d’ingénieur
ENSEEIHT / ENSIACET
Spécialisation en énergies renouvelables.
-
2012 – 2015
Diplôme d’ingénieur
ENSIACET
Génie des procédés, gestion de projet, industrialisation.
Compétences data
- Apache Flink 90%
- Snowflake 85%
- Architecture data 80%
- ClickHouse 80%
- Apache Spark 90%
- Calcul distribué 80%
- ETL & ELT 90%
- Microservices 80%
Compétences techniques
- AWS 85%
- Terraform 90%
- Rust 80%
- Python 90%
- Claude Code 85%
- SQL 95%
- dbt 85%
- Scala 75%
Contact
Parlons-en.
Une plateforme data à construire, un pipeline à accélérer ou une facture cloud à réduire ? Écrivez-moi.
- E-mailolivier@ignitabl.com
- LocalisationToulouse, France
- DisponibilitéDisponible en freelance
