Description

Data engineer spécialisé dans le Google Cloud Platform (GCP), je possède une expérience approfondie dans le développement, la mise en œuvre et la maintenance d'infrastructures et de pipelines de données efficaces et évolutives. Mon expertise sur la GCP me permet de concevoir des systèmes de données capables de gérer de grands volumes de données, répondant ainsi aux besoins variés des différentes parties prenantes.

Pourquoi choisir mes services de Data Engineer GCP & Python ?

🔍 Expertise en Python et GCP : Avec plus de 10 ans d'expérience, je suis spécialisé dans le data engineering, principalement sur Google Cloud Platform, offrant des solutions complètes pour la gestion et l'optimisation de vos données.

🚀 Transformation de vos Data Projects : Je guide vos équipes dans la mise en production de data products, en industrialisant vos data pipelines, et en déployant des microservices.

Mes Contributions Clés :

👨‍💻 Lead Data Engineer Python GCP : Gestion de la qualité des données, industrialisation des pipelines, déploiement de services IA, et montée en compétence de vos équipes.

⚙️ Automatisation et Fiabilité : Mise en place de Data Ops avec Git, GitHub Actions, Cloud Build, CI/CD, et développement de Site Reliability Engineering sur GCP.

🌐 Conception de Plateformes Data Cloud : Expérience dans la construction de plateformes Data from scratch, utilisation de BigQuery, Terraform pour une infrastructure data solide.

Mon Expertise Technique et Expériences Pratiques :

🌟 Projets Réussis avec des Leaders du Marché : Mise en place d'architectures de stockage des données (L'Oréal, Veolia).

💼 Compétences Diversifiées : Développement de pipelines de données (ETL/ELT), Web Scraping, création de dashboards, Python, SQL, Docker, CI/CD, Git.

💡 Expérience Complète sur GCP : Migration de bases de données vers BigQuery, création de jobs d'alimentation, mise en place de processus de tests pour la data quality.

Langues

Français
Bilingue ou natif
Anglais
Capacité professionnelle complète
Arabe
Bilingue ou natif

Préférences en matière de lieu de travail

Accepte de travailler sur site

Paris (jusqu’à 50 km)

L'Oréal SA - L'Oréal France
Data Engineer
MODE & COSMÉTIQUES
septembre 2020 - Aujourd'hui (5 ans et 8 mois)
Paris, France
Développement et déploiement d'architectures sur GCP:

- Migration et Optimisation de Bases de Données : Conduite de migrations complexes vers BigQuery

- Développement et Maintenance de Pipelines de Données : Création de modules d'extraction et d'ingestion de données (environ 50 bases de données x 20 tables), et mise en place de procédures SQL pour le calcul de KPIs.

- Analyse et Reporting : Conception de tables et vues pour les analystes, facilitant l'accès aux données et l'interprétation des résultats.

- Assurance Qualité et Conformité : Établissement de processus de tests unitaires dans CI/CD et mise en place de processus de contrôle de la qualité des données.

- Infrastructure et Outils Cloud : Gestion du provisionnement de machines et déploiement d'outils sur la plateforme GCP, y compris Cloud Run, Storage, Pub/Sub, Firestore, Cloud Workflows

Technologies Maîtrisées :

Python, Terraform, Google Cloud Platform (BigQuery, Cloud SQL, Cloud Workflows, Composer, et plus), CI/CD, Git.
python Terraform Google Cloud Platform Big Query GCP PubSub BigQuery Cloud Run Cloud Workflows Composer
Veolia
Data Engineer
ENERGIE
décembre 2017 - juin 2020 (2 ans et 6 mois)
Paris, France
Construction et mise en œuvre d'un datalake:

- Collecte et Intégration de Données Variées : Acquisition de données de sources diverses telles que CSV, JSON, APIs

- Ingestion de Données: Mise en place d'une ingestion de données en mode batch et streaming via Google Dataflow, traitant plus de 40 To de données.

- Développement d'Outils de Stockage de Données : Création d'outils pour le stockage de données dans BigQuery, Cloud SQL, Datastore, et Firebase.

- Système de Gestion de Vues : Implémentation d'un système de gestion de vues pour exposer les données aux équipes commerciales.

- Développement d'une Application Web Data Catalogue : Conception d'une application web pour le data lake en utilisant Flask et Angular.

- Expertise en Architectures Distribuées Modernes : Connaissances approfondies en architectures distribuées et technologies de calcul, d'analyse de données et de stockage sur GCP.

Technologies Maîtrisées :

Python, Google Cloud Platform (incluant Dataflow, Storage, Pubsub, Datastore, BigQuery, Cloud SQL, Firebase, App Engine, Cloud Functions, Cloud Run), CI/CD, tests unitaires.
Google cloud Python Git Dataflow Firestore Firebase Google App Engine Cloud Functions flask
Searchub
Backend Engineer
E-COMMERCE
décembre 2012 - septembre 2017 (4 ans et 9 mois)
San Francisco, États-Unis
Searchub est un comparateur de prix e-commerce avec plus de 200M de produits.

- Infrastructure sur AWS : Mise en place et gestion d'un cluster Hadoop sur AWS.

- Extraction, traitement et l'intégration de données dans une base de données globale, assurant une gestion fluide et efficace des informations produits.

- Solution de Catégorisation et Correspondance Automatique de Produits : Développement d'une solution innovante pour la catégorisation et l'association automatique des produits, renforçant la précision et la pertinence des résultats pour les utilisateurs.

- Manipulation et Catégorisation de Données Multiples : Fusion et organisation de données issues de nombreuses sources dans une base de données unifiée, optimisant l'accessibilité et l'exploitation des informations.

- Expérience en NLP et Machine Learning : Application de techniques de traitement du langage naturel (NLP) et de machine learning pour affiner les fonctionnalités de la plateforme et améliorer l'expérience utilisateur.
Python Amazon Web Services AWS SEO Google AdWords HBase Solr Hive