À propos de Mouhamad
Anglais
Capacité professionnelle complète
Français
Bilingue ou natif
Expériences
- Videotron CanadaConsultant Senior Data engineerTÉLÉCOMMUNICATIONSaoût 2020 - octobre 2021 (1 an et 2 mois)Montréal, CanadaGestion de la plateforme Big Data et du Data Lake- Administration de la plateforme Cloudera- Optimisation et support du développement des pipelines d’ingestion des flux en provenance des fournisseurs avec Kafka, Spark et NiFi- Conception et développement de la plateforme et notamment le décommissionnement de HDFS au profit de S3- Industrialiser les jobs en mode batch avec Spark et avec Kafka et Spark Streaming en mode temps réelEnvironnement technique : Hadoop|Spark|SparkSteaming|Hive|Oozie|S3|Kinesis|KafkaDécommisionnement de la plateforme Cloudera Vers le Cloud (Databricks, Kafka Confluent, AWS, Snowflake)- Participation à la mise en place de la nouvelle architecture Cloud- Migration des flux NIFI vers Snowflake avec Snowpipe- Migration des données de Hive vers Snowflake- Réécriture des scripts Spark notamment pour les adapter à Databricks (Delta Lake, Autoloader)- Utilisation de AWS lambda pour récupérer les données de Kinesis et les écrire dans Kafka confluentEnvironnement technique : Databricks|Spark|Spark Steaming|Deltalake|Snowflake|S3|Kinesis|Lambda|Kafka Confluent|Terraform
- ORANGEData EngineerTÉLÉCOMMUNICATIONSavril 2018 - avril 2020 (2 ans)Dakar, SénégalClient : Orange SénégalEvolution d’une plateforme BI SAS vers une plateforme Big DATA Hadoop HDP- Lead technique et choix des outils- Migration de tous les scripts SAS vers Spark/Scala, gestion du stockage dans Hive et ordonnancement des jobs avec Oozie- Supervision des jobs d’alimentation des données avec ELK et Grafana- Développement d’un Kpi Engine qui permet à partir d’un fichier de configuration générer des KPi pour le métier sans coder- Implémentation de nouveaux uses cases (Fraude, Localisation, Cercle relationnel, CA…)- Mise en place du pipeline de IC/DC et tenue des codes review- Formation et montée en compétence de la team (Background en Business Intelligence)Environnement technique : Hadoop|Spark|Scala|Hive|Oozie|ELK|GrafanaMise en place d’un Datalake- Analyse des besoins métiers avec le product owner et choix des outils adéquat- Implémentation du pipeline d’acquisition des données avec NiFi- ETL pour extraire et enrichir les données avec Hive et Spark- Ordonnancement du data processing avec Oozie- Supervision du data flow processing avec ELK et Grafana- Prise en charge des anomaliesEnvironnement technique : NiFi|Hive|Spark|Oozie|ELK|Grafana- Mise en place d’un système de détection de fraude et revenue assurance- Lead technique (02 Data Engineer, 04 Full stack, 01 Ops) et choix des outils- Analyse des besoins métiers avec le Product Owner- Implémentation de l’acquisition des données temps réel avec Kafka and Spark- Implémentation des modèles d’analyse des données avec Spark- Stockage des résultats avec HBase- Mise en place du pipeline de IC/DC et tenue des codes review- Prise en charge des anomalies
- DevoteamData EngineerAGENCE & SSIIjanvier 2018 - avril 2018 (3 mois)Paris, FranceClient : HSBC- Mise en place d’une plateforme Big Data pour la banque de détail chez HSBC- Mise en place de la plateforme hybride Big Data HDP + GCP- Mise en place de l’architecture détaillée de la solution avec DataProcEnvironnement technique : Hortonworks|GCP|DataProc
Recommandations
Soyez le premier à recommander Mouhamad
Contribuez à la réussite de ce freelance en partageant votre expérience de collaboration avec lui.
Ces profils de freelance correspondent également à vos critères
Agatha Frydrych
Backend Java Software Engineer
4.7
(3)
2
Baptiste Duhen
Fullstack developer
4.6
(4)
5
Amed Hamou
Senior Lead Developer
4
(2)
7
Audrey Champion
Web developer
4.3
(3)
4
Formations
- Diplôme d'ingenieur - Big DataEFREI PARIS2015Majeure en Big Data
Certifications
- Databricks Certified Associate Developer for Apache Spark 3.0Databricks2021