Aymen Berrima

Projet 1 : migration du workspace databricks du Workspace public à un workspace privé dans le réseau TF1 : Missions :

- Mise en place d'une stratégie de bascule sans interruption de service des 300 jobs databricks, orchestés dans airflow.

- Developement des fonctions de migration pour tout les objets du workspace: Users / Notebooks / Instance_pool / secrets / Models ML / Librairies...

- Mise en place d'un code migration des objets databricks qui tourne quotidiennement en Delta, pour mettre à jour que les objets qui ont bougés: Python et API databricks

- Refonte RBAC pour les Users Databricks via Microsoft EntraID et SCIM

- Refonte en Terrafrom des objets de type: Clusters /Instance pools

- Standardisation et migration des runtime utilsés dans les jobs vers un la version LTS la plus récente.

- Migration des famille de VMs azure vers une famille de VMs moins chére (Dxa_v4 au lieu des Dxs_v3). Projet 2 : responsable du système de production DATA TF1 (Airflow): Missions :

- Gestion et upgrade de l'orchestrateur Apache Airflow afin de pérenniser le système de production Data de TF1

- Optimisation et support continu

- Homogénéisation de l'orchestration de nos flux sous Airflow (Api, FTP Export, Azure Data Factory, Azure Databricks)

- Montée en compétences puis Lead de l'équipe DE interne sur l'outil Projet 3 : optimisation des jobs de productions Azure / Databricks Missions :

- Support pour les équipes Data Analyse & Data Science dans les architectures de production et dans l'optimisation de code Spark

- Implementation de flux Azure Data Factory.

- Relecture des notebooks avec les équipes Data Analyse & Data Science avant mise en production

- Suivi de la production & maintenance des jobs vers les nouveaux runtimes DBR

- Mise en place de pools de VMs dédiées à la production Environnement technique (TF1): Azure (Databricks, Data Factory, Event Hub, Event Grid, DevOps), Terraform, Docker, Airflow, Python, Pyspark, Snowflake

- La mise en place d'un datalake pour les différentes marques de la Compagnie des Alpes (destinations de loisirs et domaines skiables) pour des fins e-marketing et data science

- Mener le projet de migration du Datalake depuis Hortonworks vers Databricks sur du full cloud AWS

- Technos: Databricks, Spark, Python, Talend, Cloud AWS (S3, Athena, EC2, RDS, ... ), HDP, Google Analytics -Administration Databricks

- Migration Talend 6 à Talend 8

PROJET : Portail de reporting GarantMe Conception et réalisation d'une application BI pour le suivi de l'activité de GarantMe (vente de certification de garantie logement au client et assurance des biens des proprios) (Qlik Sense, PL/SQL)

• Recueil des besoins et découpage des besoins en thème\sujet

• Conception et modélisation des données à restituer.

• Développement de scripts Qlik pour l'alimentation du modèle des données mis en place.

• Développement du tableau de bord avec Qlik Sense Desktop : -Reproduction d'ancien rapport PL/SQL avec Qlik Sense. -Des extractions des données destinées à l'équipe métier, portant sur le nombre de clients, des certificats de garantie délivrés, le nombre de dossiers créés suivant plusieurs axes d'analyse. -Des états de reporting pour l'évaluation des partenaires. -Tableau de bord pour visualiser les indicateurs de performance de l'activité, ce tableau de bord est interactif et permet d'utiliser des filtres et faire des analyses en temps réel.

• Tests techniques et fonctionnels. Technique Qlik Sense, PL/SQL, MySQL Workbench, Jira.