Mon espace
Je m'inscris

En tant que

Consultant Client
 

CV du
consultant

Réf PROF00007272

Accueil > Consultants > PROF00007272
 
 

Sénior data engineer

Disponible

 

Profil publié le : 19/02/2024 Profil vu : 672 fois Référence : PROF00007272

 
 

Compétences

Expert Moyen Débutant

BDD

Data DataWareHouse ETL Azure BI BODS datalake DBT HIVE MDX MSBI ORACLE PLSQL POSTGRESQL Power BI SSAS SSIS SSRS Toad

Connaissances fonctionnelles

Analyse ANGLAIS Banque Business Cloud CRYPTOGRAPHIE data factory EDI Finance flux Formation informatique Maintenance MCO Microsoft office Ordonnancement Paiements pipelines PROCEDURES PROCESSUS Production Rédaction ROADMAP RUN Sécurité SOFTWARE TESTS trading transformation Trésorerie WEB

Langages

PySpark PYTHON C DAX Hadoop JAVA OLAP Programmation PYTHON 3 R scala SHELL sonar Spark SQL

Méthodes

AGILE api Conception Data Integration développement DEVOPS ENCADREMENT Etudes integration Management Maven MERISE MIGRATION Modélisation PILOTAGE planification POC PROJET Qualité RECETTE REST SCRUM Support TFS UML

Réseaux et Middleware

DNS Reseau serveur switch

Systèmes

APPS coda GIT LINUX Systèmes UNIX

Diplômes et formations

. 2013 - Master 2 en Intelligence Artificielle et décision Université Pierre et Marie Cu
. 2011 - Master 2 recherche en sécurité des systèmes d'informations et décision Universi
. 2010 - Ingénieur en informatique université de Béjaia

Pays / régions

Expérience professionnelle

FORMATIONS
2013 Master 2 en Informatique option : Intelligence Artificielle et décision
Paris Université Pierre et Marie Curie, Paris Sorbonne.
2011 Master 2 recherche en Informatique option : Cryptographie et sécurité des SI.
Versailles Université de Versailles, Paris Saclay
2010 Ingénieur en Informatique option : systèmes parallèles et distribués
Bejaia Université UAMB de Bejaia
2006 Année préparatoire Sciences Exactes, Technologies et Informatique
Bejaia Université UAMB de Bejaia
COMPÉTENCES
Bases de données SQL Server, PostgreSQL, Oracle, Delta Lake
Big data & Data science Spark, Pyspark, Spark SQL, Lakehouse, Azure Databricks, Hadoop,
BI / Datawarehouse MSBI (SSIS, SSAS, SSRS), MDX, DAX, Power BI, Master Data Services, DBT,
OLTP, OLAP
Cloud Azure Azure Data factory, Azure Logic Apps, Azure Function, Blob/Datalake Storage,
Azure Purview, Azure DevOps, Azure KV, Azure API Management, Azure monitor
Langages de programmation Python, Scala, Java, C#.net, SQL, Yaml, Shell, power Shell
Ordonnancement Control M, One automation, Air flow
Méthodologies Méthode Agile scrum
Gestion de projet Recueille des besoins, Chiffrage des US, Étude et rédaction des faisabilités,
Rédactiondes spécifications techniques, Rédaction des documentation
techniques
Modélisation MERISE, UML
EDI/outils VS Code, Intelij IDEA, Sublime Texte, Maven, Sonar Qube, Dax Studio, SSMS,
Git, datadog,
LANGUES
Anglais : Intermédiaire
2
EXPÉRIENCES PROFESSIONNELLES
Novembre 2022 – décembre 2023 : Groupe ABN AMRO (Paris)
Consultant senior data engineer, cloud Azure
Projets :
1- Développement d’un DATAHUB pour centraliser les données de la banque
Tâches :
• Modélisation des données dans le Datalake et création des tables Delta dans les différentes zones,
• Développement des flux de transformation des données ETL et de calcul des indicateurs,
• Développement des pipelines d’alimentation des données,
• Optimisation des flux et des pipelines de données,
• Développement des pipelines CI/CD,
• Review des codes,
• Accompagnement de l’équipe recette pendant les phases de recette,
• Rédaction des documentations techniques
Technologies: Azure Databricks, Azure Data Factory, DBT, Airflow, Pyspak, Spark SQL, Azure Datalake,
Power BI, Azure Devops, Yaml,
Octobre 2021 - Octobre 2022 : TF1(Boulogne Billancourt)
Consultant techlead data engineer, cloud Azure
Projets :
1- Suivi, maintenance et évolution des chaines d’intégration des données dans le DATAHUB
2- Développement d’un projet pour l’optimisation des campagnes publicitaires TVS
3- Accompagnement d’un stagiaire sur un projet machine learning sur les GRP achetés
Tâches :
• Alimentation du backlog par des US techniques,
• Accompagnement et encadrement d’une équipe de 6 développeurs,
• Participation à des ateliers techniques et d’échanges avec les architectes et les autres techleads,
• Modélisation, et proposition de nouvelles architectures,
• Optimisation des flux existants,
• Review et validation des codes et des applications,
• Participation aux développements des flux de données entre les différentes zones du datalake,
• Accompagnement des nouveaux arrivants,
• Planification et élaboration de la roadmap technique,
• Veille technique, et échanges avec les experts Databricks et Microsoft sur nos problématiques
Technologies: Azure Databricks, Azure SQL Server, Azure Data Factory, Spark Scala, Pysprak, TSQL,
Power BI, Azure Function, Azure Devops, Yaml, Azure Datalake gen2, API REST
3
Aout 2019 – Octobre 2021 : VINCI Énergies (Issy les Moulineaux)
Consultant techlead data engineer, cloud Azure
Projets :
1- Suivi et développement des projets Data et Business Intelligence,
2- Suivi et développement d’un système d’échange de données informatisées (EDI),
3- Suivi et développement d’un ensemble de projets pour la gestion des interventions,
Tâches :
Études techniques de faisabilités,
Proposition d’architectures et des solutions techniques,
Chiffrage des architectures et des solutions proposées,
Rédaction des spécifications techniques détaillées et alimentation du backlog avec les US,
Participation au développement des projets,
Suivi technique des projets,
Suivi et accompagnement des développeurs,
Review et validation des codes et des applications développées,
Développement et configuration des pipelines CI\CD Azure Devops,
Rédaction des documentations techniques, et validation des livrables,
Formation des utilisateurs
Technologies: Azure Databricks, Pyspark, Spark SQL, Azure SQL Server, Azure Data Factory, Power BI,
DAX, Azure Logic Apps, API REST, Azure Devops
02/01/2017 au 28/04/2019 : ENGIE TRADING (Courbevoie)
Consultant data engineer, cloud Azure
Projets :
1- Pilotage et MCO des systèmes décisionnels,
2- Pilotage et MCO des applications IT Finance et back office,
3- Migration et monter de version des applications,
4- Support : En charge du suivi de la qualité et de la disponibilité des données quotidiennement
Tâches :
• Recueil des besoins métiers pour les projets d’évolution avec l’aide des BA,
• Maintenance et évolution des datawarehouses et des bases de données,
• Maintenance des applications C#.NET,
• Optimisation des procédures stockées et des scripts T-SQL et PL-SQL,
• Migration de bases de données SQL serveur vers Azure SQL Server,
• Migration des packages SSIS, cubes SSAS et des rapports SSRS de MSBI 2008 vers
2012/2016,
• POC Big data avec Azure HDInseight pour la reconsolidation des données comptables
• Optimisation et automatisation des processus de la clôture comptable,
• Support technico-fonctionnel et suivi de la production,
4
• Gestion des relevés bancaires (CODA, MT940, AFB120) et des paiements pour la trésorerie,
• Intégration des données (CRE, Couverture, Échéanciers…) pour les équipes comptables,
Technologies : T-SQL, PL/SQL, MSBI 2012/2016, MDX, C#.NET, One Automation, Spark, python, Hive,
HDInseight ADF gen1,VSTS, blob storage
21/10/2013 au 31/12/2016 – Crédit Agricole -CIB
Développeur MSBI, SQL SERVER, C#.NET
Projets :
1- Développement d’une chaine décisionnelle from-scratch pour le calcul d’indicateurs de risque (VAR,
SVAR, PNL…) CVA et HEDGE,
2- Migration et optimisation de la chaîne décisionnelle de calcul d’indicateurs de risque SAFIR CREDIT,
3- Support et MCO : Assurer la disponibilité, la cohérence et la qualité des données dans les deux
applications SAFIR CVA et SAFIR CREDIT,
Tâches :
Modélisation et développement des nouveaux Datawarehouses avec l’aide du techlead,
Modélisation et développement des packages SSIS et des cubes SSAS,
Conception d’une chaine Control M pour l’intégration automatique des données,
Documentation des différentes phases du projet,
Migration des packages SSIS 2005 et des cubes SSAS existants vers MSBI 2012,
Optimisation des procédures stockées et des vues,
Parallèle Run et tests de non-régression,
Conception de nouvelles chaines Control M pour les projets existants,
Validation et mise en PROD.
Suivi quotidien des intégrations des données dans les Datawarehouses et les cubes,
Analyse des écarts remontés par le business,
Réalisation des stress tests, des stress tests EBA et de recalibrage avec le business,
Accompagnement des utilisateurs,
Technologies: MSBI 2012 (SSAS, SSIS), T-SQL, C#.NET, TFS, Control M, Power Shell, Python,
Datawarehouse.
01/04/2013 au 30/09/2013 : Aéroport de Paris (ADP Orly)
Stagiaire développeur BI, Base de données,
Projet :
1. Migration, optimisation et monter de version d’une chaine BI existante
Tâches :
• Migration du Datawarehouse de : Oracle 10g vers Oracle 11g et optimisation /PLSQL,
• Migration des jobs ETL BODI vers BODS,
• Migration des scripts Shell Unix vers Power shell,
• Test de non-régression et étude et analyse de la qualité des données après migration,
• Mise à jour de la documentation,
5
• Participation à la mise en PROD
Technologies: ORACLE 10G, ORACLE 11G, BUSINESS OBJECT DATA SERVICES, POWER SHELL, TOAD,
01/04/2011 au 31/09/2012 : Laboratoire PRISM/BluWan (Versailles)
Ingénieur R&D
Projet :
1- Étude de la sécurité des données dans le réseau sans fils Bluwan
Tâches :
• Études et recueil des besoins client,
• Études et analyse d’un ensemble d’articles scientifiques,
• État de l’art sur les différentes attaques qui peuvent dysfonctionner un réseau sans fils,
• Proposition de plusieurs solutions de sécurité, et rédaction des spécifications techniques
• Simuler un ensemble de solutions retenues avec le client,
• Analyse et présentation des résultats obtenus,
• Rédaction de la documentation technique des solutions retenues.
Technologies : C++, NS3, LINUX, SHELL, 802.11N, PROTOCOLES DE ROUTAGES,
02/01/2010 au 30/06/2010 : Laboratoire LAMOS, (Bejaia)
Stagiaire R&D
Projet :
1- Proposition d’une nouvelle solution de load balancing dans les serveurs web
Tâches :
État de l'arts sur les différentes solutions load balancing dans un data center (basées : DNS, Switch,
software...),
Conception et modélisation d'une nouvelle solution d'équilibrage de charge basée DNS avec
mémoire cache appelée DLB-TSC,
Implémentation de la solution dans un simulateur en langage Java, et simulation en utilisant un
fichier log d'un serveur web réel,
Rédaction et interprétation des résultats obtenus,
Publication d'un article dans un journal scientifique (voir le lien ci-dessous).
http://ieeexplore.ieee.org/document/6970100/ .
Technologies : JAVA, LINUX, LOAD BALANCING, MEMOIRE CACHE, SIMULATION, ALGORITHMIQUE,
QUALITY OF SERVICES.
 
 

Consultants similaires

 
Analyste qualité

Compétences : Power BI, POWERSHELL, PYTHON, Qualité, SQL, ServiceNow, ...

Voir
consultant
Retenir
 
Consultant BI

Compétences : BI, Power BI, PYTHON, SAP Analytics Cloud, SQL, Excel, ...

Voir
consultant
Retenir
 
Data Engineer

Compétences : AWS, Azure Data Factory, Data, PYTHON, Spark, Accessibilité, ...

Voir
consultant
Retenir
 
data engineer

Compétences : Data, Databricks, scala, Spark, APACHE, api, AWS, Azure, ...

Voir
consultant
Retenir
 
Consultant cybersecurité

Compétences : CISCO, DNS, IP, PYTHON, Wireshark, Analyse de données, ...

Voir
consultant
Retenir
 
Architecte data

Compétences : Azure Cloud, Azure Data Factory, Data, Databricks, ...

Voir
consultant
Retenir
 
Gérant de restaurant

Compétences : Maintenance, OFFICE 365, PYTHON, VIRTUALISATION, WINDOWS, ...

Voir
consultant
Retenir
 
data

Compétences : Data, data analysis, data management, ACCESS, Administration, ...

Voir
consultant
Retenir
 
Cloud Data Engineer

Compétences : AWS, Data, KUBERNETES, PYTHON, Terraform, Azure Data ...

Voir
consultant
Retenir
 
DevOps

Compétences : DEVOPS, KUBERNETES, PYTHON, ansible, Administration, ...

Voir
consultant
Retenir
 
 

Partager

 

Retenir

  • Pour quelle mission ?

 

Vous avez oublié
votre mot de passe ?