Mon espace
Je m'inscris

En tant que

Consultant Client
 

CV du
consultant

Réf PROF00007533

Accueil > Consultants > PROF00007533
 
 

data engineer

Disponible

 

Profil publié le : 07/10/2024 Profil vu : 46 fois Référence : PROF00007533

 
 

Compétences

Expert Moyen Débutant

BDD

Data Databricks Azure BI DBT HIVE snowflake

Connaissances fonctionnelles

Cloud dashboard Dataiku digital flux Formation informatique Kafka Microsoft MOBILE pipelines Production RUN Stream TESTS transformation WEB

Langages

scala Spark C css Github HTML5 NATURAL PYTHON react ReactJS SQL

Méthodes

api développement integration Jenkins MIGRATION PROJET

Outils

Cucumber

Réseaux et Middleware

AWS FIREWALL Monitoring Routing

Systèmes

APACHE

Diplômes et formations

Pays / régions

Expérience professionnelle

Principales compétences
• Apache Spark
• dbt
• Scala

Certifications
• Databricks Certified Data Engineer Associate
• Databricks Certified Associate Developer for Apache Spark 3.0

Formation • EPITA: Ecole d'Ingénieur en Informatique
Diplôme d'ingénieur, Informatique · (2016 - 2021)

• Industrial Engineering, Chulalongkorn Univerisity [Official]




Expériences Professionnelles


Société Générale
Big Data Engineer
octobre 2023 - Present (1 an 1 mois)
Ville de Paris, Île-de-France, France

Mise en place de pipeline de données visant à cartographier des flux firewall recu de manière quotidienne (1.3 To par jour). On dispose de plusieurs sources de données tierces qui vont nous permettre d'alimenter les flux reçus de notre source principal de données afin d'être utilisé par le métier.
Les données sont présentes dans un cloud privé (LUCID) au format brut et une fois traitées, elles vont être stockées dans des tables hive

Techno utilisées:
Spark Scala, Databricks,Jenkins,Control M,On premise

Openvalue
Big Data Engineer
octobre 2022 - Present (2 ans 1 mois)


Carmignac
Big Data Engineer
octobre 2022 - juin 2023 (9 mois)
Ville de Paris, Île-de-France, France
Projet : création d’un référentiel de produits financiers
• Construction des pipelines d’orchestration sur Azure Data Factory (Linked services, datasets, pipelines, triggers, alerts)
• Mise en production d’un stream Bi Digitalization
• Participation au développement d’une librairie Scala/Spark via intelliJ pour génériser les traitements redondants et partager la librairie dans l’environnement Databricks
• Développement de projets en Scala/Spark via IntelliJ et notebooks Databricks
• Mise en place de tests Cucumber pour valider les développements
• Participation aux workshops avec le métier
• Suivi du run


ENGIE Digital
Back End Developer
juin 2022 - septembre 2022 (4 mois)
Ville de Paris, Île-de-France, France
Projet : mise à jour de l’API data science du projet Agathe (3 mois) – Engie Digital
• Routing API (fastAPl)
• CI/CD Jenkins, GitHub
• Refactoring API
• Correction de bugs de l’API
- step function (aws)


Ippon Technologies
Big Data Engineer
septembre 2021 - septembre 2022 (1 an 1 mois)
Ville de Paris, Île-de-France, France


Betclic Group
Big Data Engineer
septembre 2021 - juin 2022 (10 mois)
Bordeaux, Nouvelle-Aquitaine, France
Projet : tracking d’events sur l'application Betclic
• Création de tables Snowflake
• Transformation de la donnée avec dbt dans le but de créer des dashboards
• Migration de code SQL Dataiku vers DBT
• Création de dashboard tableau pour la visualisation
• Remontée de KPIs de monitoring des utilisateurs actifs sur la plateforme


EPITA: Ecole d'Ingénieur en Informatique
Étudiant
septembre 2015 - juillet 2021 (5 ans 11 mois)
Région de Paris, France
Major SCIA (DATA SCIENCE AND ARTIFICIAL INTELLIGENCE) :
• Text Mining & Natural Language Processing (Python and C++)
• Data Representation and Feature Extraction (Python)
• Generative Methods for Machine Learning (Python)
• Discriminative Methods for Machine Learning (Python)
• Parallel programming (SCALA / KAFKA)
• Machine Learning in Cloud Computing (Microsoft Azure)
• Very Large Graph manipulation algorithms (Python)


Tracely
full stack developer
septembre 2019 - janvier 2020 (5 mois)
• Participer à l’amélioration et au développement des interfaces (Web et mobile)
• Développer de nouvelles fonctionnalités
• Développement web (JS, ReactJS, HTML5, CSS)
• Intégration de nouveaux modèles (React JS)
 
 

Consultants similaires

 
Data Engineer

Compétences : AWS, Azure Data Factory, Data, PYTHON, Spark, Accessibilité, ...

Voir
consultant
Retenir
 
Architecte data

Compétences : Azure Cloud, Azure Data Factory, Data, Databricks, ...

Voir
consultant
Retenir
 
data

Compétences : Data, data analysis, data management, ACCESS, Administration, ...

Voir
consultant
Retenir
 
Cloud Data Engineer

Compétences : AWS, Data, KUBERNETES, PYTHON, Terraform, Azure Data ...

Voir
consultant
Retenir
 
Developpeur Mulesoft

Compétences : Data, GIT, java 8, Mulesoft, Salesforce CRM, ANGLAIS, ...

Voir
consultant
Retenir
 
Data analyst

Compétences : Azure Cloud, Data, PYTHON, SQL, AGILE, Analyse, ANGLAIS, ...

Voir
consultant
Retenir
 
Sénior data engineer

Compétences : Data, DataWareHouse, ETL, PySpark, PYTHON, AGILE, Analyse, ...

Voir
consultant
Retenir
 
support data analyst

Compétences : Data, PYTHON 3, ServiceNow, Support, cegid, Power BI, ...

Voir
consultant
Retenir
 
Data analyst

Compétences : Data, Gestion Budgétaire, Gestion commerciale, Power ...

Voir
consultant
Retenir
 
Product Owner

Compétences : Data, product owner, ACCESS, AGILE, Analyse, ANGLAIS, ...

Voir
consultant
Retenir
 
 

Partager

 

Retenir

  • Pour quelle mission ?

 

Vous avez oublié
votre mot de passe ?