Mon espace
Je m'inscris

En tant que

Consultant Client
 

CV du
consultant

Réf PROF00006817

Accueil > Consultants > PROF00006817
 
 

Expert Big Data

Disponible

 

Profil publié le : 07/03/2023 Profil vu : 449 fois Référence : PROF00006817

 
 

Compétences

Expert Moyen Débutant

BDD

CLOUDERA Data BI DataWareHouse HDFS HIVE Hue MYSQL ORACLE POSTGRESQL TERADATA

Connaissances fonctionnelles

ANGLAIS Cloud Déploiement DISTRIBUTION flux Français Français Industrialisation international Kafka PCA PRA Production transformation

Langages

SHELL Spark Batch Docker ELK Hadoop JAVA PySpark PYTHON REFERENCEMENT SAFe

Méthodes

DEVOPS AGILE Conception integration ITIL Jenkins Management MIGRATION PROJET Support UML

Outils

GitLab Grafana openstack

Réseaux et Middleware

KUBERNETES Terraform ansible CDP Monitoring

Systèmes

APACHE CENTOS

Diplômes et formations

. 2019 - Hitema Master 2 Expert en Études et développement des Systèmes d’Information par
. 2018 - Université Paris Saclay Master 1 Informatique pour la science des données par ap
. 2017 - Université Paris Sud Licence Méthodes informatiques appliquées à la gestion des

Pays / régions

Expérience professionnelle

COMPETENCES
Langages : Python, Java, Korn Shell
Big Data : Hadoop, Kafka, Spark, Hive, Impala, Airflow
Streaming : Spark Streaming, Kafka Streams, Flink
Distribution Big data : Cloudera ( CDH, CDP, CDSW)
Monitoring : Grafana, Prometheus, ELK
DevOps : Gitlab, Ansible, Sonatype, Jenkins, Docker
BI : DataWarehouse Oracle Cube
Conception : UML
Gestion de projet : MS Project
Base de données : MySQL, Oracle, Teradata
Management SI : ITIL, PCA, PRA
Langues : Français, Anglais, Arabe

EXPERIENCES PROFESSIONNELLES
Consultant Expert Big Data
Societé Générale | Novembre 2021 - Aujoud'hui
Extension des ressources du cluster
Approvisionnement des ressources nécessaires depuis le cloud interne ( VM OpenStack, Postgresql Cloud Platform, Load Balancer, S3 storage)
Support niveau 3 avec des équipes à l'international ( Bangalore et Montréal )
Export des logs des clusters vers une bucket S3 avec Fluentd
Extraction de la gestions des accès à la donnée à travers Apache Ranger
Réorganisation des services Cloudera ( déplacement Hue sur des serveurs dédiés)
Tunning de la configuration du cluster pour assurer le bon fonctionnement
Administration système ( CentOs )
Monitoring des clusters avec Prometheus/Grafana
Cadre :
Expert Hadoop dans un contexte d'une offre de service dans un cloud interne.
4 Clusters de production sont proposés dans l'offre de service
Safe: Scaled Agile Framework
Contexte international
Activité:
Ajout des DataNode
Support aux Data Enginners/Scientists
Automatisation du déploiement de la configuration Fluentd avec Ansible
Data Engineer
SFR | Septembre 2017 - Octobre 2021
Framework d’Ingestion batch, En Agile
Framework d’Ingestion temps réel, En Agile
Transformation des données batch, En Agile
Cadre :
Migration des flux de données de l’ancien Data Warehouse vers le nouveau cluster Hadoop.
Etude des besoins Data métiers & Data Scientists
Mise en place de nouveaux flux de données pour répondre aux différents besoins métiers.
Développement & Industrialisation Big Data
Architecture et veille technologique
Projets :
Chargement des données dans HDFS
Gestion intégration/référencement des nouveaux Flux
Python, HDFS, KSH
550 Flux batch quotidien en production
Kafka, Flume, Nifi, Spark Streaming
Pyspark, Hive
Développement UDF's HIVE
750 jobs quotidiens en production
 
 

Consultants similaires

 
Data analyst

Compétences : Azure Cloud, Data, PYTHON, SQL, AGILE, Analyse, ANGLAIS, ...

Voir
consultant
Retenir
 
Sénior data engineer

Compétences : Data, DataWareHouse, ETL, PySpark, PYTHON, AGILE, Analyse, ...

Voir
consultant
Retenir
 
support data analyst

Compétences : Data, PYTHON 3, ServiceNow, Support, cegid, Power BI, ...

Voir
consultant
Retenir
 
ingenieur devops-cloud

Compétences : ansible, AWS, Cybersecurité, DEVOPS, Terraform, AD, ...

Voir
consultant
Retenir
 
Data analyst

Compétences : Data, Gestion Budgétaire, Gestion commerciale, Power ...

Voir
consultant
Retenir
 
Product Owner

Compétences : Data, product owner, ACCESS, AGILE, Analyse, ANGLAIS, ...

Voir
consultant
Retenir
 
Lead dev Drupal - Freelance

Compétences : DEVOPS, DRUPAL, HTML, JAVASCRIPT, PHP, Symfony, Analyse, ...

Voir
consultant
Retenir
 
Expert Python et Data Scientist

Compétences : Data, INTELLIGENCE ARTIFICIELLE, PYTHON, ACCESS, AGILE, ...

Voir
consultant
Retenir
 
Consultant Data Analytics

Compétences : ALTERYX, Data, Dataiku, PYTHON, Qlik, Qlik Sense, qlikview, ...

Voir
consultant
Retenir
 
Consultante Data

Compétences : Data, data factory, DATA MANAGER, Google Cloud Platform, ...

Voir
consultant
Retenir
 
 

Partager

 

Retenir

  • Pour quelle mission ?

 

Vous avez oublié
votre mot de passe ?