Data Engineer Apache Spark / PySpark en Freelance
--Casablanca ou Rabat--
Ref. : 006806
Contexte :
Dans le cadre de notre projet, nous recherchons des Data Engineers spécialisés en Apache Spark et PySpark pour renforcer une équipe data dans le secteur bancaire et des services financiers au Maroc. Le rôle couvre le développement, l’ingestion et le traitement de données massives, ainsi que l’industrialisation des pipelines.
Type de contrat : Freelance
Localisation : Maroc
Secteur : Bancaire / Services financiers
Démarrage : à préciser
Missions :
Concevoir, développer et maintenir des pipelines de données massives
Assurer l’ingestion et la transformation des données avec Apache Spark / PySpark
Développer des traitements en Python
Travailler sur Hadoop, Hive et HDFS
Optimiser les performances des traitements et des requêtes SQL
Assurer la qualité et la fiabilité des données
Intégrer des flux Kafka (apprécié)
Collaborer avec les équipes data, IT et métier
Participer aux phases de test et de mise en production
Profil recherché :
3 à 8 ans d’expérience en Data Engineering
Maîtrise d’Apache Spark et PySpark
Expérience sur Hadoop, Hive, HDFS
Développement Python
SQL avancé
Kafka apprécié
Expérience sur plateformes Cloud appréciée
Capacité à travailler en environnement bancaire et réglementé
Compétences clés :
Apache Spark
PySpark
Hadoop
Python
Hive, HDFS
Kafka (apprécié)
SQL avancé
Traitement et ingestion de données massives
Cloud (apprécié)
Qualité et industrialisation des données