La plateforme Data de notre client est un pilier stratégique visant à casser les silos d’information et à fournir des données en temps réel à l’ensemble de l’écosystème. En tant que Data Engineer Senior en freelance, vous jouerez un rôle clé dans la conception, le développement et la maintenance de solutions de traitement de données à grande échelle. Vous utiliserez des technologies modernes telles que BigQuery, BigTable, Apache Kafka et Apache Spark pour transformer et analyser de gros volumes de données.

Responsabilités principales :

• Concevoir des pipelines de données robustes et évolutifs.
• Développer des solutions de streaming et batch en utilisant Kafka, Spark et BigQuery.
• Collaborer avec les équipes de développement et de production pour assurer la qualité et la performance des solutions.
• Mettre en place des processus CI/CD via GitLab CI/CD et Docker Compose.
• Optimiser les requêtes SQL et les traitements BigQuery pour de gros volumes.
• Documenter les flux de données et produire des rapports de performance.

Profil recherché :

• Expérience confirmée (minimum 7 ans) en Scala/Java.
• Maîtrise des plateformes de streaming (Kafka) et de traitement distribué (Spark).
• Connaissance approfondie des services cloud GCP ou AWS (Cloud Storage, Dataproc, Kubernetes).
• Compétences solides en SQL avancé et BigQuery.
• Expérience avec CI/CD, GitLab, Docker Compose.
• Bonne maîtrise de Linux et des outils de ligne de commande.
• Connaissance des architectures microservices et bonnes pratiques de développement.
• Expérience en tests unitaires et d’intégration.
• Excellente communication écrite et orale en français.

Compétences techniques supplémentaires :

• Kafka-stream, Spring Boot.
• Méthodologie agile (Scrum).

Conditions :

• Type de mission : Freelance.
• Localisation : Casablanca, Maroc.
• Démarrage : ASAP.
• Charge prévisionnelle annuelle budgétée : 220 à 225 JH.

Vous rejoindrez une équipe dynamique et innovante, au cœur d’une plateforme data de pointe, et contribuerez à transformer la prise de décision de l’entreprise grâce à des données fiables et accessibles en temps réel.