Nous sommes à la recherche d’un Data Engineer Senior en freelance pour rejoindre notre plateforme Data, une architecture « Data Centric » qui vise à casser les silos d’information et à fournir des données en temps réel via API à l’ensemble de l’écosystème. Le rôle consiste à concevoir, développer et maintenir des solutions de traitement de données à grande échelle, en utilisant des technologies telles que BigQuery, BigTable, Apache Kafka et Apache Spark. Vous travaillerez en étroite collaboration avec les équipes de développement et de production pour garantir la qualité et la performance des solutions mises en place.
Responsabilités principales :
- Conception et développement d’architectures de données distribuées.
- Intégration et optimisation de pipelines de streaming avec Apache Kafka.
- Traitement massif de données avec Apache Spark et optimisation des requêtes BigQuery.
- Gestion des services cloud (GCP, AWS) : Cloud Storage, Dataproc, Kubernetes.
- Automatisation des workflows data via GitLab CI/CD et Docker Compose.
- Écriture de tests unitaires et d’intégration pour assurer la qualité du code.
- Participation aux revues de code et aux cérémonies agiles (Scrum).
Profil recherché :
- Au moins 7 ans d’expérience en Scala/Java.
- Solide expérience en streaming de données (Kafka) et traitement distribué (Spark).
- Maîtrise de BigQuery, BigTable, SQL avancé et gestion de gros volumes de données.
- Connaissance approfondie des concepts d’architecture microservices.
- Expérience avec les services cloud GCP ou AWS.
- Compétences en CI/CD, GitLab, Docker Compose.
- Bonne maîtrise de Linux et des outils de ligne de commande.
- Excellentes compétences en communication écrite et orale en français.
- Capacité à travailler de façon autonome et à respecter les délais.
Conditions de travail :
- Mission freelance de 6 mois renouvelable (220 à 225 jours ouvrés).
- Localisation : Casablanca, Maroc.
- Type de contrat : Freelance.
Si vous êtes passionné par le Big Data, le cloud et l’ingénierie de données à grande échelle, et que vous souhaitez rejoindre une équipe dynamique pour relever des défis techniques complexes, n’hésitez pas à postuler.