Le projet consiste à mettre en place une architecture « Data Centric » au sein du SI de notre client, afin de casser les silos d’information et de fournir des données en temps réel via API à l’ensemble de l’écosystème. En tant que consultant Data Engineer Senior, vous serez responsable de la conception, du développement et de la maintenance de pipelines de données à grande échelle, en exploitant les technologies BigQuery, BigTable, Apache Kafka et Apache Spark. Vous collaborerez étroitement avec les équipes de développement, d’exploitation et de produit pour garantir la qualité, la performance et la scalabilité des solutions livrées.

Responsabilités principales :

• Concevoir et développer des pipelines de données robustes et performants, capables de traiter des volumes massifs en temps réel.
• Intégrer les flux de données via Kafka, Spark et autres outils de streaming pour alimenter les data lakes et data warehouses.
• Optimiser les requêtes BigQuery et les schémas de stockage pour réduire les coûts et améliorer les temps de réponse.
• Mettre en place des processus CI/CD (GitLab CI/CD, Docker Compose) pour automatiser le déploiement et les tests.
• Assurer la qualité du code à travers des tests unitaires, d’intégration et de performance.
• Collaborer avec les équipes d’exploitation pour garantir la disponibilité et la résilience des services.
• Participer à la définition de l’architecture microservices et aux bonnes pratiques de développement.

Profil recherché :

• Minimum 7 ans d’expérience en développement Scala/Java, avec une forte expertise en Big Data et Cloud (GCP ou AWS).
• Maîtrise des plateformes de streaming (Kafka) et des frameworks de traitement distribué (Spark).
• Expérience avérée sur BigQuery, BigTable, Cloud Storage, Dataproc, Kubernetes et autres services cloud.
• Compétences solides en SQL avancé et en optimisation de requêtes.
• Connaissance approfondie des outils CI/CD (GitLab CI/CD, Docker Compose) et de l’environnement Linux.
• Expérience en architecture microservices, tests unitaires et d’intégration.
• Excellentes compétences en communication écrite et orale, avec une maîtrise du français.
• Capacité à travailler en méthodologie agile (Scrum) et à collaborer dans des équipes pluridisciplinaires.

Conditions :

• Contrat freelance, durée initiale de 6 mois renouvelable (220 à 225 jours ouvrés).
• Localisation : Casablanca, Maroc (présentiel ou hybride selon les besoins).
• Rémunération compétitive, à négocier en fonction de l’expérience et des compétences.

Nous offrons un environnement stimulant, des projets innovants et la possibilité de travailler avec des équipes internationales. Si vous êtes passionné par le Big Data, le Cloud et l’architecture data, rejoignez Novancy pour contribuer à des solutions d’envergure.