Novancy, cabinet de conseil en systèmes d’information et transformation digitale, propose une mission freelance de Data Engineer Senior à Casablanca. Le projet consiste à concevoir, développer et maintenir des pipelines de données robustes, capables de traiter des volumes massifs et variés.

Le rôle implique la maîtrise de SQL pour la requêtage et l’optimisation de bases de données relationnelles, ainsi que la programmation en Python et PySpark pour le traitement distribué. La connaissance approfondie de Scala est un atout pour les projets nécessitant une performance élevée.

Le candidat devra travailler avec les services cloud suivants : AWS Glue, Redshift, S3 et EMR ; Azure Synapse et Data Factory ; GCP BigQuery et Dataflow. Il devra également être à l’aise avec les technologies Big Data telles que Spark, Hadoop et Kafka.

La gestion des flux de données est assurée par Airflow et Dagster, avec une intégration continue et un déploiement continu (CI/CD). Le contrôle de version se fait via Git, tandis que la conteneurisation est réalisée avec Docker. L’infrastructure est orchestrée par Terraform, et le candidat doit être capable de concevoir et maintenir des Data Warehouses et Data Lakes, ainsi que de mettre en œuvre la modélisation dimensionnelle.

Cette mission freelance offre une grande autonomie, la possibilité de travailler à distance et la flexibilité d’adapter son planning aux besoins du projet. Le candidat idéal possède une expérience de 5 ans minimum dans le domaine, une forte capacité d’analyse et une passion pour l’innovation cloud et Big Data.