Lead Data Engineer – Conception et exploitation de pipelines data

À propos du poste

Le Lead Data Engineer conçoit, développe et exploite les chaînes de collecte, de transformation, de stockage et de mise à disposition des données au sein du système d’information du Crédit du Maroc. Il assure la fiabilité, la performance, la scalabilité et la sécurité des flux de données pour les équipes métiers, les Data Analysts et les Data Scientists.

Missions principales

• Élaborer les architectures de collecte, de traitement et de stockage des données adaptées aux besoins métiers.
• Concevoir les pipelines de données batch et temps réel (ingestion, transformation, chargement).
• Rédiger la documentation technique (schémas, flux, dictionnaires de données, règles de gestion).
• Suivre la performance, la disponibilité et la fiabilité des flux et des traitements de données.
• Assurer la qualité des données tout au long de leur cycle de vie.
• Superviser l’exécution des batchs, jobs et automatisations en production.

Profil recherché

• Capacité à garantir la fiabilité, la performance, la scalabilité et la sécurité des flux de données.
• Expérience dans la mise en place de solutions d’ingestion, de transformation et de stockage de données.

Compétences requises

• Maîtrise des API pour la collecte de données.
• Connaissance des bases de données relationnelles et non relationnelles.
• Expérience avec les flux streaming et les sources de données externes.