Data Engineer – Plateforme Data Cloud Azure

À propos du poste

Le Data Engineer (H/F) assure la collecte, le traitement et le stockage des données dans la plateforme Data Cloud Azure. Il conçoit et met en œuvre des pipelines optimisés pour répondre aux besoins des cas d’usage data et des applications.

Missions principales

• Concevoir et développer des pipelines ELT pour l’extraction, le chargement et la transformation des données.
• Créer et gérer des bases de données et des entrepôts de données sur Azure.
• Automatiser les processus de gestion des données afin d’améliorer l’efficacité et la productivité.
• Optimiser les performances des pipelines et garantir un traitement efficace des données.
• Assurer la sécurité et la protection des données sensibles.

Profil recherché

• Diplôme Bac+5 d’une école d’ingénierie.
• Minimum 2 ans d’expérience en Data Engineering ou poste similaire.
• Bonne connaissance des technologies Data sur Azure.
• Maîtrise des langages Python et SQL.
• Expérience avec les outils Big Data tels que Hadoop, Spark, Kafka.

Compétences requises

• Azure Data Services (Data Factory, Synapse, etc.).
• Programmation Python et SQL.
• Frameworks Big Data : Hadoop, Spark, Kafka.
• Conception et développement de pipelines ELT.
• Modélisation de données et gestion de schémas.
• Bases de données relationnelles et non relationnelles.