Data Engineer – Plateforme Data Cloud Azure

À propos du poste

Le Data Engineer (H/F) assure la collecte, le traitement et le stockage des données au sein de notre plateforme Data Cloud Azure. Vous concevez et déployez des pipelines de données performants pour répondre aux besoins des équipes métiers et data.

Missions principales

• Concevoir et développer des pipelines ELT pour l’extraction, le chargement et la transformation des données.
• Créer et gérer des bases de données et des entrepôts de données sur Azure.
• Implémenter l’architecture de données et les modèles de stockage adaptés.
• Automatiser les processus de gestion des données afin d’améliorer l’efficacité.
• Optimiser les performances des pipelines et garantir un traitement rapide.
• Mettre en place des mesures de sécurité et de protection des données sensibles.
• Collaborer avec les métiers, Data Scientists, Data Analysts et développeurs.
• Assurer la maintenance et la documentation des pipelines et des normes.

Profil recherché

• Bac+5 d’une école d’ingénierie.
• Minimum 2 ans d’expérience en data engineering ou poste similaire.
• Capacité à travailler en équipe et à communiquer avec les parties prenantes.

Compétences requises

• Bonne connaissance des technologies Data sur Azure.
• Maîtrise de Python et SQL.
• Expérience avec Hadoop, Spark et Kafka.
• Compétences en conception de pipelines ELT.
• Modélisation de données et gestion des schémas.
• Connaissance des bases de données relationnelles et non relationnelles.
• Optimisation des performances des bases de données.