Mission principale

En tant qu'Ingénieur Data Qualité & Validation, vous concevrez, développerez et optimiserez des pipelines Big Data sur la plateforme Azure. Vous utiliserez Databricks pour le traitement distribué, PySpark pour l’analyse de données massives, et Azure Data Factory pour l’orchestration ETL. Vous appliquerez l’architecture en médailles (Bronze, Silver, Gold) afin de garantir la traçabilité et la qualité des données à chaque étape du flux.

Responsabilités clés

• Conception et mise en œuvre de solutions ETL et d’ingestion de données.
• Développement de notebooks Databricks (batch & streaming) et intégration avec Delta Lake.
• Orchestration via Azure Data Factory et mise en place de bonnes pratiques DataOps.
• Assurance qualité des données : rédaction de cas de tests, plans de tests, exécution via Xray.
• Optimisation SQL analytique et validation des résultats.

Compétences requises

• Data Engineering, Databricks, PySpark, Azure Data Factory, ETL, DataOps.
• SQL avancé (optimisation, validation).
• Gestion de tests via Xray.
• Connaissance d’Azure Synapse, Delta Lake, CI/CD, Git, Terraform (bonus).

Profil recherché

Minimum 5 ans d’expérience en Data Engineering, expertise avancée en PySpark et pipelines Big Data, sens aigu de la qualité, capacité à travailler en environnement agile et multi‑projets.

Environnement de travail

Mode hybride (HB) avec flexibilité, possibilités d’évolution, formation continue, projets d’envergure sur le cloud et Big Data.

Pourquoi rejoindre SQLI

Équipe dynamique, technologies de pointe, avantages attractifs, cadre de travail flexible, opportunités d’évolution.