Vous rejoindrez une équipe data dynamique au sein d’une société à taille humaine, mais avec de grandes ambitions. Votre rôle sera de participer à des projets stratégiques d’analyse de données et de mettre en place des solutions de traitement à grande échelle sur le cloud Azure. Vous serez responsable de la conception, de l’optimisation et du développement de pipelines de données en utilisant PySpark et Azure Data Factory.
Vos missions principales :
- Concevoir, développer et maintenir des pipelines de données massives avec PySpark.
- Mettre en place des flux de données via Azure Data Factory, intégrant SQL, Data Lakes, APIs, etc.
- Assurer l’intégration de données provenant de systèmes variés dans un environnement cloud Azure.
- Optimiser les performances des traitements (SQL, PySpark).
- Collaborer avec les équipes métier, data analysts et data scientists pour comprendre les besoins et proposer des solutions scalables.
- Participer à la définition de l’architecture des données et de la stratégie de gouvernance.
- Mettre en place et assurer le monitoring des jobs de traitement (gestion des erreurs, performances).
- Documenter les solutions et suivre les bonnes pratiques de développement.
- Contribuer à l’amélioration continue des processus et outils existants.
Profil recherché :
- Bac +5 en informatique, data science ou domaine équivalent.
- Minimum 3 ans d’expérience sur un poste similaire, avec expertise en PySpark et Azure Data Factory.
- Maîtrise de PySpark, Azure Data Factory, bases de données relationnelles et non relationnelles.
- Connaissance des services Azure (Data Lake, SQL Database, Blob Storage, Databricks, Synapse Analytics).
- Expérience avec Git, Azure DevOps et bonnes pratiques de développement logiciel.
- Compréhension des concepts Big Data et optimisation des performances.
- Autonomie, rigueur, sens du détail, excellente capacité de résolution de problèmes techniques.
- Bonnes compétences en communication et travail d’équipe.
Pourquoi rejoindre SQLI ?
- Environnement dynamique et innovant, avec des projets d’envergure.
- Opportunités d’évolution et de formation continue.
- Cadre de travail flexible et avantages attractifs.
