Responsabilités
En tant que Senior Data Engineer Freelance, vous serez chargé de :
- Concevoir, développer et maintenir des pipelines de données (ETL/ELT) à grande échelle.
- Optimiser les performances des flux de données sur les plateformes cloud (AWS, Azure, GCP).
- Mettre en œuvre des solutions Big Data (Spark, Hadoop, Kafka) et assurer la qualité des données.
- Collaborer avec les équipes produit pour définir les exigences métier et transformer les besoins en solutions techniques.
- Documenter les processus, les schémas de données et les meilleures pratiques.
Compétences techniques
Vous devez maîtriser :
- SQL, Python/PySpark, Scala.
- Services cloud : AWS Glue, Redshift, S3, EMR; Azure Synapse, Data Factory; GCP BigQuery, Dataflow.
- Technologies Big Data : Spark, Hadoop, Kafka.
- Outils d’orchestration : Airflow, Dagster.
- Pratiques CI/CD, tests de données.
- Gestion de données : Data Warehouse, Data Lake, dimension modeling.
- Outils de versioning et d’infrastructure : Git, Docker, Terraform.
Profil recherché
Vous avez au moins 5 ans d’expérience en ingénierie des données, une solide compréhension des architectures cloud et une capacité à travailler de façon autonome. Vous êtes capable de résoudre des problèmes complexes, d’optimiser les performances et de livrer des solutions fiables.
Environnement de travail
Ce poste est proposé en freelance, offrant une grande autonomie et la possibilité de travailler à distance. Vous collaborerez étroitement avec les équipes de Novancy pour assurer la réussite des projets de transformation digitale.
Pourquoi rejoindre Novancy
Novancy est un acteur majeur dans le domaine des systèmes d’information et de la transformation digitale. Vous aurez l’opportunité de travailler sur des projets innovants, de collaborer avec des experts cloud et de contribuer à la réussite de clients internationaux.