Data Engineer Java Kafka

À propos du poste

Nous recherchons un(e) Data Engineer spécialisé(e) en Java et Kafka pour concevoir, développer et maintenir des solutions de traitement de données massives sur des architectures distribuées.

Missions principales

• Concevoir, développer et maintenir des pipelines de données temps réel avec Kafka.
• Développer des applications Java pour le traitement de données en streaming et batch.
• Optimiser et automatiser les flux de données afin d’assurer performance et scalabilité.
• Collaborer avec les équipes Data et DevOps pour définir des architectures adaptées.
• Participer à l’évolution de l’infrastructure de données et intégrer de nouvelles technologies.
• Assurer le support et la résolution des incidents en production.
• Rédiger la documentation technique et les spécifications des solutions.

Profil recherché

• Capacité à travailler en équipe avec des profils variés (data scientists, devops, etc.).
• Autonomie et rigueur dans la gestion des tâches et projets.
• Bonne capacité d’analyse et de résolution de problèmes.

Compétences requises

• Maîtrise du langage Java et des bonnes pratiques de développement.
• Solide expérience avec Kafka (topics, producteurs, consommateurs, Kafka Streams).
• Connaissance des bases de données SQL (PostgreSQL) et NoSQL (MongoDB, Cassandra).
• Familiarité avec les outils DevOps : Docker, Kubernetes, CI/CD.
• Bonne compréhension des systèmes distribués, scalabilité et haute disponibilité.
• Connaissances souhaitées en Apache Spark, Flink et en cloud (AWS, GCP, Azure).