Data Engineer Spark / Scala

À propos du poste

RED TIC recherche un Data Engineer spécialisé en Spark et Scala pour concevoir et développer des pipelines de données robustes et évolutifs dans un environnement big data.

Missions principales

• Concevoir, développer et optimiser des pipelines de données avec Spark et Scala, en temps réel et batch.
• Intégrer des données provenant de sources variées tout en garantissant leur qualité et fiabilité.
• Identifier et résoudre les problèmes de performance afin de gérer de grandes volumétries.
• Collaborer avec les équipes métier et techniques pour traduire les besoins en solutions concrètes.
• Documenter les processus et les solutions techniques pour assurer leur maintenabilité.

Profil recherché

• Bac+5 en informatique ou équivalent.
Minimum 3 ans d'expérience en tant que Data Engineer ou poste similaire.
• Capacité d'analyse, esprit d'équipe, autonomie et curiosité technologique.

Compétences requises

• Maîtrise de Spark et Scala.
• Connaissances en architecture big data (Hadoop, Kafka, etc.).
• Gestion de bases de données relationnelles et NoSQL (SQL, NoSQL).
• Expérience sur des plateformes cloud (AWS, Azure, GCP).
• Bonne compréhension des méthodologies CI/CD.