Data Engineer Spark / Scala – Freelance

À propos du poste

RED TIC recherche un Data Engineer spécialisé Spark et Scala pour concevoir et maintenir des pipelines de données robustes, tant en temps réel qu’en batch. Le poste est en freelance, basé à Dakar.

Missions principales

• Concevoir, développer et optimiser des pipelines de données avec Spark et Scala.
• Implémenter des solutions de traitement de gros volumes de données en temps réel et en batch.
• Intégrer des sources de données variées tout en garantissant leur qualité et fiabilité.
• Collaborer avec les équipes métier pour traduire les besoins en solutions techniques.
• Identifier et résoudre les problèmes de performance des pipelines.
• Mettre en place des solutions pour gérer de grandes volumétries avec des délais optimaux.
• Travailler avec des équipes multidisciplinaires pour assurer la cohérence des solutions.
• Documenter les processus et les solutions techniques pour faciliter leur évolution.

Profil recherché

• Bac+5 en informatique ou équivalent.
• Minimum 3 ans d’expérience en tant que Data Engineer.
• Maîtrise avérée de Spark et Scala.
• Bonne maîtrise du français et de l’anglais.

Compétences requises

• Architecture big data (Hadoop, Kafka).
• Bases de données relationnelles et NoSQL (SQL, NoSQL).
• Plateformes cloud (AWS, Azure, GCP).
• Méthodologies CI/CD.