Ce site utilise des cookies afin que nous puissions vous fournir la meilleure expérience utilisateur possible. Les informations sur les cookies sont stockées dans votre navigateur et remplissent des fonctions telles que vous reconnaître lorsque vous revenez sur notre site Web et aider notre équipe à comprendre les sections du site que vous trouvez les plus intéressantes et utiles.
Big Data Engineer
Notre définition : Le Big Data Engineer est responsable de la conception, du développement et de la gestion de l’infrastructure de données pour le traitement et l’analyse de grands ensembles de données. Il travaille en étroite collaboration avec les Data Scientists, les Data Engineers et les autres membres de l’équipe pour garantir que les données sont accessibles, fiables et exploitables.
Activités principales :
-
- Concevoir et développer des architectures de données évolutives pour le traitement et l’analyse de grands ensembles de données.
- Développer des pipelines de données pour l’acquisition, le nettoyage et le stockage des données.
- Optimiser les performances des systèmes de traitement de données pour garantir des temps de réponse rapides.
- Mettre en place des outils de surveillance et de gestion des performances pour assurer la fiabilité et la disponibilité des systèmes.
- Évaluer et recommander des technologies et des outils pour soutenir l’infrastructure de données.
Compétences techniques requises :
-
- Maîtrise des technologies de traitement de données telles que Hadoop, Spark, etc.
- Solides compétences en programmation, notamment en Java, Scala, Python, etc.
- Expérience dans la conception et le développement de pipelines de données.
- Compétences en gestion des bases de données et en optimisation des performances.
- Capacité à travailler en équipe et à collaborer avec différentes parties prenantes.