Data Engineer (H / F)

description de l'emploi

Le Data Engineer a pour mission d’assurer la collecte, le traitement et le stockage des données dans la Plateforme Data Cloud Azure de manière efficace. Il travaille sur l’implémentation de pipelines optimisés et l’exposition des données répondant aux besoins des cas d’usages data ainsi que des applications.

Responsabilités du poste  :

Concevoir et développer les pipelines de données pour l'extraction, le chargement et la transformation (ELT) des données ;Créer et gérer les bases de données et d'entrepôts de données ;Assurer l’implémentation de l'architecture de données et des modèles de stockage ;Automatiser les processus de gestion des données pour améliorer l'efficacité et la productivité ;Optimiser les performances des pipelines et assurer un traitement efficace des données ;Mettre en place la sécurité des données et des mécanismes de protection des données sensibles ;Collaborer avec les parties prenantes (métiers, Data Scientists, Data Analysts, développeurs…) pour soutenir les initiatives liées aux données ;Maintenir les pipelines de données développés ;Assurer la documentation des processus et des normes liés à la gestion des données ...

Profil demandé  :

De formation Bac+5 d'une Ecole d’Ingénierie ; Une expérience de minimum 2 ans dans la Data Engineering ou dans un poste similaire ;Bonne connaissance des technologies Data sur Azure ;Maîtrise des langages de programmation Python et SQL ;Bonne connaissance des outils et des frameworks de Big Data tels que Hadoop, Spark, Kafka ;Compétences dans la conception et le développement de pipelines ELT ;Compétences en modélisation de données et gestion des schémas ;Connaissance des bases de données relationnelles et non relationnelles ;Capacité à optimiser les performances des bases de données ...