DEEP - Data Engineer

Vos missions

• Concevoir, mettre en œuvre et maintenir des systèmes de gestion de données robustes et évolutifs pour collecter, stocker et traiter de grands volumes de données
• Concevoir et développer des pipelines de données pour l'extraction, la transformation et le chargement (ETL/ELT) des données à partir de sources diverses vers les Data Lake, les entrepôts de données ou les bases de données. L’ingestion peut être en lots (batchs) ou en temps réel
• Transformer les données en insights visuels pertinents et accessibles aux équipes métiers
• Optimiser les performances des systèmes de traitement de données en améliorant l'efficacité, la vitesse et la fiabilité des pipelines de données et des infrastructures sous-jacentes
• Mettre en place des mesures de sécurité et de confidentialité des données pour protéger les informations sensibles contre les accès non autorisés, les fuites ou les violations de données
• Travailler en étroite collaboration avec les Data Scientists et les Data Analysts pour comprendre leurs besoins en matière d'infrastructure de données et fournir un accès rapide et fiable aux données nécessaires à leurs analyses

Votre profil

• Diplôme équivalent au Master ou supérieur ou une expérience professionnelle équivalente 
• Disposer d'au moins 5 ans d'expérience dans une fonction similaire
• Disposer d'un bon esprit d'analyse et être orienté solutions 
• Avoir une solide connaissance et expérience des techniques de manipulation de larges volumes de données (Big Data) 
• Disposer d'une très bonne connaissance des technologies/outils suivants : NoSQL Technologies, SQL-based technologies, flux de données en temps réel (Apache Kafka et Storm), Hadoop et la suite Cloudera Data Platform, architecture de données : Datawarehouse, Data Vault, Data Lake...
• Une bonne maîtrise de Python est indispensable
• Une connaissance des outils ETL/ELT (notamment Dataiku) est fondamentale 
• Une connaissance de Dash est requise, et de Power BI souhaitée 
• Le maîtrise du français et de l'anglais sont exigées. La connaissance de l'allemand ou du luxembourgeois constitue un atout