Mission
Dans le cadre du renforcement de notre équipe IT, nous recherchons un(e) Data Engineer.
Missions :
Conception de pipelines de données en intégrant des sources de données variées (bases de données relationnelles, systèmes de fichiers, API, etc.)Développer des processus ETL/ELT pour l'extraction, la transformation et le chargement des données en respectant les règles métierAméliorer les performances des pipelines pour garantir la rapidité et l'efficacité du traitement des donnéesGestion des infrastructures de données et sélection des technologies appropriées (bases de données NoSQL, data lakes, data warehouses, etc..)Profil Recherché
Compétences techniques :
Maîtrise des langages : Python, SQLOutils et Framework : Hadoop/Cloudera (Hive, Impala, HDFS), PySpark, KafkaBases de donnée...