Data Engineer

Le Data Engineer est le professionnel du développement informatique basé sur de la donnée ! Il a pour mission de mettre en place la collecte et la mise à disposition des données au sein d’une entreprise émis par les équipes de Data Science.

Ses missions ?

  • Participer à la conception et à la planification des fonctionnalités à réaliser
  • Collaborer avec les équipes métiers
  • Établir les spécifications techniques à partir de l’analyse des besoins
  • Reporter l’activité auprès du chef de projet
  • Développer l’archivage et le stockage des données (Hadoop)
  • Développer les solutions techniques de collecte de la donnée via des API, en utilisant des langages de programmation tels que Python, TensorFlow, PyTorch…
  • Veiller à faciliter et accélérer le traitement des données
  • Maquetter l’architecture d’un projet

Compétences requises

  • Bonne maîtrise des techniques de modélisation statistique et d’apprentissage automatique
  • Maîtrise des langages de programmation tels que C++, Scala, Java, Python…
  • Mise en place d’une veille technologique, juridique et éthique
  • Maîtrise des environnements Hadoop/Hive/Spark ( local ou dans le cloud)
  • Maîtrise des bases de données et les gestion de bases de données (SQL/NoSQL)
  • Maîtrise d’un outil de gestion de flux (Kafka, Flink…)
  • Connaissance sur le RGPD et des principes de cybersécurité
  • Maîtrise des systèmes d’exploitation (Unix, Windows…)
  • Connaissance des solutions de manipulation des données de type ETL/LET

Qualités requises

  • Sens de l’organisation
  • Force de proposition
  • Capacité de synthèse et d’analyse développées
  • Méthodologique
  • Rigueur
  • Être pragmatique
  • Savoir travailler en équipe
  • Savoir gérer son temps de travail

Salaire moyen

Plusieurs facteurs influencent le salaire tels que le nombre d’années d’expérience, l’ancienneté ou encore la structure de l’entreprise qui déterminent le niveau de rémunération.

30 à 35k

brut annuel pour un débutant

Jusqu’à ~ 65k

brut annuel pour un expert

Formations EEMI qui préparent à ce métier