Fiche métier : Data Engineer
Le métier de Data Engineer
Le Data Engineer évolue dans le domaine des sciences de données. Il est chargé de trouver la solution pour importer un très grand nombre de données. Il rend plus facile leur collecte, leur analyse et leur stockage.
Le Data Engineer est le responsable de l'infrastructure analytique de l'ensemble des données d'une entreprise. Son travail permet à l'équipe de Data Scientist d'analyser les données collectées.
Les missions du poste de Data Engineer
Le Data Engineer met en place et rend opérationnel l'architecture et les infrastructures Big Data d'un client.
Il conçoit donc des solutions qui permettent le traitement d'un volume très important de données.
Le Data Engineer développe le flux de données et les prépare pour leur analyse. Il travaille en amont des Data Scientist.
Son travail consiste à programmer, automatiser et optimiser les algorithmes de l'infrastructure ce qui permet ensuite aux équipes de Data Analyst et Data Scientist d'analyser les données collectées. Il intervient aussi auprès d'une équipe de Data tout au long des étapes de traitement des données.
Tout au long de l'avancement du projet, il veille de manière permanente au maintien des technologies, langages et du bon fonctionnement des infrastructures. Il doit avoir une connaissance pointue des langages comme Javascript, Python, Scala.
Les compétences techniques
Maitrise des langages : Python, C / C ++, Java, Perl UNIX, Linux et Solaris.
Maîtrise de divers systèmes d’exploitation : UNIX, Linux, Solaris...
Connaissances en solutions de bases de données : SQL, NoSQL.
Connaissance générale en terme de Big Data.
Maitrise de ses technologies Anglais.
Softskills nécessaires pour le poste
- Mobilité
- Disponibilité
- Esprit d'analyse
- Capacité d'organisation et d'analyse
- Adaptation
- Relationnel
- Force de proposition
- Réactivité
- Rigueur
La rémunération : Data Engineer
| Expérience | Salaire en €/an |
|---|---|
| Junior | 38 000 à 45 000 € |
| Confirmé | 65 000 à 70 000 € |
Autres intitulés de poste possible
- Ingénieur Data
Comment devenir Data Engineer ?
Suite à l'obtention du baccalauréat, il est conseillé de suivre une classe préparatoire en école d'ingénieurs, se spécialiser dans l'informatique, plus particulièrement le Big Data.
Certaines formations proposent des spécialisations en Big Data ou en Data Engineering.
Les écoles ou formations pour devenir Data Engineer
Télécom ParisTech
Formation d'ingénieur Master Data & Knowledge
Le master Data & Knowledge de l'Ecole Télécom ParisTech forme des étudiants, futurs professionnels de la gestion de l'information, spéciaiste de la D...
EPF
Majeure Data Engineer
Après 3 ans de cursus généraliste, la majeure Data Engineering forme des ingénieurs flexibles, capables de s'adapter à tous types d'entreprises et lab...
IPSSI
Mastère Architecte Web & Big Data
Le Mastère Expert en Informatique & Systèmes d’Information, majeure Architecte Web & Big Data se prépare en 2 ans suite à l'obtention d'un Bachelor en...
Inscription
Vous avez déjà un compte ? Connectez-vous
Une erreur est survenue. Merci de ressayer
Je n'ai pas de compte, je m'inscris :
Sign upJ'ai déjà un compte :
Vous êtes recruteur ?
Sign up