Data Engineer - POEI

- Piloter la conduite d’un projet data
- Réaliser la collecte, le stockage et la mise à disposition des données d’un projet data
- Élaborer et maintenir un entrepôt de données (data warehouse)
- Encadrer la collecte massive des données et leur organisation (data lake)

Attestation de fin de formation

**Phase 1**
Vous intervenez sur des bases de données
et les faites évoluer
Vous créez et manipulez des bases de données répondant à un besoin métier simple.
Notamment :
- Vous participez à la gestion d’un projet data répondant à un besoin formalisé
- Vous contribuez à la conception et à la création de bases de données
- Vous êtes impliqué dans l’ingestion automatique de données dans les bases de données
**Phase 2**
Vous faites évoluer un data warehouse
Vous intervenez au niveau de l’entrepôt de données de l’entreprise avec une démarche d’automatisation et de standardisation des traitements de données.
Par exemple :
- Vous prenez connaissance des schémas des structures de données en faits et dimensions du data warehouse
- Vous testez le bon fonctionnement de l’entrepôt de données en environnement de développement/test
- Vous intégrez de nouvelles sources de données en adaptant les scripts d'extraction, transformation et chargement de données déjà en place
**Phase 3**
Vous faites évoluer un data lake
Vous intervenez au niveau du data lake, où sont stockées les données brutes de l’entreprise.
Par exemple :
- Vous adaptez les procédures de collecte automatique de données
- Vous intervenez sur les outils de catalogage de données
**Phase 4**
Vous mettez en place des bases de données accessibles aux équipes d’analyse
À l’échelle d’un projet data, vous réalisez une base de données répondant à un besoin métier.
Par exemple :
- Vous identifiez les données sources pertinentes à partir de la documentation disponible
- Vous concevez une base de données cible
- Vous automatisez l’import des données depuis des sources variées
- Vous développez des points de terminaison d’API et des règles d’autorisation associées
**Phase 5**
Vous créez un data warehouse
Vous réalisez un entrepôt de données permettant de servir les différents usages data au sein de l’entreprise. Par exemple :
- Vous cartographiez les données collectées par l’entreprise
- Vous structurez l’entrepôt de données selon les cas d’usage recensés
- Vous sélectionnez les outils de stockage et d’import pour l’entrepôt de données
- Vous maintenez en condition opérationnelle les composants techniques de l’entrepôt de données
**Phase 6**
Vous créez un data lake
Vous mettez en place l’architecture, l’infrastructure, la structuration et la gouvernance d’un data lake.
Par exemple :
- Vous concevez l'architecture du data lake
- Vous intégrez les différents composants d'infrastructure du datalake
- Vous mettez en place un catalogue de données
- Vous implémentez des règles de gouvernance des données
**Phase 7**
Vous menez des missions d’étude, de conseil et d’intégration en systèmes de stockage et big data
Vous pilotez un projet data. Par exemple :
- Vous analysez une expression de besoin pour un projet data
- Vous réalisez une veille technique et réglementaire
- Vous communiquez tout au long de la réalisation du projet data

Conditions d'accès réglementaires :
Demandeurs d'emploi inscrits à France travail
être titulaire d’un titre ou d’un diplôme de niveau Bac +3 en informatique

Conditions d'accés pédagogiques :
- Cette formation s’adresse en priorité à des personnes disposant, par le diplôme ou l’expérience professionnelle de compétences en gestion de projet : identification des besoins, rédaction technique, suivi du planning, liaison client-équipes
- De compétences techniques telles que installation et gestion de services, programmation de scripts d'automatisation sous Linux, conception de bases de données, maîtrise de SQL et manipulation de données pour qualification, programmation (PHP, Python, Java)
- D’une maîtrise de l’anglais technique

Critères d'admission :
Inscription obligatoire par un conseiller en insertion professionnelle
Entretien
Inscription directe ou par un conseiller en insertion professionnelle
Information collective

Modalités d'enseignement :
Sans objet

Rythme :
Temps plein