Manipulation de la donnée & Responsabilités du Data Engineer - 4GMC1411

Objectif(s)

Découvrir les méthodes de gestion et préparation de données dans le cadre de projets de data sciences.
Savoir gérer leurs données, les charger, les trier, les organiser efficacement. Savoir présenter des visualisations pertinentes des données et résultats. Comprendre les enjeux d'une ingénierie de la donnée responsable et éthique.

Contenu(s)

B0 Introduction : Gestion de Projet de Data Sciences
Pilotage de projets sciences de données, en se basant sur CRISP-DM
B1 Manipulation de la donnée & Responsabilités du Data Engineer (éthique, sécurité, etc.)
B1.1 Gestion technique des données
Format de données, formats de variables ; opérations de base (lectures, écritures ; tris ; sélections, projections, filtres ; fusions)
B1.2 Gestion technique des résultats (visualisation)
Types de graphiques, principes d’une bonne visualisation
Faire techniquement et discuter les choix et les représentations
B1.3 Gestion sociétale
Aspects légaux (RGPD), durables (risques sur les personnes [client et personnel] comme coûts environnementaux), sécurité (qui détient les données, espionnage…).
B1.4 Mise en oeuvre : Micro-projet

Les étudiants auront suivi et validé les cours : Probabilités et Statistiques; base de la programmation en R (ou bases de la programmation avec un autre langage, par exemple python)