TP : Spark
Auteur
- Stéphane Derrode & Lamia Derrode, Centrale Lyon, Dpt Mathématiques & Informatique
Objectifs
Ce TP fait suite au cours sur le framework Spark, développé et maintenu par la Fondation Apache.
TP - Spark¶
Partie 1 (45 minutes)- Programmation fonctionnelle en Python¶
Voici quelques exercices pour vous entraîner avec les fonctions map, reduce et filter :
Partie 2 (30 minutes) - Tests de Spark, avec la librairie pyspark¶
Pour lancer votre premier script pyspsark, suivez les consignes exposées dans le fichier :
Partie 3 (165 minutes) - Programmez avec pyspark¶
Voici l’énoncé des exercices à réaliser :