02 — Jour 1 · RDD, DAG et actions

Ce quiz du premier jour de la formation Spark 4 et Machine Learning porte sur les fondamentaux des RDD en PySpark, appliqués aux courses de taxis jaunes de New York. Il couvre le chargement d'un CSV avec en-tête et la suppression de cette ligne, l'extraction d'une colonne par indice, la différence entre transformations et actions, et l'évaluation paresseuse (un script sans action ne calcule rien). Il aborde aussi les PairRDD : le choix entre groupByKey et reduceByKey pour agréger un chiffre d'affaires par zone, le top 10 avec une instruction adaptée, la jointure avec un RDD de noms de zones (types des clés, forme (zid, (ca, nom))), ainsi que le découpage d'un job en stages autour des shuffles dans le DAG. Le niveau attendu est débutant à intermédiaire : il faut savoir lire et écrire du Python et connaître les bases de Spark. À la fin, l'apprenant saura vérifier si une instruction déclenche un calcul, prévoir le nombre de stages d'un job et repérer les erreurs fréquentes de typage ou de structure dans une chaîne de transformations sur RDD.

Free questions

12

Certification mode

12 questions

Question bank

12 questions

Passing score

70%

Pass the short version to earn the free Essential Certificate. Payment unlocks the in-depth version and the Excellence Certificate, which carries more weight.

You can take the quiz without an account. To receive your results by email and keep them in your history, create an account.