Spark et Machine Learning Intermédiaire FR

02 — Jour 1 · RDD, DAG et actions

Ce quiz du premier jour de la formation Spark 4 et Machine Learning porte sur les fondamentaux des RDD en PySpark, appliqués aux courses de taxis jaunes de New York. Il couvre le chargement d'un CSV avec en-tête et la suppression de cette ligne, l'extraction d'une colonne par indice, la différence entre transformations et actions, et l'évaluation paresseuse (un script sans action ne calcule rien). Il aborde aussi les PairRDD : le choix entre groupByKey et reduceByKey pour agréger un chiffre d'affaires par zone, le top 10 avec une instruction adaptée, la jointure avec un RDD de noms de zones (types des clés, forme (zid, (ca, nom))), ainsi que le découpage d'un job en stages autour des shuffles dans le DAG. Le niveau attendu est débutant à intermédiaire : il faut savoir lire et écrire du Python et connaître les bases de Spark. À la fin, l'apprenant saura vérifier si une instruction déclenche un calcul, prévoir le nombre de stages d'un job et repérer les erreurs fréquentes de typage ou de structure dans une chaîne de transformations sur RDD.

Preguntas gratuitas
12
Modo certificado
12 preguntas
Banco
12 preguntas
Umbral de aprobado
70%

Supera la versión corta para obtener gratis el Certificado Esencial. El pago desbloquea la versión avanzada y el Certificado de Excelencia, más valorado.

Puedes hacer el quiz sin cuenta. Para recibir tus resultados por email y conservarlos en tu historial, crea una cuenta.