Spark et Machine Learning Intermédiaire FR

02 — Jour 1 · RDD, DAG et actions

Ce quiz du premier jour de la formation Spark 4 et Machine Learning porte sur les fondamentaux des RDD en PySpark, appliqués aux courses de taxis jaunes de New York. Il couvre le chargement d'un CSV avec en-tête et la suppression de cette ligne, l'extraction d'une colonne par indice, la différence entre transformations et actions, et l'évaluation paresseuse (un script sans action ne calcule rien). Il aborde aussi les PairRDD : le choix entre groupByKey et reduceByKey pour agréger un chiffre d'affaires par zone, le top 10 avec une instruction adaptée, la jointure avec un RDD de noms de zones (types des clés, forme (zid, (ca, nom))), ainsi que le découpage d'un job en stages autour des shuffles dans le DAG. Le niveau attendu est débutant à intermédiaire : il faut savoir lire et écrire du Python et connaître les bases de Spark. À la fin, l'apprenant saura vérifier si une instruction déclenche un calcul, prévoir le nombre de stages d'un job et repérer les erreurs fréquentes de typage ou de structure dans une chaîne de transformations sur RDD.

Questões gratuitas
12
Modo certificante
12 questões
Banco
12 questões
Nota de aprovação
70%

Seja aprovado na versão curta para obter gratuitamente o Certificado Essencial. O pagamento desbloqueia a versão aprofundada e o Certificado de Excelência, mais valorizado.

Você pode fazer o quiz sem conta. Para receber seus resultados por e-mail e mantê-los no seu histórico, crie uma conta.