Spark et Machine Learning Intermédiaire FR

03 — Jour 1 · Cluster et HDFS

Ce quiz du premier jour vérifie votre maîtrise du fonctionnement d'un cluster Spark Standalone et de HDFS, sur le cas fil rouge des courses de taxis jaunes de New York. Il couvre la création de la session PySpark et le choix du master, la lecture de chemins locaux ou HDFS, le diagnostic d'erreurs courantes (connexion refusée sur le port 7077, versions de Python incohérentes entre driver et workers), ainsi que l'effet de l'ajout d'un worker sur un même poste. Il aborde aussi HDFS (taille de bloc, réplication, URI du système de fichiers par défaut), les opérations de base sur les RDD de paires comme l'agrégation par clé et la jointure, et la préparation d'un environnement Docker ou hors ligne avec PySpark, py4j et JDK 17. Un niveau débutant à intermédiaire suffit, avec des notions de Python et de ligne de commande. À l'issue du quiz, vous saurez identifier la cause probable d'un échec de lancement ou de lecture, prévoir le nombre de blocs et de réplicas d'un fichier, et choisir la bonne correction pour un cluster qui ne démarre pas.

Questões gratuitas
14
Modo certificante
14 questões
Banco
14 questões
Nota de aprovação
70%

Seja aprovado na versão curta para obter gratuitamente o Certificado Essencial. O pagamento desbloqueia a versão aprofundada e o Certificado de Excelência, mais valorizado.

Você pode fazer o quiz sem conta. Para receber seus resultados por e-mail e mantê-los no seu histórico, crie uma conta.