Spark et Machine Learning Intermédiaire FR

09 — Jour 3 · Streaming

Ce quiz de fin de formation porte sur Spark Structured Streaming, appliqué aux courses de taxis jaunes de New York et à des logs d'application de réservation. Il couvre la lecture de fichiers JSON et texte en continu, le contrôle du débit avec maxFilesPerTrigger, la jointure d'un flux avec un référentiel statique de zones, ainsi que les agrégations par arrondissement et les modes de sortie (complete, update, append). Il aborde aussi les fenêtres temporelles fixes et glissantes sur le temps d'événement, le rôle du watermark face aux données tardives, l'écriture au format Parquet et l'extraction de champs de lignes de log pour calculer des taux d'erreur ou des latences. Le niveau attendu est intermédiaire : il faut déjà maîtriser les DataFrames et Spark SQL et avoir suivi les deux premiers jours. À l'issue du quiz, vous saurez vérifier si une requête de streaming est correcte : choix du mode de sortie, comportement attendu de la fenêtre et du watermark, et résultat produit par un code donné.

Free questions
13
Certification mode
13 questions
Question bank
13 questions
Passing score
70%

Pass the short version to earn the free Essential Certificate. Payment unlocks the in-depth version and the Excellence Certificate, which carries more weight.

You can take the quiz without an account. To receive your results by email and keep them in your history, create an account.