Spark et Machine Learning Intermédiaire FR

09 — Jour 3 · Streaming

Ce quiz de fin de formation porte sur Spark Structured Streaming, appliqué aux courses de taxis jaunes de New York et à des logs d'application de réservation. Il couvre la lecture de fichiers JSON et texte en continu, le contrôle du débit avec maxFilesPerTrigger, la jointure d'un flux avec un référentiel statique de zones, ainsi que les agrégations par arrondissement et les modes de sortie (complete, update, append). Il aborde aussi les fenêtres temporelles fixes et glissantes sur le temps d'événement, le rôle du watermark face aux données tardives, l'écriture au format Parquet et l'extraction de champs de lignes de log pour calculer des taux d'erreur ou des latences. Le niveau attendu est intermédiaire : il faut déjà maîtriser les DataFrames et Spark SQL et avoir suivi les deux premiers jours. À l'issue du quiz, vous saurez vérifier si une requête de streaming est correcte : choix du mode de sortie, comportement attendu de la fenêtre et du watermark, et résultat produit par un code donné.

Preguntas gratuitas
13
Modo certificado
13 preguntas
Banco
13 preguntas
Umbral de aprobado
70%

Supera la versión corta para obtener gratis el Certificado Esencial. El pago desbloquea la versión avanzada y el Certificado de Excelencia, más valorado.

Puedes hacer el quiz sin cuenta. Para recibir tus resultados por email y conservarlos en tu historial, crea una cuenta.