Spark et Machine Learning Intermédiaire FR

09 — Jour 3 · Streaming

Ce quiz de fin de formation porte sur Spark Structured Streaming, appliqué aux courses de taxis jaunes de New York et à des logs d'application de réservation. Il couvre la lecture de fichiers JSON et texte en continu, le contrôle du débit avec maxFilesPerTrigger, la jointure d'un flux avec un référentiel statique de zones, ainsi que les agrégations par arrondissement et les modes de sortie (complete, update, append). Il aborde aussi les fenêtres temporelles fixes et glissantes sur le temps d'événement, le rôle du watermark face aux données tardives, l'écriture au format Parquet et l'extraction de champs de lignes de log pour calculer des taux d'erreur ou des latences. Le niveau attendu est intermédiaire : il faut déjà maîtriser les DataFrames et Spark SQL et avoir suivi les deux premiers jours. À l'issue du quiz, vous saurez vérifier si une requête de streaming est correcte : choix du mode de sortie, comportement attendu de la fenêtre et du watermark, et résultat produit par un code donné.

Questões gratuitas
13
Modo certificante
13 questões
Banco
13 questões
Nota de aprovação
70%

Seja aprovado na versão curta para obter gratuitamente o Certificado Essencial. O pagamento desbloqueia a versão aprofundada e o Certificado de Excelência, mais valorizado.

Você pode fazer o quiz sem conta. Para receber seus resultados por e-mail e mantê-los no seu histórico, crie uma conta.