Start the in-depth version of the quiz, with unlimited attempts. Pass it to earn your Excellence Certificate, downloadable as a PDF and verifiable online.
10 - Jour 3 - ML sur un flux
Ce quiz de fin de formation vérifie que vous savez appliquer un modèle Spark ML à un flux de courses de taxis jaunes de New York avec Structured Streaming. Il couvre le rechargement d'un PipelineModel sauvegardé et son application à un DataFrame de streaming, l'interprétation des colonnes ajoutées par un classifieur binaire (prédiction, probabilité) pour la prédiction de pourboire, ainsi que la cohérence de la préparation des variables entre entraînement et inférence. Il aborde aussi les agrégations par fenêtre de temps sur une colonne TIMESTAMP_NTZ, le rôle du watermark avec le mode de sortie append, le dossier de checkpoint et les modifications de requête qui l'invalident, la lecture depuis Kafka ou depuis des fichiers Parquet et CSV, et l'effet de spark.sql.shuffle.partitions sur une requête agrégée. Un niveau intermédiaire est attendu : il faut connaître les bases de Spark SQL, des DataFrames et de Spark ML. À la fin, vous saurez repérer pourquoi une requête échoue ou donne des résultats inattendus, et choisir la bonne configuration pour un traitement continu fiable.
- Free questions
- 10
- Certification mode
- 10 questions
- Question bank
- 10 questions
- Passing score
- 70%
Retaking the quiz is risk-free: an earned certificate is permanent, and each pass keeps its serial number. You can also find them in your account.
Pass the short version to earn the free Essential Certificate. Payment unlocks the in-depth version and the Excellence Certificate, which carries more weight.
You can take the quiz without an account. To receive your results by email and keep them in your history, create an account.