10 - Jour 3 - ML sur un flux

Ce quiz de fin de formation vérifie que vous savez appliquer un modèle Spark ML à un flux de courses de taxis jaunes de New York avec Structured Streaming. Il couvre le rechargement d'un PipelineModel sauvegardé et son application à un DataFrame de streaming, l'interprétation des colonnes ajoutées par un classifieur binaire (prédiction, probabilité) pour la prédiction de pourboire, ainsi que la cohérence de la préparation des variables entre entraînement et inférence. Il aborde aussi les agrégations par fenêtre de temps sur une colonne TIMESTAMP_NTZ, le rôle du watermark avec le mode de sortie append, le dossier de checkpoint et les modifications de requête qui l'invalident, la lecture depuis Kafka ou depuis des fichiers Parquet et CSV, et l'effet de spark.sql.shuffle.partitions sur une requête agrégée. Un niveau intermédiaire est attendu : il faut connaître les bases de Spark SQL, des DataFrames et de Spark ML. À la fin, vous saurez repérer pourquoi une requête échoue ou donne des résultats inattendus, et choisir la bonne configuration pour un traitement continu fiable.

الأسئلة المجانية

10

الوضع المعتمد

10 سؤالًا

بنك الأسئلة

10 سؤالًا

حدّ النجاح

70%

انجح في النسخة القصيرة لتحصل مجانًا على الشهادة الأساسية. يفتح لك الدفع النسخة المعمّقة و شهادة التميز الأكثر قيمة.

يمكنك اجتياز الاختبار دون حساب. لتلقي نتائجك عبر البريد الإلكتروني والاحتفاظ بها في سجلّك، أنشئ حسابًا.