Spark et Machine Learning Intermédiaire FR

05 — Jour 2 · Explorer avant de modeliser

Ce quiz de la deuxième journée porte sur l'exploration des données avant toute modélisation, à partir des courses de taxis jaunes de New York stockées dans un DataFrame Spark. Il couvre le calcul de tranches de montant avec floor et cast, la construction d'une heatmap par jour de semaine et par heure, le pivot, la numérotation de dayofweek et la lecture d'un nuage de points tarif/distance sur plusieurs millions de lignes. Il aborde aussi les pièges d'interprétation : le tarif forfaitaire qui forme un palier, la différence entre corrélation et causalité, l'accuracy trompeuse sur des classes déséquilibrées, le choix de la cible et des variables en régression, et l'effet de l'échelle des variables sur un K-means. Le niveau attendu est intermédiaire : vous connaissez déjà les DataFrames et les fonctions de pyspark.sql.functions, et vous avez des notions de Spark ML. À la fin, vous saurez vérifier si une agrégation ou un graphique rend bien compte des données, repérer une fuite de données ou un biais de lecture, et justifier un prétraitement avant d'entraîner un modèle.

الأسئلة المجانية
10
الوضع المعتمد
10 سؤالًا
بنك الأسئلة
10 سؤالًا
حدّ النجاح
70%

انجح في النسخة القصيرة لتحصل مجانًا على الشهادة الأساسية. يفتح لك الدفع النسخة المعمّقة و شهادة التميز الأكثر قيمة.

يمكنك اجتياز الاختبار دون حساب. لتلقي نتائجك عبر البريد الإلكتروني والاحتفاظ بها في سجلّك، أنشئ حسابًا.