Spark et Machine Learning Intermédiaire FR

08 — Jour 2 · Clustering

Ce quiz du jour 2 porte sur le clustering avec Spark ML, appliqué aux courses de taxis jaunes de New York. Il couvre K-means sur les variables trip_distance, total_amount et heure, la construction du pipeline (VectorAssembler, StandardScaler) et l'effet de l'absence de normalisation sur des variables d'échelles très différentes. Il aborde aussi le choix de k avec le score de silhouette calculé par ClusteringEvaluator, la lecture de ce score, la reproductibilité avec seed, et l'exploitation d'un modèle entraîné (centres, affectation des courses aux clusters). Une dernière partie ouvre sur l'analyse de graphes avec GraphFrames, par exemple pour repérer les zones les plus desservies à partir des identifiants de zones de prise en charge et de dépose. Le niveau attendu est intermédiaire : il faut connaître les bases de Spark SQL et des DataFrames et avoir déjà vu les pipelines Spark ML. À la fin, vous saurez vérifier qu'un pipeline de clustering est correct, interpréter une silhouette, comparer plusieurs valeurs de k sans tirer de conclusion hâtive, et repérer les erreurs de mise à l'échelle.

Questões gratuitas
9
Modo certificante
9 questões
Banco
9 questões
Nota de aprovação
70%

Seja aprovado na versão curta para obter gratuitamente o Certificado Essencial. O pagamento desbloqueia a versão aprofundada e o Certificado de Excelência, mais valorizado.

Você pode fazer o quiz sem conta. Para receber seus resultados por e-mail e mantê-los no seu histórico, crie uma conta.