Chargement lent du tableau de bord

Résumé

De 08:30 à 11:00 UTC, certaines pages du tableau de bord ont mis jusqu'à 10 secondes à se charger. Une tâche de reporting planifiée exécutait des requêtes lourdes sur la même base de données que le tableau de bord. Le tableau de bord est resté disponible tout du long.

Impact

• 150 minutes de chargements lents, surtout sur les pages de rapports et de facturation.
• Les 5 % de chargements les plus lents dépassaient 8 secondes.
• Aucune erreur, et aucune donnée touchée.

Chronologie (UTC)

• 08:30 Les temps de chargement commencent à grimper.
• 08:38 La supervision signale le ralentissement et l'analyse commence.
• 09:22 La tâche de reporting est identifiée comme la cause.
• 10:15 La tâche est déplacée vers une réplique en lecture seule.
• 11:00 Les temps de chargement sont normaux depuis 45 minutes.

Cause racine

La tâche de reporting avait grossi avec nos données. Ses requêtes duraient désormais plus de deux heures et sollicitaient la même base de données que le tableau de bord.

Ce que nous changeons

• Les tâches de reporting ne tournent plus que sur des répliques en lecture seule.
• Les requêtes longues sur la base principale sont arrêtées au bout de 60 secondes.
• Le temps de chargement du tableau de bord devient un objectif de service, avec une alerte.