ibtop vient de nous faire gagner beaucoup de temps de débogage. Le cluster avait une performance d'all-reduce horrible, mais vérifier la configuration d'Infiniband entre les nœuds a immédiatement montré le problème (voir la capture d'écran de deux nœuds). Je pourrais passer plus de temps sur l'outil pour le rendre plus convivial pour l'automatisation.
5,02K