ibtop nos ha ahorrado mucho tiempo de depuración. El clúster tenía un rendimiento de all-reduce horrible, pero revisar la configuración de infiniband entre nodos mostró el problema de inmediato (ver captura de pantalla de dos nodos). Podría dedicar más tiempo a la herramienta para hacerla más amigable con la automatización.