ibtop heeft ons veel debugtijd bespaard. De cluster had vreselijke all-reduce prestaties, maar het controleren van de infiniband-configuratie tussen de nodes toonde het probleem onmiddellijk aan (zie screenshot van twee nodes). Ik ben van plan meer tijd aan de tool te besteden om deze gebruiksvriendelijker te maken voor automatisering.