ibtop właśnie zaoszczędził nam dużo czasu na debugowanie. Klaster miał okropną wydajność all-reduce, ale sprawdzenie konfiguracji infiniband między węzłami natychmiast pokazało problem (zobacz zrzut ekranu dwóch węzłów). Mogę spędzić więcej czasu na tym narzędziu, aby uczynić je bardziej przyjaznym dla automatyzacji.