ibtop 刚刚为我们节省了大量调试时间。集群的全归约性能糟糕，但检查节点之间的 Infiniband 配置立即显示了问题（请参见两个节点的截图）。我可能会花更多时间在这个工具上，使其更友好于自动化。