Table Of Contents - Mellanox Technologies MSX6536-10R Hardware Installation Manual

648 Port InfiniBand FDR Switch Platform Hardware Installation Guide

Table of Contents

Chapter 1 Installation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8
1.1 Environmental and Safety Recommendations . . . . . . . . . . . . . . . . . . . . . 8
1.2 Chassis Package Contents . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9
1.3 Leaf Package Contents . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9
1.4 Spine Package Contents . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10
1.5 Management Package Contents . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10
1.6 Physical Installation . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10
1.6.1 Starting with the Rack . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11
1.6.2 ESD Connection. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11
1.6.3 Installation Procedure . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12
1.6.4 Installing the Cable Holder . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 30
1.6.5 Ground Connections . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 32
1.7 Power Connections . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 33
1.8 Powering Up the Switch Platform . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 33
Chapter 2 InfiniBand QSFP Cable Installation. . . . . . . . . . . . . . . . . . . . . . . . . . 35
2.1 Port Connector Interfaces . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 35
2.2 Supported Approved Cables . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36
2.3 Cable Power Classes . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 36
Chapter 3 Chassis Power Up. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 37
3.1 Power Supply, Management Board, and Spine Board Indicator Status at Power
ON 38
Chapter 4 InfiniBand Fabric Initialization and Management . . . . . . . . . . . . . . 39
4.1 Configuring the Switch Management Modules for the First Time . . . . . . 39
4.2 Rerunning the Wizard . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44
Chapter 5 MLNX-OS Management Software . . . . . . . . . . . . . . . . . . . . . . . . . . . 45
5.1 Starting an SSH Connection to the Switch . . . . . . . . . . . . . . . . . . . . . . . 45
5.2 Starting a WebUI Connection to the Switch . . . . . . . . . . . . . . . . . . . . . . 45
Chapter 6 Resetting the Switch - RST . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 47
Chapter 7 TroubleShooting . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 48
7.1 Power Supply Unit . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 48
7.2 Leaf Board . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 48
7.3 Management Module . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 49
7.3.1 Yellow Status LED (for the Chassis) on the Management Module is Lit . 49
7.3.2 Yellow LED for the Leaf Fan on the Management Module is Lit . . . . . . . 49
7.3.3 Yellow LED for the Spine Fan on the Management Module is Lit . . . . . . 50
7.4 Spine Board . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 50
7.5 MLNX-OS Software . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 51
Mellanox Technologies
Rev 1.4
3