• 产品与解决方案
  • 行业解决方案
  • 服务
  • 支持
  • 合作伙伴
  • 关于我们

H3C UniServer BX1020B IB交换模块 用户指南-6W101

01-正文

本章节下载 01-正文  (1.66 MB)

01-正文


1 安全

1.1  安全信息

为了避免操作过程中对人和设备造成伤害,请在操作前,仔细阅读产品相关安全信息。实际操作中,包括但不限于本文描述的安全信息。

1.1.1  运行安全

·     H3C授权人员或专业的工程师才能运行该设备。

·     请保持设备清洁、无尘,请勿将设备放置在潮湿的地方或使液体进入设备。

·     设备上电前,请确保机箱接地可靠。

·     为确保机箱充分散热,设备不在位时,请在机箱对应槽位安装假面板。

1.1.2  电气安全

·     请仔细检查工作区域内是否存在潜在的危险,如地面潮湿、机箱未接地或接地不可靠等。

·     对设备进行带电状态下的维护时,请尽量不要独自一人操作。

·     请勿直接接触或通过导电物体间接接触电源,以防触电。

1.2  安全注意事项

·     进行设备维护时,请将设备放在干净、平稳的工作台或地面上。

·     进行设备维护时,为避免设备表面或内部组件过热造成人身伤害,请确保设备冷却后再操作。

·     使用工具进行维护时,务必按照正确的操作方式进行,以免危及人身安全或损伤设备。

·     进行光纤连接、测试或更换时,请勿裸眼直视光纤出口,以防激光束灼伤眼睛。

·     搬运或放置设备时,请勿用力过猛,请确保搬运设备过程中,用力均匀、缓慢。

1.3  静电防护

1.3.1  防止静电释放

人体或其它导体释放的静电可能会损坏主板和对静电敏感的部件,由静电造成的损坏会缩短主板和部件的使用寿命。

为避免静电损害,请注意以下事项:

·     在运输和存储设备时,请将设备装入防静电包装中。

·     从防静电包装中取出设备前,请先将设备放置在防静电工作台上,然后再取出。

·     在没有防静电措施的情况下,请勿触摸设备上的插针和电路元器件。

1.3.2  防止静电释放的接地方法

在取放设备时,用户可采取以下一种或多种接地方法以防止静电释放。

·     佩戴防静电腕带,并将腕带的另一端良好接地。请将腕带紧贴皮肤,且确保其能够灵活伸缩。

·     在工作区内,请穿上防静电服和防静电鞋。

·     请使用导电的现场维修工具。

·     使用防静电的可折叠工具垫和便携式现场维修工具包。


2 认识BX1020B IB交换模块

说明

·     本文中的硬件图片仅供参考,具体请以实物为准。

·     本文中展示的软件界面,以某个软件版本为准进行示例;由于软件会不定期更新,请以产品实际显示的软件界面为准。

·     机箱支持安装的互联模块分为两类:交换模块和直通模块,部分手册中直通模块也称为级联模块。BX1020B属于交换模块,本文中出现的互联模块和交换模块,均指BX1020B。

 

2.1  产品简介

H3C UniServer BX1020B IB交换模块(简称BX1020B),作为H3C UniServer B16000刀片机箱的IB交换模块,为机箱前部的刀片服务器集中对外提供Infiniband(简称IB)接口。BX1020B提供16个内部IB接口与刀片服务器的IB Mezz网卡相连,提供20个外部接口与外部设备相连。

BX1020B 交换模块外观,如图2-1所示。

图2-1 BX1020B IB交换模块外观图

 

2.2  规格参数

交换模块规格参数,如表2-1所示。

表2-1 规格参数

类别

项目

说明

物理参数

尺寸(高xx深)

27mm x 491.6mm x 279.3mm

最大重量

4.2kg

功耗

最大功耗

175W

环境参数

温度

·     工作环境温度:5°C35°C

·     贮存环境温度:-40°C70°C

湿度

·     工作环境湿度:8%90%(无冷凝)

·     贮存环境湿度:5%95%(无冷凝)

海拔高度

·     工作环境高度:-60m5000m(海拔高于900m时,每升高100m,规格最高温度降低0.33°C

·     贮存环境高度:-60m5000m

 

2.3  接口

本章节介绍交换模块接口的编号规则、位置、数量以及接口与刀片服务器槽位的对应关系等内容。

2.3.1  外部接口

交换模块面板上提供的外部接口如图2-2所示,具体说明如表2-2所示。

图2-2 外部接口

 

(1):I2C接口

(2):AMC串口

(3):100G EDR IB接口

-

 

表2-2 外部接口说明

编号

接口名称

连接器类型

数量

接口序号

说明

1

I2C接口

Mini-USB

1

-

用于I2C调试,仅供厂商技术支持人员使用

2

AMC串口

RJ-45

1

-

该串口用于进入交换模块的AMC CLI,仅在技术支持工程师升级AMC固件版本时使用,串口的波特率为115200bit/s

3

100G EDR IB接口

QSFP28

20

取值为Port 1~Port 20

用于连接外部设备,在软件中的编号为21~40,详见《H3C UniServer BX1020B IB交换模块 配置指导》中的iblinkinfo命令

 

2.3.2  内部接口

交换模块提供的内部接口,如表2-3所示。

表2-3 内部接口说明

端口名称

端口数量

说明

100G EDR IB接口

16

16个端口用于连接16个刀片服务器

 

2.4  指示灯和按钮

交换模块的指示灯和按钮信息,如表2-4所示。

图2-3 交换模块指示灯和按钮

 

(1):UID指示灯

(2):Health指示灯

(3):Reset按钮

(4):端口指示灯

交换模块面板上共有20个端口指示灯,与面板上的接口一一对应。各个端口指示灯的外观及其含义都一致,图中以一个端口为例进行介绍

 

表2-4 指示灯和按钮说明

编号

名称

颜色

状态/作用

1

UID指示灯(UID)

蓝色

·     蓝色常亮:UID指示灯被激活(可通过OM激活)

·     灯灭:UID灯未被激活

2

Health指示灯(Health

红/绿双色

·     绿色常亮:交换模块运行状态正常

·     红色闪烁(1Hz):交换模块存在告警

·     灯灭:交换模块未上电或未安装到位

3

Reset按钮

-

按下后交换模块断电并重启

4

端口指示灯

琥珀/绿双色

·     绿色常亮:端口已经建立高速连接,但没有发送或接收数据

·     绿色闪烁:端口正在发送或接收数据

¡     0.5Hz:当前流量速率占最大速率的0%~25%

¡     1Hz:当前流量速率占最大速率的25%~50%

¡     2Hz:当前流量速率占最大速率的50%~75%

¡     4Hz:当前流量速率占最大速率的75%~100%

·     琥珀色常亮:端口仅物理层连通

·     琥珀色闪烁:端口链路层故障

·     灯灭:端口未连接

 

2.5  逻辑结构

图2-4所示,交换模块主要由以下两个模块组成:

·     AMC单元:作为交换模块的管理单元,主要负责单板数据采集和上报、单板上/下电控制及系统监控等功能。

·     Quantum Switch单元:作为交换模块的数据处理核心,主要负责内部外部的数据转发及不可识别报文上报等功能。

图2-4 逻辑结构图

 

BX1020B的接口由Quantum Switch交换芯片提供,包括16个内部接口和20个外部接口,他们在系统下的编号分别为1~40,其中11/12/17/18暂时预留不用。Quantum Switch交换芯片的接口分配如图2-5所示。

图2-5 接口分配关系

 

 

2.6  安装准则

·     如图2-6所示,机箱最多可以安装6个交换模块,安装槽位为机箱后部的ICM1ICM6

·     IB交换模块支持热插拔。

图2-6 交换模块安装准则

机箱_17

(1):ICM1槽位

(2):ICM2槽位

(3):ICM3槽位

(4):ICM4槽位

(5):ICM5槽位

(6):ICM6槽位

 


3 内部组网

3.1  互联模块与刀片服务器Mezz网卡的内部连接关系

互联模块与Mezz网卡的安装位置,必须满足两者的内部连接关系,具体如表3-1所示。

表3-1 交换模块与刀片服务器Mezz网卡连接关系

刀片服务器型号

刀片服务器最多支持的Mezz网卡数量

Mezz网卡与交换模块内部连接图

H3C UniServer B5700 G5

3个

图3-1

说明

连接图仅为逻辑图,用于标识Mezz卡槽位和交换模块槽位的对应关系,Mezz卡槽位和交换模块槽位具体位置,请以模块的丝印为准

H3C UniServer B5700 G3

3个

图3-1

H3C UniServer B7800 G3

6个

图3-2

H3C UniServer B5800 G3

3个

图3-1

 

交换模块与半宽刀片服务器Mezz网卡连接方式,如图3-1所示。其中:

·     Mezz卡1连接1、4槽位的交换模块。

·     Mezz卡2连接2、5槽位的交换模块。

·     Mezz卡3连接3、6槽位的交换模块。

图3-1 交换模块与半宽刀片服务器Mezz网卡连接方式

 

交换模块与全宽刀片服务器Mezz网卡连接方式,如图3-2所示。其中:

·     Mezz卡1和Mezz卡4连接1、4槽位的交换模块。

·     Mezz卡2和Mezz卡5连接2、5槽位的交换模块。

·     Mezz卡3和Mezz卡6连接3、6槽位的交换模块。

图3-2 交换模块与全宽刀片服务器Mezz卡连接方式

 

3.2  互联模块与刀片服务器Mezz网卡端口的内部连接关系

对刀片服务器的Mezz网卡进行配置时,需要明确该Mezz网卡端口与互联模块的连接关系,具体请通过组网查询工具查询。

 


4 硬件兼容性

介绍交换模块与Mezz网卡的兼容性,以及交换模块与光模块/线缆的兼容性。

4.1  交换模块与Mezz网卡的兼容性

交换模块兼容的Mezz网卡如表4-1所示。

表4-1 BX1020B交换模块兼容的Mezz网卡

Mezz网卡型号

端口数量

说明

IB-1040i-Mb-2*100G

2

2端口100G InfiniBand Mezz网卡

 

4.2  交换模块与光模块/线缆的兼容性

交换模块兼容的光模块/线缆包括:

·     MCP1600-E003E26:IB EDR DAC 无源电缆(100G)。

·     MFA1A00-E005:IB EDR AOC有源光缆(100G)。

说明

各光模块/线缆的具体规格和安装方法及注意事项请参见厂家对应的手册。

 


5 更换交换模块

5.1  更换场景

·     交换模块故障。

·     更换其他型号的交换模块。

5.2  工具准备

在安装、使用和维护设备时,需要准备以下可能使用的工具或设备:

表5-1 工具要求

图示

名称

说明

斜口钳

用于剪切绝缘套管、线缆扎带等

万用表

用于测量电阻、电压,检查电路

防静电腕带

安装、拆卸或维护设备时使用

防静电手套

防静电服

梯子

用于高处作业

接口线缆(如网线、光纤)

用于设备与外部网络互连

登录终端(如PC)

用于登录设备

 

5.3  准备工作

·     请提前做好防静电措施:穿上防静电工作服;正确佩戴防静电腕带并良好接地;去除身体上携带的易导电物体(如首饰、手表)。

·     交换模块支持热插拔。

·     更换部件前,请检查插槽或连接器,确保针脚没有损坏(比如针脚弯曲、连接器上有异物)。

·     了解交换模块安装准则(2.6  安装准则)。

5.4  更换步骤

说明

具体操作步骤请参见部件安装&更换视频

 

(1)     拆卸交换模块。按下交换模块的解锁按钮,完全打开扳手,沿水平方向从机箱中缓缓拔出模块。

(2)     将交换模块放入防静电包装袋。

(3)     安装交换模块。从防静电包装袋中取出待安装的交换模块。

(4)     按下解锁按钮,扳手会自动打开。

(5)     UP字样朝上,沿水平方向将交换模块缓缓插入机箱中,然后闭合扳手。

 


6 上电和下电

介绍交换模块的上电和下电方法。

6.1  上电

介绍交换模块的上电方法。

6.1.1  支持的上电方式

交换模块支持的上电方式,如表6-1所示。

表6-1 交换模块上电方式

上电方式

应用场景

方式一:交换模块随机箱上电

·     机箱上电前,交换模块已安装

·     机箱上电后,安装交换模块

方式二:通过OM Web方式为交换模块上电

机箱已上电,交换模块已安装但处于下电状态,此时交换模块Health指示灯为熄灭状态

方式三:通过OM CLI方式为交换模块上电

 

6.1.2  操作方法

交换模块上电成功后,Health指示灯为绿色常亮,指示灯的具体位置请参见表2-4

1. 方式一:交换模块随机箱上电

·     机箱上电前已安装的交换模块,会随机箱上电而自动上电,用户无需执行任何操作。

·     机箱上电后安装的交换模块,会自动上电,用户无需执行任何操作。

2. 方式二:通过OM Web方式为交换模块上电

通过OM Web页面的交换模块管理功能,可为交换模块上电。具体操作步骤如下:

(1)     登录OM Web页面,请参见8.1  登录OM模块的Web

(2)     如图6-1所示,进行如下操作,将交换模块上电。

a.     单击“互联模块管理”。

b.     选择一个目标交换模块。

c.     单击“虚拟电源”,选择“开机”操作。

d.     单击“确定”,完成操作。如图6-2所示,红框部分确认交换模块已上电。

图6-1 交换模块上电

 

图6-2 交换模块上电确认

 

3. 方式三:通过OM CLI方式为交换模块上电

通过OM CLI页面执行io命令,可为交换模块上电。

(1)     登录OM CLI,请参见:8.2  登录OM模块的CLI

(2)     在用户视图下输入io 1 cpu on,为1号槽位的交换模块上电。

<OM> io 1 cpu on

(3)     在用户视图下输入display io list查看1号槽位的交换模块已完成上电。

<OM>display io list

 Slot : 1

      Running status   : Normal

      UID LED          : Off

      PSU              : On

      Product name     : BX1020B

      CPU usage        : N/A

6.2  下电

介绍交换模块的下电方法。

6.2.1  支持的下电方式

交换模块支持的下电方式,如表6-2所示。

表6-2 交换模块下电方式

下电方式

应用场景

方式一:交换模块随机箱下电

-

方式一:通过OM Web方式为交换模块下电

机箱和交换模块均已上电,且交换模块正常工作

方式二:通过OM CLI方式为交换模块下电

 

6.2.2  操作方法

交换模块下电成功后,Health指示灯为熄灭状态,指示灯的具体位置请参见表2-4

1. 方式一:交换模块随机箱下电

交换模块随机箱下电而自动下电,用户无需执行任何操作。

2. 方式二:通过OM Web方式为交换模块下电

(1)     登录OM Web页面,请参见8.1  登录OM模块的Web

(2)     如图6-3所示,进行如下操作,将交换模块下电。

a.     单击“交换模块管理”。

b.     选择一个目标交换模块。

c.     单击“虚拟电源”,选择“关机”操作。

d.     单击“确定”,完成操作。如图6-4所示,红框部分确认交换模块已下电。

图6-3 交换模块下电

 

图6-4 交换模块下电确认

 

3. 方式三:通过OM CLI方式为交换模块下电

通过OM CLI页面执行io命令,可为交换模块下电。

(1)     登录OM CLI,请参见:8.2  登录OM模块的CLI

(2)     输入io 1 cpu off,为1号槽位的交换模块下电。

<OM>io 1 cpu off

(3)     输入display io list查看1号槽位的交换模块已完成下电。

<OM>display io list

 Slot : 1

      Running status   : Normal

      UID LED          : Off

      PSU              : Off

      Product name     : BX1020B

      CPU usage        : N/A


7 配置交换模块

7.1  配置前准备

BX1020B是非管理交换模块,不支持直接配置管理,必须通过对端IB Mezz网卡所在刀片服务器的操作系统来配置。所以在配置IB交换模块前,请确保:

·     对接IB Mezz网卡已在位,且已安装最新驱动程序。

·     完成IB Mezz网卡IP地址配置,启动子网管理器。

·     在安装了IB Mezz网卡的刀片服务器上安装MFT工具。

关于配置准备的具体步骤,请参见《H3C UniServer BX1020B IB交换模块 配置指导》中的“配置准备”。

7.2  登录交换模块

具体操作步骤参见《H3C UniServer BX1020B IB交换模块 配置指导》中的“IB设备管理”。

7.3  配置交换模块常用功能

具体操作步骤参见《H3C UniServer BX1020B IB交换模块 配置指导》中的“IB交换模块常用命令”。

 


8 常用操作

8.1  登录OM模块的Web管理界面

1. 前提条件

·     机箱上电。

·     获取OM模块的登录数据,OM模块Web的缺省登录数据如表8-1所示。

表8-1 OM登录数据

数据

说明

OM的管理IP地址

·     管理IP地址(缺省):192.168.100.100

·     子网掩码(缺省):255.255.255.0

登录OM的用户名及密码

·     用户名(缺省):admin

·     密码(缺省):Password@_

·     表格中标识为“缺省”的数据,为设备出厂时缺省配置的数据

·     表格中的数据仅用于举例,用户操作时请以现场的实际情况为准

 

2. 操作步骤

(1)     如图8-1所示,将PC的以太网口通过局域网与主用及备用OM模块的“MGMT”端口相连。需要注意的是,确保PC与OM模块管理网络三层可达。

图8-1 搭建硬件环境

 

(2)     如图8-2中①所示,打开PC上的浏览器,输入OM Web页面的登录地址(格式为https://OM_ip_address)。如②所示,输入管理员用户名和密码。如③所示,单击“登录”,完成操作。

图8-2 登录OM Web页面

 

8.2  登录OM模块的CLI

1. 前提条件

·     机箱上电。

·     获取OM模块的登录数据,OM模块CLI的缺省登录数据如表8-2所示。

2. 操作步骤

(1)     如图8-3所示,将PC的以太网端口通过局域网与主用及备用OM模块的管理端口“MGMT”相连。需要注意的是,确保PC与OM模块管理网络三层可达。

图8-3 搭建硬件环境

 

(2)     使用远程访问软件,设置登录参数,登录到OM CLI,登录参数如表8-2所示。

表8-2 SSH登录参数

参数

数值

协议

SSH

端口号

22

OM管理IP地址

·     管理IP地址(缺省):192.168.100.100

·     子网掩码(缺省):255.255.255.0

登录OM的用户名及密码

·     用户名(缺省):admin

·     密码(缺省):Password@_

·     OM模块SSH访问方式缺省处于开启状态

·     表格中标识为“缺省”的数据,为设备出厂时缺省配置的数据

·     表格中的数据仅用于举例,用户操作时请以现场的实际情况为准

 

(3)     登录完成后,OM CLI显示如下登录页面。

******************************************************************************

* Copyright (c) 2004-2019 New H3C Technologies Co., Ltd. All rights reserved.*

* Without the owner's prior written consent,                                 *

* no decompiling or reverse-engineering shall be allowed.                    *

******************************************************************************

 

<OM>

8.3  收集IB交换模块日志

(1)     登录子网管理器所在设备的操作系统。关于“子网管理器”的详细说明,请参见“H3C UniServer BX1020B IB交换模块 配置指导”中的“配置准备”。

(2)     如图8-4所示,执行“mlxdump -d <IB device> snapshot --mode full -o <log name>”命令生成日志文件。其中<IB device>表示IB交换模块名称;<log name>表示待导出的日志文件名称,需以.log结尾

图8-4 生成日志文件

 


9 升级IB交换模块

具体操作步骤参见《H3C UniServer B16000刀片机箱 升级指导》中的“升级BX1020B IB交换模块”。

不同款型规格的资料略有差异, 详细信息请向具体销售和400咨询。H3C保留在没有任何通知或提示的情况下对资料内容进行修改的权利!

新华三官网
联系我们