E9000 CX311_FCOE对接思科光纤交换机内联端口全部offline

开局配置在E9000上CX311的FCOE网关上所有内部端口Operational State状态为offline

           Admin       Operational  Config Link     Link
  Port     State       State        Type   State    Speed  MACAddress
  ----     -----       -----------  ------ -----    -----  ----------
  Int1:12  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:26
  Int2:13  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:27
  Int3:14  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:28
  Int4:15  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:29
  Int5:16  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:2a
  Int6:17  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:2b
  Int7:18  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:2c
  Int8:19  Online      Offline      F      Active   10Gb/s 00:c0:dd:33:06:2d

客户环境：在E9000的1号槽位上插有全宽刀片CH242 V3 HDD，刀片在MEZZ1位置配置MEZZ512卡，安装Vmware虚拟化主机操作系统；该E9000的2X和3X槽位上分别插着CX311（未做堆叠），2X、3X板存储FCOE平面分别有两对光纤连接两台思科光纤交换机（平行上联），思科光纤交换机已完成zone配置且配置无问题。

CX311的网络模块收集配置信息，配置信息如下：

  interface 10GE2/1/1

 port link-type hybrid

 port hybrid pvid vlan 327

 port hybrid tagged vlan 1002

 port hybrid untagged vlan 327

 stp disable

 lldp tlv-enable dcbx

 dcb pfc enable mode auto

 dcb ets enable DCBX

 dcb compliance intel-oui

#

interface 10GE2/20/1

 port link-type trunk

 port trunk allow-pass vlan 1002

 port-isolate enable group 1

 stp disable

 storm suppression broadcast block outbound

 storm suppression unknown-unicast block outbound

 lldp tlv-disable basic-tlv all

 lldp tlv-disable dot1-tlv all

 lldp tlv-disable dot3-tlv all

 lldp tlv-enable dcbx

 fcoe role vnp

 dcb pfc enable mode manual

 dcb ets enable DCBX

 dcb compliance intel-oui

 traffic-policy FCOE-p1 outbound

3X_10GE平面平面配置与此类似。

FCOE平面已修改为TR（Transparent）模式，完成端口映射配置，连接刀片10GE网口未禁止VLAN1数据通过，连接背板10GE2/20/1、10GE3/20/1口未配置组播风暴抑制storm suppression multicast block outbound。

FCOE的内联端口为offline，刀片wwn无法注册到思科光交，CX311_FCOE刀片内联口无法识别主机WWN。

通过排查发现思科光交未开启NPIV功能，使能开启NPIV功能后刀片wwn注册成功，FCOE刀片内联口状态正常。

思科光交使能开启NPIV功能命令：

MDS9000# *config t*

MDS9000(config)# *npiv enable*

功能使能开启后将使得N端口标识符虚拟化在所有的VSAN使能，刀片wwn能够正常注册成功。

存储侧能正常扫描到主机FC启动器:

华为CX311交换板FCOE平面与思科光纤交换机对接，华为FCOE平面需修改为AG模式或者TR模式，思科光纤交换机需开启NPIV功能支持（多刀片的情况下需要基于wwn号划zone），此种应用在刀片主机侧安装Vmware虚拟化且刀片硬件使用MEZZ512卡的情况。

1、开启MEZZ512网卡FCOE模式，并重启主机系统生效；

2、检查CX311交换背板连接刀片口10GE2/1/1、10GE3/1/1配置是否禁止vlan1流量通过；

3、检查CX311内联背板第一个端口10GE2/20/1、10GE3/20/1是否配置了组播风暴抑制，如果存在storm suppression multicast block outbound配置则undo掉(其余端口不需要undo此项配置)；

4、检查Vmware esxi 主机侧管理网卡是否勾选vmnic0，vmnic3两个网卡；

5、检查思科光纤交换机是否开启NPIV功能支持。

6、FCOE平面对接业务光纤交换机需要设置AG模式或者TR（Transparent）模式，并完成端口映射配置；若CX311进行堆叠，需修改3X交换板10GE平面和FCOE平面存储vlan为1003，并完成端口映射配置和配置保存、激活。

E9000刀片服务器CX311对接思科光纤交换机，CX311交换板FCOE平面切换AG模式或TR模式，思科光交使能NPIV功能，主机wwn才能注册成功；出现FCOE内部端口Operational State状态为offline的情况先从底层排查，切换为Full Fabric模式下show ns命令查看是否识别刀片wwn；若是vmnic网卡勾选、MEZZ卡fcoe模式、交换板配置，FCOE平面TR模式切换、端口映射配置均无问题，则有可能是思科光交未开启NPIV功能支持。

备注：NPIV是N_Port Identifier Virtualization 的缩写，N-PortID虚拟化技术(NPIV)能将一个HBA卡接口虚拟成多个接口。N端口标识符虚拟化是一个SAN-OS功能，允许管理员分配多个光纤通道存储引发剂的ID到一个单一的N端口。这允许多个应用程序服务器共享一个HBA和多个FCIDs。当使用像VMware的技术，VMware允许服务器管理员在一台物理服务器托管的众多虚拟服务器。服务器应用程序和SAN交换机必须支持NPIV并使得它功能正常。