所选语种没有对应资源,请选择:

本站点使用Cookies,继续浏览表示您同意我们使用Cookies。Cookies和隐私政策>

提示

尊敬的用户,您的IE浏览器版本过低,为获取更好的浏览体验,请升级您的IE浏览器。

升级
案例库

E9000 CX311_FCOE对接思科光纤交换机内联端口全部offline

发布时间:  2018-02-08  |   浏览次数:  1000  |   下载次数:  33  |   作者:  huang922  |   文档编号: EKB1001297422

目录

问题描述

开局配置在E9000CX311FCOE网关上所有内部端口Operational State状态为offline

           Admin       Operational  Config Link     Link
  Port     State       State        Type   State    Speed  MACAddress
  ----     -----       -----------  ------ -----    -----  ----------
  Int1:12  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:26
  Int2:13  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:27
  Int3:14  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:28
  Int4:15  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:29
  Int5:16  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:2a
  Int6:17  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:2b
  Int7:18  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:2c
  Int8:19  Online     
Offline      F      Active   10Gb/s 00:c0:dd:33:06:2d

客户环境:在E90001号槽位上插有全宽刀片CH242 V3 HDD,刀片在MEZZ1位置配置MEZZ512卡,安装Vmware虚拟化主机操作系统;该E90002X3X槽位上分别插着CX311(未做堆叠),2X3X板存储FCOE平面分别有两对光纤连接两台思科光纤交换机(平行上联),思科光纤交换机已完成zone配置且配置无问题。

处理过程

CX311的网络模块收集配置信息,配置信息如下:

  interface 10GE2/1/1

 port link-type hybrid

 port hybrid pvid vlan 327

 port hybrid tagged vlan 1002

 port hybrid untagged vlan 327

 stp disable

 lldp tlv-enable dcbx

 dcb pfc enable mode auto

 dcb ets enable DCBX

 dcb compliance intel-oui

#

interface 10GE2/20/1

 port link-type trunk

 port trunk allow-pass vlan 1002

 port-isolate enable group 1

 stp disable

 storm suppression broadcast block outbound

 storm suppression unknown-unicast block outbound

 lldp tlv-disable basic-tlv all

 lldp tlv-disable dot1-tlv all

 lldp tlv-disable dot3-tlv all

 lldp tlv-enable dcbx

 fcoe role vnp

 dcb pfc enable mode manual

 dcb ets enable DCBX

 dcb compliance intel-oui

 traffic-policy FCOE-p1 outbound

3X_10GE平面平面配置与此类似。

FCOE平面已修改为TRTransparent)模式,完成端口映射配置,连接刀片10GE网口未禁止VLAN1数据通过,连接背板10GE2/20/110GE3/20/1口未配置组播风暴抑制storm suppression multicast block outbound

FCOE的内联端口为offline,刀片wwn无法注册到思科光交,CX311_FCOE刀片内联口无法识别主机WWN


通过排查发现思科光交未开启NPIV功能,使能开启NPIV功能后刀片wwn注册成功,FCOE刀片内联口状态正常。

思科光交使能开启NPIV功能命令:

MDS9000# *config t*

MDS9000(config)# *npiv enable*

功能使能开启后将使得N端口标识符虚拟化在所有的VSAN使能,刀片wwn能够正常注册成功。


存储侧能正常扫描到主机FC启动器:


根因

华为CX311交换板FCOE平面与思科光纤交换机对接,华为FCOE平面需修改为AG模式或者TR模式,思科光纤交换机需开启NPIV功能支持(多刀片的情况下需要基于wwn号划zone),此种应用在刀片主机侧安装Vmware虚拟化且刀片硬件使用MEZZ512卡的情况。

解决方案

1、开启MEZZ512网卡FCOE模式,并重启主机系统生效;

2、检查CX311交换背板连接刀片口10GE2/1/110GE3/1/1配置是否禁止vlan1流量通过;

3、检查CX311内联背板第一个端口10GE2/20/110GE3/20/1是否配置了组播风暴抑制,如果存在storm suppression multicast block outbound配置则undo(其余端口不需要undo此项配置)

4、检查Vmware esxi 主机侧管理网卡是否勾选vmnic0vmnic3两个网卡;

5、检查思科光纤交换机是否开启NPIV功能支持。

6FCOE平面对接业务光纤交换机需要设置AG模式或者TRTransparent)模式,并完成端口映射配置;若CX311进行堆叠,需修改3X交换板10GE平面和FCOE平面存储vlan1003,并完成端口映射配置和配置保存、激活。

建议与总结

E9000刀片服务器CX311对接思科光纤交换机,CX311交换板FCOE平面切换AG模式或TR模式,思科光交使能NPIV功能,主机wwn才能注册成功;出现FCOE内部端口Operational State状态为offline的情况先从底层排查,切换为Full Fabric模式下show ns命令查看是否识别刀片wwn;若是vmnic网卡勾选、MEZZfcoe模式、交换板配置,FCOE平面TR模式切换、端口映射配置均无问题,则有可能是思科光交未开启NPIV功能支持。

 

备注:NPIVN_Port Identifier Virtualization 的缩写,N-PortID虚拟化技术(NPIV)能将一个HBA卡接口虚拟成多个接口。N端口标识符虚拟化是一个SAN-OS功能,允许管理员分配多个光纤通道存储引发剂的ID到一个单一的N端口。这允许多个应用程序服务器共享一个HBA和多个FCIDs。当使用像VMware的技术,VMware允许服务器管理员在一台物理服务器托管的众多虚拟服务器。服务器应用程序和SAN交换机必须支持NPIV并使得它功能正常。