HP Proliant DL380 G8 sunucu üzerinde yüklü olan VMware ESXi 5.5 Update 1 işletim sisteminden VMware ESXi 5.5 Update 2 sürümüne yükseltme işlemi sırasında alınan “ValueError: Cannot merge VIBs Mellanox_bootbank_net-mst_2.0.0.0-1OEM.550.0.0.472560, Mellanox_bootbank_net-mst_2.0.0.0-1OEM.550.0.0.472560 with unequal payloads attributes ([net-mst: 8.250 KB], [net-mst: 8.242 KB])” hatasının giderilmesini inceliyor olacağız.  

Sunucu üzerinde bulunan “Mellanox” üreticisine ait ağ  ve infinibant kartlarında VMware ESXi 5.5 sürüm yükseltilmesinde sürücü hatasından dolayı aşağıdaki hata ile karşılaşmanıza neden olur.

Bu sorunu gidermek için sırasıyla aşağdaki işlemleri yapmanız gerekecektir.

• SSH ile ESXi sunucusuna bağlanınız.
• ESXi üzerindeki bütün VIB dosyalarını listeleyeniz. Bu işlem için esxcli software vib list komutunu kullanabilirsiniz.
• VIB listesi çok uzun ve karmaşık gelmesi durumunda içerisinde net adı geçen VIB dosyaları listelenir. Bu işlem için esxcli software vib list | grep net komutunu kullanabilirsiniz.
• ESXi hostu üzerindeki ağ kartlarını listeyiniz. Bu işlem için esxcli network nic list komutunu kullanabilirsiniz. Bu komut sunucu üzerindeki aktif ve pasif ağ kartlarını listeleyecektir.

Not: Mellanox’a ait ağ kartlarını listemek için lspci | grep Mellanox komutunu kullanabilirsiniz.

• net-mst VIB dosyalarını kaldırmak için esxcli software vib remove -n net-mst komutunu çalıştırıldıktan aşağıdaki onayı almalısınız.

Message: The update completed successfully, but the system needs to be rebooted for the changes to be effective.

VIBs Removed: Mellanox_bootbank_net-mst_2.0.0.0-1OEM.550.0.0.472560

• Sunucunuzu yeniden başlatınız.
• ESXi upgrade öncesinde Mellanox tarafından yayınlanan en güncel firmware uygulamasını yükleyiniz.
• HP Custom ESXi kurulum medyası ile Upgrade işleminin yeniden başlatınız ve ESXi 5.5 Update 2 sürümü için yükseltme işleminin başlatabilirsiniz.
• ESXi kurulumu tamamlandıktan sonra Mellanox sitesinde yayınlanan en güncel driver’ın kurulumu yapılır. Bu işlem için Mellanox resmi web sitesinden indirilen driver VMware ESXi sunucuna WinSCP uygulaması yardımıyla kopyalanır. Driver kopyalama işlemi tamamlandıktan sonra aşağıdaki komut ile kurulum işlemi başlatılır.

# esxcli software vib install -d /tmp/MLNX-OFED-ESX-1.9.10.0-10EM-550.0.0.1331820.zip
Installation Result
Message: The update completed successfully, but the system needs to be rebooted for the changes to be effective.
Reboot Required: true
VIBs Installed: Mellanox_bootbank_net-ib-addr_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-ib-cm_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-ib-core_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-ib-mad_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-ib-sa_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-ib-umad_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-mlx4-core_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-mlx4-en_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-mlx4-ib_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_net-rdma-cm_1.9.10.0-1OEM.550.0.0.1331820, Mellanox_bootbank_scsi-ib-iser_1.9.10.0-1OEM.550.0.0.1331820
VIBs Removed:
VIBs Skipped:
#

• Driver kurulum işlemi tamamlandıktan sonra ESXi sunucu yeniden başlatılır.
• ESXi sunucu açıldıktan sonra sürücü modullerinin yüklendiğinden emin olunur. Bu işlem için esxcli software vib list | grep Mellanox komutunu kullanabilirsiniz.

~ # esxcli software vib list | grep Mellanox
net-ib-addr                              1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-ib-cm                                 1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-ib-core                               1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-ib-mad                               1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-ib-sa                                   1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-ib-umad                            1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-mlx4-core                          1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-mlx4-en                             1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-mlx4-ib                              1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
net-rdma-cm                           1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13
scsi-ib-iser                               1.9.10.0-1OEM.550.0.0.1331820         Mellanox  PartnerSupported  2015-03-13

# esxcli system module list | grep mlx4
mlx4_core                               true                 true
mlx4_en                                  true                 true
mlx4_ib                                   true                true

~ # esxcli system module list | grep ib_
ib_core                                    true                 true
ib_mad                                     true                 true
ib_sa                                         true                 true
ib_umad                                   true                 true
ib_cm                                        true                 true
ib_addr                                     true                 true
ib_iser                                       true                 true

Sunucu yeniden başlatıldıktan sonra sürücülerin yükleneceğinden emin olunur bu işlem için aşağıdaki komutları çalıştırınız.

esxcli system module set -e true -m mlx4_en
esxcli system module set -e true -m mlx4_core
esxcli system module set -e true -m mlx4_ib

Virtual Switch uplink bağlantısını doğrulayınız. vSwich standard switch modundayken Mellanox ağ kartlarının switch uplink switch olarak kullanıldığından emin olunuz. esxcli network vswitch standard list komutu ile uplink portu olarak kullanılan ağ kartınını belirleyiniz. Bu komut çıktısında uplink portu olarak vmnic1 kullanılmaktadır.

# esxcli network vswitch standard list

vSwitch0
Name: vSwitch0
Class: etherswitch
Num Ports: 3072
Used Ports: 4
Configured Ports: 128
MTU: 1500
CDP Status: listen
Beacon Enabled: false
Beacon Interval: 1
Beacon Threshold: 3
Beacon Required By:
Uplinks: vmnic1
Portgroups: VM Network, Management Network

esxcli network nic list komutu ile vmnic1 ağ kartının Mellanox üreticisine ait olup-olmadığı kontrol edilir.

# esxcli network nic list

Name                    PCI Device          Driver                   Link                        Speed                  Duplex                  MAC Address                                          MTU                     Description

————              ————-           ——-  —-  —–  ——  —————–  —-  —————————————————

vmnic0                 0000:002:00.0 mlx4_en               Up                          40000                   Full                        00:02:c9:a0:9a:10                                   1500                     Mellanox Technologies MT27500 Family [ConnectX-3]

vmnic1                 0000:005:00.0  e1000e                 Up                          1000                      Full                        00:25:90:4f:ea:fa                                   1500                     Intel Corporation 82574L Gigabit Network Connection

vmnic1                  000002  0000:002:00.0  mlx4_en  Down                0                             Half                        00:02:c9:a0:9a:11                                   1500                     Mellanox Technologies MT27500 Family [ConnectX-3]

vmnic2                 0000:006:00.0  e1000e                 Down                    0                             Half                        00:25:90:4f:ea:fb                                   1500                     Intel Corporation 82574L Gigabit Network Connection

#

Çalışan sürücüleri yeniden başlatak için aşağıdaki komutu çalıştırınız.

# /opt/mellanox/bin/openibd.sh restart
/etc/init.d/sfcbd-watchdog stop

vmkload_mod -u mlx4_ib

Module mlx4_ib successfully unloaded

vmkload_mod -u ib_iser

Module ib_iser successfully unloaded

vmkload_mod -u rdma_cm

Module rdma_cm successfully unloaded

vmkload_mod -u ib_addr

Module ib_addr successfully unloaded

vmkload_mod -u ib_cm

Module ib_cm successfully unloaded

vmkload_mod -u ib_umad

Module ib_umad successfully unloaded

vmkload_mod -u ib_sa

Module ib_sa successfully unloaded

vmkload_mod -u ib_mad

Module ib_mad successfully unloaded

vmkload_mod -u ib_core

Module ib_core successfully unloaded

vmkload_mod -u mlx4_en

Module mlx4_en successfully unloaded

vmkload_mod -u mlx4_core

Module mlx4_core successfully unloaded

vmkload_mod mlx4_core

Module mlx4_core loaded successfully

vmkload_mod mlx4_en

Module mlx4_en loaded successfully

vmkload_mod ib_core

Module ib_core loaded successfully

vmkload_mod ib_mad

Module ib_mad loaded successfully

vmkload_mod ib_sa

Module ib_sa loaded successfully

vmkload_mod ib_umad

Module ib_umad loaded successfully

vmkload_mod ib_cm

Module ib_cm loaded successfully

vmkload_mod ib_addr

Module ib_addr loaded successfully

vmkload_mod rdma_cm

Module rdma_cm loaded successfully

vmkload_mod ib_iser

Module ib_iser loaded successfully

vmkload_mod mlx4_ib

Module mlx4_ib loaded successfully

/etc/init.d/sfcbd-watchdog start

#