2012年6月17日 星期日

Setup Dell Equallogic iSCSI storage for ESX/ESXi Host

Dell Equallogic Multiple Path Extension

For ESX 4
setup.pl --install --server={HOST} --bundle=c:\dell-eql-mem-esx4-1.1.0.222691.zip
setup.pl --server={HOST} --configure --ips={iSCSI Client IP 1},{iSCSI Client IP 1} --nics={iSCSI Client Nic 1},{iSCSI Client Nic 2} --enableswiscsi --netmask={{iSCSI Client IP Netmask}} --mtu=9000 --enableswiscsi

如果 Client iSCSI vSwitch 已經設定過了, 在安裝 Equallogic MEM 的時候,很可能會出現錯誤說請先移除無效的vmknic。這似乎是 ESX 4/5 的一個 bug, vSwitch在被移除後, vmknic IP會被清空但是卻不會移除乾淨。尤其是當iSCSI device 還連線的話,連進ssh下指令也是無法移除vmknic。

ESX5 我的做法是:
1. 用vSphere Client移除 vSwitch
2. 用SSH登入ESX, 利用esxcli中斷該 vSwitch 的 iSCSI session
esxcli iscsi session remove -A {iSCSI software adapter}
3. 移除該 vSiwtch 下,被清空但是未移除的 vmnic
esxcli iscsi networkportal remove -A {iSCSI software adapter} -n {vmnicX}

ESX 4 的話命令有點不一樣,不過原理都是一樣的。移除 vSwitch和其下的網卡,如果無法移除成功那就是還有 iSCSI session 存在,想辦法把他關掉或者重開機後就可以移除乾淨了。這時候就可以順利安裝 Equallogic 的 Plugin.

ESX5 Dell Equallogic Plugin 在ESX5透過 vSphere CLI安裝總是會失敗(ESX 4是正常的),我的做法是:
1. 先把 plugin dell-eql-mem-esx5-1.1.0.222691.zip 透過vShpere Client的 browse datastore上傳到 local data store,
2. SSH進ESX 5 host
3. copy plugin dell-eql-mem-esx5-1.1.0.222691.zip to /var/log/vmware  (重要!!)
4. 然後執行 esxcli software vib install --bundle={plugin dell-eql-mem-esx5-1.1.0.222691.zip path}
這樣 plugin 就可以完成安裝啦!

為什麼一定要用 Dell 的 MEM Plugin 呢? 其實我也還不知道。
在ESX 4 的時候,要設定 MTU=9000 使用 Jumbo Frame的話,透過這個 plugin 來安裝和設定 multipath是最快的!
但是在ESX5以後,vSwitch下的NIC已經可以直接設定MTU,也提供了比ESX4多的資料,手動設定Multi Path似乎也不會很麻煩。
其實這個Plugin還有對ESX host 做一連串的指令,或許等哪天我有新的發現,再來update吧。

依照我有強迫症的情況,我想我ESX4 / 5 的 Host 都會裝上 Plugin XD