主題: (高手請進)整套VMware企業虛擬化實作探討

[maxwkimo]

各位先進 &業界的高手 你們好:
幾個疑問想請各位幫忙解答
1. ESXi & ESX 有何差異(已知各項功能且官方書面文件我有)，但我想問實際使用的心得如: ESXi 無法做VMotion 或Storage VMotion 或Fault Tolerance 或HA 等等
2. 若沒有足夠的資金 若使用VM SERVER 是否可行 底層Windows 或 LINUX 是否有人實作過(效能與管理的效益如何) 是否與Workstation大同小異
3. ESXi 或ESX可否安裝於一般PC，是否有高手實作過，一般四核心桌機可承受約多少VM 假設每個VM都有IIS&吃1G記憶體
4. ESXi 是否也可以透過VirtualCenter來管理，若可以，原先VC的功能會因為非ESX而被關閉嗎?
5. 一般來說VMDK放在自己的本機執行端好，還是放iSCSI好，先不管方便管理&備份(假設企業級iSCSI Storage 2U 300G SAS硬碟15K*4 RAID5 跑Giga1000的網路，中間也用Giga Switch ，本機giga網卡 ，實際仍會遇到IO不足或CPU，RAM等等吃緊的問題嗎?
6. 導入ESXi或ESX 於企業中， 備份又如何建議? (SSH進去CPOY or FTP or 直接 Storage 複製，VMFS磁區不是很好備份處理)
7. 已導入ESX日後若想將IMG轉換Workstation會有什麼樣的問題(VMware vCenter Converter轉來轉去會轉到IMG壞掉嗎??)
8.最後一個問題 ESX或ESXi 在掛上VMFS或NTFS都會先做format的動作，這個不人性化的行為如何處理掉?

以上8個問題請原諒我未爬完全站文就發文，因為我的老闆急著叫我提測試報告給他，而我又覺得需要多一點時間來搞清楚哪個方案才是最適合我們專案的!
懇請各位虛擬化前輩給予一些經驗指導
再次感謝各位無私的經驗分享 謝謝!

[thx]

1. ESXi & ESX 有何差異(已知各項功能且官方書面文件我有)，但我想問實際使用的心得如: ESXi 無法做VMotion 或Storage VMotion 或Fault Tolerance 或HA 等等

A:個人是使用免費 esxi free key用於esx 上..個人偏好esx 指令完整度

2. 若沒有足夠的資金 若使用VM SERVER 是否可行 底層Windows 或 LINUX 是否有人實作過(效能與管理的效益如何) 是否與Workstation大同小異

A:慢 管理上也不方便

3. ESXi 或ESX可否安裝於一般PC，是否有高手實作過，一般四核心桌機可承受約多少VM 假設每個VM都有IIS&吃1G記憶體

A:可以 但是Raid Card不可省設  這樣講太含湖.簡單遇到狀況 DRAM (8gb太小) 需求大於CPU


4. ESXi 是否也可以透過VirtualCenter來管理，若可以，原先VC的功能會因為非ESX而被關閉嗎?

A:可以 但是要有合法授權

5. 一般來說VMDK放在自己的本機執行端好，還是放iSCSI好，先不管方便管理&備份(假設企業級iSCSI Storage 2U 300G SAS硬碟15K*4 RAID5 跑Giga1000的網路，中間也用Giga Switch ，本機giga網卡，實際仍會遇到IO不足或CPU，RAM等等吃緊的問題嗎?

A:放本機 做好備援機制就可.用nas, iscsi,有效能跟管理上等問題 一般初初 預算 經驗不足 不建議

6. 導入ESXi或ESX 於企業中， 備份又如何建議? (SSH進去CPOY or FTP or 直接 Storage 複製，VMFS磁區不是很好備份處理)

A:看預算跟需求採購備份軟體 或是用單純script 做

7. 已導入ESX日後若想將IMG轉換Workstation會有什麼樣的問題(VMware vCenter Converter轉來轉去會轉到IMG壞掉嗎??)

A:沒遇過

8.最後一個問題 ESX或ESXi 在掛上VMFS或NTFS都會先做format的動作，這個不人性化的行為如何處理掉?

A:沒辦法.除非是已經被format 成vmfs格式,沒抓到.此時下advanced參數去強制掃瞄就可不用重format

可參考
http://wiki.osslab.org.tw/%E5%AF%A6%E9%A9%97%E5%B0%88%E6%A1%88/Virtualization/VMware_Infrastructure_3

[oreo]

不知道你實際要用的環境,以下為大概的建議

問題1是個誤解,你的VC授權有齊全,該有功能都會有

錢不是萬能,但是沒錢是萬萬不能,你買PC除非你身家比THX猛,時間比
THX多,記得ZMAN說的,基礎建設有問題,其他就別談了,我若是你的老闆
要你給我這樣的評估,我應該先把自己給炒了,買PC裝ESX還需要規劃嗎
儲存設備議題太大,不知道你狀況,先不回,你還是暫緩你的計畫,你給你
老闆的東西,輕則花錢買錯,重則服務垮台,公司倒閉,還是別開玩笑
既然你寫了是公司用,就還是謹慎一點,計畫慢不會死人,計畫錯,恩&*()

[u8526425]

老闆要測試報告
當然是自己來弄的好
VMware產品不管要不要錢都有60天的測試期
放膽去測
這種事情不要急
一步錯
全盤錯
一方面是實際操作體驗
一方面是有些東西你沒有真的測過 (兼之你不熟)
根本不知道導入會遇到什麼問題

[maxwkimo]

經過了上次發文到現在的時間，完全花在跟ESX&ESXi廝殺，終於對這個產品有了一定程度的了解!
雖然叫來了VMware原廠的人來幫我上課，呵呵呵!既然花了錢就一定要有收穫阿!
買了3個授權的VC+6套workstation 另外買了6個CPU的ESX授權，這樣的消費就可以叫原廠人來幫你上課嚕!(有錢能使鬼推磨啊!!)

上課結論跟大家分享一下
首先是ESX跟ESXi有什麼不同~~答案是完全相同 差別只在於
ESX可以自己改裡面的設定甚至做某程度的修改
ESXi為了怕被破解所以就鎖起來只讓你改改IP做一些很基本的事情(官方真是....XD)

再者3.5的版本跟4到底有啥不同勒! 官方有給了差異比較表 這個我就不PO了，因為隨便查都有
重點是如果你家都是老機器32位元，別指望你可以裝4的版本，因為4的基本需求就是64位元主機
還有另外一項就是如果你導便宜的iSCSI 儲存設備，那可能也並不便宜!!因為有很多限制
1. ESX的網路Giga是必要的
2.你家要有支援GiGa的switch
3.網卡幾乎都是server級的算高階網卡了 (什麼牌子很重要基本上都是前輩列出來的那些)
4.網卡虛擬出來的iSCSI Adapter 會減弱你的硬碟輸出，簡而言之 硬碟要輸出到網路時必須靠iSCSI Adapter 轉換訊號，所以根本無法操到硬碟的最大效率，比較後
一般老機器的硬碟
SCSI 10k約 160M
SATA 約 150M
SATA2 約 300M
所以你的整體配備 除了硬碟 CPU幾個核心 RAM幾G RAID卡什麼等級 網卡虛擬iSCSI 還是直接買高檔的iSCSI卡 都是整個評估重點
一般HP老機器 array 5i 內建 完全沒有緩衝 全部吃掉你的CPU RAM
要另外買卡......大概也划不來
網卡虛擬iSCSI 根本就不是王道....因為省了錢卻賠了時間，這樣的配置ESX只能夠動態搜尋LUN的位置 當然ESX 4例外但也是看儲存設備是哪家的!

當然還有很多設定上的限制全部都會因為你採用的硬體而出現差異或問題
整個豪華的測試方案都玩光了 HDS EVA4000 FCSAN iSCSI NAS 都玩過了
我唯一能下的結論.......
如果你家機器不是64位元 沒有32個核心 沒有128G以上的RAM 沒有好的網路設備 RAID卡 SAS硬碟 那千千萬萬不要隨便嘗試把你家的環境轉上來，自以為這樣DR備援就比較輕鬆....會讓你後悔的唷

此外的VCB 就是備份方案，這個也是漏洞百出阿....必須要自己寫排程的....不能夠支援介面(除非你家用高檔的儲存設備 如:HDS..IBM..)
還有一些綿綿角角是一時間無法寫完的...如果有問題的話再發文討論吧!

再次感謝早先幾位前輩的協助&說明
沒有你們的建言....可能全國人民又要位了這個買單不少冤枉錢!呵呵呵!

[warner]

對一句話不太了解：

4.網卡虛擬出來的iSCSI Adapter 會減弱你的硬碟輸出，簡而言之 硬碟要輸出到網路時必須靠iSCSI Adapter 轉換訊號，所以根本無法操到硬碟的最大效率

這意思是，若是用iSCSI的介面，都是用網卡去模擬出來的意思是嗎??所以會導致硬碟輸出入的效能降低囉??因為公司內是用SAN storage，本身機器上是有HBA卡，不了解iSCSI的介接方式。那我們家用SAN Storage就沒這狀況，是嗎??

另外，您有提到一般HP老機器 array 5i 內建 完全沒有緩衝 全部吃掉你的CPU RAM，同樣的狀況下，若是接本機的storage，就沒問題，還是您提的狀況一樣會發生??

[maxwkimo]

對一句話不太了解：

4.網卡虛擬出來的iSCSI Adapter 會減弱你的硬碟輸出，簡而言之 硬碟要輸出到網路時必須靠iSCSI Adapter 轉換訊號，所以根本無法操到硬碟的最大效率

這意思是，若是用iSCSI的介面，都是用網卡去模擬出來的意思是嗎??所以會導致硬碟輸出入的效能降低囉??因為公司內是用SAN storage，本身機器上是有HBA卡，不了解iSCSI的介接方式。那我們家用SAN Storage就沒這狀況，是嗎??

另外，您有提到一般HP老機器 array 5i 內建 完全沒有緩衝 全部吃掉你的CPU RAM，同樣的狀況下，若是接本機的storage，就沒問題，還是您提的狀況一樣會發生??

一般網卡是靠模擬iSCSI訊號來做傳輸的，這樣個方式是軟體模擬，所有耗費的資源都吃本機CPU 和RAM!
真正的iSCSI介面卡上面有獨立運算晶片和緩衝記憶體等硬體，效能當然差很多，但....價錢也逼近HBA光纖網卡!不便宜喔!

array 5i 內建沒有緩衝記憶體，也沒有獨立運算晶片，所以同樣效能不好嚕!
你說在本機上面的話，其實感覺不太出來吧!除非跑一堆VM在上面就明顯發現IO不夠!!

[yufeng]

如果你家機器不是64位元 沒有32個核心 沒有128G以上的RAM 沒有好的網路設備 RAID卡 SAS硬碟 那千千萬萬不要隨便嘗試把你家的環境轉上來，自以為這樣DR備援就比較輕鬆....會讓你後悔的唷

沒那麼嚴重吧? 雖然說要有好的設備才能看出真正的效益~

我們家用刀鋒, 每刀 CPU*2  4核心, 32GB Ram,

Storage 用 Data Core Server 兩台, 目前後面接了 24T, 供應大大小小單位的需求, 目前也已經轉了超過 70 部機器上去

也沒兄台您說的誇張

沒錢買這樣的設備沒關係, 他還有一個好處

就是你們家古董, 機器想升級換新卻不敢換, 跑 DOS? NT4?  都行, 程式也不用改

幾萬塊的 PC, 裝個免費版, 就可以把老硬體丟了, 不用每天擔心 Power 什麼時候掛, 硬碟喀拉科拉響, RAM 會不會罷工