顯示文章

這裡允許您檢視這個會員的所有文章。請注意, 您只能看見您有權限閱讀的文章。


文章 - oreo

頁: [1] 2 3 4
1
你要裝在家裡,那你要先考慮電費的問題 ;D

你要開10-12台,沒有RAID和雙CPU的機器,除非你都是LAB而且跑的都是LINUX或是BSD類的,否則應該會慢到你想把機器從樓上丟下去

ESX環境裡面,沒有外力援助的狀況下(FC,iscsi,nfs)

最慢的是 IO ,其次為大量的記憶體,最後才是考慮CPU,而你要考慮這個問題,你還要再去想到,你需要第二台機器的問題,平台的考慮順序應該以此為依據下去衡量

IO加速的方法只有一個,那就是RAID,加上你要開這樣多的機器,請問你該如何備份,RAID除了加速以外,最重要的還是讓你的機器不會因為壞了某個HD整個VMDK檔案就掛掉
你要分VM放不同HD,那你的風險就是,你要勤於備份,而且要精確的計算哪些VM需要比較快磁碟,配上只需要比較慢的磁碟的VM,頭髮都白了

說INTEL不好不是因為intel不好,而是因為你的預算不夠所以他不好,INTEL所有桌機的晶片組除了X58以外,都技術性的封印了VM最需要的幾項東西,他還是會希望你買伺服器,所以你的PC要做SERVER用就會綁手綁腳,AMD的技術就算是在PC上,也沒那樣的不堪,我公司的機器就是用1萬多的ACER PC去改的,比你去光華買還便宜,AMD的桌機主機板同時上RAID和INTEL網卡的相容性很少,這才是你需要考慮的

http://123.205.249.148/esx4/003.JPG
http://123.205.249.148/esx4/004.JPG

1.他的PCI-E無法同時插上RAID卡,外接的顯卡,網路卡(總pci-e線數不夠),除非你讓你的顯卡降跑PCI-E 8或是4,但是很多主機板無法調整,所以你會很慘,X58稍微好一點,也是你應該考慮的,但是1366的CPU和版子的價錢,如果是我,我會買RAID卡和硬碟,你買那些主機板他本來就不是這個用途,supermicro的應該會好一點,但是由於我沒試過,你掛了別找我,我建議你完整的看這個討論串,就會知道這問題有多難搞

http://www.pcdvd.com.tw/showthread.php?t=827789&page=3&pp=40

2.單條4G DDR-3的記憶體並不好找,現在已經不建議買DDR-2的系統,你要同時上4-6隻才有16-24G的最高容量,桌機的主機板常常只有4根槽,而使容量對虛擬機器的限制過大,HOST OS大約需要1.5-2G,其實你只剩下22G可以用,我建議你先算算你單買記憶體完剩下多少錢,再來想想這件事,而且當你用到滿的時候,你需要擴充只有再買一台機器一途
3.LAB或是小型的上線機器,CPU根本就是閒置狀態居多,我貼圖證明給你看,以免你說我騙你,所以不要再去想CPU哪個比較好,那是噱頭,是intel與AMD希望聯手讓你掏錢出來的方案,不是你需要的方案,10M的服務你沒多少東西可以吃CPU的,CPU如果是兩顆的,不要只買一顆,尤其是AMD在二手的市場已經爛到爆炸了,你省那一點錢不會比較好,只會讓你之後擴充找不到一樣的型號需要再買2顆,你該不會是雙向10M對稱的網路吧,那可能有機會,我的機器上是64G,目前開了8台,你可以看的到配置的狀態,而且可以用很便宜的價錢讓IO與記憶體極大化,這才是你要自己裝的目的,不然買套裝的就好了
http://123.205.249.148/esx4/001.JPG
http://123.205.249.148/esx4/002.JPG


網卡需要GB除了你說的備份之外,還有就是當需要救援部隊上場時(NFS或是ISCSI),你才不會覺得慢,當然,ESX4官方也不支援100的網卡了就是



2
不是專家,但是偷回一下

我覺的首先你要先界定你大概會需要開幾台虛擬機器,我建議DIY方案用PC主機板儘量不要選INTEL的主機板,intel 主機板有先天上很難處理的問題

除非你不要RAID卡

我假設你有4萬,這是我認為你如果要跑的順的話的價錢,你必須先扣除

DELL PERC 6i + 500G HD*7 此部分大約大約2萬

AMD 4核 CPU最便宜的CPU*1,兩支 PCI-E的主機板,目前通常為790或是780 ATX的主機板 此部分大約8000-9000

剩下的就是記憶體買滿,記憶體AMD可以用4G的RAM,永采至少可以上到12G,如果你買金士頓的話大概可以上到16G

當然,請記得買新巨的power以及不要太差的機殼,intel 雙PORT網卡*1

這樣LAB起5-8台應該沒問題
如果說,你實在不知道RAID卡與網卡的相容性,我直接跟你說,supermicro xeon 771 系列或是 opteron mcp55 pro 大部分都沒有問題

當然,4萬也可以買1路的伺服器主機,所以就看你怎嚜取捨,不過我建議,你還是要先評估你需要開幾台,目前單路的機器根據一般的狀況

絕大部分都是8G(775),12G(AM2),24G(i7),要買I7請記得買1366腳位的,其餘的都丟到一旁

至於雙路的機器,我還是建議opteron,目前拍賣的雙核CPU都在1000以下,加上無敵多的記憶體,自己裝大概是10萬
買品牌機就是50-100萬了

ILO等的東西,我覺得未來KVM會收掉,我門就耐心等THX買新玩具幫我門測試吧

以上並不考慮維修與管理成本





3
我建議你直接看

http://www.vm-help.com

其中的
http://www.vm-help.com/esx40i/esx40_whitebox_HCL.php
有絕大部分的白牌主機的型號,大體上說來,在有intel網卡與RAID卡的狀況下,目前大部分的主機就算是PC應該都是可以安裝的

4
常駐上海啊?

聽起來好吸引人說,突然有種想傳私訊的衝動 ;D

5
很久沒發文了,但是新東西實在太多,趁著這次需要進行某機房案,寫了些小東西

沒有圖床,只好請各位移駕,原文連結如下

http://s852254.blogspot.com/2009/12/vsphere.html

最近一直在思考,如何可以極大化單台主機虛擬化的效能,這樣就算是資料中心,機器數量可以再減少,尤其是VMWARE的授權是算CPU的,節省主機就是節省費用,所以有了這個實驗


平台目前鎖定為AMD平台,原因在於,目前可購置到可以安裝48G以上的系統,價錢可以裝在家裡的XEON系統仍然太貴

分別由CPU , RAM , DISK IO , NETWOEK 等子系統來做強化


以下為配置的目標

1.CPU:

目前使用opteron,2路的機器是實驗的目標,opteron系列的機子之後還可以升級為六核心,CPU無論為雙核或是4核價錢都遠低於XEON,本次使用的主機板為supermicro H8DME-2


2.RAM:


目前預計目標為裝滿該平台最大數量,如以目前普遍可以買的的4G ECC REGISTERED的記憶體來說,該主機板可裝64G


3.網路:

除內建網路之外,另外加裝PCI-X 單卡雙PORT的PRO 1000 MT,由於該主機上還有兩根插槽,可以再做擴充,除了網路卡之外並且加裝QLOGIC的光纖卡,這樣可以同時使用 NFS , ISCSI , SAN

4.RAID卡

IO一向為最大的問題,除了直接掛載各種儲存設備以外,如何在本身的機器上極大化處理能力,變成本次實驗的重點,目前裝上 DELL PERC 6I 和 HP P410,裝滿主機最大數量硬碟開出2個1.9T的datastore作為儲存空間,圖下為RAID卡與軟體中的照片

5.電力消耗
單台主機的消耗在350w內,開機只有300w出頭

最後配置的設備清單

Case: supermicro 4U 745TQ-800B 加上 3BAY 5插槽的硬碟抽取盒
CPU: opteron 8347HE *2 1.9G*8
RAM : 4G *8 = 32G
RAID : HP P410 500G*7 (RAID50+ hot spare) , dell PERC 6i 500G*6 (RAID5+hot spare)
NETWORK : intel PRO 1000MT
FIBRE: Q-LOGIC 2462



後記
目前PCI-X的2G光纖卡和2PORT的網卡由於新主機的規格不再支援舊的介面,導致於3大廠的備品於市面上可以很便宜的買的到,opteron在拍賣中,雙核心的價錢已經慘烈到不到1000元,4U的機器於空間配置中能極大化的部份很多,比起很多主機買了之後插槽閒置,最好的配置就是,將其全部用完

而CPU可以雙插槽,其實RAID卡也可以,目前來說,三大廠都還沒有類似的作法,由於目前主流的三大廠機器,SAS的背板都是鎖定在一個RAID卡上面,導致於真的裝兩張RAID時,必須採取一內一外藉助類似DELL MD1000或是IBM System Storage EXP3000 的櫃子才能處理,仔細思考了一下,3U 16BAY的機器配上兩個Raid50是目前最好的配置,但目前應該沒有類似規格的東西的套裝伺服器可以買,其實仔細想想大部分的X3650或是DL380G5,都沒有將其記憶體插槽或是擴充槽用完,那些空間,如果能在配置與加裝,應該就不會有兩個XEON 5420的使用率只有不到50%的問題,以這樣的配置,在不藉助外加的儲存設備下如果加滿64G的記憶體,應該可以開出至少40-50台LAB的主機,或是將所有的CPU效能消耗完畢,單機只有350W-400W的電力,實在是物超所值

必須還是要提一下,supermicro的opteron 2000系列的主機板,無論於擴充.相容性,都是vshpere的上上之選,HP的P410根據某位苦主的測試,連HP自家的DL160G5都不能用,說來也實在是好笑,三大廠的東西在獨立伺服器的廠商平台上大和解,讓我們替supermicro拍拍手,好東西還是有他的價值

6
靠,原來三子那天在我辦公室閒聊的就是這天殺的線路啊,我真是增長見聞了
繼續看戲

7
open-e v6新版參與測試的人可以免費獲得2T的版本一組
starwind可以免費申請,限制放寬很多

有興趣的人可以試試看

這塊看來開始進入烽火市場期了

8
不知道你實際要用的環境,以下為大概的建議

問題1是個誤解,你的VC授權有齊全,該有功能都會有

錢不是萬能,但是沒錢是萬萬不能,你買PC除非你身家比THX猛,時間比
THX多,記得ZMAN說的,基礎建設有問題,其他就別談了,我若是你的老闆
要你給我這樣的評估,我應該先把自己給炒了,買PC裝ESX還需要規劃嗎
儲存設備議題太大,不知道你狀況,先不回,你還是暫緩你的計畫,你給你
老闆的東西,輕則花錢買錯,重則服務垮台,公司倒閉,還是別開玩笑
既然你寫了是公司用,就還是謹慎一點,計畫慢不會死人,計畫錯,恩&*()

9
1.開機發生搞不清楚哪個是預設閘道 ESX畫面上IP 0.0.0.0
預測閘道的部份,您可以從service console看,不行的話,應該可以看的到

2.開機過程中尋找iSCSI的時間超久足足約15分鐘
其實3.X版的軟體ISCSI啟動很慢,我公司的也需要5分鐘左右,你應該要告訴
我們,你的target是哪個軟體或是哪各DEVICE起起來的服務,這樣要猜也有
個底,很慢是正常的

3.若1000網段不加servive console就不能夠連上iSCSI
在3.x的架構下,vmkernel和service console都是必需品,正常的狀況下都是
兩組,一組給你控制用,一組給你連接儲存設備用,所以你說的是正常的狀況

10
和之前被預測的相同,最後就是一桌麻將4人打的狀況,小公司都退散了
繼續看戲

11
這問題其實我有遇過類似的狀況,而問題是出在intel 較新的3000AH的主機板上面
也是上了DELL的PERC 5/i(後來我測了6有一樣的問題),不能插到8G的記憶體
4G跑的很順,但是上了adaptec 的3805一點問題也沒,建議換RAID卡
應該是主機板BIOS部分的問題(推測,應該無解),您的狀況尚稱輕微
我的狀況是,根本不能BOOT,還是換卡吧,不過老實說,2120輕量服務可以
但是IO效能也是不好,您要多留心這點

12
你參考一下文件,有點差別,ESXi不需要處理Firewall的部份
從第43頁開始是ESX的管區,照著做就對了,英文不好有圖,剩下的就自己動手吧
http://www.rocketdivision.com/info/StarWind_ESX.pdf


13
這串真是接力接的太好了,拍拍手中 ;D
david啥時再幫我們開課啊 :P
其實這個問題最麻煩的在於,新的伺服器幾乎很難找到PCI-X了,risercard預設都是pci-e *3
買的時候請各位多留意,可以先請業務把卡片換成你要的,施工起來會比較簡單一些
另外,根據相當數量的回報 4 port的網卡有點挑版子,如果不是直接找原廠買的,很多時候會有相容問題
(BIOS有抓到,ESX一個port 都看不到),不想麻煩的話,建議買 2port的,反正串出了頻寬
HD也要夠力才能輸出那樣多的資料啊 :'(

14
我的建議是,如果會想自己裝,先不要去考慮MD1000,理由是,用不到
MD1000可以處理SAS串櫃子的功能,但是,要串櫃子,先決要件是,你需要處理那樣多的資料
這與開版主題是有衝突的,如果不需要處理串櫃子的問題
以下的櫃子反而比較適合,也比較不容易有相容性的問題,因為他是無法串接的
http://www.enhance-tech.com/products/desktop/E8_MS.html
而這種櫃子,用R200實在是浪費到爆炸了,買個T100當HOST機起TARGET就可以了
容錯的問題,就買兩組,互相備份,問題可能簡單一點

而I-scsi的部份,小弟建議,USB便宜到爆炸了,架構上還是採用HOST OS放於本機的方法比較簡易,san boot或是iscsi boot都有些限制與門檻,不會跑的人學飛實在有點危險

題外話:我早上說的MD1000是被我歸在50-100萬的方案中,30萬要MD1000+伺服器太困難了,THX可能可以做到


15
應該會爆滿吧.我覺得,要不要借用大禮堂啊

16
有關於這部份
我建議大家先試試看這個
改出來的方便多了,但是全功能版的要錢,不便宜
http://www.nexenta.org/os/Download

17
我有個想法,大家是否可以在這個討論串中,先提出些自己的問題或是想法
EX:
1.我公司機器不到5台,我需要做這個嗎
2.block真的是主流,我想用NFS不行嗎,NFS有這麼不堪嗎

談安裝,VM-help上面連FLASH都有,買本書比較快,大家可能不用周六早起
談架構,搞不好有人公司就是豪華的9000刀鋒+EVA,媽的,我自己都沒試過,還分享經驗給大家
說要節省費用,結果我們最後弄了fibre san,就算主機便宜,光硬碟就買到破產

所以大家交流一下疑惑與想法,這樣比較容易對這個題目聚焦
不知道主辦單位對這個的想法如何

我想把問題提問拉到最前面,會不會比較好

18
很久沒用了

我記得是3ware還是raid 建議你試試看

19
其實我一直懷疑,THX一天有48小時,或是說其實他是代打,真是分身是他的公司裡的角落某位忍者
就像是不知道之前某部電影,主角是唱歌的替身,長的其貌不揚,台上那個是它的分身之類的

廢話少說,除了XEN SERVER之外,fast scp 3.0也出了,支援ESXi直接複製,大家快去下吧

20
完了,我有種站上火線的感覺,加班的時候看到這篇,實在是令人悶到極點 :'(
沒時間寫教材說

21
那大家就快點下載

想當初,open-e從開放2t變成開放1t
現在暫時停止註冊,通常剛開始會開的比較寬鬆
也代表其實沒有service console還是可以處理備份的問題
應該很快就會有廠商弄出東西來了

22
國外我不知道,台灣 會 ;D
台灣人總是喜歡買很多的機器,常常吝於在軟體或是其他架構上面可長可久的東西上面投資
看過太多單位那種無效配置的狀況,499歐元,連我這種個體戶,都覺得便宜到爆炸
但是,天知道,為什麼管理部門覺得沒有沒關係  ???

23
您還真是天才,想的出這種方法,看起來是可行的,問題其實就是最後一哩的狀況,這些備份下來的東西要放哪裡

另外有個沒有辦法驗證的疑慮,他的備分,對於有transaction類型的像是SQL與exchange來說,到底有沒有問題

我想DB還是要整個匯出吧,VM應該就是系統不用重新安裝的組態與設定,或是DC主控站等等掛了會有毀滅性打擊的東西

24
感謝您,最近實在是太忙了,我想5host應該可以虛擬出來20台機器
如果不夠,其實,分在幾台上面,就可以突破這個限制了,5台一個群組

也夠嗆了

25
苦主來了,昨天晚上整個測試到抓狂,BSD 6.2  tar  解開400MB的檔案
超過2小時,我等到不想等就回家了,回家之後想想,這樣多的系統有IO問題
應該和OS無關,應該是這種方式的RAID有某些問題(cost down ???)

光碟片COPY不到5MB/s tar更慘,我預估不到2MB/s

我昨天好奇測試了廠商送來剛好一樣晶片的機器,差不多的速度,所以應該和廠商無關
看來就是某些問題在LSI 1064E上面

26
大哥:
講話要稍微注意一下語氣哦,板上的人沒有欠你,聽起來好像是我們功課做的不夠勤勞一樣
如果照您說的推的服務不是隨便玩玩,軟體授權,備份方案,管理方式你考慮完了嗎,你的態度就是讓我覺得玩玩
就算你找了廠商幫你規劃,也只是被牽著鼻子走,文件和LAB大家辛苦做出來,怎麼搞的好像有問必答一樣
你有實際把XEN或是其他的服務裝起來嘗試管理看看並且比較差別嗎,你也沒講預算,型號,機器,以及你的環境架構
既然不是隨便玩玩,怎麼會連這個部分都需要我們來幫您驗證呢,有圖為證,我只跟你說3i有支援多CPU,4核心8CPU,這樣有回答到您的問題嗎
別買了機器問我裝起來怎麼沒有,我沒賣東西給你,我只跟您說,Thx回覆你的沒錯
怎麼做的,您就要多做功課了

這幾天整理資料,看到都快要爆炸了,您這回覆,害我想跟學園說,年底辦了,把我們壓箱寶都講完了,真是便宜了各位

27
正在準備群英會的教材,收集資料的時候,發現,這個應該可以用

http://www.trilead.com/Products/VM_Explorer/

如果誰有空的,可以幫忙完整測試一下是最好,初步試了一下,雖然是BATA版,但是可以在不停機的狀況下
把3i的檔案複製進來本機的windows,5台host機內免費,殺啊


28
其實你可以針對CPU直接查intel或是AMD的網站
vmware的策略還蠻明確的,儘量不支援1路的機器
1路的機器我測過有牌最低階的是IBM X3200M2
IBM X100也行啦,但是已經買不到了
當然,RAID卡是必備的,建議你不要用那個改檔案硬裝ICH南橋的方法
既然都是想品牌機器,想必對於穩定度有一定的要求
另外,RAID卡如果是HP smartarray的P400,千萬記得一定要買BBWC
詳情請看
http://bbs.vmware.cn/thread-16107-1-1.html
如果你搜尋VMTN也有很多人問到P400 I/O的問題,我就不貼了

P400很奇怪,沒BBWC的時候,我們公司的FREEBSD 6.2在上面對於小檔案讀寫不到5MB/s
和同樣晶片系出同門的PERC 5i差的太多(約只有20%)
所以看來不像是個案,像是在沒BBWC並且驅動無法最佳化的時候(vm只能用VMWARE提
供的,BSD只能用自帶的驅動),效能會跑不出來

29
您說的方法只有考慮的可不可以用的問題,還有速度的問題沒有解決,raid還是必須的
小弟小小的看法,速度與機器的安全問題我想是一樣重要的

30
看來open-e真的是最超值的東西,不過我的客戶沒人敢用就是了
open-e的4T DSS就要4萬多啊,其實想想,可以使用FC Target
其實算便宜到爆炸了

頁: [1] 2 3 4