Filecoin修改了SDR算法使得Precommit1階段封裝同一sector無(wú)法進(jìn)行并行計(jì)算,同時(shí)時(shí)間上的消耗較大,使得INTEL的CPU在進(jìn)行扇區(qū)封裝時(shí)無(wú)法產(chǎn)生高
效的結(jié)果(耗時(shí)可能超過(guò)限制),因此集群搭建過(guò)程中只能使用AMD的CPU。經(jīng)過(guò)反復(fù)測(cè)試,目前投入產(chǎn)出比最高的集群方案如下:
集群模式:異構(gòu)集群
集群角色:調(diào)度主機(jī)1臺(tái),計(jì)算主機(jī)3臺(tái),存儲(chǔ)主機(jī)2臺(tái)
角色區(qū)分:調(diào)度主機(jī)用于運(yùn)行Storage Miner Worker進(jìn)程,并將扇區(qū)封裝的任務(wù)發(fā)配給計(jì)算主機(jī)。同時(shí)監(jiān)控計(jì)算與存儲(chǔ)主機(jī)系統(tǒng)資源占用,通過(guò)shell算法優(yōu)化任務(wù)分配流程于workflow工作流。計(jì)算主機(jī)運(yùn)行seal worker進(jìn)程,進(jìn)行P!,P2,C1,C2的算法運(yùn)行,其中消耗系統(tǒng)資源最大的為P1階段。存儲(chǔ)主機(jī)是將封裝好的扇區(qū)進(jìn)行長(zhǎng)期保存,與調(diào)度主機(jī)進(jìn)行交互,運(yùn)行POST和winPOST,確保算力穩(wěn)定與出塊。
硬件選型:
CPU:選型目標(biāo)為低核心高主頻(核心數(shù)過(guò)多造成性能過(guò)剩,因?yàn)閮?nèi)存容量有天花板),目前性價(jià)比最好的CPU為7F32與3960X。但目前嚴(yán)重缺貨,替代方案為7452。盡量雙路,單路也可以。(雙路主板很難買到)
GPU:采用2080TI即可,調(diào)度主機(jī)與計(jì)算主機(jī)都需具備。更優(yōu)的方案為Tesla P100,但由于是被動(dòng)散熱,一般的2U服務(wù)器很難壓住,容易造成宕機(jī),能壓的住的準(zhǔn)系統(tǒng)成本幾乎上天,考慮到性價(jià)比因此不考慮。
內(nèi)存:32插槽的話需要32條 64G DDR4 RECC內(nèi)存條(之所以需要那么多是因?yàn)?/font>P1階段1個(gè)seal線程要128G內(nèi)存空間,2T內(nèi)存也還是有點(diǎn)少),16槽的話就得上128G DDR4 RECC。
固態(tài)硬盤:最好采用NVMI接口的U.2硬盤,實(shí)在不行M.2也可以,除了操作系統(tǒng)之外需要做SWAP分區(qū)(內(nèi)存空間要求太JB大了)。
數(shù)據(jù)盤:8T SATA企業(yè)盤就可以了(這個(gè)好便宜的,隨便買,前期一臺(tái)機(jī)上4個(gè)就可以)
電源:1200W至少,買好的,不要買垃圾貨
網(wǎng)卡:調(diào)度和計(jì)算主機(jī)必須萬(wàn)兆,存儲(chǔ)機(jī)可以千兆
陣列卡:支持Raid5最好,不過(guò)不一定用得到。
硬件參考配置:
由于目前硬件嚴(yán)重缺貨且價(jià)格不穩(wěn)定,給出的硬件配置為理想價(jià)格,如面臨市場(chǎng)缺貨可替換為其他配置,但成本有可能會(huì)提高(加價(jià)購(gòu)買,貨購(gòu)買更高端有貨的型號(hào))
調(diào)度主機(jī)配置:
類別
|
型號(hào) |
配件數(shù)量 |
參考單價(jià) |
準(zhǔn)系統(tǒng) |
樸賽TG08 + 微星TRX40PRO WIFI |
1 |
5000 |
CPU
|
AMD 3960X 24核48線程主頻3.8G |
1 |
12000 |
內(nèi)存
|
海盜船 64G DDR4 |
8 |
3000 |
SSD
|
WD SN750 2TB M.2 |
1 |
3200 |
HDD
|
希捷 8TB企業(yè)級(jí) 7200轉(zhuǎn) |
2 |
1600 |
顯卡
|
技嘉 RTX2080TI TURBO GV-N208TTURBO OC-11GC |
1 |
9000 |
調(diào)度主機(jī)總價(jià):56400
計(jì)算主機(jī)配置:
類別
|
型號(hào) |
配件數(shù)量 |
參考單價(jià) |
準(zhǔn)系統(tǒng)
|
技嘉R282-Z90(2U雙路EPYC/32內(nèi)存插槽/12盤位/雙千兆/M.2/1200W雙電) |
1 |
21000 |
CPU
|
AMD 7452 32核64線程主頻2.35G |
2 |
12500 |
內(nèi)存
|
三星 64G DDR4 RECC |
32 |
3000 |
SSD
|
WD SN750 2TB M.2 |
1 |
3200 |
HDD
|
希捷 8TB企業(yè)級(jí) 7200轉(zhuǎn) |
4 |
1600 |
網(wǎng)卡
|
Intel X520-SR1 單口萬(wàn)兆網(wǎng)卡帶模塊(高仿) |
1 |
800 |
顯卡
|
技嘉 RTX2080TI TURBO GV-N208TTURBO OC-11GC |
1 |
9000 |
計(jì)算主機(jī)單臺(tái)總價(jià):161400元
計(jì)算主機(jī)總價(jià):484200元
存儲(chǔ)主機(jī)配置:
類別
|
型號(hào) |
配件數(shù)量 |
參考單價(jià) |
準(zhǔn)系統(tǒng) |
DELL R730XD |
1 |
11000 |
CPU
|
INTEL E5-2680 V4 |
2 |
1500 |
內(nèi)存
|
三星 32G DDR4 RECC |
8 |
1000 |
SSD
|
WD SN750 2TB M.2 |
1 |
3200 |
HDD
|
希捷 8TB企業(yè)級(jí) 7200轉(zhuǎn) |
12 |
1600 |
存儲(chǔ)主機(jī)單臺(tái)總價(jià):44400
存儲(chǔ)主機(jī)總價(jià):88800
集群總價(jià):628600
集群算力預(yù)估與收益預(yù)估:
Seal-worker共6顆7452 CPU,3張2080TI顯卡,6T內(nèi)存.按照測(cè)試參數(shù)可得:
保守可并行12個(gè)sector進(jìn)程(實(shí)際理想可達(dá)到48進(jìn)程運(yùn)行),封裝時(shí)間為8小時(shí),一個(gè)sector大小為32G,則一天可封裝1152GB有效存儲(chǔ)數(shù)據(jù)。按照目前測(cè)試網(wǎng)每天新增約900TB有效存儲(chǔ)空間。假設(shè)諸王上線后全球設(shè)備總投入為當(dāng)前測(cè)試網(wǎng)的5倍(目前大面積缺貨,實(shí)際可能只有1.5-2倍),由于諸王上線后產(chǎn)幣量為43萬(wàn)枚/天,則該集群最保守單日產(chǎn)幣量為120枚,按照幣價(jià)保守預(yù)估為200元/枚。則每日獲得收益為24000元?;乇局芷谧畋J毓烙?jì)為25天。
提示:目前缺貨情況,按照硬件廠商的話說(shuō),十年未見(jiàn)。抓緊買機(jī)器,抓緊買機(jī)器,抓緊買機(jī)器。