鑒于現(xiàn)如今的企業(yè)都在開(kāi)始積極的挖掘并分析大數(shù)據(jù),目前已然有了一些變化的征兆正在形成。
這一次,似乎是HPC(高性能計(jì)算)的硬件供應(yīng)商們?cè)谶M(jìn)行一些反思:到底哪些硬件設(shè)備能夠?yàn)榇髷?shù)據(jù)的有效載荷提供最佳的處理,以便能夠滿足對(duì)大數(shù)據(jù)盡快處理和分析的需求。
大數(shù)據(jù)的HPC遺產(chǎn)扎根于高校和科研院所,以其超大的碳排放量和運(yùn)作成本維持著超級(jí)計(jì)算。但是,一般的大型企業(yè)和中小企業(yè)并不適合運(yùn)營(yíng)這樣的空間。相反,這些企業(yè)希望獲得的是他們負(fù)擔(dān)得起的、且可擴(kuò)展的強(qiáng)大計(jì)算能力。這樣,大數(shù)據(jù)可以作為他們數(shù)據(jù)中心的預(yù)算。除非這些企業(yè)選擇采用云服務(wù)提供商的托管服務(wù),并讓云服務(wù)提供商來(lái)替他們運(yùn)行大數(shù)據(jù)的處理和分析工作,否則,他們也需要尋找真正的(而非虛擬化)HPC平臺(tái),因?yàn)楦咝阅苡?jì)算和大數(shù)據(jù)在虛擬化環(huán)境中的表現(xiàn)并非良好。
到目前為止,大型企業(yè)在其企業(yè)級(jí)數(shù)據(jù)中心所選擇的大數(shù)據(jù)處理平臺(tái)所采用的均為x86服務(wù)器。部分的原因是緣于這些服務(wù)器在大數(shù)據(jù)處理集群的易擴(kuò)展性,方便了企業(yè)擴(kuò)大他們的大數(shù)據(jù)處理能力。另一個(gè)原因是x86級(jí)服務(wù)器比較符合一般企業(yè)的經(jīng)濟(jì)承受能力。即使如此,這些服務(wù)器也必須進(jìn)行特殊的配置,以便滿足HPC的并行處理以及操作大數(shù)據(jù)分析。
在x86硬件架構(gòu)中,大數(shù)據(jù)可以并行處理,但每臺(tái)服務(wù)器只能有兩個(gè)線程。相比之下,在一個(gè)RISC(精簡(jiǎn)指令集計(jì)算機(jī))芯片環(huán)境,習(xí)慣上運(yùn)行Unix的計(jì)算機(jī),可以并行處理四個(gè)線程,每臺(tái)服務(wù)器提高了一倍。
大數(shù)據(jù)解決方案供應(yīng)商們是如何應(yīng)對(duì)這一現(xiàn)象的呢?
IBM在早在幾年前就推出了其基于RISC的電力系統(tǒng)。具備擴(kuò)展能力,能夠?yàn)榇髷?shù)據(jù)的HPC運(yùn)行Linux和Unix(AIX)集群。為了與之抗衡,甲骨文則在2013年第一季度末推出了其SPARCT5處理器。
而伴隨著這一系列新產(chǎn)品紛紛上市的一個(gè)有趣的背景是基于RISC的Unix計(jì)算機(jī)市場(chǎng)實(shí)際上一直在萎縮下降。故而業(yè)內(nèi)對(duì)于供應(yīng)商們?yōu)槭裁磿?huì)在這方面做出重大投資或多或少的存在著某些不理解。
而當(dāng)我們意識(shí)到未來(lái)的大數(shù)據(jù)處理可能會(huì)超越基于x86的計(jì)算平臺(tái)說(shuō)能夠提供的能力之后,上述疑惑的答案就變得簡(jiǎn)單了。今天的基于RISC的服務(wù)器也可以運(yùn)行Linux和Unix,這是非常有益的,因?yàn)槠髽I(yè)的IT部門(mén)往往有充足的Linux人才,但Unix人才卻不一定。
所以,當(dāng)您的企業(yè)需要繼續(xù)在數(shù)據(jù)中心部署大數(shù)據(jù)分析項(xiàng)目時(shí),您會(huì)怎么做呢?如下,是我們給您的一些建議,供您參考借鑒:
1、重新考慮你企業(yè)的資產(chǎn)規(guī)劃
許多企業(yè)的數(shù)據(jù)中心站點(diǎn)已經(jīng)在考慮實(shí)施在x86級(jí)服務(wù)器上部署大數(shù)據(jù)處理集群了。但是,現(xiàn)在就考慮采用基于RISC的系統(tǒng)還為時(shí)尚早,畢竟這些是未來(lái)才會(huì)用到的。朝著這方面考慮的話,不僅需要消耗大量的資金,同時(shí)還需要進(jìn)行IT基礎(chǔ)設(shè)施的整合,滿足適當(dāng)?shù)膶?shí)施條件,因?yàn)榇髷?shù)據(jù)處理需要“真正的”硬件。(除非你的企業(yè)將自己的大數(shù)據(jù)工作外包給云服務(wù)提供商)
2、評(píng)估IT部門(mén)員工技能
基于RISC的平臺(tái)能夠運(yùn)行Linux,但他們?nèi)匀淮砹艘粋(gè)不同的硬件架構(gòu),即使是最好的自動(dòng)化也無(wú)法完全呈現(xiàn)透明。所以,您的IT部門(mén)的員工們可能需要掌握新的IT系統(tǒng)和管理技能。
3、與您的供應(yīng)商積極的溝通
始終與你的大數(shù)據(jù)供應(yīng)商保持積極的對(duì)話。這不僅僅是要了解他們當(dāng)前所銷(xiāo)售的產(chǎn)品,同時(shí),更重要的是你必須還應(yīng)該清楚他們的技術(shù)路線圖,他們的產(chǎn)品的發(fā)展方向。如果他們的目標(biāo)是轉(zhuǎn)向RISC,而他們向您的企業(yè)出售的產(chǎn)品則是基于x86的,那么,是時(shí)候坐下來(lái)和他們好好談?wù)勔幌履P(guān)注的問(wèn)題了。畢竟,您的企業(yè)是他們的客戶。如果他們想要滿足您企業(yè)的需求,那么,為您企業(yè)提供遷移路徑、針對(duì)您的企業(yè)提供相關(guān)的培訓(xùn)和產(chǎn)品折扣也是他們的責(zé)任。(作者:litao984lt編譯)