MapReduce服務(wù)是基于華為歷經(jīng)行業(yè)數(shù)萬節(jié)點(diǎn)成功使用經(jīng)驗(yàn),在云上打造的企業(yè)級Hadoop大數(shù)據(jù)平臺服務(wù),一鍵部署,靈活彈性伸縮。
包含了Hadoop、Spark、HBase、Kafka、Storm、
Hive等豐富內(nèi)核組件,幫助用戶在云上輕松完成高可靠、高安全、低成本、一站式大數(shù)據(jù)平臺的搭建。
使用MapReduce服務(wù)的一些大數(shù)據(jù)處理,比如說會對大量數(shù)據(jù)進(jìn)行排序,屬于高計算密集型業(yè)務(wù),對于計算性能及穩(wěn)定性要求較高,各個節(jié)點(diǎn)的計算能力要保持均衡;在計算節(jié)點(diǎn)之間依賴于網(wǎng)絡(luò)進(jìn)行集群數(shù)據(jù)同步,對于網(wǎng)絡(luò)帶寬存在較高訴求;計算節(jié)點(diǎn)在本地存在大量的數(shù)據(jù)讀寫,對于存儲帶寬有很高訴求;針對這些特點(diǎn),MapReduce服務(wù)與華為云計算優(yōu)勢結(jié)合,推出了支持通用計算增強(qiáng)型(C3型)彈性云服務(wù)器規(guī)格的大數(shù)據(jù)集群。
通用計算增強(qiáng)型(C3型)彈性云服務(wù)器是公有云新推出的一系列性能更高、計算能力更穩(wěn)定的彈性云服務(wù)器規(guī)格,搭載Intel Xeon SkyLake全新一代CPU,配套高性能網(wǎng)絡(luò),綜合性能及穩(wěn)定性全面提升,滿足對業(yè)務(wù)穩(wěn)定性及計算性能要求較高的企業(yè)級應(yīng)用訴求。通用計算增強(qiáng)型(C3型)性能較上一代C2云服務(wù)器大幅提升。
• 單核整形25%↑*
• 單核Linpack70%↑*
• 內(nèi)存帶寬62%↑*
• 計算性能優(yōu)于業(yè)界15%以上
• 全面配套25G網(wǎng)絡(luò)
與通用計算型相比,通用計算增強(qiáng)型彈性云服務(wù)器提供了更大規(guī)格的CPU和內(nèi)存組合,可選范圍更廣,同時搭載全新網(wǎng)絡(luò)加速引擎,可為用戶提供更高的網(wǎng)絡(luò)性能。它可以支持最高帶寬18G,支持PPS(Package Per Second)可高達(dá)500萬。配套華為自研25GE智能高速網(wǎng)卡,提供超高網(wǎng)絡(luò)帶寬和PPS收發(fā)包能力。
MRS搭配C3規(guī)格虛擬機(jī),大幅提升了集群的計算能力。
• C3相比C2在流式集群上性能有4倍的提升。
• 華為云MRS與國內(nèi)其他公有云大數(shù)據(jù)服務(wù)的同等規(guī)格虛擬機(jī)對比,針對典型的大數(shù)據(jù)處理測試用例(WordCount, Terasort, Kmeans等),MRS集群的數(shù)據(jù)處理速度總體提升超過30%。具體測試結(jié)果如下:
MRS服務(wù)的收費(fèi)模式對C3和其他云服務(wù)器規(guī)格沒有區(qū)別。使用4U8G的C3創(chuàng)建一個Master節(jié)點(diǎn)和一個core節(jié)點(diǎn)的最小集群用來做Hadoop系統(tǒng)的學(xué)習(xí)或者測試,每小時只需要2.25元,包年購買還另有八三折的優(yōu)惠。