MapReduce服務是基于華為歷經行業數萬節點成功使用經驗,在云上打造的企業級Hadoop大數據平臺服務,一鍵部署,靈活彈性伸縮。
包含了Hadoop、Spark、HBase、Kafka、Storm、
Hive等豐富內核組件,幫助用戶在云上輕松完成高可靠、高安全、低成本、一站式大數據平臺的搭建。
使用MapReduce服務的一些大數據處理,比如說會對大量數據進行排序,屬于高計算密集型業務,對于計算性能及穩定性要求較高,各個節點的計算能力要保持均衡;在計算節點之間依賴于網絡進行集群數據同步,對于網絡帶寬存在較高訴求;計算節點在本地存在大量的數據讀寫,對于存儲帶寬有很高訴求;針對這些特點,MapReduce服務與華為云計算優勢結合,推出了支持通用計算增強型(C3型)彈性云服務器規格的大數據集群。
通用計算增強型(C3型)彈性云服務器是公有云新推出的一系列性能更高、計算能力更穩定的彈性云服務器規格,搭載Intel Xeon SkyLake全新一代CPU,配套高性能網絡,綜合性能及穩定性全面提升,滿足對業務穩定性及計算性能要求較高的企業級應用訴求。通用計算增強型(C3型)性能較上一代C2云服務器大幅提升。
• 單核整形25%↑*
• 單核Linpack70%↑*
• 內存帶寬62%↑*
• 計算性能優于業界15%以上
• 全面配套25G網絡
與通用計算型相比,通用計算增強型彈性云服務器提供了更大規格的CPU和內存組合,可選范圍更廣,同時搭載全新網絡加速引擎,可為用戶提供更高的網絡性能。它可以支持最高帶寬18G,支持PPS(Package Per Second)可高達500萬。配套華為自研25GE智能高速網卡,提供超高網絡帶寬和PPS收發包能力。
MRS搭配C3規格虛擬機,大幅提升了集群的計算能力。
• C3相比C2在流式集群上性能有4倍的提升。
• 華為云MRS與國內其他公有云大數據服務的同等規格虛擬機對比,針對典型的大數據處理測試用例(WordCount, Terasort, Kmeans等),MRS集群的數據處理速度總體提升超過30%。具體測試結果如下:
MRS服務的收費模式對C3和其他云服務器規格沒有區別。使用4U8G的C3創建一個Master節點和一個core節點的最小集群用來做Hadoop系統的學習或者測試,每小時只需要2.25元,包年購買還另有八三折的優惠。