FusionInsight 大(dà)數據分(fēn)析平台
來源:
|
作者:prof6fe80
|
發布時間: 2015-08-17
|
6226 次浏覽
|
分(fēn)享到:
華爲企業級大(dà)數據分(fēn)析平台FusionInsight 包括FusionInsight Hadoop和FusionInsight Streaming兩個組件
華爲企業級大(dà)數據分(fēn)析平台FusionInsight 包括FusionInsight Hadoop和FusionInsight Streaming兩個組件：
-
Fusion Insight Hadoop包含了開(kāi)放(fàng)社區的主要軟件及其生(shēng)态圈中(zhōng)的主流組件，并進行了大(dà)量優化，讓企業可以從各類繁雜(zá)無序的海量數據中(zhōng)洞察商(shāng)機；
-
FusionInsight Streaming是FusionInsight企業級大(dà)數據分(fēn)析平台中(zhōng)的實時數據處理引擎，以事件驅動(Event-driven)模式處理實時數據的大(dà)數據技術，解決高速事件流的實時計算問題。可以在金融、通信、交通、公共安全等領域發揮流式事件實時處理優勢，提供實時分(fēn)析、實時決策能力。
特性
-
智慧：高達百萬維度的全量建模，深刻洞察用戶行爲與特征。
-
實時：對海量數據進行在線實時處理。
-
可信：第一(yī)家支持RBAC用戶組權限管理、消除HDFS明文存放(fàng)；第一(yī)家支持超過1000公裏以上的異地容災。
-
易用：原生(shēng)态的大(dà)數據技術因其本身的複雜(zá)性，局限應用于自身具備強大(dà)研發實力的互聯網行業，而華爲FusionInsight産品針對傳統行業客戶設計，全自動化在線運行維護，自定義Dashboard，自動化的二次開(kāi)發助手，大(dà)幅降低了大(dà)數據在傳統企業内部的部署難度，幫助傳統企業輕松駕馭大(dà)數據業務。
技術規格
|
分(fēn)類
|
指标項
|
規格
|
說明
|
|
并行計算引擎（MapReduce）
性能指标
|
WordCount：平均每節點處理能力(GB/分(fēn)鍾)
|
6GB/分(fēn)鍾
|
10節點集群；
節點典型配置：
CPU:E2670 2*4
内存：64G
硬盤：SAS盤
|
|
Terasort：平均每節點處理能力(GB/分(fēn)鍾)
|
5GB/分(fēn)鍾
|
|
K-means：平均每節點處理能力(MB/分(fēn)鍾)
|
400MB/分(fēn)鍾
|
|
Bayesian：平均每節點處理能力(MB/分(fēn)鍾)
|
12MB/分(fēn)鍾
|
|
Hive性能指标
|
處理能力-HiveAggregation：平均每節點處理能力(GB/分(fēn)鍾)
|
5GB/分(fēn)鍾
|
|
處理能力-HiveJoin：平均每節點處理能力(GB/分(fēn)鍾)
|
2GB/分(fēn)鍾
|
|
HBase性能指标
|
100%随機讀：平均每節點讀取記錄條數（每條記錄1KB），響應時間小(xiǎo)于50MS
|
5000 Records/s
|
|
100%随機寫：平均每節點寫入記錄條數（每條記錄1KB），響應時間小(xiǎo)于50MS
|
40,000 Records/s
|
|
順序掃描：平均每節點scan記錄條數（每條記錄1KB），響應時間小(xiǎo)于50MS
|
60，000 Records/s
|
