FusionInsight 大(dà)數(shù)據分(fē≤∏n)析平台
來(lái)源:
|
作(zuò)者:admin
|
發布時(shí)間(jiān): 2021-08-13
|
5417 次浏覽
|
分(fēn)享到(dào):
華為(wèi)企業(yè)級大(dà)數(shù)據分(f ®→$ēn)析平台FusionInsight 包括FusionI™δ₩€nsight Hadoop和(hé)FusionInsight Streaming兩個(gè♦•∑)組件(jiàn)
華為(wèi)企業(yè)級大(dà)數(shù)據分(fēn)析平台FusionIn±♥✔sight 包括FusionInsight Hadoop和(<α←hé)FusionInsight Streaming兩個(gè)組件(jià✔₽≥§n)：
Fusion Ins★ ✘€ight Hadoop包含了(le)開(kāi)放(fàng)•λ→社區(qū)的(de)主要(yào)軟件( ≤jiàn)及其生(shēng)态圈中的(de)主流組件(jiàn)，并進行(xíng★★)了(le)大(dà)量優化(huà)，讓企業(yè)可(k✔♥ě)以從(cóng)各類繁雜(zá)無序的(de)海(hǎi)量數(sα×hù)據中洞察商機(jī)；
FusionInsight Streaming是(shì)&®≥↑FusionInsight企業(yè)級大(dà)數(shù)據分(fēn®←≤©)析平台中的(de)實時(shí)數(shù)據處理(lǐ)引擎，以事(♥£₹shì)件(jiàn)驅動(Event-drive®→n)模式處理(lǐ)實時(shí)數(shù)據的(↑±<★de)大(dà)數(shù)據技(jì)術(shù)，解決高(gāo)速事(shì)件(jià ↓γ$n)流的(de)實時(shí)計(jì)算(suàn)問(×™wèn)題。可(kě)以在金(jīn)融、通(tōng)信、交通(tōng)、公¶±π$共安全等領域發揮流式事(shì)件(jiàn)實時(shí)處理(lǐ)優勢，提供實時(γ>€βshí)分(fēn)析、實時(shí)決策能(né≤€£αng)力。
特性
智慧：高(gāo)達百萬維度的(de)全量建模，深刻洞察用(yòng)戶行(xín♣$£✔g)為(wèi)與特征。
實時(shí)：對(duì)海(hǎi)量數(shù)據進行(xíng)在線實時(shσ αí)處理(lǐ)。
可(kě)信：第一(yī)家(jiā)支持RBAC用(yòng)戶組權限管理(lǐ)、消除HDFS明(&★↕♥míng)文(wén)存放(fàng)；第一(yī)家(jiā)支持超過1→≠000公裡(lǐ)以上(shàng)的(de)♠←∑異地(dì)容災。
易用(yòng)：原生(shēng)态的(de)大(dà)數(shù)據技(jì)術(shù÷≠)因其本身(shēn)的(de)複雜(zá)性，局限應用(yòng)♠£≤≥于自(zì)身(shēn)具備強大(dà)研發實力的(de)互聯網行(x☆" £íng)業(yè)，而華為(wèi)FusionInsight産品針對(duì)α¶∏₽傳統行(xíng)業(yè)客戶設計(jì)，全自(zì)動化(huà)在線δα運行(xíng)維護，自(zì)定義Dashboard，自(zì)動化(huà)的(de)二♥☆ 次開(kāi)發助手，大(dà)幅降低(dī)了(le)大(dà)數(s™>≈hù)據在傳統企業(yè)內(nèi)部的(de)♥"≥部署難度，幫助傳統企業(yè)輕松駕馭大(dà)數<↕(shù)據業(yè)務。
技(jì)術(shù)規格
分(fēn)類
| 指标項
| 規格
| 說(shuō)明(míng)
|
并行(xíng)計(jì)算(suàn)引擎（¶↑MapReduce）
性能(néng)指标
| WordCount：平均每節點處理(lǐ)能(néng)力(GB/分(fēn)鐘(zh ₹ōng))
| 6GB/分(fēn)鐘(zhōng)
| 10節點集群；
節點典型配置：
CPU:E2670 2*4
內(nèi)存：64G
硬盤：SAS盤
|
Terasort：平均每節點處理(lǐ)能(néng)力(GB/分(fēn)鐘(zhōng≥β©))
| 5GB/分(fēn)鐘(zhōng)
|
K-means：平均每節點處理(lǐ)能(néng÷&)力(MB/分(fēn)鐘(zhōng))
| 400MB/分(fēn)鐘(zhōng)
|
Bayesian：平均每節點處理(lǐ)能(néng)力(MB/分(fēn)鐘(zhōng)) €
| 12MB/分(fēn)鐘(zhōng)
|
Hive性能(néng)指标
| 處理(lǐ)能(néng)力-HiveAggregation：平均每節點處理(lǐ)能(néng™÷∞)力(GB/分(fēn)鐘(zhōng))
| 5GB/分(fēn)鐘(zhōng)
|
處理(lǐ)能(néng)力-HiveJoin：φ↔♠¥平均每節點處理(lǐ)能(néng)力(GB/分(fēn)鐘(zhō•δ•§ng))
| 2GB/分(fēn)鐘(zhōng)
|
HBase性能(néng)指标
| 100%随機(jī)讀(dú)：平均每節點讀(dú)取記錄條數(shεù)（每條記錄1KB），響應時(shí)間(jiān)小(xiǎo)于50÷ ₽MS
| 5000 Records/s
|
100%随機(jī)寫：平均每節點寫入記錄條數(shù)（每條記錄1KB），響應時(sλγ>♦hí)間(jiān)小(xiǎo)于50MS
| 40,000 Records/s
|
順序掃描：平均每節點scan記錄條數(shù)（每條記錄1KB），響應時(shí)間(jiā€±n)小(xiǎo)于50MS
| 60，000 Records/s
|
