WFCloud國產(chǎn)大數(shù)據(jù)平臺
- FCloud國產(chǎn)大數(shù)據(jù)平臺主要針對國家面向大型應(yīng)用的共性云計算基礎(chǔ)平臺研制,用于發(fā)展具有自主可控的云計算技術(shù),提高大數(shù)據(jù)挖掘與智能服務(wù)的能力。國產(chǎn)大數(shù)據(jù)平臺的研制符合國家信息安全政策導(dǎo)向,從CPU芯片、服務(wù)器設(shè)計和制造到固件、操作系統(tǒng)、共性支撐軟件、虛擬化技術(shù)、系統(tǒng)集群和大數(shù)據(jù)處理實(shí)現(xiàn)了完全國產(chǎn)自主可控。
WFCloud國產(chǎn)大數(shù)據(jù)平臺主要解決分布式存儲和內(nèi)存計算的底層實(shí)現(xiàn),具備海量數(shù)據(jù)存儲、檢索和分析處理能力,對業(yè)務(wù)應(yīng)用提供各類數(shù)據(jù)存儲、計算、展示以及挖掘接口,能夠?qū)崿F(xiàn)大數(shù)據(jù)處理業(yè)務(wù)支撐。圖1 國產(chǎn)大數(shù)據(jù)平臺
? 數(shù)據(jù)存儲
基于分布式文件系統(tǒng)存儲,支持海量結(jié)構(gòu)化、非結(jié)構(gòu)化數(shù)據(jù)存儲,支持多數(shù)據(jù)副本,數(shù)據(jù)存儲容量支持線性擴(kuò)展
? 數(shù)據(jù)管理
集成Nosql數(shù)據(jù)庫、數(shù)據(jù)倉庫及全文檢索引擎,支持TB級數(shù)據(jù)檢索秒級響應(yīng),支持關(guān)聯(lián)查詢、分析查詢等復(fù)雜數(shù)據(jù)查詢和分析
? 數(shù)據(jù)挖掘
支持典型數(shù)據(jù)挖掘算法集成,支持機(jī)器學(xué)習(xí)和圖算算法集成,能夠支撐專用數(shù)據(jù)挖掘算法和機(jī)器學(xué)習(xí)模型開發(fā)
? 分布式計算
支持分布式計算、內(nèi)存計算、流處理等分布式計算引擎,能夠?qū)崿F(xiàn)主流計算業(yè)務(wù)的分布式實(shí)現(xiàn),并在申威、龍芯、飛騰等國內(nèi)主要國產(chǎn)處理器做了大量適配和優(yōu)化,對計算支持和性能等方面著重進(jìn)行了優(yōu)化和提升。
? 資源管理
平臺采用主從雙機(jī)的HA形式,有效保障業(yè)務(wù)連續(xù)性,提供平臺計算、存儲、網(wǎng)絡(luò)資源管理工具,能實(shí)時監(jiān)控平臺資源使用