Apache CarbonData華為大數(shù)據(jù)存儲方案

Apache? CarbonData?是由華為開源貢獻的大數(shù)據(jù)高效存儲格式解決方案。針對當前大數(shù)據(jù)領(lǐng)域分析場景需求各異而導(dǎo)致的存儲冗余問題，CarbonData提供了一種新的融合數(shù)據(jù)存儲方案，以一份數(shù)據(jù)同時支持“交互式分析、詳單查詢、任意維度組合的過濾查詢等”多種大數(shù)據(jù)應(yīng)用場景，并通過豐富的索引技術(shù)、字典編碼、列存等特性提升了IO掃描和計算性能，實現(xiàn)百億數(shù)據(jù)級秒級響應(yīng)，與大數(shù)據(jù)生態(tài)Apache Hadoop、Apache Spark等無縫集成。

特點：

• 列式存儲

• 豐富的索引支持

• 全局字典編碼

• 自適應(yīng)類型轉(zhuǎn)換

• 標準SQL和API

• 數(shù)據(jù)生態(tài)集成

• 開源開放