Suro數(shù)據(jù)管道服務(wù)

Netflix 開源了一個(gè)叫做Suro的工具，它能夠在數(shù)據(jù)被發(fā)送到不同的數(shù)據(jù)平臺(tái)（如Hadoop、Elasticsearch）之前，收集不同應(yīng)用服務(wù)器上的事件數(shù)據(jù)，這項(xiàng)創(chuàng)新技術(shù)具備成為大數(shù)據(jù)主流實(shí)踐的潛力

Suro 是數(shù)據(jù)管道服務(wù)，用來(lái)收集，聚合和調(diào)度大數(shù)據(jù)應(yīng)用事件，包括日志記錄數(shù)據(jù)。

特性：

• 分布式，支持橫向擴(kuò)展

• 支持流媒體數(shù)據(jù)流，大量連接和高吞吐量

• 根據(jù)領(lǐng)過(guò)的調(diào)度規(guī)則允許動(dòng)態(tài)調(diào)度時(shí)間到不同的位置

• 包括一個(gè)簡(jiǎn)單而靈活的架構(gòu)，允許用戶添加額外的數(shù)據(jù)目的地

• 適用于 NetflixOSS 生態(tài)系統(tǒng)

• 是最優(yōu)的數(shù)據(jù)管道，支持靈活的重試和轉(zhuǎn)發(fā)，把數(shù)據(jù)丟失減到最小