DolphinScheduler-分布式作業(yè)管理平臺(tái)程序源代碼關(guān)注2020-09-22 17:03 Apache DolphinScheduler分布式作業(yè)管理平臺(tái):讓作業(yè)提交變得更簡(jiǎn)單 瀏覽 67點(diǎn)贊 評(píng)論 收藏 分享 手機(jī)掃一掃分享分享 舉報(bào) 評(píng)論圖片表情視頻評(píng)價(jià)全部評(píng)論推薦 go-Asgard分布式作業(yè)管理系統(tǒng)Asgard是設(shè)計(jì)用于綜合解決常駐進(jìn)程應(yīng)用、計(jì)劃任務(wù)、定時(shí)任務(wù)的分布式作業(yè)管理系統(tǒng)。架構(gòu)設(shè)計(jì)Asgard系統(tǒng)由web節(jié)點(diǎn)、master節(jié)點(diǎn)、agent節(jié)點(diǎn)組成。web節(jié)點(diǎn)主要功能包括實(shí)例管理、分組管理go-Asgard分布式作業(yè)管理系統(tǒng)Asgard 是設(shè)計(jì)用于綜合解決常駐進(jìn)程應(yīng)用、計(jì)劃任務(wù)、定時(shí)任務(wù)的分布式作業(yè)管理系統(tǒng)。架構(gòu)設(shè)計(jì)AsgSaturn-vipshop分布式作業(yè)調(diào)度服務(wù)平臺(tái)Saturn是一個(gè)用于提供分布式、容錯(cuò)和高可用性作業(yè)調(diào)度服務(wù)的平臺(tái)。特性:基于時(shí)間和語(yǔ)言不受限制的工作輕松實(shí)現(xiàn)工作和基于Web的管理并行子任務(wù)(分片)調(diào)度支持1秒級(jí)別的調(diào)度基于智能負(fù)載的作業(yè)分配故障檢Saturn-vipshop分布式作業(yè)調(diào)度服務(wù)平臺(tái)Saturn 是一個(gè)用于提供分布式、容錯(cuò)和高可用性作業(yè)調(diào)度服務(wù)的平臺(tái)。特性:基于時(shí)間和語(yǔ)言不受限制的xxl-cache分布式緩存管理平臺(tái)《分布式緩存管理平臺(tái)XXL-CACHE》一、簡(jiǎn)介1.1概述XXL-CACHE是一個(gè)分布式緩存管理平臺(tái),其核心設(shè)計(jì)目標(biāo)是“讓分布式緩存的接入和管理的更加的簡(jiǎn)潔和高效”?,F(xiàn)已開(kāi)放源代碼,開(kāi)箱即用。XXL-Crawlab分布式爬蟲(chóng)管理平臺(tái)Crawlab 是一個(gè)使用?Golang 開(kāi)發(fā)的分布式爬蟲(chóng)管理平臺(tái),支持Python、NodeJS、xxl-cache分布式緩存管理平臺(tái)《分布式緩存管理平臺(tái)XXL-CACHE》一、簡(jiǎn)介1.1 概述XXL-CACHE是一個(gè)分布式緩存管理平Crawlab分布式爬蟲(chóng)管理平臺(tái)Crawlab是一個(gè)使用?Golang開(kāi)發(fā)的分布式爬蟲(chóng)管理平臺(tái),支持Python、NodeJS、Go、Java、PHP等多種編程語(yǔ)言以及多種爬蟲(chóng)框架。安裝三種方式:Docker(推薦)直接部署(了解內(nèi)MartinetNode.js 分布式作業(yè)隊(duì)列Martinet 是分布式任務(wù)管理工具。Martinet 數(shù)據(jù)庫(kù)后端,基于 zeroMQ 的分布式任MartinetNode.js 分布式作業(yè)隊(duì)列Martinet是分布式任務(wù)管理工具。Martinet數(shù)據(jù)庫(kù)后端,基于zeroMQ的分布式任務(wù)管理系統(tǒng)。Martinet可以使用任意的sequelize.js兼容的數(shù)據(jù)庫(kù)(默認(rèn)是SQLite)。Mar點(diǎn)贊 評(píng)論 收藏 分享 手機(jī)掃一掃分享分享 舉報(bào)