Crawlab Lite爬蟲管理平臺

Crawlab 的輕量版本，基于 Golang 的爬蟲管理平臺，支持任意語言編寫的爬蟲。

相比較 Crawlab，該版本專注于單機(jī)上的爬蟲管理，平臺運行不依賴任何的外部數(shù)據(jù)庫，去除了大量非必要功能。

快速開始

Docker Compose

1. 在任意目錄下創(chuàng)建 docker-compose.yml，內(nèi)容如下：

version: '3'
services:
  master:
    image: zkqiang/crawlab-lite:latest
    container_name: master
    ports:
      - "8080:8080"

2. 在目錄下運行命令：

docker-compose up -d

3. 訪問 http://localhost:8080

源代碼

1. 克隆倉庫

git clone https://github.com/crawlab-team/crawlab-lite
cd crawlab-lite

2. 運行后端

cd backend
go run main.go

3. 運行前端

cd ../frontend
npm i && npm run serve

4. 訪問 http://localhost:8080

截圖

爬蟲列表

任務(wù)列表

定時列表