DribbbleCrawlerPython爬蟲工具

DribbbleCrawler 是一款小而美的爬蟲工具。

Windows平臺應(yīng)用程序

點擊獲取

使用

    PATH:存儲圖片的地址

    PAGE_NUMBER:抓取圖片的網(wǎng)頁頁數(shù)

    POOL_NUMBER:下載圖片時候使用的線程池個數(shù)，建議不要過大，防止IP封殺。

廢話

    本蟲，第一步使用多線程防止堵塞主UI。第二步使用map多線程隊列下載，就算是國外的網(wǎng)站圖片也還是抓取的很快。

后面會拓展出其他功能。

繼續(xù)說廢話

一般來說的話，寫爬蟲的話，少有連界面一起寫出來的，但python的依賴安裝并不十分友好，所以打包成exe文件也是為了更多的方便使用。