JoBo下載整個 Web 站點

JoBo 是一個用于下載整個 Web 站點的簡單工具。它本質(zhì)是一個 Web Spider。與其它下載工具相比較它的主要優(yōu)勢是能夠自動填充 form(如：自動登錄)和使用cookies來處理session。JoBo還有靈活的 下載規(guī)則(如：通過網(wǎng)頁的URL，大小，MIME類型等)來限制下載。

特性：

• 命令行和圖形版本（但是命令行版本需要 重大更新，當前的GUI版本具有更多功能）
• 從給定的起始文檔開始遞歸搜索所有文檔
• 支持<A> <AREA> <IMG> <FRAME>標記（具有容錯功能）
• 支持機器人排除協(xié)議
• 用戶控制的最大搜索深度
• 可以定義用戶代理名稱
• 支持引薦來源標頭
• 支持自動表單處理（JoBo可以使用預定義的值填充字段）
• Cookie支持
• XML配置
• 可以限制使用的帶寬
• 根據(jù)mime類型和文檔大小允許/拒絕下載（例如，忽略所有圖像/ *文件）
• 通過正則表達式允許/拒絕下載（例如，不要下載/ cgi-bin）
• 可以將絕對鏈接轉(zhuǎn)換為相對鏈接
• 僅下載比給定年齡更新的文件
• resume job