Arale,一個 Java Web 爬蟲

jopen 12年前發布 | 19K 次閱讀 爬蟲 網絡爬蟲

Arale能夠下載整個網站或來自網站的某一特定資源。Arale還能夠把動態頁面渲染成靜態頁面。

特性:

  • 下載并掃描用戶定義的文件類型。
  • 重命名動態資源。將查詢參數編碼進文件名
  • 設置并發連接數。
  • 最小和最大文件大小的選項。
  • 域的深度支持。

項目主頁:http://www.baiduhome.net/lib/view/home/1349861066400

 本文由用戶 jopen 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!