檢索爬蟲框架:heyDr

jopen 11年前發布 | 20K 次閱讀 爬蟲 網絡爬蟲

檢索爬蟲框架:heyDr

heyDr是一款基于java的輕量級開源多線程垂直檢索爬蟲框架,遵循GNU GPL V3協議。

用戶可以通過heyDr構建自己的垂直資源爬蟲,用于搭建垂直搜索引擎前期的數據準備。

項目主頁:http://www.baiduhome.net/lib/view/home/1367732433074

 本文由用戶 jopen 自行上傳分享,僅供網友學習交流。所有權歸原作者,若您的權利被侵害,請聯系管理員。
 轉載本站原創文章,請注明出處,并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺,歡迎各類分享!