gecco-spring - gecco爬蟲和spring結合使用

jopen 8年前發布 | 32K 次閱讀 網絡爬蟲

gecco-spring

gecco爬蟲和spring結合使用

Download

<dependency>
    <groupId>com.geccocrawler</groupId>
    <artifactId>gecco-spring</artifactId>
    <version>1.0.0</version>
</dependency>

QuickStart

//引入SpringPipelineFactory
@Resource(name="springPipelineFactory")
private PipelineFactory springPipelineFactory;


//啟動GeccoEngine時，設置springPipeLineFactory
GeccoEngine.create()
.pipelineFactory(springPipelineFactory)
.classpath("com.geccocrawler.gecco.demo")
//爬蟲userAgent設置
.userAgent("Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/45.0.2454.85 Safari/537.36")
//開始抓取的頁面地址
.start("DEMO
 
參考源代碼中測試用例src/test




項目地址： https://github.com/xtuhcy/gecco-spring
 本文由用戶 jopen 自行上傳分享，僅供網友學習交流。所有權歸原作者，若您的權利被侵害，請聯系管理員。
 轉載本站原創文章，請注明出處，并保留原始鏈接、圖片水印。
 本站是一個以用戶分享為主的開源技術平臺，歡迎各類分享！