目前市面上流行的爬蟲以python居多,簡單了解之后,覺得簡單的一些頁面的爬蟲,主要就是去解析目標頁面(html)。那么就在想,java有沒有用戶方便解析html頁面呢?找到了一個jsoup包,一個非常方便解析html的工具呢。
使用方式也非常簡單,引入jar包:
1
2
3
4
5
|
< dependency > < groupId >org.jsoup</ groupId > < artifactId >jsoup</ artifactId > < version >1.8.3</ version > </ dependency > |
使用http工具,請求獲取目標頁面的整個html頁面信息,然后使用jsoup解析:
1
2
3
4
5
|
//獲取html頁面信息 String html = getHtml(); //使用jsoup將html解析為Document對象 Document doc = Jsoup.parse(html); //后續操作就可以解析這個DOM樹了,非常簡單。 |
總結
以上就是本文關于java實現一個簡單的網絡爬蟲代碼示例的全部內容,希望對大家有所幫助。如有不足之處,歡迎留言指出。感謝朋友們對本站的支持!
原文鏈接:http://blog.csdn.net/lzy_lizhiyang/article/details/62037656