Jsoup爬虫小案例
生活随笔
收集整理的這篇文章主要介紹了
Jsoup爬虫小案例
小編覺得挺不錯的,現(xiàn)在分享給大家,幫大家做個(gè)參考.
Jsoup爬蟲小案例
Jsoup爬蟲是眾多爬蟲中的一種,今天分享一個(gè)爬取網(wǎng)頁中圖片的方式,若是通過javascript循環(huán)放入圖片的話,那就爬取不到了喲!
在代碼書寫之前,需要做好以下工作準(zhǔn)備:
這兩個(gè)包可以在網(wǎng)上直接下載。
接下來就是代碼的編寫:
index.jsp
ImgServlet.java
@WebServlet("/img") public class ImgServlet extends HttpServlet {@Overrideprotected void doGet(HttpServletRequest req, HttpServletResponse resp) throws ServletException, IOException {//1. 根據(jù)網(wǎng)址獲取網(wǎng)頁源碼Document doc = Jsoup.connect("爬取的網(wǎng)站名").get();//2. 找到所有圖片標(biāo)簽imgElements es = doc.select("img[src]");//3. 遍歷每一個(gè)圖片標(biāo)簽for (Element e : es) {String src = e.attr("src");//輸出獲取的圖片名稱System.out.println(src);getImg(src);}}private void getImg(String src) {System.out.println(1);try {//借助URL -- 將網(wǎng)頁上的圖片以字節(jié)流形式加載到程序中InputStream is = new URL("爬取的網(wǎng)站名" + src).openStream();//指定一個(gè)圖片保存路徑 -- 具體文件名FileOutputStream os = new FileOutputStream("爬取圖片后存放的路徑" + System.currentTimeMillis() + ".jpg");//io工具類,對接兩個(gè)流IOUtils.copy(is,os);} catch (IOException e) {e.printStackTrace();}} }這樣就可以爬取網(wǎng)頁中所有的jpg格式的圖片啦!
總結(jié)
以上是生活随笔為你收集整理的Jsoup爬虫小案例的全部內(nèi)容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: mysql日期格式化季度_mysql按年
- 下一篇: FPL 2017最佳论文:如何对FPGA