日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程资源 > 编程问答 >内容正文

编程问答

利用爬虫大量抓取网页图片

發布時間:2023/12/10 编程问答 38 豆豆
生活随笔 收集整理的這篇文章主要介紹了 利用爬虫大量抓取网页图片 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.

#第一次學習爬蟲后,自己編碼抓取圖片

##下面介紹一下主要過程

  • 先打開某一你想要抓取圖片的網頁,我這里以‘https://www.quanjing.com/creative/topic/29’ 為例|
  • url = 'https://www.quanjing.com/creative/topic/29'

    2.然后讀取網頁的源代碼,我們在源代碼里面可以找到我們要爬取的圖片所對應的鏈接|
    這里可能會有人文,網頁源代碼在哪?
    答:右鍵就可以找到網頁源代碼啦,或者直接F12

    html = urllib.request.urlopen(url).read().decode('utf-8')

    運行以后,我們可以看到成功抓取了鏈接,并且都是以列表的形式抓下來的:

    3.下面要用到urllib.request.urlretrieve(url,‘目標地址’)
    我們要從相應的鏈接下載圖片,必須先把上面得到的字符串形式轉換成不帶“”的鏈接

    html1 = i.replace('"','')``4.批量下載到本地```pythonfor i in page_list:html1 = i.replace('"','')print(html1)global xurllib.request.urlretrieve(html1, 'image\%s.jpg' % x)x+=1

    這里保存到py文件對應的目錄image文件下

    5.下面分享我的完整代碼

    import urllib.request import re import xlwt#創建excel表格庫 from urllib.request import urlretrievex= 0 def getdate():url = 'https://www.quanjing.com/creative/topic/29'html = urllib.request.urlopen(url).read().decode('utf-8')page_list = re.findall('<img src=(.*?) /',html)print(page_list)for i in page_list:html1 = i.replace('"','')print(html1)global xurllib.request.urlretrieve(html1, 'image\%s.jpg' % x)x+=1getdate()

    總結

    以上是生活随笔為你收集整理的利用爬虫大量抓取网页图片的全部內容,希望文章能夠幫你解決所遇到的問題。

    如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。