日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程语言 > python >内容正文

python

python 爬虫1:发送请求

發布時間:2025/3/15 python 15 豆豆
生活随笔 收集整理的這篇文章主要介紹了 python 爬虫1:发送请求 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
import socket import urllib.request import urllib.parse import urllib.error# 一個測試用網址,后面是跟的是http請求方式post或get, 當為post時返回json數據,form內是發送過去數據 url = 'http://httpbin.org/post' headers = {# 偽裝使用瀏覽器,默認為Python-urllib'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.100 Safari/537.36 QIHU 360EE','host': 'httpbin.org' } # urllib.request.urlopen()函數的data參數必須是字節流形式,當攜帶了該參數,請求方式默認為post data = bytes(urllib.parse.urlencode({'word': 'hello'}), 'utf-8') try:req = urllib.request.Request(url=url, data=data, headers=headers, method='POST')response = urllib.request.urlopen(req) except urllib.error.URLError as e:if isinstance(e.reason, socket.timeout):print('timeout')else:print(e.reason)exit(100) else:print(type(response))if response.status == 200: # 當為200是表示請求等到正確響應print(response.getheaders()) # 得到響應頭print(type(response.getheaders()))print(response.getheader('Server'))print(response.read().decode('utf-8')) # 得到響應源碼

class urllib. request. Request ( url, data=None, headers={}, origin_req_host=None, unverifiable=False, method=None)
第三個參數 headers 是一個字典,它就是請求頭,我們可以在構造請求時通過 headers 參數直 接構造,也可以通過調用請求實例的 add_header()方法添加。
第四個參數 origin_req_host 指的是請求方的 host名稱或者 IP 地址。
第五個參數unveri干iable表示這個請求是否是無法驗證的,默認是 False,意思就是說用戶沒 有足夠權限來選擇接收這個請求的結果。 例如,我們請求一個 HTML 文檔中的圖片,但是我 們沒有向動抓取圖像的權限,這時 unverifiable 的值就是 True。

總結

以上是生活随笔為你收集整理的python 爬虫1:发送请求的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。