中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

python爬蟲之request怎么定義headers

發布時間:2020-11-24 09:18:44 來源:億速云 閱讀:610 作者:小新 欄目:編程語言

了解python爬蟲之request怎么定義headers?這個問題可能是我們日常學習或工作經常見到的。希望通過這個問題能讓你收獲頗深。下面是小編給大家帶來的參考內容,讓我們一起來看看吧!

對于寫爬蟲來講,模擬瀏覽器是發請求的時候做的最多的事情了,最常見的模擬瀏覽器無非就是偽裝headers:

In [23]: url = 'http://xlzd.me'
 
In [24]: headers = {'User-Agent': 'my custom user agent', 'Cookie': 'haha'}
 
In [25]: requests.get(url, headers=headers)

 

拓展:

怎樣取出HTTP response里面的內容呢?

In [7]: r = requests.get('http://xlzd.me')
 
In [8]: r.encoding
Out[8]: 'UTF-8'
 
In [9]: r.headers
Out[9]: {'Content-Encoding': 'gzip', 'Transfer-Encoding': 'chunked', 'Vary': 'Accept-Encoding', 'Server': 'nginx', 'Connection': 'keep-alive', 'Date': 'Fri, 11 Dec 2015 06:42:31 GMT', 'Content-Type': 'text/html; charset=UTF-8', 'X-Pingback': 'http://xlzd.me/action/xmlrpc'}
 
In [10]: r.cookies
Out[10]: <RequestsCookieJar[]>
 
In [11]: r.text
Out[11]: u'<!DOCTYPE HTML>\n<html>\n\t<hea......

requests會自動對響應內容編碼,所以就可以通過r.text取出響應文本了。對于別等響應內容(文件、圖片、...),則可以通過r.content取出來。對于json內容,也可以通過r.json()來取。

感謝各位的閱讀!看完上述內容,你們對python爬蟲之request怎么定義headers大概了解了嗎?希望文章內容對大家有所幫助。如果想了解更多相關文章內容,歡迎關注億速云行業資訊頻道。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

德阳市| 南漳县| 麻城市| 木里| 阿鲁科尔沁旗| 五大连池市| 神农架林区| 辽源市| 永济市| 清丰县| 乌审旗| 子长县| 玉山县| 绥江县| 金坛市| 宁明县| 阿图什市| 三亚市| 扬州市| 宜州市| 九寨沟县| 久治县| 隆尧县| 黑龙江省| 邵阳市| 荣成市| 高密市| 商丘市| 锡林浩特市| 和林格尔县| 甘泉县| 进贤县| 无极县| 彭阳县| 宁阳县| 平山县| 北海市| 杭锦旗| 连平县| 石嘴山市| 建阳市|