中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

python中獲取頁面的常用方法

發布時間:2020-07-18 10:31:35 來源:億速云 閱讀:224 作者:清晨 欄目:編程語言

這篇文章將為大家詳細講解有關python中獲取頁面的常用方法,小編覺得挺實用的,因此分享給大家做個參考,希望大家閱讀完這篇文章后可以有所收獲。

python獲取頁面的方法:1、使用urllib模塊獲取網頁內容;2、使用urllib2模塊獲取頁面內容;3、使用requests模塊獲取頁面內容;4、使用codecs模塊獲取頁面內容。

python中獲取頁面的常用方法

在學習python爬蟲的過程中,總會遇到要獲取網頁內容的時候,下面就對如何獲取網頁內容進行總結。

方法一:

>import urllib
>url="http://www.baidu.com" #這里是需要獲取的網頁
>content=urllib.open(url).read() #使用urllib模塊獲取網頁內容
>print content #輸出網頁的內容 功能相當于查看網頁源代碼

方法二:

>import urllib2
>from bs4 import BeautifulSoup #這里需要導入BeautifulSoup 
>url="http://www.baidu.com"
>content=urllib2.urlopen(url)
>soup=BeautifulSoup(content) #將網頁內容轉化為BeautifulSoup 格式的數據
>print soup

方法三:

>import requests
>content=requests.get(url).content
>print content

這里是使用的python的requests模塊獲取網頁的內容。

方法四:

>import codecs  #導入codecs模塊
>f=codecs.open(url,"r","utf-8")   #使用codecs函數以打開的方式打開url 設置默認的編碼方式為utf-8
>content=f.read()
>f.close()
>print content

關于python中獲取頁面的常用方法就分享到這里了,希望以上內容可以對大家有一定的幫助,可以學到更多知識。如果覺得文章不錯,可以把它分享出去讓更多的人看到。

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

平武县| 靖宇县| 阿尔山市| 天峻县| 南郑县| 嘉义市| 五常市| 靖宇县| 叶城县| 游戏| 灯塔市| 沁水县| 大同市| 台中市| 洱源县| 石门县| 洛宁县| 杭锦后旗| 若羌县| 曲松县| 内黄县| 台山市| 安国市| 泗洪县| 防城港市| 库尔勒市| 岳西县| 青冈县| 蒙城县| 亳州市| 多伦县| 沿河| 盐池县| 长武县| 成都市| 奎屯市| 湄潭县| 巴塘县| 金山区| 昆明市| 平邑县|