中文字幕av专区_日韩电影在线播放_精品国产精品久久一区免费式_av在线免费观看网站

溫馨提示×

溫馨提示×

您好,登錄后才能下訂單哦!

密碼登錄×
登錄注冊×
其他方式登錄
點擊 登錄注冊 即表示同意《億速云用戶服務條款》

python數據爬下來保存在什么地方

發布時間:2020-09-23 17:31:07 來源:億速云 閱讀:199 作者:Leah 欄目:編程語言

python數據爬下來保存在什么地方?相信很多沒有經驗的人對此束手無策,為此本文總結了問題出現的原因和解決方法,通過這篇文章希望你能解決這個問題。

python數據爬下來保存在本地,一般是文件或數據庫中,但是文件形式相比要更加簡單,如果只是自己寫爬蟲玩,可以用文件形式來保存數據。

#coding=utf-8
import urllib.request
import re
import os
  
'''
Urllib 模塊提供了讀取web頁面數據的接口,我們可以像讀取本地文件一樣讀取www和ftp上的數據
urlopen 方法用來打開一個url
read方法 用于讀取Url上的數據
'''
  
def getHtml(url):
    page = urllib.request.urlopen(url);
    html = page.read();
    return html;
  
def getImg(html):
    imglist = re.findall('img src="(http.*?)"',html
    return imglist
  
html = getHtml("https://www.zhihu.com/question/34378366").decode("utf-8");
imagesUrl = getImg(html);
  
if os.path.exists("D:/imags") == False:
    os.mkdir("D:/imags");
     
count = 0;
for url in imagesUrl:
    print(url)
    if(url.find('.') != -1):
        name = url[url.find('.',len(url) - 5):];
        bytes = urllib.request.urlopen(url);
        f = open("D:/imags/"+str(count)+name, 'wb');
        f.write(bytes.read());
        f.flush();
        f.close();
        count+=1

經測試,基本功能還是可以實現的。花的較多的時間就是正則匹配哪里,因為自己對正則表達式也不是非常熟悉。所以還是花了點時間。

看完上述內容,你們掌握python數據爬下來保存在什么地方的方法了嗎?如果還想學到更多技能或想了解更多相關內容,歡迎關注億速云行業資訊頻道,感謝各位的閱讀!

向AI問一下細節

免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。

AI

鹿泉市| 长阳| 平原县| 青州市| 姜堰市| 河津市| 民乐县| 共和县| 信阳市| 尼勒克县| 简阳市| 比如县| 龙江县| 安国市| 鄂托克前旗| 襄城县| 景东| 唐海县| 吕梁市| 剑川县| 晴隆县| 景东| 恩施市| 贵德县| 临邑县| 波密县| 铜川市| 班玛县| 巴林左旗| 吴桥县| 通化市| 韶关市| 民县| 永平县| 漳平市| 延边| 保康县| 井陉县| 北票市| 南投县| 海宁市|