python如何爬取圖片

這篇文章主要介紹了python如何爬取圖片，具有一定借鑒價值，需要的朋友可以參考下。希望大家閱讀完這篇文章后大有收獲。下面讓小編帶著大家一起了解一下。

打開網址 查看網頁結構

用火狐瀏覽器打開鏈接 F12查看

由于我使用的pyquery

可以看到圖片的鏈接 都在img標簽的src屬性中 我們只要通過pyquery鎖定到這個img標簽 就可以繼續下一步了

我們先來嘗試抓取一頁的壁紙試試看

下面是具體的代碼:

#!/usr/bin/env python 
# -*- coding: utf-8 -*-
# @Time    : 2018/10/31 17:54
# 爬取圖片

import requests
from pyquery import PyQuery as pq
import time

headers = {
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_4) AppleWebKit/537.36 '
                  '(KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36'
}
# 這里我使用了代理  你可以去掉這個代理IP 我是為了后面大規模爬取做準備的
proxies = {
    'https': '218.75.69.50:39590'
}


# 請求網頁 獲取源碼
def start_request(url):
    r = requests.get(url, headers=headers, proxies=proxies)
    # 這個網站頁面使用的是GBK編碼 這里進行編碼轉換
    r.encoding = 'GBK'
    html = r.text
    return html


# 解析網頁 獲取圖片
def parse(text):
    doc = pq(text)
    # 鎖定頁面中的img標簽
    images = doc('div.list ul li img').items()
    x = 0
    for image in images:
        # 獲取每一張圖片的鏈接
        img_url = image.attr('src')
        # 獲得每張圖片的二進制內容
        img = requests.get(img_url, headers=headers, proxies=proxies).content
        # 定義要存儲圖片的路勁
        path = "F:\\image\\" + str(x) + ".jpg"
        # 將圖片寫入指定的目錄 寫入文件用"wb"
        with open(path, 'wb') as f:
            f.write(img)
            time.sleep(1)
            print("正在下載第{}張圖片".format(x))
            x += 1
    print("寫入完成")


def main():
    url = "http://www.netbian.com"
    text = start_request(url)
    parse(text)


if __name__ == "__main__":
    main(）

感謝你能夠認真閱讀完這篇文章，希望小編分享python如何爬取圖片內容對大家有幫助，同時也希望大家多多支持億速云，關注億速云行業資訊頻道，遇到問題就找億速云，詳細的解決方法等著你來學習!