Python怎么爬取好看的小視頻

這篇文章主要講解了“Python怎么爬取好看的小視頻”，文中的講解內容簡單清晰，易于學習與理解，下面請大家跟著小編的思路慢慢深入，一起來研究和學習“Python怎么爬取好看的小視頻”吧！

前言

本文的文字及圖片來源于網絡,僅供學習、交流使用,不具有任何商業用途,如有問題請及時聯系我們以作處理。

Python爬蟲、數據分析、網站開發等案例教程視頻免費在線觀看

https://space.bilibili.com/523606542

基本開發環境

• Python 3.6

• Pycharm

相關模塊的使用

import os
import requests

安裝Python并添加到環境變量，pip安裝需要的相關模塊即可。

一、確定需求

爬取搞笑趣味欄目的視頻內容。

二、網站數據分析

首先需要明確一點，好看視頻網站加載方式是懶加載的方式，需要你下滑網頁才會加載出新的內容

加載出來的內容里面有音頻播放地址以及標題。

內容比較簡單，看代碼就行

import os
import requests

url = 'https://haokan.baidu.com/videoui/api/videorec?tab=gaoxiao&act=pcFeed&pd=pc&num=20&shuaxin_id=1612592171486'
headers = {
    'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.138 Safari/537.36'
}
response = requests.get(url=url, headers=headers)
json_data = response.json()
videos = json_data['data']['response']['videos']
for index in videos:
    title = index['title']
    play_url = index['play_url']
    video_content = requests.get(url=play_url, headers=headers).content
    path = 'video\\'
    if not os.path.exists(path):
        os.mkdir(path)
    with open(path + title + '.mp4', mode='wb') as f:
        f.write(video_content)
        print('正在保存：', title)

感謝各位的閱讀，以上就是“Python怎么爬取好看的小視頻”的內容了，經過本文的學習后，相信大家對Python怎么爬取好看的小視頻這一問題有了更深刻的體會，具體使用情況還需要大家實踐驗證。這里是億速云，小編將為大家推送更多相關知識點的文章，歡迎關注！