溫馨提示×
您好，登錄后才能下訂單哦！
點擊 登錄注冊 即表示同意《億速云用戶服務條款》
您好，登錄后才能下訂單哦！
這篇文章給大家分享的是有關如何用python中爬蟲框架scrapy的命令行的內容。小編覺得挺實用的，因此分享給大家做個參考。一起跟隨小編過來看看吧。
關于命令詳細使用
命令的使用范圍
這里的命令分為全局的命令和項目的命令，全局的命令表示可以在任何地方使用，而項目的命令只能在項目目錄下使用
全局的命令有：
startproject genspider settings runspider shell fetch view version
項目命令有：
crawl check list edit parse Bench
startproject
這個命令沒什么過多的用法，就是在創建爬蟲項目的時候用
genspider
用于生成爬蟲，這里scrapy提供給我們不同的幾種模板生成spider,默認用的是basic,我們可以通過命令查看所有的模板
crawl
這個是用去啟動spider爬蟲格式為：scrapy crawl 爬蟲名字
這里需要注意這里的爬蟲名字和通過scrapy genspider 生成爬蟲的名字是一致的
fetch
scrapy fetch url地址
該命令會通過scrapy downloader 講網頁的源代碼下載下來并顯示出來
這里有一些參數：
--nolog 不打印日志
--headers 打印響應頭信息
--no-redirect 不做跳轉
感謝各位的閱讀！關于如何用python中爬蟲框架scrapy的命令行就分享到這里了，希望以上內容可以對大家有一定的幫助，讓大家可以學到更多知識。如果覺得文章不錯，可以把它分享出去讓更多的人看到吧！
免責聲明：本站發布的內容（圖片、視頻和文字）以原創、轉載和分享為主，文章觀點不代表本網站立場，如果涉及侵權請聯系站長郵箱：is@yisu.com進行舉報，并提供相關證據，一經查實，將立刻刪除涉嫌侵權內容。
