InfoSpider爬蟲(chóng)工具箱 v1.5

InfoSpider爬蟲(chóng)工具箱由國(guó)內(nèi)一位開(kāi)發(fā)者在 GitHub 上制作，目的在于幫助用戶安全快捷的拿回自己的數(shù)據(jù)，并提供數(shù)據(jù)分析功能，可以幫助用戶從各大軟件和網(wǎng)站當(dāng)中拿出你自己的數(shù)據(jù)內(nèi)容，基于用戶數(shù)據(jù)生成圖表文件，讓用戶能更直觀、深入了解自己的信息。

軟件功能

INFO-SPIDER 是一個(gè)集眾多數(shù)據(jù)源于一身的爬蟲(chóng)工具箱，旨在安全快捷的幫助用戶拿回自己的數(shù)據(jù)，工具代碼開(kāi)源，流程透明。支持?jǐn)?shù)據(jù)源包括 GitHub 、QQ 郵箱、網(wǎng)易郵箱、阿里郵箱、新浪郵箱、Hotmail 郵箱、Outlook 郵箱、京東、淘寶、支付寶、中國(guó)移動(dòng)、中國(guó)聯(lián)通、中國(guó)電信、知乎、嗶哩嗶哩、網(wǎng)易云音樂(lè)、QQ 好友、QQ 群、生成朋友圈相冊(cè)、瀏覽器瀏覽歷史、12306 、博客園、CSDN 博客、開(kāi)源中國(guó)博客、簡(jiǎn)書(shū)。

軟件特色

安全可靠：本項(xiàng)目為開(kāi)源項(xiàng)目，代碼簡(jiǎn)潔，所有源碼可見(jiàn)，本地運(yùn)行，安全可靠。

使用簡(jiǎn)單：提供 GUI 界面，只需點(diǎn)擊所需獲取的數(shù)據(jù)源并根據(jù)提示操作即可。

結(jié)構(gòu)清晰：本項(xiàng)目的所有數(shù)據(jù)源相互獨(dú)立，可移植性高，所有爬蟲(chóng)腳本在項(xiàng)目的 Spiders 文件下。

數(shù)據(jù)源豐富：本項(xiàng)目目前支持多達(dá)24+個(gè)數(shù)據(jù)源，持續(xù)更新。

數(shù)據(jù)格式統(tǒng)一：爬取的所有數(shù)據(jù)都將存儲(chǔ)為json格式，方便后期數(shù)據(jù)分析。

個(gè)人數(shù)據(jù)豐富：本項(xiàng)目將盡可能多地為你爬取個(gè)人數(shù)據(jù)，后期數(shù)據(jù)處理可根據(jù)需要?jiǎng)h減。

數(shù)據(jù)分析：本項(xiàng)目提供個(gè)人數(shù)據(jù)的可視化分析，目前僅部分支持。

文檔豐富：本項(xiàng)目包含完整全面的使用說(shuō)明文檔和視頻教程

安裝說(shuō)明

安裝python3和Chrome瀏覽器

安裝與Chrome瀏覽器相同版本的驅(qū)動(dòng)

安裝依賴庫(kù) pip install -r requirements.txt

工具運(yùn)行

進(jìn)入 tools 目錄

運(yùn)行 python3 main.py

在打開(kāi)的窗口點(diǎn)擊數(shù)據(jù)源按鈕, 根據(jù)提示選擇數(shù)據(jù)保存路徑

彈出的瀏覽器輸入用戶密碼后會(huì)自動(dòng)開(kāi)始爬取數(shù)據(jù), 爬取完成瀏覽器會(huì)自動(dòng)關(guān)閉.

在對(duì)應(yīng)的目錄下可以查看下載下來(lái)的數(shù)據(jù)(xxx.json), 數(shù)據(jù)分析圖表(xxx.html)

軟件截圖

查看安裝過(guò)程