InfoSpider是一個非常使用的爬蟲工具箱，目前支持所有主流的平臺，使用它就可以爬取自己在這些平臺發過的內容，幫助用戶取回自己的數據。例如我們發了許多郵件，想要將所有郵件的內容保存備份起來，手動才做是需要花費很多時間和精力的，用InfoSpider就可以一鍵快速爬取你的信息，基于用戶數據生成圖表文件，使得用戶更直觀、深入了解自己的信息。

軟件介紹

INFO-SPIDER 是一個集眾多數據源于一身的爬蟲工具箱，旨在安全快捷的幫助用戶拿回自己的數據，工具代碼開源，流程透明。并提供數據分析功能，基于用戶數據生成圖表文件，使得用戶更直觀、深入了解自己的信息。 目前支持數據源包括GitHub、QQ郵箱、網易郵箱、阿里郵箱、新浪郵箱、Hotmail郵箱、Outlook郵箱、京東、淘寶、支付寶、中國移動、中國聯通、中國電信、知乎、嗶哩嗶哩、網易云音樂、QQ好友、QQ群、生成朋友圈相冊、瀏覽器瀏覽歷史、12306、博客園、CSDN博客、開源中國博客、簡書。

軟件功能

安全可靠：本項目為開源項目，代碼簡潔，所有源碼可見，本地運行，安全可靠。

使用簡單：提供 GUI 界面，只需點擊所需獲取的數據源并根據提示操作即可。

結構清晰：本項目的所有數據源相互獨立，可移植性高，所有爬蟲腳本在項目的 Spiders 文件下。

數據源豐富：本項目目前支持多達24+個數據源，持續更新。

數據格式統一：爬取的所有數據都將存儲為json格式，方便后期數據分析。

個人數據豐富：本項目將盡可能多地為你爬取個人數據，后期數據處理可根據需要刪減。

數據分析：本項目提供個人數據的可視化分析，目前僅部分支持。

文檔豐富：本項目包含完整全面的使用說明文檔和視頻教程

使用說明

依賴安裝

安裝python3和Chrome瀏覽器

安裝與Chrome瀏覽器相同版本的驅動

安裝依賴庫 pip install -r requirements.txt

工具運行

進入 tools 目錄

運行 python3 main.py

在打開的窗口點擊數據源按鈕, 根據提示選擇數據保存路徑

彈出的瀏覽器輸入用戶密碼后會自動開始爬取數據, 爬取完成瀏覽器會自動關閉.

在對應的目錄下可以查看下載下來的數據(xxx.json), 數據分析圖表(xxx.html)