InfoSpider爬虫工具箱

InfoSpider爬虫工具箱能够帮忙你从各大app和网站当中拿出你自己的数据内容，本app需要在一定的编程知识下面才可以进行使用，你需要根据各类库来进行app的安装，所支持的数据源十分的多，用户可以从这些数据源当中爬取你自己的数据内容，有兴趣的话就赶紧下载这款InfoSpider爬虫工具箱！

介绍

INFO-SPIDER 是一款集众多数据源于一身的爬虫工具箱，旨在安全快捷的帮忙用户拿回自己的数据，工具代码开源，流程透明。支持数据源包括 GitHub 、QQ 邮箱、网易邮箱、阿里邮箱、新浪邮箱、Hotmail 邮箱、Outlook 邮箱、京东、淘宝、支付宝、中国移动、中国联通、中国电信、知乎、哔哩哔哩、网易云音乐、QQ 好友、QQ 群、生成朋友圈相册、查看器查看历史、12306 、博客园、CSDN 博客、开源中国博客、简书。

app特色

安全可靠：本项目为开源项目，代码简约，所有源码可见，本地运行，安全可靠。

使用简单：提供 GUI 界面，只需点击所需获得的数据源并通过提示操作就可以。

结构清晰：本项目的所有数据源相互独立，可移植性高，所有爬虫脚本在项目的 Spiders 文件下。

数据源丰厚：本项目目前支持多达24+个数据源，持续更新。

数据格式统一：爬取的所有数据都将存储为json格式，便捷后期数据解析。

个人数据丰厚：本项目将尽可能多地为你爬取个人数据，后期数据处理可通过需要删减。

数据解析：本项目提供个人数据的可视化解析，目前仅部分支持。

文档丰厚：本项目包含完整多面的使用说明文档和视频教程

安装说明

安装python3和Chrome查看器

安装与Chrome查看器相同版本的驱动

安装依赖库 pip install -r requirements.txt

工具运行

进入 tools 目录

运行 python3 main.py

在打开的窗口点击数据源按钮, 通过提示选择数据保存路径

弹出的查看器输入用户密码后会自动开始爬取数据, 爬取完成查看器会自动关闭.

在对应的目录下能够浏览下载下来的数据(xxx.json), 数据解析图表(xxx.html)

相关新闻

根据编写好的app在特定的网站也app当中爬取你自己所想要的内容！