Spiking - 一个使用Node.js开发的通用爬图工具
A lightweight web crawler.
Node.js HTTP工具
共11Star
详细介绍
Spiking
一个使用Node.js开发的通用爬图工具。
A common web crawler tool developed using Node.js.
为什么选择它?(Advantage)
- 图形化界面(使用Electron) Graphical Interface (Using Electron)
- 自定义初始链接 Custom initial link
- 无头浏览器支持 Headless browser support
- 并发/多线程 Concurrent / multithreaded
- 高效爬取机制 Efficient crawling mechanism
- 自动去重 Automatic similarity
- 可调控的爬取速度 Adjustable crawling speed
- 进度可视化 Progress visualization
- 使用代理 Using a proxy
开始(Getting started)
git clone https://github.com/Xciyang/spiking.git
cd spiking
npm install
npm start
用法(Usage)
下载最新的Release版本。
Download the latest [Release] (https://github.com/Xciyang/spiking/releases) version.
请阅读用法:简体中文(zh_CN)
Please read usage: English(en_US)
待完成项(To-do list)
- 语言本地化 Localization
- 多种筛选方式 Multiple filtering methods
- 自定义筛选方式 Custom filtering method
更多(More)
-
4410 Star
-
2762 Star
-
116 Star
-
1022 Star
-
154 Star
-
165 Star