面向lsp编程,我写了一个轻量级爬虫框架nspider

对爬虫比较有兴趣(狗头)爬了大大小小各种不可描述的网站后,我发现套路基本差不多,因此为了锻炼技术,同时学习多进程编程就趁着有空写了一个轻量级多进程爬虫框架。详情看 github 吧,文档还不全,主要是没啥动力写。如果大家能支持一下我就尽快完成文档,没人的话我就自己用了。。。
框架名 NymphSpider 简称 nspider。主要面向类似图片站、论坛、贴吧这种,专门爬取资源用的。设计理论上是随用随停的,不会丢失进度。
目前文档只写了最简单的调用方法。
Github: https://github.com/Nymphxyz/nspider
有没人来支持下,单机真没动力,也希望有大佬能指导指导我的代码。