牛咖-neocrawler nodejs 的爬虫系统。 特点： 支持web界面方式的摘取规则配置（css selector & regex）； 包含无界面的浏览器引擎（phantomjs），支持js产生内容的抓取； 用http代理路由的方式防止抓取并发量过大的情况下被对方屏蔽； nodejs none-block 异步环境下的抓取性能比较高； 中央调度器负责网址的调度（同一时间片内一定数量的抓取任务中根据网站的权重来决定派发任务量； 支持多种抓取实例并存，定制摘取引擎和存储方式。

基于node+express爬虫 API接口项目,包括全国高校信息、成语诗歌、星座运势、历史的今天、音乐数据接口、图片壁纸、搞笑视频、热点新闻资讯 详情接口数据

输入网站地址，自动爬取网站当中所有的链接，并生成sitemap。

使用NodeJs/Io.Js编写的简单的对贴吧进行遍历并存入Mysql的网络爬虫，仅供参考

基于 Node.js 的新浪博客备份程序

nodejs article extractor

网页版nodejs爬虫工具

这是个基于request和async模块的简单爬虫

迪士尼数据清洗服务，用于从迪士尼实时排队信息统计乐园整体情况

A lightweight web crawler.