java编写的带有web管理后台的抓取程序，自动生成搜索URL，简单实现数据抽取即可，支持多机，任务定时自动运行等功能，提供各种扩展点，适应各种情况

A lightweight spider for Elasticsearch.

nlp项目基础框架：爬虫，针对动态网页（JS）的专有爬虫

python语言，基于tornado框架，MySql数据库（peewee库操作mysql），自带网络爬虫程序

运行于java环境的一个免费开源的企业信息采集器（简单的java网络爬虫）。 信息采集完成后自动导出Excel表格。 基于Jsoup+Poi+Sqlite开发完成。

北京地铁客流量统计（py爬虫+js统计图）

一个通用的爬虫

使用springboot、spring-data-jpa、webmagic等技术，定时爬取爱奇艺视频、360视频

🔥 官方推荐 🔥 java爬虫工具，4.0重构版本，让你使用Java也能小巧而优雅的编写爬虫软件。多线程异步爬取网页也能那么简简单单；内置持久化接口，轻松定义爬取记录。

音乐歌单目录导出软件，网易云等各大音乐平台由于版权问题，间歇性的会让一些收藏的音乐无法播放，所以做了这个小软件，把常见的音乐网站的个人收藏的歌单导出备份，目前实现导出网易云音乐个人收藏的歌单，后面再不断兼容其他音乐网站的歌单导出功能吧。 后续计划： 1.模拟登陆直接导出，无需下载静态页面导出；   2.跨音乐网站，把本地歌单文件导入其他音乐网站；

《Web Scraping with Python》用python写网络爬虫一书的源代码。

Java爬虫实现，SpringBoot + HttpClient+Jsoup 爬虫Demo，满屏注释，适合入门

扩展性高，轻的开源爬虫框架Slit

简易的网站图片爬虫，使用简单，代码可二次开发，性能高效基于多线程和并行计算的网络图片程序源码

爬取拉勾网数据，并进行数据分析，可视化，分析你的专业最适合去那个城市，那个岗位最火热。