一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )
springboot【小说阅读网站】，多线程抓取小说数据(单本或者批量)，持久化到MySQL数据库，能定时跟源站数据同步=小说定时更新。通过jsoup采集数据到mysql数据，redis作为缓存框架，减轻服务器压力。部署在linux，网站UI套纵横中文网！
webmagic 是一个无须配置、便于二次开发的爬虫框架，它提供简单灵活的API，只需少量代码即可实现一个爬虫。
x-crawl 是一个灵活的 Node.js AI 辅助爬虫库。使爬虫工作变得更加高效、智能和便捷。
基于node+express爬虫 API接口项目,包括全国高校信息、成语诗歌、星座运势、历史的今天、音乐数据接口、图片壁纸、搞笑视频、热点新闻资讯 详情接口数据
pinduoduo店铺订单采集
彩妆网商品采集
团油油站油价采集
douyin 抖音店铺数据采集
往约app数据采集
快手视频批量上传
抖音视频批量上传
异步采集写真/头像
登录农业银行
钉钉商机
西煤交易定时按键
设备协会人员资质
liweimin@taiyuan
惊讶网站的垂直爬取网页程序，提供UI来管理爬取的网站和爬取文章内容的规则。 通过jsoup来获取标题和内容，主要是通过选着器获取。
爬虫项目，微信公众号文章爬虫，网站文章爬虫，群发邮件系统
基于Python和Echarts职位画像系统，使用Scrapy抓取职位招聘数据，使用Django+echarts完成数据可视化
