一些非常有趣的python爬虫例子,对新手比较友好,主要爬取淘宝、天猫、微信、微信读书、豆瓣、QQ等网站。(Some interesting examples of python crawlers that are friendly to beginners. )

Nodejs demo

JS逆向研究

dynamic crawler for web vulnerability scanner

千万级图片爬虫、视频爬虫 [开源版本] Image Spider

🎯Python 3 网络爬虫实战、数据分析合集 | 当当 | 网易云音乐 | unsplash | 必胜客 | 猫眼 |

github 热门项目个人收藏 （1.6k +），包含开发框架、组件、SDK、模板、API接口、IPTV，脚本，爬虫，网盘直链，开源软件，工具等各种项目。

这其实是一份学习笔记。包括学习记录、爬虫练习平台（网站）、自制工具脚本

研究学习各种拦截：反爬虫、拦截ad、防广告注入、斗黄牛等

Oh no, stop this. You can see my local IP address 😲! Use `foundation` attribute against CRC32 lookup table to reveal local IP address of a Chrome/Chromium visitor.

Sky光遇每日任务攻略自动更新，自动推送邮箱，再也不怕崽崽不会做每日任务啦啦啦！！！【利用爬虫实现】

Repository for the Mastering Web Scraping in Python: Scaling to Distributed Crawling blogpost with the final code.

应用Python爬虫、Flask框架、Echarts、WordCloud等技术将豆瓣租房信息爬取出来保存于Excel和数据库中，进行数据可视化操作、制作网页展示。

根据Bangumi的时光机数据生成年鉴

犇犇爬虫

A spiders' program for weixin which made by Express & cheerio

flask + 爬虫 = 小说 + 漫画

Retrieves the full list of available Google Voice numbers and finds the best ones

Collection of scrapy spiders which can scrape posts, images, and so on from public Facebook Pages.

豆瓣Top500电影爬虫&分析可视化