Python 爬虫系列教程，2021年国内最系统+最强

作者： 🍊 梦想橡皮擦（擦哥&擦姐），技术+产品 ✏️博客地址，希望你有所收获 🏮。

Python 爬虫 120 例，已完成文章清单

📙 requests 库 + re 模块

1. 10 行代码集 2000 张美女图，Python 爬虫 120 例，再上征途
2. 通过 Python 爬虫，发现 60%女装大佬游走在 cosplay 领域
3. Python 千猫图，简单技术满足你的收集控
4. 熊孩子说“你没看过奥特曼”，赶紧用 Python 学习一下，没想到
5. 技术圈的【多肉小达人】，一篇文章你就能做到
6. 我用 Python 连夜离线了 100G 图片，只为了防止网站被消失

📘 requests 库 + re 模块 + threading 模块

7. 对 Python 爬虫编写者充满诱惑的网站,《可爱图片网》,瞧人这网站名字起的
8. 5000张高清壁纸大图（手机用），用Python在法律的边缘又试探了一把
9. 10994部漫画信息，用Python实施大采集，因为反爬差一点就翻车了
10. 爬动漫“上瘾”之后，放弃午休，迫不及待的用Python薅了腾讯动漫的数据，啧啧啧

📗 requests 库 + lxml 库

11. 他说：“只是单纯的想用Python收集一些素颜照，做机器学习使用”，“我信你个鬼！”
12. 1小时赚100元，某群X友，周末采集了20000+漫展历史数据，毫无技术难度
13. 程序员（媛）不懂汉服？岂能让别人小看，咱先靠肉眼大数据识别万张穿搭照
14. 老友(研发岗)被裁后，想加盟小吃店，我用Python采集了一点数据，多少是个心意
15. 整个大活，采集8个代理IP站点，为Python代理池铺路，爬虫120例之第15例
16. 极复杂编码，下载《原神》角色高清图、中日无损配音，爬虫 16 / 120 例
17. 爬虫120例之第17例，用Python面向对象的思路，采集各种精彩句子

📙 技术阶段整理

18. requests库与 lxml 库常用操作整理+总结，爬虫120例阶段整理篇
19. 正则表达式 与 XPath 语法领域细解，初学阶段的你，该怎么学？

📕 requests 库 + lxml 库 + cssselect 库

20. Python爬虫120例之第20例，1637、一路商机网全站加盟数据采集
21. 孔夫子旧书网数据采集，举一反三学爬虫，Python爬虫120例第21例

📙 多线程爬虫之 threading 模块

22. 谁有粉？就爬谁！他粉多，就爬他！Python 多线程采集 260000+ 粉丝数据
23. 懒人畅听网，有声小说类目数据采集，多线程速采案例，Python爬虫120例之23例
24. 虎牙直播数据采集，为数据分析做储备，Python爬虫120例之第24例
25. 我们的骄傲！非遗数据采集，来自官方的数据，Python爬虫无所不爬

📗 预备知识

• 赞！一篇博客讲解清楚 Python queue模块，作为Python爬虫预备知识，用它解决采集队列问题

📕 多线程 threading + queue 模块

26. 全国美容大夫数据采集数据（花容网 huaroo 公开数据），爬虫120例之26例
27. 一个站点不够学？那就在用Python增加一个采集目标，一派话题广场+某金融论坛话题广场爬虫
28. Python爬虫采集，中介网互联网网站排行榜， 样本数量：58341
29. 用Python保住“设计大哥“的头发，直接甩给他10000张参考图，爬虫采集【稿定设计】平面模板素材

📗 requests-html 库学习

30. requests-html库初识 + 无资料解BUG之 I/O error : encoder error，Python爬虫第30例
31. 低调的采集，低调的学习，用自然资源部信息中心网站，来练习Python爬虫

📙 pyquery 库学习

32. 大桥数据，国外大桥排行榜数据清单，Python爬虫120例第32例
33. 程序员是这样学习【中药学】知识的，先用python采集分析一波

📕 BeautifulSoup 库学习

34. 在120篇系列专栏中，才能学会 python beautifulsoup4 模块，7000字博客+爬第九工场网
35. 都说python是万能的，这次用python看溧阳摄影圈，真不错
36. 全程干货，用 python 下载某站全部【免抠图片】，图片背景透明，格式PNG

📙 协程学习

37. python 爬虫爱好者必须掌握的知识点“ 协程爬虫”，看一下如何用 gevent 采集女生用头像
38. python协程总学不会？不可能的，边学协程边采集Coser图吧！
39. 你是不是已经成为【爸爸程序员】了？用Python给自己的宝下载200+绘本动画吧，协程第3遍学习
40. python 协程第4课，目标数据源为 mp3 ，目标站点为 bensound.com
41. python 协程补个知识点，控制并发数，python 数据采集必会技能

📘 scrapy 库学习

42. 学python，怎么能不学习scrapy呢，这篇博客带你学会它
43. python scrapy 管道学习，并拿在行练手爬虫项目
44. python scrapy极细拆解，打开Spider类看内容，顺手爬了一下优设网
45. 练手练到阅文集团作家中心了，python crawlspider 二维抓取学习
46. 你只认识大众汽车的车标怎么能行？赶紧用python采集所有车标学习一下
47. 拿它们练Python爬虫，是在法律边缘试探吗？爬虫圈香饽饽之视频网站的评论区采集
48. 程序员跨行帮朋友，python爬虫之饲料添加剂数据，采集+备份
49. CSDN热榜、华为云博客都可用来练习Python scrapy 爬虫
50. 纯纯的爬虫知识，python scrapy 下载中间件知多少
51. 20行Python scrapy 代码，去采集【蓝桥】训练营
52. Scrapy Spider中间件，你学会了吗？本篇博客有一案例
53. 通过淘宝数据学习爬虫，python scrapy requests与response对象
54. 你知道在 scrapy 中，可以定制化导出数据格式吗？scrapy 导出器学习
55. python scrapy ，几行代码实现一个【搜狗图片】下载器
56. Python爬虫落地应用之【自动化点赞器】，一篇游走在封禁边缘的博客
57. python scrapy 代理中间件，爬虫必掌握的内容之一

📗 Python爬虫之手机APP抓包

58. Python爬虫120例之案例58，手机APP爬虫，“武器库”的准备and皮皮虾APP的测试
59. 豆果美食APP，看一下都给Python爬虫爱好者提供了哪些接口
60. fiddler软件+手机模拟器搭配抓包，这篇博客有Python爬虫与百家号的事
61. Python爬虫工程师必备工具 Charles 的安装，以及爬取淘宝网+学UI网
62. Python手机抓包案例，用Charles捕获【春雨医生】接口数据