diff --git "a/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\347\232\204\345\272\224\347\224\250.md" "b/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\345\205\245\351\227\250.md" similarity index 99% rename from "Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\347\232\204\345\272\224\347\224\250.md" rename to "Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\345\205\245\351\227\250.md" index d566d63f4c051d6e65ae730656f32a5acf845325..98978f46a9e06071037928ffeeb0ec124b7d6b7f 100644 --- "a/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\347\232\204\345\272\224\347\224\250.md" +++ "b/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\345\205\245\351\227\250.md" @@ -1,4 +1,4 @@ -## Scrapy爬虫框架的应用 +## Scrapy爬虫框架入门 ### Scrapy概述 diff --git "a/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\345\210\206\345\270\203\345\274\217\345\256\236\347\216\260.md" "b/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\345\210\206\345\270\203\345\274\217\345\256\236\347\216\260.md" new file mode 100644 index 0000000000000000000000000000000000000000..95af7963ee0bc698ff84c20c7c8c8aaac62b0cc2 --- /dev/null +++ "b/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\345\210\206\345\270\203\345\274\217\345\256\236\347\216\260.md" @@ -0,0 +1,16 @@ +## Scrapy爬虫框架分布式实现 + +### 分布式爬虫原理 + + + +### Scrapy分布式实现 + + + +### 布隆过滤器 + + + +### Scrapyd分布式部署 + diff --git "a/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\351\253\230\347\272\247\345\272\224\347\224\250.md" "b/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\351\253\230\347\272\247\345\272\224\347\224\250.md" new file mode 100644 index 0000000000000000000000000000000000000000..70a199541a6c661300465a07989a7b89ee3d57c6 --- /dev/null +++ "b/Day66-75/Scrapy\347\210\254\350\231\253\346\241\206\346\236\266\351\253\230\347\272\247\345\272\224\347\224\250.md" @@ -0,0 +1,12 @@ +## Scrapy爬虫框架高级应用 + +### 中间件的应用 + + + +### Scrapy对接Selenium + + + +### Scrapy部署到Docker + diff --git a/README.md b/README.md index 5f36f769e13f3d92d8838ee299bfbd12243f7bae..e79b46ffbbb233d1f44959c8e34abeae64ebc043 100644 --- a/README.md +++ b/README.md @@ -253,7 +253,7 @@ #### Day67 - [数据采集和解析](./Day66-75/02.数据采集和解析.md) -#### Day68 - [缓存数据](./Day66-75/03.缓存数据.md) +#### Day68 - [存储数据](./Day66-75/03.存储数据.md) #### Day69 - [并发下载](./Day66-75/04.并发下载.md) @@ -261,13 +261,11 @@ #### Day71 - [表单交互和验证码处理](./Day66-75/06.表单交互和验证码处理.md) -#### Day72 - [ 数据清洗](./Day66-75/07.数据清洗.md) +#### Day72 - [Scrapy爬虫框架入门](./Day66-75/Scrapy爬虫框架入门.md) -#### Day73 - [Scrapy的应用(1)](./Day66-75/Scrapy的应用01.md) +#### Day73 - [Scrapy爬虫框架高级应用](./Day66-75/Scrapy爬虫框架高级应用.md) -#### Day74 - [Scrapy的应用(2)](./Day66-75/Scrapy的应用02.md) - -#### Day75 - [Scrapy的应用(3)](./Day66-75/Scrapy的应用03.md) +#### Day74 - [Scrapy爬虫框架分布式实现](./Day66-75/Scrapy爬虫框架分布式实现.md) ### Day76~90 - [数据处理和机器学习](./Day76-90)