*   00 资料/

  *   源代码/

    *   01 coding-92.zip (62.66 MB)

*   01 第1章 课程介绍/

  *   01 1-1 python分布式爬虫打造搜索引擎简介.mp4 (50.28 MB), 07:27

*   02 第2章 windows下搭建开发环境/

  *   01 2-1 pycharm的安装和简单使用.mp4 (62.49 MB), 09:10

  *   02 2-2 mysql和navicat的安装和使用.mp4 (81.11 MB), 16:20

  *   03 2-3 windows和linux下安装python2和python3.mp4 (37.67 MB), 06:49

  *   04 2-4 虚拟环境的安装和配置.mp4 (167.27 MB), 30:57

*   03 第3章 爬虫基础知识回顾/

  *   01 3-1 技术选型 爬虫能做什么.mp4 (59.67 MB), 09:53

  *   02 3-2 正则表达式-1.mp4 (104.12 MB), 18:31

  *   03 3-3 正则表达式-2.mp4 (105.46 MB), 19:05

  *   04 3-4 正则表达式-3.mp4 (113.35 MB), 20:16

  *   05 3-5 深度优先和广度优先原理.mp4 (137.62 MB), 25:15

  *   06 3-6 url去重方法.mp4 (44.26 MB), 07:44

  *   07 3-7 彻底搞清楚unicode和utf8编码.mp4 (120.03 MB), 18:35

*   04 第4章 新： scrapy爬取知名技术文章网站/

  *   01 4-1 重录说明(很重要！！！).mp4 (27.90 MB), 04:50

  *   02 4-2 scrapy安装和配置.mp4 (164.94 MB), 30:30

  *   03 4-3 需求分析.mp4 (78.52 MB), 13:53

  *   04 4-4 pycharm中调试scrapy源码.mp4 (57.89 MB), 10:13

  *   05 4-5 xpath基础语法.mp4 (105.87 MB), 19:02

  *   06 4-6 xpath提取元素.mp4 (156.63 MB), 28:48

  *   07 4-7 css选择器.mp4 (99.60 MB), 17:54

  *   08 4-8 . cnblogs模拟登录(新增内容).mp4 (126.16 MB), 22:24

  *   09 4-9 编写spider完成抓取过程 - 1.mp4 (106.49 MB), 19:38

  *   10 4-10 编写spider完成抓取过程 - 2.mp4 (114.72 MB), 20:47

  *   11 4-11 scrapy中为什么要使用yield.mp4 (56.51 MB), 09:49

  *   12 4-12 提取详情页信息.mp4 (126.44 MB), 23:16

  *   13 4-13 提取详情页信息.mp4 (99.66 MB), 18:13

  *   14 4-14 items的定义和使用 - 1.mp4 (90.30 MB), 16:21

  *   15 4-15 items的定义和使用 - 2.mp4 (73.80 MB), 13:30

  *   16 4-16 scrapy配置图片下载.mp4 (100.53 MB), 18:20

  *   17 4-17 items数据写入到json文件中.mp4 (52.51 MB), 09:27

  *   18 4-18 mysql表结构设计.mp4 (71.56 MB), 13:21

  *   19 4-19 pipeline数据库保存.mp4 (110.90 MB), 20:16

  *   20 4-20 异步方式入库mysql.mp4 (70.23 MB), 12:37

  *   21 4-21 数据插入主键冲突的解决方法.mp4 (25.67 MB), 04:40

  *   22 4-22 itemloader提取信息.mp4 (117.64 MB), 21:41

  *   23 4-23 itemloader提取信息.mp4 (106.80 MB), 19:06

  *   24 4-24 大规模抓取图片下载出错的问题.mp4 (71.34 MB), 12:49

  *   25 4-25 有没有方法可以比较准确的解析出 title 和正文内容.html (0.00 MB)

*   05 第5章 网站模拟登陆和滑动验证码识别（2021.6月更新）/

  *   01 5-1 session和cookie自动登录机制.mp4 (106.69 MB), 20:10

  *   02 5-2 课程如何应对网站反爬变化.mp4 (44.89 MB), 08:03

  *   03 5-3 使用opencv识别滑动验证码的环境准备.mp4 (88.96 MB), 15:59

  *   04 5-4 opencv滑动验证码识别原理.mp4 (143.97 MB), 26:19

  *   05 5-5 滑动验证码识别集成到scrapy中.mp4 (56.26 MB), 10:02

  *   06 5-6 通过机器学习平台训练滑动验证码模型.mp4 (83.36 MB), 15:23

  *   07 5-7 发布训练模型并远程调用识别.mp4 (149.63 MB), 26:58

*   06 第6章 scrapy爬取知名问答网站/

  *   01 6-1 知乎分析以及数据表设计1.mp4 (84.86 MB), 15:17

  *   02 6-2 知乎分析以及数据表设计 - 2.mp4 (69.04 MB), 13:35

  *   03 6-3 item loder方式提取question - 1.mp4 (81.84 MB), 14:57

  *   04 6-4 item loder方式提取question - 2.mp4 (84.88 MB), 15:20

  *   05 6-5 item loder方式提取question - 3.mp4 (37.56 MB), 06:45

  *   06 6-6 知乎spider爬虫逻辑的实现以及answer的提取 - 1.mp4 (87.27 MB), 15:55

  *   07 6-7 知乎spider爬虫逻辑的实现以及answer的提取 - 2.mp4 (94.47 MB), 17:04

  *   08 6-8 保存数据到mysql中 -1.mp4 (94.82 MB), 17:27

  *   09 6-9 保存数据到mysql中 -2.mp4 (94.41 MB), 17:22

  *   10 6-10 保存数据到mysql中 -3.mp4 (89.13 MB), 16:13

  *   11 6-11 如何将数据的保存和抓取独立出来.html (0.00 MB)

*   07 第7章 通过CrawlSpider对招聘网站进行整站爬取/

  *   01 7-1 数据表结构设计.mp4 (78.33 MB), 15:36

  *   02 7-2 CrawlSpider源码分析-新建CrawlSpider与settings配置.mp4 (71.16 MB), 12:50

  *   03 7-3 CrawlSpider源码分析.mp4 (139.96 MB), 25:29

  *   04 7-4 Rule和LinkExtractor使用.mp4 (80.09 MB), 14:28

  *   05 7-5 网页302之后的模拟登录和cookie传递(网站需要登录时学习本视频教程).mp4 (176.46 MB), 32:11

  *   06 7-6 item loader方式解析职位.mp4 (136.32 MB), 24:46

  *   07 7-7 职位数据入库-1.mp4 (102.73 MB), 19:01

  *   08 7-8 职位信息入库-2.mp4 (63.11 MB), 11:19

  *   09 7-9 网站反爬突破.mp4 (61.32 MB), 11:02

*   08 第8章 Scrapy突破反爬虫的限制/

  *   01 8-1 爬虫和反爬的对抗过程以及策略.mp4 (166.05 MB), 20:20

  *   02 8-2 scrapy架构源码分析.mp4 (85.62 MB), 10:45

  *   03 8-3 Requests和Response介绍.mp4 (54.68 MB), 10:18

  *   04 8-4 通过downloadmiddleware随机更换user-agent-1.mp4 (92.55 MB), 17:00

  *   05 8-5 通过downloadmiddleware随机更换user-agent - 2.mp4 (93.75 MB), 17:13

  *   06 8-6 scrapy实现ip代理池 - 1.mp4 (93.69 MB), 16:51

  *   07 8-7 scrapy实现ip代理池 - 2.mp4 (94.67 MB), 17:39

  *   08 8-8 scrapy实现ip代理池 - 3.mp4 (101.87 MB), 18:46

  *   09 8-9 云打码实现验证码识别.mp4 (129.72 MB), 22:37

  *   10 8-10 cookie禁用、自动限速、自定义spider的settings.mp4 (41.67 MB), 07:27

*   09 第9章 scrapy进阶开发/

  *   01 9-1 selenium动态网页请求与模拟登录知乎.mp4 (118.49 MB), 21:27

  *   02 9-2 selenium模拟登录微博， 模拟鼠标下拉.mp4 (60.33 MB), 11:06

  *   03 9-3 chromedriver不加载图片、phantomjs获取动态网页.mp4 (55.10 MB), 09:59

  *   04 9-4 selenium集成到scrapy中.mp4 (107.15 MB), 19:43

  *   05 9-5 其余动态网页获取技术介绍-chrome无界面运行、scrapy-splash、selenium-grid, splinter.mp4 (43.45 MB), 07:50

  *   06 9-6 scrapy的暂停与重启.mp4 (78.39 MB), 12:58

  *   07 9-7 scrapy url去重原理.mp4 (32.15 MB), 05:46

  *   08 9-8 scrapy telnet服务.mp4 (42.56 MB), 07:37

  *   09 9-9 spider middleware 详解.mp4 (85.36 MB), 15:25

  *   10 9-10 scrapy的数据收集.mp4 (76.46 MB), 13:44

  *   11 9-11 scrapy信号详解.mp4 (73.37 MB), 13:05

  *   12 9-12 scrapy扩展开发.mp4 (74.29 MB), 13:20

*   10 第10章 scrapy-redis分布式爬虫/

  *   01 10-1 分布式爬虫要点.mp4 (40.69 MB), 08:42

  *   02 10-2 redis基础知识 - 1.mp4 (111.23 MB), 20:31

  *   03 10-3 redis基础知识 - 2.mp4 (90.90 MB), 15:58

  *   04 10-4 scrapy-redis编写分布式爬虫代码.mp4 (116.35 MB), 21:06

  *   05 10-5 scrapy源码解析-connection.py、defaults.py-.mp4 (64.57 MB), 11:05

  *   06 10-6 scrapy-redis源码剖析-dupefilter.py-.mp4 (29.86 MB), 05:29

  *   07 10-7 scrapy-redis源码剖析- pipelines.py、 queue.py-.mp4 (59.40 MB), 10:41

  *   08 10-8 scrapy-redis源码分析- scheduler.py、spider.py-.mp4 (65.00 MB), 11:52

  *   09 10-9 集成bloomfilter到scrapy-redis中.mp4 (108.48 MB), 19:34

*   11 第11章 cookie池系统设计和实现/

  *   01 11-1 什么是cookie池.mp4 (63.58 MB), 11:30

  *   02 11-2 cookie池系统设计.mp4 (54.42 MB), 09:23

  *   03 11-3 实现cookie池-1.mp4 (59.54 MB), 10:12

  *   04 11-4 实现cookie池-2.mp4 (68.51 MB), 12:39

  *   05 11-5 改造login方法 - 1.mp4 (55.82 MB), 09:58

  *   06 11-6 改造login方法 - 2.mp4 (51.33 MB), 09:36

  *   07 11-7 改造login方法-3.mp4 (48.42 MB), 08:43

  *   08 11-8 改造login方法-4.mp4 (58.59 MB), 10:37

  *   09 11-9 通过抽象基类实现网站轻松接入.mp4 (84.52 MB), 15:00

  *   10 11-10 实现检测网站cookie是否有效.mp4 (44.75 MB), 08:06

  *   11 11-11 如何选择redis的数据结构来保存cookie.mp4 (62.68 MB), 10:59

  *   12 11-12 cookie管理器的实现.mp4 (123.77 MB), 22:10

  *   13 11-13 启动cookie池服务.mp4 (69.66 MB), 12:35

  *   14 11-14 将cookie集成到爬虫项目中.mp4 (86.72 MB), 15:34

  *   15 11-15 cookie架构设计改进意见.mp4 (43.86 MB), 07:40

*   12 第12章 各种验证码的识别/

  *   01 12-1 滑动验证码的识别思路.mp4 (87.07 MB), 15:20

  *   02 12-2 验证码截屏-1.mp4 (64.26 MB), 11:42

  *   03 12-3 验证码截屏-2.mp4 (76.77 MB), 14:03

  *   04 12-4 计算出滑动的距离.mp4 (94.80 MB), 17:37

  *   05 12-5 计算滑动轨迹.mp4 (98.74 MB), 18:04

*   13 第13章 增量抓取/

  *   01 13-1 增量爬虫需要解决的问题.mp4 (54.22 MB), 09:39

  *   02 13-2 通过修改scrapy-redis完成增量抓取 -1.mp4 (90.43 MB), 16:11

  *   03 13-3 通过修改scrapy-redis完成增量抓取-2.mp4 (78.63 MB), 14:13

  *   04 13-4 爬虫数据更新.mp4 (51.87 MB), 09:28

*   14 第14章 elasticsearch搜索引擎的使用/

  *   01 14-1 elasticsearch介绍.mp4 (101.82 MB), 18:24

  *   02 14-2 elasticsearch安装.mp4 (73.91 MB), 13:24

  *   03 14-3 elasticsearch-head插件以及kibana的安装.mp4 (129.91 MB), 24:09

  *   04 14-4 elasticsearch的基本概念.mp4 (81.60 MB), 12:15

  *   05 14-5 倒排索引.mp4 (63.31 MB), 11:24

  *   06 14-6 elasticsearch 基本的索引和文档CRUD操作.mp4 (103.09 MB), 18:44

  *   07 14-7 elasticsearch的mget和bulk批量操作.mp4 (74.06 MB), 12:36

  *   08 14-8 elasticsearch的mapping映射管理.mp4 (166.22 MB), 21:03

  *   09 14-9 elasticsearch的简单查询 - 1.mp4 (83.69 MB), 14:56

  *   10 14-10 elasticsearch的简单查询 - 2.mp4 (61.73 MB), 11:12

  *   11 14-11 elasticsearch的bool组合查询.mp4 (126.19 MB), 22:58

  *   12 14-12 scrapy写入数据到elasticsearch中 - 1.mp4 (78.93 MB), 14:16

  *   13 14-13 scrapy写入数据到elasticsearch中 - 2.mp4 (61.39 MB), 11:19

*   15 第15章 django搭建搜索网站/

  *   01 15-1 es完成搜索建议-搜索建议字段保存 - 1.mp4 (76.11 MB), 13:48

  *   02 15-2 es完成搜索建议-搜索建议字段保存 - 2.mp4 (75.41 MB), 13:34

  *   03 15-3 django实现elasticsearch的搜索建议 - 1.mp4 (108.27 MB), 19:57

  *   04 15-4 django实现elasticsearch的搜索建议 - 2.mp4 (101.28 MB), 18:15

  *   05 15-5 django实现elasticsearch的搜索功能 -1.mp4 (77.25 MB), 14:06

  *   06 15-6 django实现elasticsearch的搜索功能 -2.mp4 (73.08 MB), 13:14

  *   07 15-7 django实现搜索结果分页.mp4 (50.83 MB), 09:12

  *   08 15-8 搜索记录、热门搜索功能实现 - 1.mp4 (81.51 MB), 14:34

  *   09 15-9 搜索记录、热门搜索功能实现 - 2.mp4 (76.99 MB), 14:08

*   16 第16章 scrapyd部署scrapy爬虫/

  *   01 16-1 scrapyd部署scrapy项目.mp4 (136.49 MB), 24:43

*   17 第17章 课程总结/

  *   01 17-1 课程总结.mp4 (29.14 MB), 05:59

  *   02 17-2 【讨论题】你认为什么是 JS 逆向.html (0.00 MB)

  *   03 17-3 如何将 nodejs 服务集成进来呢.html (0.00 MB)

  *   04 17-4 【讨论题】字体反爬应该如何解析.html (0.32 MB)