这门课解决什么问题

很多上班族在日常工作中常会遇到这类场景：需要把某个行业网站的商品价格定期汇总到表格里，或者要把竞争对手的公开资讯批量抓取下来做对比分析。如果纯靠人工复制粘贴，几十页数据还能应付，一旦面临成千上万条记录，不仅耗时，还容易出错。这门关于 Python 爬虫的资料包，针对的就是这类重复性数据采集问题。它不教复杂的底层算法，而是聚焦于如何用代码自动向网站发送请求、提取网页里的文字和链接、并把结果保存成结构化的本地文件。课程内容覆盖了从基础网页下载、数据解析到多线程抓取、处理需要登录的页面以及动态加载内容的应对方法，基本对应了日常数据获取的真实链路。

适合什么基础与学习建议

这套资料标明了零基础起点，但并不意味着完全不需要基本的计算机操作常识。如果你之前没写过代码，建议先把重点放在前几个章节，尤其是开发环境配置和爬虫基础架构部分，先把 Python 运行环境和必要的第三方库跑通，不要急于去抓复杂的网站。在熟悉了基本的请求发送后，可以按照 URL 管理、网页下载、数据解析、数据存储这个顺序往下看。对于有动态加载和登录限制的部分，由于涉及到更复杂的请求分析和参数处理，建议在能独立写出简单单页抓取脚本后再去碰。看视频时不要只记笔记，每看完一个实现环节，务必暂停下来，自己把代码敲一遍并运行，验证抓取效果。

学完能独立做什么与资料怎么用

把这套资料完整跟下来，你能独立写出针对大多数静态网页的数据采集脚本，能处理翻页逻辑，把抓取到的文本和图片存入本地数据库或文件中；面对有简单登录验证或动态加载的页面，也能通过分析网络请求找到真实数据接口进行抓取。在配合资料练习时，不要去碰那些有严格反爬机制的大型商业平台，容易踩法律和封 IP 的坑。可以自己找几个公开的资讯网站或者本地生活类页面作为练习靶子。先看懂视频里对目标网页结构分析的思路，再跟着代码实现去写解析规则。如果在抓取过程中遇到乱码或请求被拒绝，回头去查资料里关于请求头设置和编码处理的部分，通过不断试错来调整代码，这样学到的知识才会真正变成你自己的工具。


爬虫的相关技术，包含数据的获取、解析、存储，并发爬虫、登录爬虫、动态爬虫、登录绕过爬虫

课程目录

*   01 零基础入门爬虫/

  *   01 01.Python爬虫的介绍.mp4 (9.20 MB), 02:41

  *   02 02.课程大纲和开发环境.mp4 (6.01 MB), 01:51

  *   03 03.Python爬虫的开发环境配置.mp4 (10.47 MB), 02:25

  *   04 04.Python爬虫的简单架构.mp4 (11.78 MB), 03:21

*   02 爬虫的重要组件/

  *   01 05.Python爬虫的URL管理器的知识.mp4 (18.54 MB), 04:54

  *   02 06.Python爬虫的URL管理器的代码实现.mp4 (38.29 MB), 07:43

  *   03 07.爬虫前提之对目标网站进行分析.mp4 (27.19 MB), 05:26

  *   04 08.网页下载器requests的知识讲解.mp4 (24.29 MB), 07:04

  *   05 09.Python使用requests爬取网页内容的演示.mp4 (27.87 MB), 05:39

  *   06 10.爬虫解析的HTML知识简介.mp4 (19.35 MB), 05:30

  *   07 11.HTML解析器beautifulsoup库的知识讲解.mp4 (15.36 MB), 04:24

  *   08 12.Beautifulsoup解析Html的实例演示.mp4 (24.36 MB), 05:56

*   03 爬虫实战案例/

  *   01 13.Python开发超级简单爬虫案例.mp4 (19.97 MB), 04:21

  *   02 14.Python爬虫实战爬取所有博客页面.mp4 (54.18 MB), 12:06

  *   03 15.Python爬虫实战之爬取博客园200页文章列表.mp4 (59.47 MB), 11:31

  *   04 16.Python爬虫给宝宝起名字.mp4 (82.09 MB), 16:17

  *   05 17.Python批量爬取全本小说.mp4 (51.36 MB), 11:14

  *   06 18.Python批量爬取美女图片.mp4 (84.66 MB), 15:32

*   04 案例-博客园爬虫/

  *   01 26. 博客园爬虫01 确认爬取目标.mp4 (6.11 MB), 01:04

  *   02 27. 博客园爬虫02 分析并请求AJAX数据.mp4 (54.97 MB), 08:51

  *   03 28. 博客园爬虫03 实现文章信息的解析.mp4 (38.52 MB), 06:07

  *   04 29. 博客园爬虫04 批量爬取并存储到excel文件.mp4 (38.61 MB), 06:29

*   05 可视化爬虫selenium/

  *   01 30 selenium是什么为什么要用它爬取数据.mp4 (11.16 MB), 02:57

  *   02 31 selenium怎样安装环境.mp4 (27.61 MB), 04:45

  *   03 32 selenium爬取python官网数据.mp4 (29.10 MB), 04:58

  *   04 33 selenium的使用语法总结.mp4 (15.31 MB), 04:06

  *   05 34 selenium实战爬取百度搜索.mp4 (54.90 MB), 08:53

  *   06 35. selenium自动提交网页表单.mp4 (53.25 MB), 08:17

  *   07 36. selenium网易云课堂套餐课爬虫.mp4 (90.35 MB), 15:22

*   06 资料/

  *   01 课件资料.txt (0.00 MB)