解决什么问题:把网页上的数据真正抓下来用
很多做运营、市场分析或刚转行做数据开发的人,日常工作经常卡在“没数据”:竞品价格、行业报告、公开招标信息散落在各个网页里,手动复制粘贴既慢又容易漏。这门 Python 网络爬虫课解决的核心场景就是:怎么写一段代码,让程序自动去网页上把结构化数据抓下来,存成表格或数据库文件供后续分析。它不是教你做网站,也不是讲底层算法,而是聚焦在“怎么合规、稳定地把公开网页数据搬下来”。资料标注了“无答疑”,说明它是一套纯自学的录制视频,适合能自己折腾、不需要专人随时盯作业的学习者。
适合什么基础与建议先看哪几块
从资料线索看,这套课是从 Python 语法基础开始铺的,所以哪怕你之前没写过代码,只要愿意跟着敲,也能跟上。但如果你已经会基本的 if 判断和 for 循环,可以直接跳到网络爬虫初识那一节,先看整体框架。建议的顺序是:先快速过一遍 Python 控制流、函数、文件操作这几块,确认自己能写简单的循环和读写本地文件;然后重点看异常处理和面向对象,因为爬虫经常遇到网页请求失败、解析报错,不懂异常处理代码会频繁崩。基础打牢后,再进入爬虫主体部分,看怎么发请求、怎么解析 HTML、怎么翻页。不要一上来就死磕高级模块,先把“请求—解析—存储”这条主线跑通,比什么都重要。
学完能独立做什么与资料怎么配合练习
跟着这套视频走完,你应该能独立写一个完整的爬虫脚本:指定一个目标网址,程序自动抓取列表页或详情页的文本、价格、日期等字段,把结果存成 CSV 或文本文件,遇到个别页面打不开能自动跳过不中断。这不是那种能搞定大型反爬平台、分布式调度的课,但对中小型公开网站、企业内部数据采集已经够用。练习时建议这样配合资料:每看完一个实战章节,暂停视频,自己换一个类似但不同的网站试一遍,比如课上抓新闻标题,你就去抓商品列表;遇到报错先查报错信息,再回头看对应章节。文件操作和异常处理这两块一定要动手写,不要只看,因为爬虫代码十有八九会在这里出问题,自己踩过坑才知道怎么改。
本套课程为完整版的网络爬虫课程,学员可以通过该课程学习网络爬虫的相关知识,以便学习网络爬虫方方面面的知识,学完后胜任网络爬虫相关工作。 1、体系完整科学,可以系统化学习; 2、课程通俗易懂,可以让学员真正学习; 3、从零...
课程目录
* 01 课程介绍.mp4 21:57
* 02 Python初识.mp4 20:08
* 03 Python语法基础.mp4 52:22
* 04 Python控制流与小实例.mp4 34:44
* 05 答疑环节.mp4 03:58
* 06 Python函数详解.mp4 32:39
* 07 Python模块实战.mp4 33:49
* 08 Python文件操作实战.mp4 15:55
* 09 Python异常处理实战.mp4 12:20
* 10 Python面向对象编程.mp4 47:51
* 11 答疑环节.mp4 03:06
* 12 网络爬虫初识:Excel表格自动合并作业讲解.mp4 27:52
* 13 网络爬虫初识:网络爬虫概述.mp4 09:17
* 14 网络爬虫工作原理详解.mp4 09:13
* 15 正则表达式实战:什么是正则表达式.mp4 02:08
* 16 正则表达式实战:原子.mp4 19:15
* 17 正则表达式实战:元字符.mp4 15:18
* 18 正则表达式实战:模式修正符.mp4 06:10
* 19 正则表达式实战:贪婪模式与懒惰模式.mp4 07:12
* 20 正则表达式实战:正则表达式函数.mp4 09:41
* 21 正则表达式实战:常见正则实例.mp4 10:44
* 22 简单爬虫的编写.mp4 11:49
* 23 作业讲解:出版社信息的爬取.mp4 17:45
* 24 Urllib基础.mp4 14:40
* 25 超时设置.mp4 14:19
* 26 自动模拟HTTP请求与百度信息自动搜索爬虫实战.mp4 21:36
* 27 自动模拟HTTP请求之自动POST实战.mp4 20:53
* 28 爬虫的异常处理实战.mp4 18:14
* 29 爬虫的浏览器伪装技术实战.mp4 16:57
* 30 Python新闻爬虫实战.mp4 33:42
* 31 答疑环节.mp4 02:56
* 32 糗事百科爬虫实战.mp4 16:42
* 33 用户代理池构建实战.mp4 14:05
* 34 IP代理池构建的两种方案实战.mp4 01:15:50
* 35 淘宝商品图片爬虫实战.mp4 28:00
* 36 答疑环节.mp4 08:46
* 37 作业讲解:同时使用用户代理池与IP代理池的方法.mp4 25:14
* 38 微信爬虫实战.mp4 46:16
* 39 抓包分析实战.mp4 24:14
* 40 腾讯视频评论爬虫02.mp4 27:34
* 41 腾讯视频评论爬虫03.mp4 18:12
* 42 认识Scrapy框架.mp4 04:46
* 43 Scrapy框架安装难点解决技巧.mp4 20:07
* 44 Scrapy常见指令实战.mp4 01:05:04
* 45 Scrapy实现当当网商品爬虫实战.mp4 01:20:25
* 46 答疑环节.mp4 03:21
* 47 Scrapy模拟登录实战.mp4 47:39
* 48 Scrapy新闻爬虫项目实战(上).mp4 41:17
* 49 Scrapy新闻爬虫项目实战(下).mp4 44:53
* 50 Scrapy豆瓣网登陆爬虫与验证码自动识别项目实战1.mp4 38:10
* 51 Scrapy豆瓣网登陆爬虫与验证码自动识别项目实战2.mp4 36:39
* 52 如何在Urllib中使用XPath表达式.mp4 19:08
* 53 Scrapy与Urllib的整合使用1(使用以京东图书商品爬虫为例).mp4 55:36
* 54 Scrapy与Urllib的整合使用2(以京东图书商品爬虫为例).mp4 15:37
* 55 Scrapy与Urllib的整合使用3(以京东图书商品爬虫为例).mp4 55:32
* 56 Scrapy与Urllib的整合使用4(以京东图书商品爬虫为例).mp4 19:14
* 57 淘宝商品大型爬虫项目与自动写入数据库实战.mp4 52:56
* 58 补充内容:BeautifulSoup基础实战.mp4 29:40
* 59 补充内容:PhantomJS基础实战.mp4 28:00
* 60 腾讯动漫爬虫项目实战1(JS动态触发+id随机生成反爬破解实战).mp4 50:01
* 61 腾讯动漫爬虫项目实战2(JS动态触发+id随机生成反爬破解实战).mp4 05:55
* 62 分布式爬虫实现原理.mp4 28:27
* 63 分布式爬虫之Docker基础.mp4 43:56
* 64 分布式爬虫之Redis基础.mp4 21:18
* 65 分布式爬虫构建实战.mp4 01:08:15






