这门课解决什么工作场景

很多做运营、产品或传统业务的朋友,日常常遇到这类麻烦:想看竞品页面结构却只能逐条复制,手里拿到一份几万行的销售明细却满是空值和异常格式。这门数据挖掘课针对的就是这种场景。它把链条拆成两段:前半段用 Python 抓公开网页数据,后半段做清洗和特征处理。核心不是讲高深算法,而是帮你把外部杂乱信息变成能进数据库、能上报表的结构化字段。如果你平时总靠手工复制粘贴,或者拿到脏数据只会删空行,这套内容能替你省下大量机械劳动。

适合什么基础,建议先看哪几块

资料默认你懂基本 Python 语法,但不需要写过爬虫工程。如果你连循环和字典都不熟,建议先补一周基础再来看。拿到资料后别按顺序从头啃,建议先看网页解析那几节,重点理解 xpath 和 BeautifulSoup 怎么定位节点,这是抓取能否成功的关键;其次看动态网页解析与模拟登录,因为现在多数电商和社媒内容都是动态加载,静态抓取基本拿不到数据。数据处理部分优先看缺失值与异常处理,这是后续做任何统计的前提。先建立“请求—解析—清洗”的闭环认知,再去碰正则等细节会更顺。

学完能独立做什么,资料怎么配合练习

学完后你能独立完成一个小型采集清洗项目:对一个公开站点发起请求、解析出目标字段、处理缺失值和异常类型,最终输出一份可分析的干净表格。练习时不要只盯着视频看操作,一定要同步开环境跑代码:先用资料里给的示例页面验证解析逻辑是否生效,再换一个结构相似的真实站点试抓,看能否拿到同样字段。数据处理环节建议拿自己工作中的真实导出表,套用缺失值处理方法,对比清洗前后差异。遇到反爬或登录态问题,回看模拟登录那节对照调试。把资料里的代码当模板改,比从头写效率高得多。


掌握数据挖掘与大数据分析的相关知识,能利用python网络爬虫,掌握常见的特征工程的处理应用

课程目录

*   01 python网络爬虫/

  *   01 python网络爬虫介绍.mp4 (30.27 MB), 08:37

  *   02 HTTP请求方法.mp4 (89.34 MB), 19:46

  *   03 静态网页爬取.mp4 (112.40 MB), 22:28

  *   04 正则表达式.mp4 (149.81 MB), 31:25

  *   05 xpath网页解析.mp4 (127.25 MB), 27:39

  *   06 BeautifulSoup网页解析.mp4 (148.85 MB), 35:25

  *   07 动态网页解析.mp4 (96.65 MB), 19:43

  *   08 模拟登录.mp4 (44.31 MB), 09:55

*   02 数据处理/

  *   01 【数据异常】缺失值处理.mp4 (302.21 MB), 59:23

  *   02 【数据异常】重复值处理.mp4 (60.56 MB), 12:17

  *   03 【数据异常】异常值处理.mp4 (102.48 MB), 21:23

  *   04 【数据转换】无量纲化.mp4 (77.05 MB), 15:18

  *   05 【数据转换】离散化.mp4 (59.84 MB), 13:31

  *   06 【数据转换】特征编码.mp4 (103.51 MB), 23:31

  *   07 【案例分析】numpy股票因子数据分析.mp4 (51.13 MB), 10:19

  *   08 【案例分析】定期存款电话营销数据.mp4 (117.70 MB), 21:45

*   03 特征工程/

  *   01 【特征选择概述】特征选择概述.mp4 (70.04 MB), 13:00

  *   02 【过滤法】过滤法ppt讲解.mp4 (64.15 MB), 15:27

  *   03 【过滤法】过滤法代码演示.mp4 (66.51 MB), 11:43

  *   04 【包装法】包装法.mp4 (29.95 MB), 06:02

  *   05 【嵌入法】嵌入法.mp4 (71.83 MB), 13:57

  *   06 【PCA主成分分析】PCA主成分分析ppt讲解.mp4 (79.80 MB), 18:23

  *   07 【PCA主成分分析】PCA主成分分析代码演示.mp4 (60.18 MB), 09:29

  *   08 【LDA线性判别分析及其他】LDA代码演示.mp4 (29.80 MB), 05:08

  *   09 【LDA线性判别分析及其他】LDA线性判别分析ppt.mp4 (77.86 MB), 16:59

  *   10 【机器学习与Scikit-Learn】上.mp4 (242.09 MB), 47:43

  *   11 【机器学习与Scikit-Learn】下.mp4 (286.33 MB), 56:25