Python 移动端爬虫与自动化全链路实战

体系课

0 人浏览发布 2026-06-09更新 2026-06-09

手把手跑通采集--解析--存储--分析，助你从“ 小白 ”变身“ App 数据挖掘高手 ”

* 第1章课程导学/

* 1-1 你的APP数据掘金之路，从这里正式开始.mp4 07:16

* 第2章移动端爬虫项目分析/

* 2-1 项目效果展示&需求分析.mp4 03:17

* 2-2 项目规模说明：开发范围与复杂度概述.mp4 02:37

* 2-3 模块划分与功能：核心模块及其作用.mp4 04:56

* 2-4 项目架构设计：模块协作与流程解析.mp4 05:15

* 2-5 技术难点解析：关键问题与解决方案.mp4 13:34

* 2-6 移动端爬虫技术选型：核心工具解析.mp4 06:30

* 2-7 技术规模与成熟度：工具生态与稳定性分析.mp4 05:31

* 第3章项目环境搭建，打通各类环境的作用与关联/

* 3-1 开发环境搭建：从零开始配置高效开发工具.mp4 11:40

* 3-2 安卓模拟器安装：快速部署虚拟测试设备.mp4 06:55

* 3-3 安卓模拟器设备联调：实现模拟器与开发环境的无缝对接.mp4 07:06

* 3-4 USB调试真实安卓手机：连接真实设备进行高效测试.mp4 11:45

* 第4章移动端爬虫必备自动化工具Appium初探/

* 4-1 Appium 简介：移动端爬虫的核心工具解析.mp4 04:52

* 4-2 Appium 安装与配置：快速搭建移动端爬虫开发环境.mp4 09:58

* 4-3 Appium 架构介绍：深入理解Appium的工作机制.mp4 04:16

* 4-4 Android界面布局工具：Appium-Inspector安装和测试.mp4 07:01

* 第5章熟悉Appium的常用操作，实现与移动端应用界面的自动化交互/

* 5-1 ID定位：基于属性ID，静态页面首选.pptx.mp4 08:32

* 5-2 XPath定位：XML路径表达式，支持动态元素.mp4 13:22

* 5-3 Accessibility ID：移动端及无障碍优化.mp4 07:01

* 5-4 Class定位：批量定位同类元素.mp4 13:29

* 5-5 CSS定位：语法简洁，性能优异.mp4 17:29

* 5-6 Link定位：完全匹配超链接文本.mp4 06:18

* 5-7 Partial Link：模糊匹配链接片段.mp4 09:53

* 5-8 点击操作：显式等待确保可交互.mp4 17:03

* 5-9 文本输入：处理虚拟键盘与加密输入.mp4 21:04

* 5-10 清除文本：快速清理输入框内容的操作方法.mp4 07:34

* 5-11 获取元素属性：提取UI核心值的实用技巧.mp4 16:31

* 第6章掌握Appium的内置功能，提升爬虫的开发效率和稳定性/

* 6-1 长按与拖拽：复合手势链式触发核心技术.mp4 27:46

* 6-2 智能滚动策略：动态加载与边界自适应控制逻辑.mp4 16:48

* 6-3 多点触控同步：多指坐标映射 (1).mp4 21:11

* 6-4 多点触控同步：多指坐标映射 (2).mp4 21:32

* 6-5 应用生命周期控制：冷热启动与后台资源调度策略.mp4 07:46

* 6-6 多任务切换逻辑：进程栈管理与应用上下文保活方案.mp4 07:57

* 6-7 屏幕帧捕获技术：渲染层截取与界面状态同步机制.mp4 19:17

* 6-8 通知栏操控模拟：折叠式消息响应与权限穿透方案.mp4 19:17

* 6-9 虚拟定位引擎：地理围栏漂移与多源定位融合策略.mp4 13:20

* 第7章爬虫项目之移动端短视频实战【Appium关联实战】/

* 7-1 移动端实战Part01：热门视频信息采集方案解析.mp4 16:23

* 7-2 Appium与XPath协同实现视频元数据高效采集（1）.mp4 25:16

* 7-3 Appium与XPath协同实现视频元数据高效采集（2）.mp4 25:09

* 7-4 本地数据库构建：关系型数据库部署与应用实践.mp4 21:26

* 7-5 数据存储对接：批量数据入库与事务管理机制.mp4 16:39

* 7-6 自动化流程优化：滑动加载与防检测机制集成.mp4 11:31

* 第8章熟悉app爬虫神器--MitmProxy核心功能，掌握网络数据获取的关键技能/

* 8-1 mitmproxy 核心原理：中间人攻击与流量解密机制.mp4 09:43

* 8-2 组件架构解析：命令行Web界面脚本引擎协同工作.mp4 04:23

* 8-3 代理工具对比评测：FiddlerCharlesWireshark功能差异.mp4 08:09

* 8-4 环境快速部署：跨平台安装与依赖配置指南.mp4 05:22

* 8-5 HTTPS解密原理：CA证书生成与信任链配置.mp4 15:47

* 8-6 代理策略定制：正向透明反向代理模式实战.mp4 16:24

* 8-7 代理证书配置：Windows、macOS、Linux环境适配.mp4 18:40

* 8-8 服务启动方案：命令行、Web界面、脚本集成模式.mp4 04:00

* 8-9 流量捕获技术：HTTP、HTTPS实时监听与协议解析.mp4 12:36

* 8-10 请求深度解析：Header、Body、Cookie结构拆解（1）.mp4 15:08

* 8-11 请求深度解析：Header、Body、Cookie结构拆解（2）.mp4 14:03

* 8-12 请求篡改技术：Header、Body动态编辑策略（1）.mp4 14:01

* 8-13 请求篡改技术：Header、Body动态编辑策略（2）.mp4 11:37

* 8-14 响应模拟方案：状态码内容实时替换技术（1）.mp4 14:21

* 8-15 响应模拟方案：状态码内容实时替换技术（2）.mp4 13:14

* 8-16 流量筛选机制：正则表达式与逻辑运算符实战.mp4 17:26

* 8-17 高效检索方案：多条件组合搜索技巧.mp4 27:08

* 8-18 流量阻断控制：断点调试与条件拦截策略.mp4 15:39

* 8-19 请求重放机制：定时、批量重放测试（1）.mp4 20:20

* 8-20 请求重放机制：定时、批量重放测试（2）.mp4 19:42

* 第9章掌握MitmProxy的核心组件应用，增强爬虫开发的灵活性/

* 9-1 mitmdump实战指南：命令行高效流量分析（1）.mp4 16:10

* 9-2 mitmdump实战指南：命令行高效流量分析（2）.mp4 17:12

* 9-3 mitmweb应用解析：Web界面可视化操作实践.mp4 13:47

* 9-4 网络监控全链路：实时流量捕获与诊断技术（1）.mp4 14:55

* 9-5 网络监控全链路：实时流量捕获与诊断技术（2）.mp4 16:34

* 9-6 数据解析实战：抓包数据多维建模与特征提取（1）.mp4 17:13

* 9-7 数据解析实战：抓包数据多维建模与特征提取（2）.mp4 13:11

* 第10章提升MitmProxy的高阶开发能力，拓展爬虫开发的适应性及安全性/

* 10-1 移动端爬虫技巧：抓包技术解析与案例.mp4 11:56

* 10-2 安全分析与漏洞挖掘：抓包工具的安全审计应用.mp4 06:55

* 10-3 数据抓取实践：抓包技术在爬虫中的核心应用.mp4 14:23

* 10-4 插件开发实战指南：mitmproxy功能扩展技巧.mp4 05:57

* 10-5 mitmproxy插件开发：基础流程与实践（1）.mp4 19:49

* 10-6 mitmproxy插件开发：基础流程与实践（2）.mp4 19:47

* 10-7 安全风险防范：抓包工具合规操作指南.mp4 07:47

* 10-8 HTTPS证书信任：常见问题与解决方案.mp4 08:04

* 10-9 代理连接故障诊断：问题定位与修复策略.mp4 10:45

* 10-10 性能调优策略：抓包工具高效运行方法.mp4 06:29

* 10-11 实战场景解析：抓包工具的多领域应用.mp4 13:07

* 第11章爬虫项目之移动端短视频实战【短视频热门话题视频采集与存储技术全链路解析】/

* 11-1 移动端实战Part02：实时视频流动态采集方案.mp4 11:37

* 11-2 短视频API逆向工程：请求参数捕获与接口分析.mp4 24:47

* 11-3 接口参数逆向：视频列表关键字段解析技术.mp4 12:25

* 11-4 元数据解析：标题作者点赞数据精准提取.mp4 16:59

* 11-5 资源定位技术：直链与封面地址高效解析.mp4 23:28

* 11-6 分布式存储架构：基于MinIO的私有化部署.mp4 22:25

* 11-7 高效处理：异步处理数据和视频下载（1）.mp4 32:02

* 11-8 高效处理：异步处理数据和视频下载（2）.mp4 03:24

* 11-9 高效存储：基于MinIO的短视频存储方案（1）.mp4 19:17

* 11-10 高效存储：基于MinIO的短视频存储方案（2）.mp4 18:18

* 11-11 适合抓直播哟：基于HLS的视频流存储方案（1）.mp4 21:58

* 11-12 适合抓直播哟：基于HLS的视频流存储方案（2）.mp4 25:43

* 第12章安卓群控系统架构与自动化项目/

* 12-1 安卓群控系统架构与自动化项目介绍.mp4 07:28

* 12-2 需求分析与技术方案设计.mp4 07:30

* 12-3 模拟器连接参数配置与标准化.mp4 06:56

* 12-4 基于脚本的模拟器实例化连接.mp4 05:33

* 12-5 模拟器屏幕锁状态检测机制.mp4 08:19

* 12-6 模拟器自动化解锁流程实现.mp4 15:05

* 12-7 Keycode映射表密码输入方案-1.mp4 11:00

* 12-8 Keycode映射表密码输入方案-2.mp4 17:48

* 12-9 智能锁屏状态检测与自动解锁优化.mp4 10:48

* 12-10 脚本代码面向对象重构方案.mp4 17:40

* 12-11 应用层类继承模拟器基类实现.mp4 18:13

* 12-12 模拟器内应用连接参数配置.mp4 08:30

* 12-13 用户协议自动化确认功能实现.mp4 07:12

* 12-14 四向滑动手势操作封装实现.mp4 13:06

* 12-15 模拟器内应用自动化操作框架-1.mp4 14:57

* 12-16 模拟器内应用自动化操作框架-2.mp4 14:58

* 12-17 非初始化状态应用冷启动方案.mp4 11:36

* 12-18 全链路联调：模拟器重启至应用自动化.mp4 12:54

* 12-19 现有技术方案局限性分析.mp4 04:38

* 12-20 多进程优化与多实例模拟器控制.mp4 10:25

* 12-21 模拟器类Appium服务集成方案.mp4 21:35

* 12-22 模拟器实例自动化发现机制-1.mp4 13:09

* 12-23 模拟器实例自动化发现机制-2.mp4 13:58

* 12-24 模拟器集群动态管理与维护.mp4 16:25

* 12-25 系统联调：自动化管理与进程维持-01.mp4 00:26

* 12-26 系统联调：自动化管理与进程维持-02.mp4 16:50

* 12-27 系统级联：系统多级日志存储方案.mp4 17:45

* 12-28 架构升级：数据存储和可视化界面方案介绍.mp4 13:57

* 第13章 Streamlit可视化数据分析，提效数据展示与分析

* 第14章【Streamlit实战】AI 交互与系统报告生成平台的设计与实现

* 第15章【Streamlit实战】群控架构日志文件可视化项目

* 第16章如何应对应用设置的反扒机制

* 第17章课程总结

Python 移动端爬虫与自动化全链路实战

体系课

0 人浏览发布 2026-06-09更新 2026-06-09

手把手跑通采集--解析--存储--分析，助你从“ 小白 ”变身“ App 数据挖掘高手 ”

* 第1章课程导学/

* 1-1 你的APP数据掘金之路，从这里正式开始.mp4 07:16

* 第2章移动端爬虫项目分析/

* 2-1 项目效果展示&需求分析.mp4 03:17

* 2-2 项目规模说明：开发范围与复杂度概述.mp4 02:37

* 2-3 模块划分与功能：核心模块及其作用.mp4 04:56

* 2-4 项目架构设计：模块协作与流程解析.mp4 05:15

* 2-5 技术难点解析：关键问题与解决方案.mp4 13:34

* 2-6 移动端爬虫技术选型：核心工具解析.mp4 06:30

* 2-7 技术规模与成熟度：工具生态与稳定性分析.mp4 05:31

* 第3章项目环境搭建，打通各类环境的作用与关联/

* 3-1 开发环境搭建：从零开始配置高效开发工具.mp4 11:40

* 3-2 安卓模拟器安装：快速部署虚拟测试设备.mp4 06:55

* 3-3 安卓模拟器设备联调：实现模拟器与开发环境的无缝对接.mp4 07:06

* 3-4 USB调试真实安卓手机：连接真实设备进行高效测试.mp4 11:45

* 第4章移动端爬虫必备自动化工具Appium初探/

* 4-1 Appium 简介：移动端爬虫的核心工具解析.mp4 04:52

* 4-2 Appium 安装与配置：快速搭建移动端爬虫开发环境.mp4 09:58

* 4-3 Appium 架构介绍：深入理解Appium的工作机制.mp4 04:16

* 4-4 Android界面布局工具：Appium-Inspector安装和测试.mp4 07:01

* 第5章熟悉Appium的常用操作，实现与移动端应用界面的自动化交互/

* 5-1 ID定位：基于属性ID，静态页面首选.pptx.mp4 08:32

* 5-2 XPath定位：XML路径表达式，支持动态元素.mp4 13:22

* 5-3 Accessibility ID：移动端及无障碍优化.mp4 07:01

* 5-4 Class定位：批量定位同类元素.mp4 13:29

* 5-5 CSS定位：语法简洁，性能优异.mp4 17:29

* 5-6 Link定位：完全匹配超链接文本.mp4 06:18

* 5-7 Partial Link：模糊匹配链接片段.mp4 09:53

* 5-8 点击操作：显式等待确保可交互.mp4 17:03

* 5-9 文本输入：处理虚拟键盘与加密输入.mp4 21:04

* 5-10 清除文本：快速清理输入框内容的操作方法.mp4 07:34

* 5-11 获取元素属性：提取UI核心值的实用技巧.mp4 16:31

* 第6章掌握Appium的内置功能，提升爬虫的开发效率和稳定性/

* 6-1 长按与拖拽：复合手势链式触发核心技术.mp4 27:46

* 6-2 智能滚动策略：动态加载与边界自适应控制逻辑.mp4 16:48

* 6-3 多点触控同步：多指坐标映射 (1).mp4 21:11

* 6-4 多点触控同步：多指坐标映射 (2).mp4 21:32

* 6-5 应用生命周期控制：冷热启动与后台资源调度策略.mp4 07:46

* 6-6 多任务切换逻辑：进程栈管理与应用上下文保活方案.mp4 07:57

* 6-7 屏幕帧捕获技术：渲染层截取与界面状态同步机制.mp4 19:17

* 6-8 通知栏操控模拟：折叠式消息响应与权限穿透方案.mp4 19:17

* 6-9 虚拟定位引擎：地理围栏漂移与多源定位融合策略.mp4 13:20

* 第7章爬虫项目之移动端短视频实战【Appium关联实战】/

* 7-1 移动端实战Part01：热门视频信息采集方案解析.mp4 16:23

* 7-2 Appium与XPath协同实现视频元数据高效采集（1）.mp4 25:16

* 7-3 Appium与XPath协同实现视频元数据高效采集（2）.mp4 25:09

* 7-4 本地数据库构建：关系型数据库部署与应用实践.mp4 21:26

* 7-5 数据存储对接：批量数据入库与事务管理机制.mp4 16:39

* 7-6 自动化流程优化：滑动加载与防检测机制集成.mp4 11:31

* 第8章熟悉app爬虫神器--MitmProxy核心功能，掌握网络数据获取的关键技能/

* 8-1 mitmproxy 核心原理：中间人攻击与流量解密机制.mp4 09:43

* 8-2 组件架构解析：命令行Web界面脚本引擎协同工作.mp4 04:23

* 8-3 代理工具对比评测：FiddlerCharlesWireshark功能差异.mp4 08:09

* 8-4 环境快速部署：跨平台安装与依赖配置指南.mp4 05:22

* 8-5 HTTPS解密原理：CA证书生成与信任链配置.mp4 15:47

* 8-6 代理策略定制：正向透明反向代理模式实战.mp4 16:24

* 8-7 代理证书配置：Windows、macOS、Linux环境适配.mp4 18:40

* 8-8 服务启动方案：命令行、Web界面、脚本集成模式.mp4 04:00

* 8-9 流量捕获技术：HTTP、HTTPS实时监听与协议解析.mp4 12:36

* 8-10 请求深度解析：Header、Body、Cookie结构拆解（1）.mp4 15:08

* 8-11 请求深度解析：Header、Body、Cookie结构拆解（2）.mp4 14:03

* 8-12 请求篡改技术：Header、Body动态编辑策略（1）.mp4 14:01

* 8-13 请求篡改技术：Header、Body动态编辑策略（2）.mp4 11:37

* 8-14 响应模拟方案：状态码内容实时替换技术（1）.mp4 14:21

* 8-15 响应模拟方案：状态码内容实时替换技术（2）.mp4 13:14

* 8-16 流量筛选机制：正则表达式与逻辑运算符实战.mp4 17:26

* 8-17 高效检索方案：多条件组合搜索技巧.mp4 27:08

* 8-18 流量阻断控制：断点调试与条件拦截策略.mp4 15:39

* 8-19 请求重放机制：定时、批量重放测试（1）.mp4 20:20

* 8-20 请求重放机制：定时、批量重放测试（2）.mp4 19:42

* 第9章掌握MitmProxy的核心组件应用，增强爬虫开发的灵活性/

* 9-1 mitmdump实战指南：命令行高效流量分析（1）.mp4 16:10

* 9-2 mitmdump实战指南：命令行高效流量分析（2）.mp4 17:12

* 9-3 mitmweb应用解析：Web界面可视化操作实践.mp4 13:47

* 9-4 网络监控全链路：实时流量捕获与诊断技术（1）.mp4 14:55

* 9-5 网络监控全链路：实时流量捕获与诊断技术（2）.mp4 16:34

* 9-6 数据解析实战：抓包数据多维建模与特征提取（1）.mp4 17:13

* 9-7 数据解析实战：抓包数据多维建模与特征提取（2）.mp4 13:11

* 第10章提升MitmProxy的高阶开发能力，拓展爬虫开发的适应性及安全性/

* 10-1 移动端爬虫技巧：抓包技术解析与案例.mp4 11:56

* 10-2 安全分析与漏洞挖掘：抓包工具的安全审计应用.mp4 06:55

* 10-3 数据抓取实践：抓包技术在爬虫中的核心应用.mp4 14:23

* 10-4 插件开发实战指南：mitmproxy功能扩展技巧.mp4 05:57

* 10-5 mitmproxy插件开发：基础流程与实践（1）.mp4 19:49

* 10-6 mitmproxy插件开发：基础流程与实践（2）.mp4 19:47

* 10-7 安全风险防范：抓包工具合规操作指南.mp4 07:47

* 10-8 HTTPS证书信任：常见问题与解决方案.mp4 08:04

* 10-9 代理连接故障诊断：问题定位与修复策略.mp4 10:45

* 10-10 性能调优策略：抓包工具高效运行方法.mp4 06:29

* 10-11 实战场景解析：抓包工具的多领域应用.mp4 13:07

* 第11章爬虫项目之移动端短视频实战【短视频热门话题视频采集与存储技术全链路解析】/

* 11-1 移动端实战Part02：实时视频流动态采集方案.mp4 11:37

* 11-2 短视频API逆向工程：请求参数捕获与接口分析.mp4 24:47

* 11-3 接口参数逆向：视频列表关键字段解析技术.mp4 12:25

* 11-4 元数据解析：标题作者点赞数据精准提取.mp4 16:59

* 11-5 资源定位技术：直链与封面地址高效解析.mp4 23:28

* 11-6 分布式存储架构：基于MinIO的私有化部署.mp4 22:25

* 11-7 高效处理：异步处理数据和视频下载（1）.mp4 32:02

* 11-8 高效处理：异步处理数据和视频下载（2）.mp4 03:24

* 11-9 高效存储：基于MinIO的短视频存储方案（1）.mp4 19:17

* 11-10 高效存储：基于MinIO的短视频存储方案（2）.mp4 18:18

* 11-11 适合抓直播哟：基于HLS的视频流存储方案（1）.mp4 21:58

* 11-12 适合抓直播哟：基于HLS的视频流存储方案（2）.mp4 25:43

* 第12章安卓群控系统架构与自动化项目/

* 12-1 安卓群控系统架构与自动化项目介绍.mp4 07:28

* 12-2 需求分析与技术方案设计.mp4 07:30

* 12-3 模拟器连接参数配置与标准化.mp4 06:56

* 12-4 基于脚本的模拟器实例化连接.mp4 05:33

* 12-5 模拟器屏幕锁状态检测机制.mp4 08:19

* 12-6 模拟器自动化解锁流程实现.mp4 15:05

* 12-7 Keycode映射表密码输入方案-1.mp4 11:00

* 12-8 Keycode映射表密码输入方案-2.mp4 17:48

* 12-9 智能锁屏状态检测与自动解锁优化.mp4 10:48

* 12-10 脚本代码面向对象重构方案.mp4 17:40

* 12-11 应用层类继承模拟器基类实现.mp4 18:13

* 12-12 模拟器内应用连接参数配置.mp4 08:30

* 12-13 用户协议自动化确认功能实现.mp4 07:12

* 12-14 四向滑动手势操作封装实现.mp4 13:06

* 12-15 模拟器内应用自动化操作框架-1.mp4 14:57

* 12-16 模拟器内应用自动化操作框架-2.mp4 14:58

* 12-17 非初始化状态应用冷启动方案.mp4 11:36

* 12-18 全链路联调：模拟器重启至应用自动化.mp4 12:54

* 12-19 现有技术方案局限性分析.mp4 04:38

* 12-20 多进程优化与多实例模拟器控制.mp4 10:25

* 12-21 模拟器类Appium服务集成方案.mp4 21:35

* 12-22 模拟器实例自动化发现机制-1.mp4 13:09

* 12-23 模拟器实例自动化发现机制-2.mp4 13:58

* 12-24 模拟器集群动态管理与维护.mp4 16:25

* 12-25 系统联调：自动化管理与进程维持-01.mp4 00:26

* 12-26 系统联调：自动化管理与进程维持-02.mp4 16:50

* 12-27 系统级联：系统多级日志存储方案.mp4 17:45

* 12-28 架构升级：数据存储和可视化界面方案介绍.mp4 13:57

* 第13章 Streamlit可视化数据分析，提效数据展示与分析

* 第14章【Streamlit实战】AI 交互与系统报告生成平台的设计与实现

* 第15章【Streamlit实战】群控架构日志文件可视化项目

* 第16章如何应对应用设置的反扒机制

* 第17章课程总结