这套日志系统课解决什么工作场景

很多公司的日志底座还在用 ElasticSearch,但随着数据量激增,集群动不动就要扩容,机器成本和运维压力非常大。这套资料的核心主题,是用 ClickHouse 替换 ES 来做日志存储与查询。它直接对应的工作场景是:业务日志量暴涨导致 ES 集群扛不住、查询卡顿,或者老板要求压缩服务器成本时,你需要拿出一套既能降本又能保证查询效率的落地方案。课程并没有停留在念概念,而是把 ES 和 ClickHouse 的硬件成本、索引机制做了直接对比,帮你理清在什么数据规模和查询需求下,换底座才是一笔划算的账。如果你正接手一个需要重构的日志平台,或者想在公司内部推动基础架构降本增效,这套内容能给你提供具体的选型依据和架构参考。

适合什么基础与建议先看哪几块

这套资料不适合完全没接触过后端运维的新手。它默认你懂基本的 Linux 操作,写过简单的 SQL,最好有过部署数据库或日志采集工具的经历。如果你只做过纯业务开发,没碰过服务器,中间的部署配置环节可能会觉得吃力。建议拿到资料后,不要从头按顺序点,先看开篇的成本比对与索引对比这几块,弄明白为什么要换技术栈,确认这套方案符合你当前公司的痛点。接着直接跳到日志架构详解,在脑海里把整体数据流转链路拼凑完整。理清链路后,再去看采集端和部署端的具体操作。这种看法能帮你避开一开始就陷入敲命令的细节泥潭,先抓全局。

资料怎么配合练习与学完能独立做什么

这套课的实操属性很强,涵盖了从采集、传输到存储的完整链路工具。看视频时务必准备一台虚拟机或云服务器跟着同步操作。资料里演示了多种工具的配合使用,建议你先把存储端的 ClickHouse 环境跑通,调好系统层面的优化参数;然后再去配采集端,尝试把本机的测试日志真实地写入到数据库里。不要只看不练,这类架构课如果脱离了动手验证,过几天就会忘光。学完这套资料,你应该能独立搭建一套完整的日志系统:从在服务器上部署高可用存储集群,到配置轻量级采集器实时抓取业务日志,再到最终在终端进行日志检索。当你能在自己的测试环境里跑通这条闭环,就算真正掌握了,后续把它平移到公司的生产环境只是规模放大和参数微调的问题。


既可以提高自己的运维技能,实现升职加薪;又可以为公司降本增效。

课程目录

*   01 基于Clickhouse搭建下一代的日志系统/

  *   01 使用Clickhouse的背景跟好处.mp4 (28.10 MB), 05:58

  *   02 clickhouse跟ES成本比对.mp4 (20.74 MB), 05:29

  *   03 clickhouse跟ES索引的对比.mp4 (6.16 MB), 02:02

  *   04 日志架构详解.mp4 (3.30 MB), 01:24

  *   05 ilogtail部署以及配置.mp4 (107.81 MB), 18:02

  *   06 clickhouse的环境优化.mp4 (34.64 MB), 07:29

  *   07 使用ckman 部署Clickhouse.mp4 (62.89 MB), 16:25

  *   08 vector基本使用介绍.mp4 (58.05 MB), 15:41

  *   09 vector消费数据,写入clickhouse配置讲解.mp4 (74.61 MB), 16:53

  *   10 clickhouse 创建表.mp4 (34.47 MB), 09:03

  *   11 ilogtail输入数据到vector写入Ck全流程演示.mp4 (40.32 MB), 07:08

  *   12 clickvisual 部署.mp4 (83.81 MB), 18:46