去哪儿网MySQL日志分析实践,80%数据丢失都给你救回来!

一、背景

日志记录了一个系统的行为,对于了解系统、诊断问题、辅助审计等都有极其重要的作用。通常最近一段时间的日志访问频率是最高的,我们通过聚合日志,分析日志、汇总数据,帮助开发、运维、DBA了解业务的状态和行为。这次实践是针对MySQL的抓包日志进行分析,当前系统不足以支持新的需求,需要重构一套日志分析系统。

去哪儿网MySQL日志分析实践,80%数据丢失都给你救回来!插图亿华云

现有抓包系统是将 MySQL 请求的所有 SQL 语句抓取并分析之后写入到 Clickhouse 中,数据可以用来分析数据库的操作。

THE END
Copyright © 2024 亿华云