日志分析平台建设方案
现状和需求
现状与问题
日志文件分散在各个应用服务器,
开发人员必须
远程登录
才能查看日志,不利于服务器
安全管控,加大生产服务器的风险
;服务器上各项目
日志配置很随意,文件
分布杂乱
,没有统一的规范和管理;
日志文件占用服务器
大量的硬盘空间,如不及时清理会发生硬盘
占满,影响系统的正常运行;
对于超过百兆的日志文件根本没法打开和关键字搜索
,不利于问题的快速定位和排查;
集群和分布式的系统需要查看多个服务器的日志
日志保存的时间不统一,不能长
时间保存日志需求说明与分析
不需要开发人员登录生产服务器就能查看日志
;统一规范日志的配置和输出格式;
实时的将
日志文件从服务器中迁出
;提供日志的检索和统计分析的平台
;建设目标
搭建支持高并发高可靠的日志分析
平台,方便开发人员快速的检索日志,排查问题,同时提供友好的分析和统计的界面。
系统设计技术选型
针对这些问题,为了提供分布式的实时日志搜集和分析的监控系统,我们采用了业界通用的日志数据管理解决方案 — 它主要包括 Elasticsearch 、 Logstash 和 Kibana 三个系统。通常,业界把 ...


雷达卡


京公网安备 11010802022788号







