我们之前对日志的处理是,每天会有一个定时任务处理头一天的日志,会选择一个关键的日志入库,然后可以下载,导出成 excel 之类的,但是随着日志数据量的巨增,发现入库不是一个好的选择,大神们是怎么弄的呢?
我们之前对日志的处理是,每天会有一个定时任务处理头一天的日志,会选择一个关键的日志入库,然后可以下载,导出成 excel 之类的,但是随着日志数据量的巨增,发现入库不是一个好的选择,大神们是怎么弄的呢?
1
duskx Dec 8, 2017 via iPhone
ELK
|
2
cls1991 Dec 8, 2017
elk
|
5
roricon Dec 8, 2017
在 logstash parse log file 的时候加 filter 可以过滤掉你不关心的 log entries
|
6
iugo Dec 8, 2017
之前想过用 Kafka + 自定义处理, 但前一段将日志移入某云. 然后只针对严重的错误进行提醒.
|
7
qqmishi Dec 9, 2017
或者试试 loggly 这种日志服务
|
8
MoliOOO Dec 9, 2017
试试 Graylog
|