• 请不要在回答技术问题时复制粘贴 AI 生成的内容
linqianqiu
V2EX  ›  程序员

轻松收集日志的方法

  •  
  •   linqianqiu ·
    linqianqiu · Aug 10, 2017 · 4693 views
    This topic created in 3386 days ago, the information mentioned may be changed or developed.

    现在采用的收集日志的方法是:

    使用 logstash input file 收集日志文件,然后 output 到 elasticsearch 中,最后在 kibana 中查看。

    这样做如果服务器比较少,倒是没问题的,但是现在日志文件很多,而且分散在不同的服务器,就会导致收集日志需要配很多遍环境和配置文件。

    有没有一种能轻松收集日志的方法或类似的系统,不需要在服务器配置环境和配置文件,直接运行一个程序,然后在指定的系统中配置信息,就能把数据导入到 elasticsearch 中,可视化查看数据的。

    10 replies  •  2017-08-11 13:16:15 +08:00
    Rand01ph
    Rand01ph
    Aug 10, 2017 via iPhone
    1
    rsyslog
    lxf1992521
    lxf1992521
    Aug 10, 2017
    2
    graylog
    chinvo
    chinvo
    Aug 10, 2017❤️1
    3
    rsyslog + logstash 可以直接入 elastic

    然后用 kibana 查看就简单多了吧

    之前有做过收集路由设备的 log 做分析的项目

    参考链接: https://www.digitalocean.com/community/tutorials/how-to-centralize-logs-with-rsyslog-logstash-and-elasticsearch-on-ubuntu-14-04

    另:Google 一下很容易知道
    idamien
    idamien
    Aug 10, 2017
    4
    直接 kibana web service 写入就好了啊
    idamien
    idamien
    Aug 10, 2017
    5
    你说的是服务器日志 还是 APP 日志

    如果是服务器运行日志 , 可以使用 zabbix 进行全局监控,集成 kibana


    如果是 app 运行日志, 可以直接通过配置 kibana WS 地址,多个 apps 可实现通过远程写入 kibana
    linqianqiu
    linqianqiu
    OP
    Aug 11, 2017
    6
    @chinvo 业务日志好像不能这么做吧
    linqianqiu
    linqianqiu
    OP
    Aug 11, 2017
    7
    @idamien 是服务器日志,我看看 zabbix 全局监控
    234747005
    234747005
    Aug 11, 2017
    8
    filebeat - elastic - kibana
    chinvo
    chinvo
    Aug 11, 2017 via iPhone
    9
    @linqianqiu MySQL、Apache、Nginx 等支持 syslog 的,都可以用 rsyslog 转发去 logstash
    huangfs
    huangfs
    Aug 11, 2017
    10
    scribe?
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   3488 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 34ms · UTC 01:00 · PVG 09:00 · LAX 17:00 · JFK 20:00
    ♥ Do have faith in what you're doing.