Home Sign Up Sign In
chaoxcores
V2EX  ›  问与答

ELK+kafka+filebeat 收集 nginx 日志的问题

  •   
  •   chaoxcores · Dec 28, 2019 · 3386 views
    This topic created in 2508 days ago, the information mentioned may be changed or developed.

    ELK 全家桶版本:7.5.1

    环境：Centos7

    描述：不修改 nginx 日志格式的情况下，想要收集 nginx 的 json 格式的数据。使用了 filebeat 提供的 nginx 模板，没加入 logstash 前是可以的，加入 logstash 后收集到的就不是 json 格式了。修改日志格式的方式可以收集到，但是想偷懒...

    问题：有没有什么办法又使用模板又能获得 json 格式数据？

  • Nginx
  • JSON
  • 格式
  • 日志
    6 replies  •  2019-12-28 19:06:25 +08:00
    fmumu
    fmumu
    Dec 28, 2019 via Android
    1
    既然不用 logstash 就可以收集了，为啥还要硬加 logstash。不懂
    Trim21
    Trim21
    Dec 28, 2019 via iPhone
    2
    logstash 设置对应的 codec 为 json ？
    madNeal
    madNeal
    Dec 28, 2019
    3
    不管用不用 logstash 应该都可以，是你姿势不对吧
    chaoxcores
    chaoxcores
    OP
    Dec 28, 2019 via iPhone
    4
    @Trim21 等回头我试试
    chaoxcores
    chaoxcores
    OP
    Dec 28, 2019 via iPhone
    5
    @fmumu 中间加了 kafka
    chaoxcores
    chaoxcores
    OP
    Dec 28, 2019 via iPhone
    6
    @madNeal 我的情况就是通过 logstash 输出到 es 就不是 json 格式，使用 filebeat 模版的情况
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   1003 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 57ms · UTC 22:12 · PVG 06:12 · LAX 14:12 · JFK 17:12
    ♥ Do have faith in what you're doing.