ekoeko
V2EX  ›  Kafka

请问大家后台是怎么做用户行为数据采集的呢?

  •  
  •   ekoeko · Aug 21, 2017 · 4563 views
    This topic created in 3218 days ago, the information mentioned may be changed or developed.

    这里是想用前端埋点,发送 get 请求到 nginx 来产生日志,然后用 logstash 收集,发送到 kafka。

    但是问题来了,这里想要区分一下不同的数据上报,目前知道用 nginx 配置不同的路由,产生不一样的日志文件,然后通过路径不同通过 logstash 发送到不同的 kafka 的 topic。但是总感觉这样有点鸡肋,请问大家有没有更好的解决方案?谢谢各位大佬。

    2 replies    2017-08-22 14:01:08 +08:00
    badttt
        1
    badttt  
       Aug 21, 2017 via iPhone   ❤️ 1
    我们就是这么做的,不过来源是原生 Android。不同主题做不同 topic,尽量保证同一 topic 的数据格式一致。其他的没什么,这样实现还是可以的。
    ekoeko
        2
    ekoeko  
    OP
       Aug 22, 2017
    @badttt 好的谢谢,我看别人有的后台是用程序接收然后再发到 Kafka,所以想知道他们怎么搞的,不过目前这样也够用了。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   2688 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 02:19 · PVG 10:19 · LAX 19:19 · JFK 22:19
    ♥ Do have faith in what you're doing.