acwind
V2EX  ›  服务器

查日志发现有不少 IP 会隔 3 分钟抓取一次网站首页,不知道是干什么的

  •  
  •   acwind · Dec 3, 2014 · 3636 views
    This topic created in 4208 days ago, the information mentioned may be changed or developed.
    蛮多这种IP,每三分钟访问一次网站首页

    
    很奇怪,不知道是干什么的?agent里也不写清楚,感觉是在检测我的网站有没有当机?
    大家有遇到这种情况么?
    5 replies    2014-12-03 20:23:16 +08:00
    kslr
        1
    kslr  
       Dec 3, 2014
    adsl 爬虫吧
    zhs227
        2
    zhs227  
       Dec 3, 2014
    是个什么站,有没有什么在线时间与等级挂钩,积分换内容之类的。
    saber000
        3
    saber000  
       Dec 3, 2014
    应该是监控,像阿里云这样的服务商都能设置这种监控.
    gpg
        4
    gpg  
       Dec 3, 2014
    监控爬虫
    onlyice
        5
    onlyice  
       Dec 3, 2014
    3 分钟一次 HEAD,10 分钟一次 GET,不像是做什么坏事
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5124 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 42ms · UTC 09:30 · PVG 17:30 · LAX 02:30 · JFK 05:30
    ♥ Do have faith in what you're doing.