V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
hkitdog
V2EX  ›  问与答

如何爬取用了动态渲染标签属性值的网站?

  •  
  •   hkitdog · Apr 14, 2019 · 612 views
    This topic created in 2570 days ago, the information mentioned may be changed or developed.

    刚刚接触爬虫不久,想找个网站练下手, 在墙外闲逛时,发现一个界面挺有趣的单页面应用,看了下结构,头都大了,是这样子的

    https://i.loli.net/2019/04/14/5cb34cd3c71b6.png

    每隔 10-15 分钟,重新载入页面时 class 的值又换了

    看了下请求 json 数据的 ajax api, 有个自定义头部 x-li-device,应该是签名用的,js 好像混淆了,没找到关键代码在哪

    https://i.loli.net/2019/04/14/5cb34e742faf2.png

    网站地址: https://lihkg.com/ 要梯子才可以上.

    2 replies    2019-04-14 23:34:21 +08:00
    hkitdog
        1
    hkitdog  
    OP
       Apr 14, 2019
    ..第一次发图,怎么不显示呢。。。
    Eiden
        2
    Eiden  
       Apr 14, 2019 via Android
    js 打断点慢慢追踪
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   5240 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 31ms · UTC 01:12 · PVG 09:12 · LAX 18:12 · JFK 21:12
    ♥ Do have faith in what you're doing.