爱意满满的作品展示区。
vilicvane

写了个 V2EX 爆贴爬虫,避免错过群体吃瓜事件

  •  1
     
  •   vilicvane ·
    vilicvane · Mar 29, 2022 · 6813 views
    This topic created in 1532 days ago, the information mentioned may be changed or developed.

    订阅地址 https://www.dingshao.cn/share/channel/FzFypN


    爬虫逻辑:

    • 每五分钟检查一次“全部”帖子列表,推送新增评论达到条件的帖子。
    • 爆贴筛选条件:5 分钟 10 个评论,或 10 分钟 15 个评论,或 30 分钟 20 个评论。

    最近几天爬到的爆贴有:

    • [问与答] 外包公司有个职位去香港,值得去吗( 3 月 29 日,今天)
    • [硬件] 游戏本还是 switch ( 3 月 28 日)
    • [职场话题] 奇葩人接受 Offer 后拖了 28 天然后说不来了( 3 月 24 日)

    脚本源码 https://github.com/digshare-scripts/v2ex-trending/blob/main/src/script.ts

    20 replies    2022-03-29 20:20:59 +08:00
    Tink
        1
    Tink  
    PRO
       Mar 29, 2022 via Android
    这个时间是根据帖子上面的 x 分钟前吗
    jr55475f112iz2tu
        2
    jr55475f112iz2tu  
       Mar 29, 2022
    这和 V2EX 自己的 “今日热议主题” 有什么差别吗...
    vilicvane
        3
    vilicvane  
    OP
       Mar 29, 2022
    @Tink 不是,是计算了每段时间的评论变化数量~
    @czfy 一方面是今日热议通常不够热,另一个是没有推送。我是想比如哪天又爆出了一个职场大瓜的时候第一时间知道。
    madlifer
        4
    madlifer  
       Mar 29, 2022   ❤️ 1
    抓住了老万
    xiaocongcong
        5
    xiaocongcong  
       Mar 29, 2022
    V2 上真正有料的瓜活不过 5 分钟的,其他不重要的瓜去看热搜就好啦,根本不会错过。
    NVDA
        6
    NVDA  
       Mar 29, 2022 via iPhone
    不如爬爬水深火热
    vilicvane
        7
    vilicvane  
    OP
       Mar 29, 2022
    @xiaocongcong 啊,不是有评论不能删帖的吗。
    vilicvane
        8
    vilicvane  
    OP
       Mar 29, 2022
    @Mirage09 这是个梗吗?没有理解。
    NVDA
        9
    NVDA  
       Mar 29, 2022 via iPhone   ❤️ 1
    @vilic
    hhh 不是梗,单纯不理解为什么最近好几个 pandemic 相关的贴子都进了水深火热
    也许管理员不想看到人间疾苦吧
    xiaocongcong
        10
    xiaocongcong  
       Mar 29, 2022
    @Mirage09 网控现在不能发关于任何负面的东西,讨论都不行
    licsber
        11
    licsber  
       Mar 29, 2022   ❤️ 1
    @vilic #8 水深火热是 v2 的隐藏节点
    @Mirage09 #9 很显然 OP 不知道水深火热的意思
    xiaocongcong
        12
    xiaocongcong  
       Mar 29, 2022
    @vilic 有幸回过两贴,还是不讨论这些了
    drush
        13
    drush  
       Mar 29, 2022   ❤️ 1
    vilicvane
        14
    vilicvane  
    OP
       Mar 29, 2022
    @Mirage09 @drush 原来如此,谢谢了,好吧看来我混 V2EX 还是太水了。
    vilicvane
        15
    vilicvane  
    OP
       Mar 29, 2022
    @Licsber 是的,见笑了哈哈。
    rain423
        16
    rain423  
       Mar 29, 2022   ❤️ 1
    有 nga 的爆贴备份吗?
    vilicvane
        17
    vilicvane  
    OP
       Mar 29, 2022
    @rain423 有道理,我加个 TODO 。
    PerFectTime
        18
    PerFectTime  
       Mar 29, 2022
    然而并不是不能删帖,全凭喜好
    pengtdyd
        19
    pengtdyd  
       Mar 29, 2022
    今日热议主题 不是有这个吗,为啥要花时间做无用功
    vilicvane
        20
    vilicvane  
    OP
       Mar 29, 2022
    @PerFectTime 🤔
    @pengtdyd 我平时水 V2EX 的时间不多,更多是想有热点的时候推给我。今日热议对我来说太多了,而且不是主动推送的。
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1071 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 46ms · UTC 22:50 · PVG 06:50 · LAX 15:50 · JFK 18:50
    ♥ Do have faith in what you're doing.