Web  1 sites indexed in VXNA
51 articles feed address
 echoX's recent timeline updates
echoX

echoX

V2EX member #446326, joined on 2019-10-13 10:18:28 +08:00
Today's activity rank 4312
1 G 62 S 6 B
echoX's recent replies
13h 38m ago
Replied to a topic by bokix macOS 来了, M1Max 升级 macOS27
今天发现用一段时间之后,CC switch 和豆包打不开了 豆包跳几下闪退
800 start 啦,谢谢各位佬友支持
@cskeleton #5 codex 做的更好,record and replay 能做成流程,也比较省 token ,不过我这个是纯脚本的方案
@feiniu #2 有少量的反爬措施,我爬一个关键词岗位的,50 来页的详情,没什么问题,再多我没测过
@s3040608090 #4
有简单的反爬

列表页( scripts/boss_cdp_raw.py:903-926 ):

human_scroll():每页随机滚 3–6 次,15% 概率往上回滚(模拟回看),滚动距离随机 150–500px
滚动间隔随机:30% 概率"停下来看"( 2–4s ),其余 0.5–1.5s
human_mouse_jitter():40% 概率随机移动鼠标
首页导航后等 6–10s ,翻页等 12–22s ( boss_cdp_raw.py:937, 1007 )
详情页( scripts/boss_cdp_raw.py:1106-1128 ):

随机滚 3–7 次,12% 概率回滚,停顿 0.8–1.8s 或 2–5s
50% 概率挪鼠标
详情间隔 10–25s ( boss_cdp_raw.py:1153

降低爬取效率,同时也降低了被封概率
参与一下 参与一下
@ryd994 哈哈哈,我打错了,自行做好灾备,做好方案,不过我文字里也没出现自建呀😢你在哪看到自建的
@intoext 是的,互联网底层基础设施无法保证,企业还是要自行最好方案
EasyLink 高品质大带宽云服务器,官网: https://www.vmrack.net?affid=v2ex
736865838929818698
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   944 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 17ms · UTC 22:44 · PVG 06:44 · LAX 15:44 · JFK 18:44
♥ Do have faith in what you're doing.