V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
This topic created in 3770 days ago, the information mentioned may be changed or developed.
昨日下午三点半左右，你们运维肯定检测到了一股来自成都某地的异常 IP 。
额，没错那是我干的~
事情是这样滴，前两天闲着没事又无聊~然后我就尝试着自己写了个多线程爬虫框架...两天功夫，就写完了...写完了得测试啊...然后我就寻思着写了个 DEMO...
额，就是这个啦...https://github.com/JamesWone/Spy
然后今天我想再测试的时候，整死跑不出东西...我还以为我代码有问题呢...于是重构..再跑..再重构..再跑~要抓狂了有木有....
难道是我 ip 被小黑屋了？打开 Chrome....果然被"Acceess Denied"了....
oh~mygod~我完全不是故意的啦~一股罪恶感犹然而上心头~希望 V2EX 不要封我的号啦~毕竟这是我的处女贴啊~QAQ
额~事情就是酱紫...
PS:你们运维反应真快，为 V2EX 点个赞~
 |
1
Liang Dec 31, 2015
大大已报警了。。。看看你最近是否有快递
|
 |
2
Ellison Dec 31, 2015
然而...你多 F5 试试...
|
 |
4
Slienc7 Dec 31, 2015
后台程序自动封的，访问频率过高自动屏蔽对应 IP ，这种应该还不需要人工操作，安心。
|
 |
6
sandideas Dec 31, 2015
自动封的。。
我记得以前弄自动签到的时候有个错误没想出为什么 多弄了几次就被封了三天 |
 |
7
warlock Dec 31, 2015
spy.go 49 行 for w.resp == nil {} 这不会死循环吗？
|
 |
10
justjavac Dec 31, 2015
如何看待知乎又挂了？
|
|
11
justjavac Dec 31, 2015
靠，发错地方了。 https://www.v2ex.com/t/247465
|
2 |
15
mystryl Dec 31, 2015
我三脚猫的功夫写了一个脚本爬限制 ip 的收费资讯网站 5 分钟一次
跑了 3 个月了。。。。期间客服问过我一次干嘛的，我说我挂了个自动刷新 然后就没事了。。 |
 |
18
lxjsmdc Dec 31, 2015
我每天都 Acceess Denied 几次
等 10 分钟过后就行了 因为我习惯每次打开 N 个帖子再浏览 |
 |
19
JamesWone OP @warlock 关于阻塞这个是版本遗留问题了，因为第一版的时候 Spy 句柄是可以在 Filter 中动态的异步回调的，第二版然后就去掉了异步回调改成了 Spy.Sub()同步回调，这样其实这个 for{}就没有必要了，多谢你的提醒哦，我会更进的。
|
 |
21
angryRabbit Dec 31, 2015
我觉得你这不叫爬虫，叫静态网站生成器。。。
|
|
22
JamesWone OP @angryRabbit 233333....
|
 |
23
yeyeye Dec 31, 2015
楼主你好 我们强大的运维告诉你 你的 IP 被自动封禁了 我们的运作并没有受到影响 我们甚至根本就没关注到你的行为 你就被系统干掉了……
|
 |
24
cz208209 Dec 31, 2015
'我要进去了'
‘快点’ ‘我进去了’ ‘快点’ ‘我弄疼你了’ ‘你 TM 的到底进不进去’ |
 |
26
zjqzxc Jan 2, 2016
用 surface 的时候从来没 Acceess Denied 过。。
用台式机经常 Acceess Denied ，，然后就得开全局代理先凑合一下。。 （都是正常使用） 一直没想明白为啥（都是 chrome 而且已登陆，插件会自动同步） |
 |
27
dbdd Jan 6, 2016
看得我胃里一阵翻腾，还好没吃晚饭
|
Select Language