@alexkh #96
动不动就屏蔽搜索引擎爬虫？这不是自己私人小站随便玩，这些官网认证为了排第一个都是医院花了钱上去的（别看是正规医院官方网站 有时候也是要交保护费的 这方面医院的信息化省里有考核 不排到第一个 有虚假的排到第一个 导致患者找错医院是要被追责的） 搜索引擎收录量都是有考核指标的


@wafm #93
确实挺有发言权的
http://ww1.sinaimg.cn/large/6c2ea0fbly1fraji3d1rwj20m00eeabo.jpg

@CRVV #80

我不认为是阿里云这个大公司层面上去做这种事，根本无法获得公司通过
但是一些自身 KPI 相关的部门小决策会不会这么搞就不好说了

另外，阿里确实没法控制 360，但是架设这个之前有人说的态势感知是一种 360 公开提供的服务（没搜到相关，但是在 360 的网站安全里感觉可能有这个），你如果有个目标列表，自己申请一个，利用一点 360 的验证漏洞或者干脆做个手脚毕竟 IP 地址是自己家的，然后为我订阅个每小时全站扫描一次的态势感知服务，就实现了增加 KPI 的目的了不是

@a1kaid #71
59 的是我屏蔽了所有顶楼说的 IP 之后大约 8 个小时，出现的新的，而且变更了 UA，以前的 UA 就是 MOZILLZ 5.0 FIREFOX 39 360SPIDER 没有别的
应该是一种 failsafe 这个 IP 段的 UA 都不一样 而且没有之前那几个 IP 段那么多机器 就几个机器


另外针对 70 楼 我这个检查了 没有注入参数 就是单纯的 http get 访问正常 URL

这是一个我自己低性能优化的系统，最终的服务程序已经完全内存化了，无法 handle 任何构造请求，稍微多一点参数进来直接就丢 400 错误了几个字节 不会有每个真正的 15KB 每个访问的流量

@a1kaid #70

这些 IP 正常归属 360 的态势感知，之前已经有人说了
现在的问题有两点，第一，这些 IP 是不是真的，至少访问发生的时候是不是真的
第二，69 楼的重点，为啥他只扫我的流量计费的机器，这里面有啥 py 交易么

@snsd #62
并不是一个 IP 地址啊 几百个并发一堆 IP 地址一起上

@badcode #47
爬网站 打着搜索引擎的 UA 伪装很正常 没必要搭理他 内容都是公开的 不怕别人爬 也需要正常搜索引擎搜索
因为我这不是野鸡医院 都是二甲三甲的正规公立 都带官网认证 事业单位认证的那种 搜索引擎基本都带 V 的
一般黑的爬网站内容，也没有每小时高并发爬一次全站的吧……

@lshero #43
别欺负我没干过搜索引擎 毕竟在熊厂干过
而且真搜索引擎 spider 我这有独立日志，包括 360 的真 spider，都是新增内容过来爬一下，每个独立搜索引擎一天也就 500-2000 左右的访问，分摊到 24 小时内非常零碎


@sobigfish #50
各种监控的 spider 我都已经分开了 各种盾我都没搞过

2018.05.13 10:25
屏蔽了这些 IP 以后 又换了个 spider 来啦
换了 IP 换了 UA
134.73.7.0/24
"Mozilla/5.0 (compatible; MSIE 9.0; Windows NT 6.1; Trident/5.0); 360Spider(compatible; HaosouSpider; http://www.haosou.com/help/help_3_2.html)"

HaosouSpider 233333

屏蔽 IP 流量包立竿见影的不掉了
https://ws1.sinaimg.cn/large/6c2ea0fbly1fr906bzmozj20ll0dpwjw.jpg

@wdlth #27
附属 DD 医院无这个 IP 地址的爬虫记录

@Applenice #15
每小时一次 刷全站的链接 后面数字自增 step2 两组 IP 分别刷奇数参数和偶数参数
一小时一次 刷完就拉倒 下一个小时继续来 并发数非常大，一秒几十个请求（对于超低配 ECS 算是流量巨大了）



@pupboss #14
@leaves7i #7
我这有个

XXXX 大学附属 AA 医院
XXXX 大学附属 BB 医院
XXXX 大学附属 CC 医院
XXXX 大学附属 DD 医院
XXXX 大学附属 EE 医院

其中，附属 DD 医院的领导不同意按流量计费的方式结算，要求一口价开发票，所以我给他们医院买的 5Mbps 带宽，其他四个都是按流量计费

现在 AA BB CC EE 医院都是这个 360spider 泛滥 DD 医院啥事儿没有……你说这是啥套路

@leaves7i #7
xx 爬我网站 我网站很简单就
http://www.target.com/article_display/1 到 http://www.target.com/article_display/9000
每小时都给我全站爬一遍图个啥……

文件，二进制数据流。

@xiejc #33
我有很多 可是我的不吃灰啊 23333

50 到付 就可以不吃灰了

@ml1344677 #17
ubuntu 的 mongodb 和 redis 和 mysql 都是默认监听 127.0.0.1 的啊

@uptime #58
支付宝微信这么大规模 虽然看起来跟银行是弱势地位，其实银行是惹不起这么大资金流的

提现这个功能，是增加银行的存款的，通俗一点说，你随便找一个在银行上班的普通员工，就知道存款任务的威力多大了……

而且，你不见超级网银收款方主动发起吸款接口一开放，所有家银行迅速都强推资金归集功能（从别的银行吸钱到本银行），然后各种限制对别的行的吸款额度（刚开始签约的工行一天可以被别人吸 50 万，一笔可以五万，现在全限制到 1000/5000 存款流失严重啊）

而支付宝、微信，也是想要沉淀资金的，支付宝为例，逐渐收紧了原来的即时到账的卡通提现功能，合并进了快捷支付只能支付，等等

提现收费，限制还款，只不过是让你们这些可提可不提的，把钱都留在自己家，要不就收你们点钱，想占着你的资金而已

让你用 CENTOS ……