有个采集大佬使用百度蜘蛛抓取我的网站。查了下还真是真的百度蜘蛛。 IP是这个 123.125.71.128 voorp。康木 |
网友回复:
注册: 赵哲式提问
hxuf: 大佬牛逼,被百度盯上了..
h20: 百度在扒你的快照吧?
dforel: 不是百度 是一个站。我点一下他的网址,他就请求百度蜘蛛抓取我的网页。
格格很无奈: 大佬是不是用了什么CDN?能正常获取到真实IP吗?
hxuf: 不是百度是一个垃圾站。
luceos: 谁宣布对此事负责?
hxuf: 你倒是把他网站发出来啊
stonesnake: 没用cdn
注册: voorp。com
注册: 你倒是把他网址发出来啊 –< 为什么要称赞他人?那是为了把对方捧到更高的地方更容易绊他的脚,为了把他从高处摔下来。这就叫做称赞杀人法。——《我的青春恋爱物语果然有问题》 >–
hxuf: 进来看看
s9901: 那就不知道了,难道那个是百度内部的不成,还是利用了什么API进行了什么查询
b66667777: 卧槽,这操作,牛批,
luceos: 伪静态跳转就可以。
花样: 是不是我们上了她网站,又去爬你的网站了啊。。哈哈
蝼蚁般的存在: 对的 但是是百度蜘蛛爬。所以都没法禁。
blink: 火端那种程序 多的很 so.hjpd.net 前两天搭建的
hxuf: 不是这种。你看他网页就知道了。
注册: 好吧 我光看了个首页
注册: 牛逼了
lanchenyuan: 他抓快照,快照抓你? 这样子神奇的方法么
张大牛: 是滴啊 很骚很骚的操作。除非不想百度收录了。不然就没法阻止。
Init: ddcc送给他?
hxuf: 是个站群 好多域名都是一样的。就是名字不一样。估计是论坛大佬。
Init: 残忍点直接轮ip