全球主机交流论坛

标题: curl模拟成百度爬虫,就能获取CDN后面的真实IP吗? [打印本页]

作者: wzy181    时间: 2018-7-9 12:28
标题: curl模拟成百度爬虫,就能获取CDN后面的真实IP吗?
DNS解析那里设置了搜索引擎线路的情况下,curl -I -A 'Mozilla/5.0 (compatible; Baiduspider/2.0; +http://fd.vvwvv.eu.org" target="_blank">www.hostloc.com
并不能啊。
作者: cnmj    时间: 2018-7-9 12:29
这要看别人怎么设置了

这么大的仇,一定要D死吗
作者: 醉里耍大刀    时间: 2018-7-9 12:35
dns应该是根据来路IP而不是头
作者: yangen    时间: 2018-7-9 12:56
伪造ip试试
作者: 南琴浪    时间: 2018-7-9 13:00
蛤?
作者: HaoLan    时间: 2018-7-9 13:01
不能,目前只有暴力爆破这种方法
作者: 小夜    时间: 2018-7-9 13:05
不行的
作者: flyqie    时间: 2018-7-9 13:23
不是根据头来的吧?
作者: 蓝浩    时间: 2018-7-9 13:33
并不能啊,蜘蛛也不是就直接访问源站啊,做cdn的没那么傻
像腾讯云cdn这种,D一下就会回源了。。。
作者: miven    时间: 2018-7-9 18:34
dns是根据ip的 不是UA
作者: x2548    时间: 2018-7-9 19:03
根据ip的  ua没用
作者: paydot    时间: 2018-7-10 00:19
提示: 作者被禁止或删除 内容自动屏蔽
作者: babyby168    时间: 2018-7-10 07:32
mdzz系列
作者: 京东    时间: 2018-7-10 07:38
提示: 作者被禁止或删除 内容自动屏蔽




欢迎光临 全球主机交流论坛 (https://fd.vvwvv.eu.org/) Powered by Discuz! X3.4