百度蜘蛛应该用百度DNS？百度DNS的IP又是多少呢？

66ip1

架智能DNS自用中。因为要实现为百度蜘蛛分配IP，所以存在问题：
1、百度蜘蛛应该用百度DNS？
在下猜想应该是的。
2、百度DNS的IP又是多少呢？
nslookup测试baidu.com，发现有四个DNS
非权威应答:
baidu.com       internet address = 220.181.111.85
baidu.com       internet address = 220.181.111.86
baidu.com       internet address = 123.125.114.144
baidu.com       nameserver = dns.baidu.com
baidu.com       nameserver = ns4.baidu.com
baidu.com       nameserver = ns3.baidu.com
baidu.com       nameserver = ns2.baidu.com

这四个DNS分别指向一个IP，这就是全部？

3、这样配置的，百度蜘蛛会买帐吗？

不知是否有指点迷津的糕手？

magicbear

SKIDROW 发表于 2013-4-7 08:05
不要再纠结那个NS了，没有域名的人也能设DNS。百度是不会使用ns作为dns的，流量太大，占用资源多，如果你 ...

正解 监控分析一下源IP和解析IP的对应关系 再对应一下访问时间和解析时间就好了

SKIDROW

66ip1 发表于 2013-4-7 06:41
1
NS与DNS之间的区别是：DNS本身不提供域名的解析，而只是转发DNS请求、缓存记录；而NS则提供某域名的源解 ...

不要再纠结那个NS了，没有域名的人也能设DNS。百度是不会使用ns作为dns的，流量太大，占用资源多，如果你真想找的话，就自己搭建个bind的什么的，改域名ns记录，然后等蜘蛛上门。

66ip1

1
NS与DNS之间的区别是：DNS本身不提供域名的解析，而只是转发DNS请求、缓存记录；而NS则提供某域名的源解析，如果允许其转发DNS请求则其也具有DNS的功能。
2
您说得对，现在是要找百度蜘蛛用的DNS。对于自己有DNS（NS）的百度来讲，他应该更相信自己的DNS（NS）而用之？
3
百度的DNS（NS）好奇怪：
C:\Users\p>nslookup
默认服务器:  UnKnown
Address:  192.168.1.1

> set type=ns
> server dns.baidu.com
默认服务器:  dns.baidu.com
Address:  202.108.22.220

> www.baidu.com
服务器:  dns.baidu.com
Address:  202.108.22.220

www.baidu.com   canonical name = www.a.shifen.com
a.shifen.com    nameserver = ns7.a.shifen.com
a.shifen.com    nameserver = ns9.a.shifen.com
a.shifen.com    nameserver = ns4.a.shifen.com
a.shifen.com    nameserver = ns5.a.shifen.com
ns4.a.shifen.com        internet address = 123.125.113.67
ns5.a.shifen.com        internet address = 220.181.3.178
ns7.a.shifen.com        internet address = 220.181.38.47
ns9.a.shifen.com        internet address = 61.135.166.226
> baidu.com
服务器:  dns.baidu.com
Address:  202.108.22.220

baidu.com       nameserver = ns3.baidu.com
baidu.com       nameserver = ns4.baidu.com
baidu.com       nameserver = dns.baidu.com
baidu.com       nameserver = ns2.baidu.com
dns.baidu.com   internet address = 202.108.22.220
ns2.baidu.com   internet address = 61.135.165.235
ns3.baidu.com   internet address = 220.181.37.10
ns4.baidu.com   internet address = 220.181.38.10

SKIDROW

66ip1 发表于 2013-4-6 08:58
dns.baidu.com 不是公共DNS，是百度自己搞自己用的。只是不知道是否蜘蛛也依靠这个DNS服务器。
递归服务 ...

分清楚NS和DNS的区别，现在讨论DNS而不是NS。
NS就是所谓的权威应答：
nslookup www.baidu.com dns.baidu.com
服务器:  UnKnown
Address:  202.108.22.220

名称:    www.baidu.com
Served by:
- ns4.a.shifen.com
          123.125.113.67
          a.shifen.com
- ns9.a.shifen.com
          61.135.166.226
          a.shifen.com
- ns5.a.shifen.com
          220.181.3.178
          a.shifen.com
- ns7.a.shifen.com
          220.181.38.47
          a.shifen.com
而DNS本身并没有域名的记录，它要去查询其他服务器，所以显示为非权威应答：
nslookup www.baidu.com 8.8.8.8
服务器:  google-public-dns-a.google.com
Address:  8.8.8.8

非权威应答:
名称:    www.a.shifen.com
Address:  220.181.111.147
Aliases:  www.baidu.com

你现在想找的是DNS而不是NS。

66ip1

SKIDROW 发表于 2013-4-6 08:34
老实说所谓的搜索引擎线路都是不会靠公共DNS来解析，有自己的递归服务器，不然比暴风还恐怖。 ...

dns.baidu.com 不是公共DNS，是百度自己搞自己用的。只是不知道是否蜘蛛也依靠这个DNS服务器。
递归服务器？。。。
据现在查到的资料，蜘蛛自己一般有DNS的缓存，一般缓存期在一周以上。

SKIDROW

66ip1 发表于 2013-4-6 00:43
无论蜘蛛所爬网站域名的正向DNS，或蜘蛛本身IP的反向DNS，不知道是哪个DNS服务器负责解析的？我原以为是d ...

老实说所谓的搜索引擎线路都是不会靠公共DNS来解析，有自己的递归服务器，不然比暴风还恐怖。

66ip1

SKIDROW 发表于 2013-4-5 20:25
.crawl.baidu.com
.crawl.baidu.jp
百度正规蜘蛛的rDNS，但是还有微服私访的。

无论蜘蛛所爬网站域名的正向DNS，或蜘蛛本身IP的反向DNS，不知道是哪个DNS服务器负责解析的？我原以为是dns.baidu.com等那四个百度官方的DNS。
这涉及到现在市场上那些智能DNS，是如何为百度访问分配单独的隐藏IP。
网上一点资料也找不到。

SKIDROW

.crawl.baidu.com
.crawl.baidu.jp
百度正规蜘蛛的rDNS，但是还有微服私访的。

66ip1

农民工 发表于 2013-4-5 01:41
通过ua阿
baidu spider啊亲

UA看到的是其角色是蜘蛛，但不清楚它用哪个DNS解析进来的。蜘蛛自身应该不会 直接 查询每个域名的源解析服务器。