帮助首页 > 站长帮助中心

网站抓取

• 为什么有道多次抓取同一个网页？
  有道并不知道您的某个网页是否更新，它每隔一段时间就会重新抓取一次该网页。在重新抓取时，有道都会带上一个"IF-MODIFIED-SINCE"的HTTP头信息，以通知您的服务器返回更新的网页。如您的服务器能正确处理这样的头信息就可以节约一定带宽。一般情况下，有道不会在8个小时内两次抓取同一个网页，但也会有例外。