|
|
|
- 我不希望有道抓取我的站点，该怎么办？
有道遵循Robots这一用于禁止爬虫抓取部分网站内容的互联网标准协议。我们推荐您使用标准的robots.txt文件。有道在抓取站点时会首先读取robots.txt文件，然后根据robots.txt文件的要求进行抓取和索引。关于robots.txt文件的更多信息，请看帮助中心里"关于robots.txt"这一节内容。如果您的robots.txt文件符合标准，有道在抓取和索引时仍存在问题，请致信：yodaobot@corp.yodao.com ，我们的工程师将会尽快解决。
|
