（单选题）
robots.txt的作用是（）。
A禁止搜索引擎蜘蛛抓取特定URL
B给搜索引擎蜘蛛提供网站地图文件
C以上都对
正确答案
答案解析
略
相似试题
（单选题）
robots.txt不支持的代码为（）。
（多选题）
robots.txt支持的代码为（）。
（单选题）
robots.txt不支持的代码为（）
（单选题）
在robots.txt文件中设置了禁止所有搜索抓取，下列正确选项是？（）
（单选题）
Robots.txt文件是搜索引擎抓取网站第一个需要查看的文件，网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。在www.domain.com中，如禁止所有搜索引擎程序抓取www.domain.com/A下所有内容，Robots文件应如何设置？（）
（单选题）
_trackPageview（）函数的作用是？
（多选题）
在SEO优化中，外部链接优化有着非常重要的作用，以下属于优化外部链接可以达到的效果是？（）
（单选题）
百度分享是一个提供网页地址收藏，分享及发送的WEB2.0按钮工具，作用众多。请问以下哪个不是百度分享的作用。（）
（多选题）
交换链接的主要作用的是（）。
