单选题
A一个网站可以放多个不同robots文件
Brobots文件不可以用xml格式命名
Cdisallow用来描述不希望被访问到的一个URL
Drobots文件可以放在任何位置
正确答案
答案解析
略
相似试题
在robots.txt文件中设置了禁止所有搜索抓取，下列正确选项是？（）
单选题查看答案
下面关于Pagetitle中关键词布置说法正确的是。（）
单选题查看答案
Robots文件中，以下哪个指令为禁止抓取某些内容？（）
单选题查看答案
关于使用服务器日志文件进行网站数据分析，下列说法正确的是（）
多选题查看答案
在凤巢平台中，以下关于虚拟监控文件夹的相关说法，正确的是（）
多选题查看答案
Robots.txt文件是搜索引擎抓取网站第一个需要查看的文件，网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。在www.domain.com中，如禁止所有搜索引擎程序抓取www.domain.com/A下所有内容，Robots文件应如何设置？（）
单选题查看答案
下面关于质量度的说法，哪些是不正确的？（）
单选题查看答案
关于网站内容下面说法错误的是（）。
单选题查看答案
当质量度相同时，下面说法正确的是（）
单选题查看答案