单选题robots.txt文件放在哪里()A网站根目录下B网站子栏目下C网站内容页面D网站图片文件
单选题
robots.txt文件放在哪里()
A
网站根目录下
B
网站子栏目下
C
网站内容页面
D
网站图片文件
参考解析
解析:
暂无解析
相关考题:
在robots.txt文件中设置了禁止所有搜索抓取,下列正确选项是?()A、"User-agent·Allow:/"B、"User-agent·Disallow:/"C、"User-agent:BaiduspiderDisallow:/"D、"User-agent:GooglebotAllow:/"
某网站禁止百度蜘蛛索引所有网页,以下robots.txt文件正确的是:()A、{User-agent:BaiduspiderDisallow:}B、{User-agent:BaiduspiderAllow:*}C、{User-agent:BaiduspiderAllow:/}D、{User-agent:BaiduspiderDisallow:/}
下列选项中,关于robots.txt文件的说法正确的是()A、robots.txt文件存放于空间根目录下B、robots.txt是搜索引擎蜘蛛访问网站的时候要查看的第一个文件C、如果robots.txt不存在,搜索引擎蜘蛛将能够访问网站上所有未被口令保护的页面D、robots.txt文件只需要存放在空间任意位置就行
当操作系统发生致命错误,系统无法作出正确响应而发生崩溃时,主机会做core-dump,dump文件存放在哪里()。A、/var/adm/crashB、磁带上C、/dev/vg00/dumpD、/dump
关于网络爬虫协议文件robots.txt,说法错误的是()A、一个网站可以放多个不同robots文件B、robots文件不可以用xml格式命名C、disallow用来描述不希望被访问到的一个URLD、robots文件可以放在任何位置
单选题某网站禁止百度蜘蛛索引所有网页,以下robots.txt文件正确的是:()A{User-agent:BaiduspiderDisallow:}B{User-agent:BaiduspiderAllow:*}C{User-agent:BaiduspiderAllow:/}D{User-agent:BaiduspiderDisallow:/}
问答题在磁盘上新建了一个文件记不得存放在哪里了,怎么找到它?