关于网络爬虫协议文件robots.txt,说法错误的是()A、一个网站可以放多个不同robots文件B、robots文件不可以用xml格式命名C、disallow用来描述不希望被访问到的一个URLD、robots文件可以放在任何位置
关于网络爬虫协议文件robots.txt,说法错误的是()
- A、一个网站可以放多个不同robots文件
- B、robots文件不可以用xml格式命名
- C、disallow用来描述不希望被访问到的一个URL
- D、robots文件可以放在任何位置
相关考题:
以下关于网络爬虫的说法,不正确的是()。 A、网络爬虫还可以对网页建立索引B、有些网络爬虫能够从网站抓取内容聚合起来C、有些网络爬虫甚至能发动DDos攻击、发送垃圾邮件等D、隐藏在表单后的信息无法被网络爬虫发现
关于各种网络爬虫,以下说法不正确的是()。 A、通用网络爬虫通常采用并行工作方式,但需要较长时间才能刷新一次页面。B、通用网络爬虫适用于为搜索引擎搜索广泛的主题,有较强的应用价值。C、聚焦爬虫根据一定的网页分析算法过滤与主题无关的链接,保留有用的链接并将其放入等待抓取的URL队列。D、增量式爬虫在需要的时候爬行新产生或发生更新的页面,并重新下载所有页面
()只会在需要的时候爬行新产生或发生更新的页面,并不重新下载没有发生变化的页面,可有效减少数据下载量,及时更新已爬行的网页,减小时间和空间上的耗费,但是增加了爬行算法的复杂度和实现难度。 A、聚焦网络爬虫B、增量式网络爬虫C、通用网络爬虫D、深层网络爬虫
()是指对已下载网页采取增量式更新和只爬行新产生的或者已经发生变化网页的爬虫,它能够在一定程度上保证所爬行的页面是尽可能新的页面。 A、聚焦网络爬虫B、增量式网络爬虫C、通用网络爬虫D、深层网络爬虫
如果要采集指定的数据,则需要使用到(),因为它只需要爬行与主题相关的页面,极大地节省了硬件和网络资源,保存的页面也由于数量少而更新快。 A、聚焦网络爬虫B、聚焦网络爬虫C、通用网络爬虫D、深层网络爬虫
下列关于网络文件地址的说法不正确的是( )。A.网络上的所有数据信息都可以视为网络文件B.只有网络上的文字信息可以视为网络文件C.每个网络文件都至少有一个地址D.网络文件地址中,“://”左边部分指的是协议
关于网络文件系统NFS,下列说法(68)是不正确的。A. NFS不使用远程过程调用在网络中对文件的输入/输出操作进行重定向B. NFS由Sun Microsystems公司开发C. NFS是一种网络操作系统D. NFS是使用底层传输层协议TCP/IP的应用层协议
下列关于网络管理协议说法错误的是( )。A.网络管理协议是高层网络应用协议,建立在具体物理网络上以及其基础通信协议基础之上,为网络管理平台服务B.SNMP是最常用的计算机网络管理协议,位于ISOOSI参考模型的应用层C.MIB是SNMP网络管理系统的核心D.SNMP与CMIS都采用轮询监控方式
下列关于TCP/IP协议的说法中,错误的是()。 A.TCP/IP协议是目前世界上应用最广泛的网络协议B.TCP/IP协议不能连接两个不同类型的网络C.TCP/IP协议是因特网的基本协议D.TCP/IP协议除了TCP协议和IP协议外,还包含了其他一些网络协议
关于网络文件系统NFS,下列说法( )是不正确的。A.NFS不使用远程过程调用在网络中对文件的输入/输出操作进行重定向B.NFS由Sun Microsystems公司开发的C.NFS是一种网络操作系统D.NFS是使用底层传输层协议TCP/IP的应用层协议
关于FTP的描述错误的是()。A、FTP既依赖于telnet,又依赖于tcpB、FTP协议属于网络传输协议的应用层C、FTP协议可以实现不同文件系统之间传输文件D、FTP是基于UDP的,使用UDP20和21端口
下列选项中,关于robots.txt文件的说法正确的是()A、robots.txt文件存放于空间根目录下B、robots.txt是搜索引擎蜘蛛访问网站的时候要查看的第一个文件C、如果robots.txt不存在,搜索引擎蜘蛛将能够访问网站上所有未被口令保护的页面D、robots.txt文件只需要存放在空间任意位置就行
关于计算机网络协议,下面说法错误的是()A、网络协议就是网络通信的内容B、制定网络协议是为了保证数据通信的正确、可靠C、计算机网络的各层及其协议的集合,称为网络的体系结构D、网络协议通常由语义、语法、变换规则3部分组成
单选题以下关于TCP/IP协议簇各协议的叙述中,()是错误的。AARP提供了IP地址到MAC地址的转换功能BTCP是面向连接的传输层协议CSMTP提供了监视和控制网络设备的基本网管手段DFTP协议是常见的文件共享协议,可以用来下载和上传文件
单选题下列关于TCP/IP协议的说法中,错误的是()。ATCP/IP协议是目前世界上应用最广泛的网络协议BTCP/IP协议不能连接两个不同类型的网络CTCP/IP协议是因特网的基本协议DTCP/IP协议除了TCP协议和IP协议外,还包含了其他一些网络协议
单选题爬行对象从一些种子URL扩充到整个网络,主要为了门户站点搜索引擎和大型网络服务提供商采集数据()。A通用网络爬虫B聚焦网络爬虫C增量式网络爬虫D反向网络爬虫