33、关于网络爬虫以下说法正确的是A.网络爬虫由控制结点、爬虫结点、资源库构成B.网络爬虫分为通用网络爬虫、聚焦网络爬虫、增量式网络爬虫和深层网络爬虫C.requests是爬虫的相关库D.爬虫的原理是模拟浏览器,获取服务器返回的数据
33、关于网络爬虫以下说法正确的是
A.网络爬虫由控制结点、爬虫结点、资源库构成
B.网络爬虫分为通用网络爬虫、聚焦网络爬虫、增量式网络爬虫和深层网络爬虫
C.requests是爬虫的相关库
D.爬虫的原理是模拟浏览器,获取服务器返回的数据
参考答案和解析
利用网络爬虫能自动完成数据获取、汇总的工作,大大提升了统计工作的效率。
相关考题:
以下关于网络爬虫的说法,不正确的是()。 A、网络爬虫还可以对网页建立索引B、有些网络爬虫能够从网站抓取内容聚合起来C、有些网络爬虫甚至能发动DDos攻击、发送垃圾邮件等D、隐藏在表单后的信息无法被网络爬虫发现
关于各种网络爬虫,以下说法不正确的是()。 A、通用网络爬虫通常采用并行工作方式,但需要较长时间才能刷新一次页面。B、通用网络爬虫适用于为搜索引擎搜索广泛的主题,有较强的应用价值。C、聚焦爬虫根据一定的网页分析算法过滤与主题无关的链接,保留有用的链接并将其放入等待抓取的URL队列。D、增量式爬虫在需要的时候爬行新产生或发生更新的页面,并重新下载所有页面
()只会在需要的时候爬行新产生或发生更新的页面,并不重新下载没有发生变化的页面,可有效减少数据下载量,及时更新已爬行的网页,减小时间和空间上的耗费,但是增加了爬行算法的复杂度和实现难度。 A、聚焦网络爬虫B、增量式网络爬虫C、通用网络爬虫D、深层网络爬虫
()是指对已下载网页采取增量式更新和只爬行新产生的或者已经发生变化网页的爬虫,它能够在一定程度上保证所爬行的页面是尽可能新的页面。 A、聚焦网络爬虫B、增量式网络爬虫C、通用网络爬虫D、深层网络爬虫
如果要采集指定的数据,则需要使用到(),因为它只需要爬行与主题相关的页面,极大地节省了硬件和网络资源,保存的页面也由于数量少而更新快。 A、聚焦网络爬虫B、聚焦网络爬虫C、通用网络爬虫D、深层网络爬虫
以下哪些说法是正确的()A、网络商务信息是指关于网络商务的信息B、网络商务信息是指通过网络传递的文字信息C、网络商务信息是指关于网络的商务信息D、网络商务信息是指通过计算机网络传递的商务信息
关于网络爬虫协议文件robots.txt,说法错误的是()A、一个网站可以放多个不同robots文件B、robots文件不可以用xml格式命名C、disallow用来描述不希望被访问到的一个URLD、robots文件可以放在任何位置
单选题爬行对象从一些种子URL扩充到整个网络,主要为了门户站点搜索引擎和大型网络服务提供商采集数据()。A通用网络爬虫B聚焦网络爬虫C增量式网络爬虫D反向网络爬虫