题目内容
（请给出正确答案）
[单选题]
下面关于网络爬虫的描述正确的是（)。
A.网络爬虫由控制节点、爬虫节点和资源库构成
B.网络爬虫中可以有多个控制节点，每个控制节点下可以有多个爬虫节点
C.控制节点之间可以互相通信，控制节点和其下的各爬虫节点之间也可以进行互相通信
D.属于同一个控制节点下的各爬虫节点间不可以互相通信
查看答案
如果结果不匹配，请 联系老师 获取答案
题目内容
（请给出正确答案）
如果结果不匹配，请 联系老师 获取答案
题目内容
（请给出正确答案）
A.网络爬虫由控制节点、爬虫节点和资源库构成
B.网络爬虫中可以有多个控制节点，每个控制节点下可以有多个爬虫节点
C.控制节点之间可以互相通信，控制节点和其下的各爬虫节点之间也可以进行互相通信
D.属于同一个控制节点下的各爬虫节点间不可以互相通信
如果结果不匹配，请 联系老师 获取答案
更多“下面关于网络爬虫的描述正确的是()。”相关的问题
B.为搜索引擎从万维网上下载网页，是搜索引擎的重要组成部分
C.爬虫从一个或若干个初始网页的URL开始，获得初始网页上的URL，在抓取网页的过程中，不断从当前页面上抽取新的URL放入队列，直到满足系统的一定停止条件
D.网络爬虫的行为和人们访问网站的行为是完全不同的
A.简单低级的网络爬虫，数据采集速度快，伪装度低，如果没有反爬机制，它们可以很快地抓取大量数据，甚至因为请求过多，造成网站服务器不能正常工作，影响了企业的业务开展
B.反爬机制也是一把双刃剑，一方面可以保护企业网站和网站数据，但是，另一方面，如果反爬机制过于严格，可能会误伤到真正的用户请求
C.如果既要和“网络爬虫”死磕，又要保证很低的误伤率，那么又会增加网站研发的成本
D.反爬机制不利于信息的自由流通，不利于网站发展，应该坚决取消
关于网络爬虫协议文件robots.txt，说法错误的是:
A一个网站可以放多个不同robots文件
Brobots文件不可以用xml格式命名
Cdisallow用来描述不希望被访问到的一个URL
Drobots文件可以放在任何位置
关于网络爬虫协议文件robots.txt，说法正确的是：
Arobots.txt是搜索引擎中访问网站的时候要查看的第一个文件
Brobots.txt文件告诉蜘蛛程序在服务器上哪些文件不要被收录
Crobots文件不可以用xml格式命名
D一个网站可以放多个不同robots文件
A.HTML/XML解析器pycurl`
B.通用爬虫库urllib3
C.爬虫框架Scrapy
D.通用爬虫库Requests
A.TCP/IP协议是一种不可靠的网络通信协议
B.UDP协议是一种可靠的网络通信协议
C.TCP/IP协议是一种可靠的网络通信协议
D.UDP协议是一种不可靠的网络通信协议
A.蜘蛛就是搜索引擎的网络爬虫
B.每个搜索引擎蜘蛛名称不同
C.网站被搜索引擎降权后蜘蛛永远不会光临此网站
D.站长可以通过技术等优化来吸引蜘蛛爬行抓取
A.网站使品牌的内涵得到扩充
B.良好的公共关系将是创建网络品牌的关键
C.网站的交互能力是维系品牌忠诚度的基础
D.网络品牌的基础是建设公司的网站，它的开发与运作完全应该由技术人员操作
E.以上说法均正确
