如果规定了爬虫搜索的域名范围,那么该爬虫只能爬取此域名下的网页,其它URL会被忽略。
查看答案
当初始URL完成下载后,Spider类会自动调用parse方法解析网络响应。
A. 对
B. 错
Spider对响应进行处理后,会将返回的Item数据和新的请求发送给Item Pipeline做进一步处理。
A. 对
B. 错
在Scrapy项目中,定义的爬虫名称必须是唯一的。
A. 对
B. 错
Scrapy框架中的Downloader组件负责对爬虫抓取的Item数据进行后期处理。
A. 对
B. 错