题目内容

为避免爬虫被目标网站屏蔽,可以使用下列哪些技巧?

A.设置等待时间,请求速度慢一点
B.伪造HTTP头
C.采用代理IP
D.采用分布式爬取

查看答案

搜索结果不匹配？点我反馈

更多问题

下列哪个模块可以模拟HTTP请求?

A.re
B.requests
C.os
D.math

使用get请求获得网页源码可以使用下列哪个方法?

A.requests.get
B.requests.getHTML
C.requests.post
D.requests.put

如果需要爬取的网页源码部分为:

标题

，获得的源码字符串在变量text中,已导入re模块,需要获取其中的标题,可以使用如下语句:

A. re.findall("

(?)

",a)
B. re.findall("

(*)

",a)
C. re.findall("

(.*)

",a)
D. re.findall("

(.?)

",a)

在Linux中,可以使用哪个指令快速获取网站源代码?

A.ping
B.get
C.webget
D.curl