超星 - 5.1.1 BeautifulSoup - 查题吧

多选题

为避免爬虫被目标网站屏蔽,可以使用下列哪些技巧?

A.设置等待时间,请求速度慢一点
B.伪造HTTP头
C.采用代理IP
D.采用分布式爬取

单选题

下列哪个模块可以模拟HTTP请求?

A.re
B.requests
C.os
D.math

单选题

使用get请求获得网页源码可以使用下列哪个方法?

A.requests.get
B.requests.getHTML
C.requests.post
D.requests.put

单选题

如果需要爬取的网页源码部分为:<h1>标题</h1>，获得的源码字符串在变量text中,已导入re模块,需要获取其中的标题,可以使用如下语句:

A. re.findall("<h1>(?)</h1>",a)
B. re.findall("<h1>(*)</h1>",a)
C. re.findall("<h1>(.*)</h1>",a)
D. re.findall("<h1>(.?)</h1>",a)

单选题

在Linux中,可以使用哪个指令快速获取网站源代码?

A.ping
B.get
C.webget
D.curl

1