爬虫中urlopen()和get()区别

kejiayuan0806

2019-04-01 阅读量: 724

数据分析师 Python爬虫

爬虫中urlopen()和get()区别

扫码加入数据分析学习群

问题描述：

Python爬虫中用urllib的urlopen()和requests.get()方法去请求或获取一个网页的内容时，requests.get(url)和urlopen()有什么区别呢？

两者的区别在于：

urlopen打开URL网址，url参数可以是一个字符串url或者是一个Request对象，返回的是http.client.HTTPResponse对象.它包括read()、readinto()、getheader()、getheaders()等函数，一般而言使用read()函数后还需要decode()函数，因为它返回的网页内容实际上是没有被解码过的，在read()得到内容后使用decode()函数解码。

而requests.get()方法请求站点的网址，然后打印出返回结果的类型，状态码，编码方式，Cookies等内容。

添加CDA认证专家【维克多阿涛】，微信号：【cdashijiazhuang】，提供数据分析指导及CDA考试秘籍。已助千人通过CDA数字化人才认证。欢迎交流，共同成长！