怎么用python爬取亚马逊图书信息

2025-04-20 10:43:54

1、找到你要获取页面信息的链接,这里以一本图书为例来说明

怎么用python爬取亚马逊图书信息

2、复制它的链接

怎么用python爬取亚马逊图书信息

3、导入requests库,获取相应链接的返回信息。

怎么用python爬取亚马逊图书信息

4、输入状态码,返回相应的返回状态。返回的状态如果是200,这说明访问成功。否则,返回失败,这里是503,说明访问失败

怎么用python爬取亚马逊图书信息

5、根据返回的信息判断可能是由于访问进行限制。接受的是由于浏览器发出的http请求。所以通过网站访问的http的头部判断请求

怎么用python爬取亚马逊图书信息

6、服务器判断出访问是由于python的requests库的程序的进行的。因此,修改访问头部的信息,模拟浏览器访问状态。

7、首先构造一个字典类型,修改 user-agent的信息

怎么用python爬取亚马逊图书信息

8、重新提交访问请求

怎么用python爬取亚马逊图书信息

9、再次检查访问状态。下图说明访问成功

怎么用python爬取亚马逊图书信息

10、获取访问的信息就可以了

怎么用python爬取亚马逊图书信息
声明:本网站引用、摘录或转载内容仅供网站访问者交流或参考,不代表本站立场,如存在版权或非法内容,请联系站长删除,联系邮箱:site.kefu@qq.com。
猜你喜欢