找回密码
 立即注册

扫一扫,访问微社区

QQ登录

只需一步,快速开始

查看: 2059|回复: 1

[求助] python爬虫的重定向问题

3

主题

5

帖子

5

积分

贫民

积分
5
易水晓寒 发表于 2018-1-9 19:42:48 | 显示全部楼层 |阅读模式
本帖最后由 易水晓寒 于 2018-1-9 19:43 编辑


用requests库爬取百度百科时报重定向次数超出上限的错误,而使用自带的urllib却可以直接爬取
捕获1.PNG
捕获2.PNG
请问要用requests库的话怎么解决这个错误?

回复

使用道具 举报

3

主题

5

帖子

5

积分

贫民

积分
5
易水晓寒  楼主| 发表于 2018-1-9 21:21:00 | 显示全部楼层
已解决
requests.get()中添加一个模拟浏览器的头部信息即可...
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表