找回密码
 立即注册

QQ登录

只需一步,快速开始

扫一扫,访问微社区

查看: 99|回复: 5

[求助] 大众点评商家评论无法抓取

2

主题

4

帖子

4

积分

贫民

积分
4
小丽友 发表于 2018-12-3 18:51:11 | 显示全部楼层 |阅读模式
现在大众点评的商家评论页面必须要登陆才能看到除了最新十条以外的评论了 但在GooSeeker客户端无法登陆 会显示403……还有办法抓取吗 ?

点评

海!外直播 t.cn/RxmJTRo 禁闻视频 t.cn/RJJZmv0 当你孩子失学时,国家不见了;当你看不起病时,国家不见了;当你讨要血汗钱时,国家不见了;当你举牌示!威讨要血汗钱的时候,国家出现了,这赵国“国家”真面目到底是什么.   发表于 2018-12-9 19:21
回复

使用道具 举报

0

主题

4

帖子

4

积分

贫民

积分
4
绯红猫 发表于 2018-12-4 11:05:01 | 显示全部楼层
我这可以登入呀,你看一下IP是不是被封了?
回复 支持 反对

使用道具 举报

0

主题

4

帖子

4

积分

贫民

积分
4
绯红猫 发表于 2018-12-4 11:11:12 | 显示全部楼层
绯红猫 发表于 2018-12-4 11:05
我这可以登入呀,你看一下IP是不是被封了?

怎么样才能知道自己是不是被封了?会因为是OS系统吗
回复 支持 反对

使用道具 举报

0

主题

4

帖子

4

积分

贫民

积分
4
绯红猫 发表于 2018-12-5 08:52:08 | 显示全部楼层
绯红猫 发表于 2018-12-4 11:11
怎么样才能知道自己是不是被封了?会因为是OS系统吗

大众点评网很容易封爬虫,有多种方法应对:
1,修改UserAgent
2,清理缓存
3,换IP

修改UA和清理缓存的方法参看


目前换IP需要重新启动光猫重新拨号。很快会出一个版本通过proxy换IP
回复 支持 反对

使用道具 举报

0

主题

4

帖子

4

积分

贫民

积分
4
绯红猫 发表于 2018-12-5 09:02:19 | 显示全部楼层
绯红猫 发表于 2018-12-5 08:52
大众点评网很容易封爬虫,有多种方法应对:
1,修改UserAgent
2,清理缓存

还要重启猫  有没有其他换IP的办法 求推荐
回复 支持 反对

使用道具 举报

0

主题

4

帖子

4

积分

贫民

积分
4
绯红猫 发表于 2018-12-5 09:08:38
绯红猫 发表于 2018-12-5 09:02
还要重启猫  有没有其他换IP的办法 求推荐

再就是用代理IP了   我这边用的是代理云www.dailiyun.com  我做我的业务来用是完全没问题的  刚才给你试了下大众点评 效果还算行吧  因为大众点评的风控太厉害了  不行你就用代理IP再研究一个反反爬小组 那就完美了
支持 反对

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表