python写爬虫下拉刷新get提交了数据返回的东西怎么不对尼

还是需要用工具尼，有没有大神指点一二

哪里不对呀？ response没看到，。。。问问题要注意方式呀

blueelwang 发表于 2016-11-20 20:52
哪里不对呀？ response没看到，。。。问问题要注意方式呀

就是请求下拉刷新的时候返回的数据如下图，不是我想要下拉的数据

.is 发表于 2016-11-21 11:31
就是请求下拉刷新的时候返回的数据如下图，不是我想要下拉的数据

这就是它正确的返回吧？ 这个你需要自己想办法提取， 不是说你想要什么类型的数据，它就会返回什么样的数据，需要自己解析的，大部分网站返回的都是json格式的数据， 但是有些网站有自己定义的数据格式

blueelwang 发表于 2016-11-21 19:40
这就是它正确的返回吧？ 这个你需要自己想办法提取， 不是说你想要什么类型的数据，它就会返回什么样的数 ...

这是我下拉刷新的请求，我下拉的内容有中文的，但是这里面没有，是要二次请求吗还是怎么样

.is 发表于 2016-11-22 09:00
这是我下拉刷新的请求，我下拉的内容有中文的，但是这里面没有，是要二次请求吗还是怎么样 ...

这里面有json，中文被编码了

blueelwang 发表于 2016-11-22 10:40
这里面有json，中文被编码了

那请问有什么办法能解析出中文尼，我以utf8，gb18030各种格式输出都没出现中文耶

哥们儿，这个并不是字符的编码方式，而是json编码，正则匹配出content那一段，然后json decode 就可以啦

blueelwang 发表于 2016-11-22 20:25
哥们儿，这个并不是字符的编码方式，而是json编码，正则匹配出content那一段，然后json decode 就可以啦 ...

嗯嗯，谢谢您的耐心，我试试看，昨天我试了一下用selenium ，但是好像效率有点慢

.is 发表于 2016-11-23 10:40
嗯嗯，谢谢您的耐心，我试试看，昨天我试了一下用selenium ，但是好像效率有点慢 ...

自动化测试工具和这个有啥关系