找回密码
 立即注册

扫一扫,访问微社区

QQ登录

只需一步,快速开始

查看: 6093|回复: 0

[求助] 如何利用python爬取动态图的数据?

3

主题

5

帖子

5

积分

贫民

积分
5
c030108378 发表于 2017-4-19 10:17:28 | 显示全部楼层 |阅读模式
20威望
本帖最后由 c030108378 于 2017-4-19 13:27 编辑

目标是爬取这个动态图背后的数据内容。个人一开始的想法是利用selenium+无头浏览器获取动态图对应的url然后模拟发送,但一个问题是使用selenium解析页面时并不能获取url,另一个问题是url尾部有一个随机数并不规则。因此想请教各位这有什么办法可以爬取这个数据。图二、三、四是观察到的页面元素,以及动态图在生成时向网站发送的url以及网站回馈的数据内容。

这是想爬取的动态图。

这是想爬取的动态图。

动态图对应的页面元素

动态图对应的页面元素

动态图获取数据时的请求头

动态图获取数据时的请求头

动态图获取数据的结构

动态图获取数据的结构
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

快速回复 返回顶部 返回列表