|
20威望
本帖最后由 c030108378 于 2017-4-19 13:27 编辑
目标是爬取这个动态图背后的数据内容。个人一开始的想法是利用selenium+无头浏览器获取动态图对应的url然后模拟发送,但一个问题是使用selenium解析页面时并不能获取url,另一个问题是url尾部有一个随机数并不规则。因此想请教各位这有什么办法可以爬取这个数据。图二、三、四是观察到的页面元素,以及动态图在生成时向网站发送的url以及网站回馈的数据内容。
|
-
这是想爬取的动态图。
-
动态图对应的页面元素
-
动态图获取数据时的请求头
-
动态图获取数据的结构
|