首页
Python中文网
在线手册
Python入门
Linux教程
Python高级教程
登录
注册
用户名
Email
自动登录
找回密码
密码
登录
立即注册
扫一扫,访问微社区
只需一步,快速开始
论坛
BBS
Python教程
在线手册
Python入门
Linux教程
Python高级教程
Python函数详解
搜索
本版
帖子
用户
道具
勋章
任务
设置
退出
Python论坛 - 国内最好的Python中文社区
»
论坛
›
技术交流
›
python问答 - 求助悬赏区 Help!
›
如何用爬虫遍历薄荷网食物热量
返回列表
查看:
4720
|
回复:
1
[求助]
如何用爬虫遍历薄荷网食物热量
chtwo
当前离线
积分
0
0
主题
0
帖子
0
积分
贫民
贫民, 积分 0, 距离下一级还需 60 积分
贫民, 积分 0, 距离下一级还需 60 积分
积分
0
发消息
chtwo
发表于 2017-6-10 19:50:23
|
显示全部楼层
|
阅读模式
爬虫初学,准备获取下薄荷网食物热量,发现薄荷网通过网页浏览的话,提供浏览的食品每类不过100个(10页,每页10个,感觉相当于预览)。更多的食品热量只有通过查询才能显示,比如查询“青椒”、“鱼香肉丝”等等是可以查询出来的。查询出来结果以网页显示,网页地址为薄荷网加食物名称拼音或编码。比如
http://www.boohee.com/shiwu/lajiao_qing_jian
,
http://www.boohee.com/shiwu/fddb39bd
。薄荷网号称可查询的食品超过30万种,通过什么方法才能爬这些数据呢。总不能一个个查询吧。
谢谢各位大侠。
爬虫
,
遍历
,
查询
,
薄荷网
相关帖子
•
如何应对反爬机制的网站
•
简陋的分布式爬虫
•
如何利用python爬取动态图的数据?
•
求助,爬虫入门,爬取页面信息,爬取不到,求大神指点
•
scrapy抓取动态加载的内容
•
python3 scrapy post之后get网页出错
•
正则匹配问题
•
urlopen中timeout参数
•
Python爬虫:十几行代码下载王者荣耀所有皮肤
•
在笔趣阁上爬取小说,大佬们能看一下我哪里出问题了吗
回复
使用道具
举报
patricata
当前离线
积分
1
0
主题
1
帖子
1
积分
贫民
贫民, 积分 1, 距离下一级还需 59 积分
贫民, 积分 1, 距离下一级还需 59 积分
积分
1
发消息
patricata
发表于 2018-10-12 14:03:40
|
显示全部楼层
好像也只能这么查吧, 多进程咯?
回复
支持
反对
使用道具
举报
返回列表
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
|
立即注册
本版积分规则
发表回复
回帖后跳转到最后一页
快速回复
返回顶部
返回列表