采集房天下数据的时候遗漏很多数据，求帮忙检查是否我设置的规则有问题

GYc1104

网页显示2200多条数据，但是只采集到了其中1200条。。
采集规则名称：房天下小区均价11
采集案例的网址：http://fangjia.fang.com/pghouse-c0zh/h315-s11/
规则设置如下图所示：

tuesday1 · 发表于 2018-10-16 11:46:45

在工作台上，把整理箱定位改到偏好class，然后采集的时候把滚屏次数设置成2。规则没有问题。但是这个翻页最多到20页，也就是说最多能爬到400条，你是怎么爬到1200条的？爬了好几次？

GYc1104 · 发表于 2018-10-16 14:57:21

tuesday1 发表于 2018-10-16 11:46
在工作台上，把整理箱定位改到偏好class，然后采集的时候把滚屏次数设置成2。规则没有问题。但是这个翻页最 ...

我试一下，我是把每页的数据量改成了60条所以刚好是1200条

Fuller · 发表于 2018-10-16 15:10:17

如果有翻页限制，那是网站的限制，突破不了，可以通过选择更细的筛选条件，让每一细类都不要超过20页

GYc1104 · 发表于 2018-10-16 16:28:49

Fuller 发表于 2018-10-16 15:10
如果有翻页限制，那是网站的限制，突破不了，可以通过选择更细的筛选条件，让每一细类都不要超过20页 ...

那我试试看，谢谢啦

共 4 个关于本帖的回复最后回复于 2018-10-16 16:28

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页