调度设置了翻页的次数,但是爬虫群还是没有翻页是什么原因
举报 使用道具
| 回复

共 5 个关于本帖的回复 最后回复于 2017-4-26 09:55

沙发
shengchengx 金牌会员 发表于 2017-4-26 09:52:49 | 只看该作者
没有翻页那就是规则问题
举报 使用道具
板凳
扶风 中级会员 发表于 2017-4-26 09:53:08 | 只看该作者
shengchengx 发表于 2017-4-26 09:52
没有翻页那就是规则问题

我用单搜都可以翻页的。是不是采集失败就会终止哦
举报 使用道具
地板
shengchengx 金牌会员 发表于 2017-4-26 09:54:11 | 只看该作者
扶风 发表于 2017-4-26 09:53
我用单搜都可以翻页的。是不是采集失败就会终止哦

那你应该是没有滚屏 没加载到翻页区域就结束采集了
举报 使用道具
5#
扶风 中级会员 发表于 2017-4-26 09:55:08 | 只看该作者
shengchengx 发表于 2017-4-26 09:54
那你应该是没有滚屏 没加载到翻页区域就结束采集了

是不是要设置滚屏次数哦?
我观察确实没有滚屏,然后提示规则失败了。
举报 使用道具
6#
shengchengx 金牌会员 发表于 2017-4-26 09:55:58 | 只看该作者
扶风 发表于 2017-4-26 09:55
是不是要设置滚屏次数哦?
我观察确实没有滚屏,然后提示规则失败了。
...

那应该就是没有设置滚屏了。设置好滚屏就好了。

举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-6-26 04:41