本帖最后由 w228258549 于 2017-10-16 18:07 编辑

我要采集淘宝男鞋商品销售前1万的数据,需要怎么设置才能限制采集的数据量?
举报 使用道具
| 回复

共 1 个关于本帖的回复 最后回复于 2017-10-16 18:06

沙发
yangwenge 金牌会员 发表于 2017-10-16 18:06:11 | 只看该作者
可以通过设置翻页的次数来控制采集的数据量。
在会员中心-爬虫管理--规则名后面的调度-高级设置中进行设置

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-6-26 17:26