11#
UXeason 新手上路 发表于 2019-3-4 19:27:19 | 只看该作者
Fuller 发表于 2019-3-4 17:15
根据上图这个DOM来看,如果“定位”按钮选择偏好class,很可能会漏采数据,因为他们会选这些class,而且 ...

您好,映射的问题我参考了您的帖子,已经解决了,现在单页面爬去没问题,但是翻页还是不行。新的规则名称是:UXl领英有映射
举报 使用道具
12#
UXeason 新手上路 发表于 2019-3-4 19:28:31 | 只看该作者
wangyong 发表于 2019-3-4 17:06
这个规则的问题可能是翻页区域是异步加载来显示的,需要用连续动作的滚轮操作来先把翻页区域显示出来后再 ...

您好,映射的问题我参考了您的帖子,已经解决了,现在单页面爬去没问题,但是翻页还是不行。新的规则名称是:UXl领英有映射
您说的我不太懂,具体到这个例子应该怎么实现翻页呢?

我昨天蒙对了一次,用的相对线索成功爬取了40页的信息,但是今天又没办法运行成功了
举报 使用道具
13#
Fuller 管理员 发表于 2019-3-4 21:35:19 | 只看该作者
UXeason 发表于 2019-3-4 19:28
您好,映射的问题我参考了您的帖子,已经解决了,现在单页面爬去没问题,但是翻页还是不行。新的规则名称 ...


我勾上了“文本记号”,用“下页”这个文本做翻页记号映射,翻页区映射是那个button节点,定位选项选择偏好class,我测试了,可以翻页

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-6-26 04:59