本帖最后由 langjunlan 于 2018-9-21 14:45 编辑

工作台的情况如图:
做了定位标记映射,检查过class值都是每个商品共有的字段属性,第一个疑问:测试的结果中有很多空缺的内容,但是总共要采集的商品没有少:如下图




本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
| 回复

共 2 个关于本帖的回复 最后回复于 2018-9-21 16:08

沙发
langjunlan 初级会员 发表于 2018-9-21 14:41:36 | 只看该作者
本帖最后由 langjunlan 于 2018-9-21 14:47 编辑

第二个疑问:个别商品名称没有抓取到,出现空缺,如下图,

求问,两个疑问的原因和处理办法


主题名:汽车京东列表_0921

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有帐号?立即注册

x
举报 使用道具
板凳
Fuller 管理员 发表于 2018-9-21 16:08:29 | 只看该作者
这个一般是网页上有很多结构相同的div区域,他们也被采集下来了。你用的是样例复制映射,按理说不会出现这个问题,一定是整个整理箱对应的区域过大了,应该给“列表_1”这个容器节点做一个定位标志映射
举报 使用道具
您需要登录后才可以回帖 登录 | 立即注册

精彩推荐

  • 爬网址做层级采集——以当当商品爬虫为例
  • 网络爬虫采集列表数据
  • UMAP的min_dist参数有什么作用?
  • UMAP的n_neighbors参数有什么作用?
  • HDBSCAN的min_samples和min_cluster_size参

热门用户

GMT+8, 2026-6-26 08:23