网络爬虫软件使用交流,网页数据采集技术讨论

新窗 | 最新 | 热门 | 精华

新窗更多 \| 显示置顶	作者	回复/查看	最后发表

	8699 网页中下一级有一些有链接，一些没有链接，如何做规则才不会出错呢，如何做样例复制管理 1 zhuohui1987 于 2016-12-1 发表最后回复 2016-12-1 14:17
	19096 集搜客可以爬京东数据罗盘的数据吗，需要输入账号密码 8 chenhg 于 2016-12-1 发表最后回复 2016-12-1 14:13
	10227 怎么找网页节点 2 Givent 于 2016-12-1 发表最后回复 2016-12-1 13:44
	7821 翻页页数很大，会不会自动记录翻页地址啊 1 lyh123 于 2016-12-1 发表最后回复 2016-12-1 11:38
	10500 集搜和会员中心调度多个窗口有什么区别 1 gooseeker_info 于 2016-12-1 发表最后回复 2016-12-1 09:10
	18155 爬的时候有没有网页快照 5 有正事的小青年于 2016-10-17 发表最后回复 2016-11-30 23:07
	11840 小白求教-翻页采集-最后一页数据采集不全 8 zozo96 于 2016-11-30 发表最后回复 2016-11-30 17:01
	40616 抓取失败（超时）抓取规则不适合或超时时间设置太短 24 cs3520 于 2016-11-29 发表最后回复 2016-11-30 16:39
	8590 一打开打数机弹出来很多窗口，怎么才能不让这些窗口弹出来 2 酱紫于 2016-11-30 发表最后回复 2016-11-30 16:39
	8666 最后一页采集不全 3 七月等于 2016-11-30 发表最后回复 2016-11-30 15:23
	8045 样例复制找兄弟节点 1 we_lol 于 2016-11-30 发表最后回复 2016-11-30 15:17
	12872 新手求助，怎么连续采集网页内容 2 Givent 于 2016-11-30 发表最后回复 2016-11-30 13:15
	12977 如图所示 4 wsj521 于 2016-11-30 发表最后回复 2016-11-30 11:41
	9564 关于模拟点击后翻页的问题 2 gsk117520 于 2016-11-30 发表最后回复 2016-11-30 10:54
	11377 一个避免爬虫误判退出的建议 2 ray_zhurui 于 2016-11-29 发表最后回复 2016-11-30 10:31
	10225 抓取网页中的标签数量应该怎么做 1 玩机于 2016-11-30 发表最后回复 2016-11-30 09:52
	17821 获取的URL规则中只需要链接部分如何提取 5 craftebeer 于 2016-11-29 发表最后回复 2016-11-30 07:25
	12879 如何获取某一节点的子节点数量 2 ability2333 于 2016-11-29 发表最后回复 2016-11-29 22:27
	8373 要抓取的内容在网页的上部。但是爬虫搜索整个网页，效率很低，DS提示爬虫参数还有优化空间 2 xinke 于 2016-11-29 发表最后回复 2016-11-29 22:05
	17039 采集二级出现问题 7 zhuohui1987 于 2016-11-29 发表最后回复 2016-11-29 18:33