采集数据出错

lucky半杯

采集过程都显示抓取成功。抓了2次，第二级故意线索等待时间变长。为什么数据还是这样。是我超时时间设置的问题吗

lucky半杯 · 发表于 2017-4-21 13:45:28

未解决。我测试的数据都有，集搜也可以有，爬虫群就不行

scraper · 发表于 2017-4-21 14:27:12

主题名是什么

scraper · 发表于 2017-4-21 14:33:03

你的主题名是淘宝文具第一级？
看了一下链接那个字段有问题不应该选择网页片段要选择文本内容

lucky半杯 · 发表于 2017-4-21 14:33:42

scraper 发表于 2017-4-21 14:27
主题名是什么

淘宝文具的第一级3。
1总共2000条数据，
2我用打数据集搜，得到XML，2000条。用你们EXCLE导入，显示文本内容中发现无效错误。但是最后还是有1500多条有效的。
3我将XML压缩之后通过会员中心导入，得到4000条数据，全部无效！下级链接字段显示错误

scraper · 发表于 2017-4-21 14:36:03

lucky半杯发表于 2017-4-21 14:33
淘宝文具的第一级3。
1总共2000条数据，
2我用打数据集搜，得到XML，2000条。用你们EXCLE导入，显示文本 ...

这个规则跟上面回复的问题一样
链接字段有错

lucky半杯 · 发表于 2017-4-21 14:36:11

scraper 发表于 2017-4-21 14:33
你的主题名是淘宝文具第一级？
看了一下链接那个字段有问题不应该选择网页片段要选择文本内容

不是淘宝文具第一级，是淘宝文具第一级3。还有我采集的下级链接似无法给淘宝文具第二级做线索。

lucky半杯 · 发表于 2017-4-21 14:38:15

scraper 发表于 2017-4-21 14:36
这个规则跟上面回复的问题一样
链接字段有错

不骗你，我这边某数台为啥显示是网页！你那边不是，是BUG吗

scraper · 发表于 2017-4-21 14:38:55

lucky半杯发表于 2017-4-21 14:36
不是淘宝文具第一级，是淘宝文具第一级3。还有我采集的下级链接似无法给淘宝文具第二级做线索。

...

按照我说的去改规则重新采

lucky半杯 · 发表于 2017-4-21 14:39:33

scraper 发表于 2017-4-21 14:36
这个规则跟上面回复的问题一样
链接字段有错

你看。。。。

共 25 个关于本帖的回复最后回复于 2017-4-21 15:18

	B Color Image Link Quote Code Smilies 高级模式您需要登录后才可以回帖登录 \| 立即注册回帖并转播回帖后跳转到最后一页