【豆瓣_电影短评采集】#GooSeeker数据DIY#

为什么抓取音乐短评的时候到第一页就结束了？显示没有线索了

gxl000423 发表于 2020-6-16 20:57
为什么抓取音乐短评的时候到第一页就结束了？显示没有线索了

自己做的规则吗，做了翻页？如果是用快捷采集，要选择页数

为什么选择了爬去10页，出来只有3条数据？试了很多次了

rowlingQ 发表于 2020-9-29 15:50
为什么选择了爬去10页，出来只有3条数据？试了很多次了

把你添加的网址发一下

rowlingQ 发表于 2020-9-29 15:50
为什么选择了爬去10页，出来只有3条数据？试了很多次了

这个问题修改了，重新添加任务可以正常采集

需要下载集搜客的新产品数据管家来进行采集:https://www.gooseeker.com/pro/product_note_firefox.html

请问为什么爬取结果只有100条评论呢？

zhangzhang好鱼 发表于 2026-3-27 09:10
请问为什么爬取结果只有100条评论呢？

爬电影短评吗？在爬虫浏览器中登录豆瓣没有？

zhangzhang好鱼 发表于 2026-3-27 09:10
请问为什么爬取结果只有100条评论呢？

新手小白初次尝试 还请好心人多多指教

Fuller 发表于 2026-3-27 09:14
爬电影短评吗？在爬虫浏览器中登录豆瓣没有？

是的是的 谢谢 应该是登录的问题，现在可以抓取400多条了 我预期是500条 我再重新试一下

Fuller 发表于 2026-3-27 09:14
爬电影短评吗？在爬虫浏览器中登录豆瓣没有？

大神 我想问一下 登录豆瓣后 我可以采集更多的数据了 但采集数量不符合预期可以怎么处理吗？短评页面一页20条，我选择了50页，应该可以得到一千条评论，为什么实际结果是400条？