最新消息:20190717 VPS服务器:Vultr新加坡,WordPress主题:大前端D8,统一介绍入口:关于

标签:丢失链接

【已解决】Scrapy中丢失部分url链接没有抓取
Scrapy

【已解决】Scrapy中丢失部分url链接没有抓取

crifan 2年前 (2018-03-07) 1385浏览 0评论

折腾: 【记录】用Python的Scrapy去爬取Youtube中Humf的字幕 期间,发现个问题: 对于原始的页面中的多个分组的内容: 结果最后抓取的内容,缺了很多: 比如: ☆ Shorts 中,本来有18个,但是实际上只爬取了8个: 缺了1...

45 queries in 0.235 seconds, using 18.55MB memory