PySpider调试时可运行但无法自动运行(重复爬取抓取过的链接) 时间:2023-01-12 20:30:00 电容160v223k聚酯薄膜400v223电容器 问题 当我第一次爬行时,我很快就抓住了它。我想更新数据,但没有将数据写入数据库。我发现它是PySpider抓取的连接不会再抓取 解决方法 只需要开始crawl_config在函数中加入一句话'itag': 'v223' 参考文献: pyspider 会自动去重,抓取的连接不会再抓取 - tank的博客 - CSDN博客 https://blog.csdn.net/piyongduo3393/article/details/84403769 http://docs.pyspider.org/en/latest/apis/self.crawl/#itag 锐单商城拥有海量元器件数据手册、IC替代型号,打造电子元器件IC百科大全!