我已经进行网络抓取大约 3 个月了，我注意到我的许多蜘蛛需要经常照顾孩子，因为网站在变化。我使用 scrapy、python 和 crawlera 来抓取我的网站。例如，2 周前我创建了一个蜘蛛，但由...