Scrapy源码学习(一)

Scrapy 9 浏览 2 分钟阅读

一、start_requests方法
start_requests方法是启动爬虫时自动调用的方法,我们可以对其进改改写,比如让它变成post请求,并改变它的回调函数。

二、make_requests_from_url(url)

我们可以通过重写make_requests_from_url(url),改变它的回调函数。

scrapy源码:

相关文章