信号

request_scheduled¶

scrapy.signals.request_scheduled(request, spider)¶

在引擎安排 Request ，稍后下载。

此信号不支持从其处理程序返回延迟。

参数

• request (Request object) -- 到达调度程序的请求

• spider (Spider object) -- 发出请求的蜘蛛

request_dropped¶

scrapy.signals.request_dropped(request, spider)¶

在发生以下情况时发送 Request 由引擎调度稍后下载的数据被调度器拒绝。

此信号不支持从其处理程序返回延迟。

参数

• request (Request object) -- 到达调度程序的请求

• spider (Spider object) -- 发出请求的蜘蛛

request_reached_downloader¶

scrapy.signals.request_reached_downloader(request, spider)¶

在发生以下情况时发送 Request 已到达下载器。

此信号不支持从其处理程序返回延迟。

参数

• request (Request object) -- 到达下载程序的请求

• spider (Spider object) -- 发出请求的蜘蛛

request_left_downloader¶

scrapy.signals.request_left_downloader(request, spider)¶

2.0 新版功能.

在发生以下情况时发送 Request 离开下载程序，即使在出现故障的情况下也是如此。

此信号不支持从其处理程序返回延迟。

参数

• request (Request object) -- 到达下载程序的请求

• spider (Spider object) -- 发出请求的蜘蛛

bytes_received¶