笨鸟编程-零基础入门Pyhton教程

 找回密码
 立即注册

设置

发布者: 笨鸟自学网



LOGSTATS_INTERVAL

违约: 60.0

统计信息的每个日志打印输出之间的间隔(秒) LogStats .

MEMDEBUG_ENABLED

违约: False

是否启用内存调试。

MEMDEBUG_NOTIFY

违约: []

当启用内存调试时,如果此设置不为空,则会将内存报告发送到指定的地址,否则报告将写入日志。

例子::

MEMDEBUG_NOTIFY = ['user@example.com']

MEMUSAGE_ENABLED

违约: True

经营范围: scrapy.extensions.memusage

是否启用内存使用扩展。此扩展跟踪进程使用的峰值内存(它将其写入统计信息)。它还可以选择在超过内存限制时关闭 Scrapy 进程(请参见 MEMUSAGE_LIMIT_MB ,并在发生这种情况时通过电子邮件通知(请参见 MEMUSAGE_NOTIFY_MAIL 

见 内存使用扩展 .

MEMUSAGE_LIMIT_MB

违约: 0

经营范围: scrapy.extensions.memusage

关闭scrappy前允许的最大内存量(以兆字节为单位)(如果memusage_enabled为true)。如果为零,则不执行任何检查。

见 内存使用扩展 .

MEMUSAGE_CHECK_INTERVAL_SECONDS

违约: 60.0

经营范围: scrapy.extensions.memusage

这个 Memory usage extension 检查当前内存使用情况,与 MEMUSAGE_LIMIT_MB 和 MEMUSAGE_WARNING_MB ,以固定的时间间隔。

这将以秒为单位设置这些间隔的长度。

见 内存使用扩展 .

MEMUSAGE_NOTIFY_MAIL

违约: False

经营范围: scrapy.extensions.memusage

通知是否达到内存限制的电子邮件列表。

例子::

MEMUSAGE_NOTIFY_MAIL = ['user@example.com']

见 内存使用扩展 .


上一篇:链接提取器下一篇:例外情况

Archiver|手机版|笨鸟自学网 ( 粤ICP备20019910号 )

GMT+8, 2024-11-22 01:56 , Processed in 0.085723 second(s), 17 queries .

© 2001-2020

返回顶部