scrapy常用设置参考手册

  1. 云栖社区>
  2. python技术进阶>
  3. 博客>
  4. 正文

scrapy常用设置参考手册

python之战 2019-03-28 23:17:33 浏览1161
展开阅读全文

内置设置参考

以下是所有可用Scrapy设置的列表,按字母顺序排列,以及它们的默认值和适用范围。

范围(如果可用)显示设置的使用位置,如果它与任何特定组件相关联。在那种情况下,将显示该组件的模块,通常是扩展,中间件或管道。它还意味着必须启用该组件才能使设置产生任何效果。

AWS_ACCESS_KEY_ID

默认: None

需要访问Amazon Web服务的代码使用的AWS访问密钥,例如S3 Feed存储后端。

AWS_SECRET_ACCESS_KEY

默认: None

需要访问Amazon Web服务的代码使用的AWS密钥,例如S3 Feed存储后端。

AWS_ENDPOINT_URL

默认: None

用于类似S3的存储的端点URL,例如Minio或s3.scality。仅支持botocore库。

AWS_USE_SSL

默认: None

如果要禁用S

网友评论

登录后评论
0/500
评论
python之战
+ 关注
所属云栖号: python技术进阶