如何设置scrapyd的schedule.json以传入多个值?

更新于
2026-10-01 07:41:01
1阅读来源:SEO问题
  • 内容介绍
  • 文章标签
  • 相关推荐

本文共计469个文字,预计阅读时间需要2分钟。

如何设置scrapyd的schedule.json以传入多个值?

使用案例:导入requests库,创建一个名为adder的变量,赋值为'http://127.0.0.1:6800'。定义一个字典data,包含项目名、版本号和设置。使用requests.post向adder发送POST请求,问题解决思路:参考版本1.2文档。

如何设置scrapyd的schedule.json以传入多个值?

使用案例:

import requests adder='127.0.0.1:6800' data = { 'project':'v1', 'version':'12379', 'setting':['ROBOTSTXT_OBEY=True','CONCURRENT_REQUESTS=32'] } resp = requests.post(adder,data=data)

问题解决思路:

版本1.2文档中:

◦setting (string, optional) - a Scrapy setting to use when running the spider

setting 是字符串,那么多个字符串该如何呢。

阅读全文

本文共计469个文字,预计阅读时间需要2分钟。

如何设置scrapyd的schedule.json以传入多个值?

使用案例:导入requests库,创建一个名为adder的变量,赋值为'http://127.0.0.1:6800'。定义一个字典data,包含项目名、版本号和设置。使用requests.post向adder发送POST请求,问题解决思路:参考版本1.2文档。

如何设置scrapyd的schedule.json以传入多个值?

使用案例:

import requests adder='127.0.0.1:6800' data = { 'project':'v1', 'version':'12379', 'setting':['ROBOTSTXT_OBEY=True','CONCURRENT_REQUESTS=32'] } resp = requests.post(adder,data=data)

问题解决思路:

版本1.2文档中:

◦setting (string, optional) - a Scrapy setting to use when running the spider

setting 是字符串,那么多个字符串该如何呢。

阅读全文