Scrapy – 网络服务

Scrapy – 网络服务

描述

一个正在运行的Scrapy网络爬虫可以通过 JSON-RPC 来控制 它由JSONRPC_ENABLED设置启用。该服务通过JSON-RPC 2.0 协议提供对主爬虫对象的访问。访问爬虫对象的端点是-

http://localhost:6080/crawler

下表包含了一些显示网络服务行为的设置:

序号 设置和描述 默认值
1 JSONRPC_ENABLED 这指的是布尔值,它决定网络服务及其扩展是否被启用。
2 JSONRPC_LOGFILE 这指的是用于记录对网络服务的HTTP请求的文件。如果它没有被设置,将使用标准的Scrapy日志。
3 JSONRPC_PORT 这指的是网络服务的端口范围。如果它被设置为无,那么端口将被动态地分配。 [6080, 7030]
4 JSONRPC_HOST 这指的是网络服务应该监听的接口。 ‘127.0.0.1’

Python教程

Java教程

Web教程

数据库教程

图形图像教程

大数据教程

开发工具教程

计算机教程