广告
返回顶部
首页 > 资讯 > 精选 >scrapy远程登录控制台如何实现
  • 189
分享到

scrapy远程登录控制台如何实现

2023-07-05 06:07:33 189人浏览 八月长安
摘要

这篇文章主要讲解了“scrapy远程登录控制台如何实现”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“scrapy远程登录控制台如何实现”吧!远程登录控制台Scrapy附带一个内置的telne

这篇文章主要讲解了“scrapy远程登录控制台如何实现”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“scrapy远程登录控制台如何实现”吧!

远程登录控制台

Scrapy附带一个内置的telnet控制台,用于检查和控制Scrapy运行过程。telnet控制台只是一个运行在scrappy进程内部的常规python shell,因此您可以从中做任何事情。

telnet控制台是一个 built-in Scrapy extension 它在默认情况下是启用的,但如果需要,您也可以禁用它。有关扩展本身的更多信息,请参阅 Telnet控制台扩展 。

警告

通过公共网络使用telnet控制台是不安全的,因为telnet不提供任何传输层安全性。拥有用户名/密码验证不会改变这一点。
预期用途是本地连接到正在运行的Scrapy Spider(Spider进程和Telnet客户端在同一台计算机上)或通过安全连接(VPN、ssh通道)进行连接。请避免在不安全的连接上使用telnet控制台,或使用 TELNETCONSOLE_ENABLED 选择权。

如何访问telnet控制台

telnet控制台侦听中定义的tcp端口 TELNETCONSOLE_PORT 设置,默认为 6023 . 要访问控制台,您需要键入:

telnet localhost 6023Trying localhost...Connected to localhost.Escape character is '^]'.Username:PassWord:>>>

默认用户名为 scrapy 密码是自动生成的。自动生成的密码可以在垃圾日志上看到,如下例所示:

2018-10-16 14:35:21 [scrapy.extensions.telnet] INFO: Telnet Password: 16f92501e8a59326
默认用户名和密码可以被设置覆盖 TELNETCONSOLE_USERNAME 和 TELNETCONSOLE_PASSWORD .

警告
用户名和密码仅提供有限的保护,因为telnet不使用安全传输-默认情况下,即使设置了用户名和密码,通信也不会加密。

您需要在windows和大多数linux发行版中默认安装的telnet程序。

telnet控制台中的可用变量

elnet控制台就像一个运行在scrappy进程内部的常规Python shell,所以您可以从中做任何事情,包括导入新模块等。

但是,telnet控制台附带一些为方便起见而定义的默认变量:

捷径描述
crawler残废的爬虫 (scrapy.crawler.Crawler 对象)
enginecrawler.engine属性
spider主动蜘蛛
slot发动机槽
extensions扩展管理器(crawler.extensions属性)
statsstats收集器(crawler.stats属性)
settingsScrapy设置对象(crawler.settings属性)
est打印发动机状态报告
prefs内存调试(请参见 调试内存泄漏)
p到的快捷方式 pprint.pprint()功能
hpy内存调试(请参见 调试内存泄漏)

telnet控制台使用示例

以下是使用telnet控制台可以执行的一些示例任务:

查看发动机状态
你可以使用 est() scrapy引擎使用telnet控制台快速显示其状态的方法:

elnet localhost 6023>>> est()Execution engine statustime()-engine.start_time                        : 8.62972998619len(engine.downloader.active)                   : 16engine.scraper.is_idle()                        : Falseengine.spider.name                              : followallengine.spider_is_idle()                         : Falseengine.slot.closing                             : Falselen(engine.slot.inprogress)                     : 16len(engine.slot.scheduler.dqs or [])            : 0len(engine.slot.scheduler.MQs)                  : 92len(engine.scraper.slot.queue)                  : 0len(engine.scraper.slot.active)                 : 0engine.scraper.slot.active_size                 : 0engine.scraper.slot.itemproc_size               : 0engine.scraper.slot.needs_backout()             : False

暂停、恢复和停止报废发动机

暂停:

telnet localhost 6023>>> engine.pause()>>>

恢复:

telnet localhost 6023>>> engine.unpause()>>>

停止:

telnet localhost 6023>>> engine.stop()Connection closed by foreign host.

Telnet控制台信号

scrapy.extensions.telnet.update_telnet_vars(telnet_vars)
在telnet控制台打开之前发送。您可以连接到这个信号来添加、删除或更新telnet本地命名空间中可用的变量。为此,需要更新 telnet_vars 听写你的处理程序。

参数
telnet_vars (dict) – telnet变量的dict

远程登录设置

以下是控制telnet控制台行为的设置:

TELNETCONSOLE_PORT

违约: [6023, 6073]

用于telnet控制台的端口范围。如果设置为 None 或 0 ,使用动态分配的端口。

TELNETCONSOLE_HOST

违约: '127.0.0.1'

telnet控制台应该监听的接口

TELNETCONSOLE_USERNAME

违约: 'scrapy'

用于telnet控制台的用户名

TELNETCONSOLE_PASSWORD

违约: None

telnet控制台使用的密码,默认行为是让它自动生成。

感谢各位的阅读,以上就是“scrapy远程登录控制台如何实现”的内容了,经过本文的学习后,相信大家对scrapy远程登录控制台如何实现这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是编程网,小编将为大家推送更多相关知识点的文章,欢迎关注!

--结束END--

本文标题: scrapy远程登录控制台如何实现

本文链接: https://www.lsjlt.com/news/350108.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

本篇文章演示代码以及资料文档资料下载

下载Word文档到电脑,方便收藏和打印~

下载Word文档
猜你喜欢
  • scrapy远程登录控制台如何实现
    这篇文章主要讲解了“scrapy远程登录控制台如何实现”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“scrapy远程登录控制台如何实现”吧!远程登录控制台Scrapy附带一个内置的telne...
    99+
    2023-07-05
  • scrapy远程登录控制台的实现
    目录远程登录控制台如何访问telnet控制台telnet控制台中的可用变量telnet控制台使用示例暂停、恢复和停止报废发动机远程登录设置远程登录控制台 Scrapy附带一个内置的t...
    99+
    2023-02-27
    scrapy 远程登录控制台 scrapy 远程登录
  • Linux如何实现远程控制
    小编给大家分享一下Linux如何实现远程控制,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!Linux一般作为服务器使用,而服务器一般放在机房,你不可能在机房操作你...
    99+
    2023-06-28
  • 如何登录腾讯云服务器控制台系统
    通过用户名和密码登录:首先需要输入正确的用户名和密码。在登录时,用户名和密码将被保存在控制台中的“安全性”选项卡中,以便管理员能够验证账户和访问权限。 使用命令行工具:如果您已经安装了腾讯云服务器的命令行工具,可以通过命令行工具来登录控制...
    99+
    2023-10-28
    腾讯 控制台 服务器
  • windows xbox控制台目前无法登录如何解决
    这篇文章主要介绍“windows xbox控制台目前无法登录如何解决”,在日常操作中,相信很多人在windows xbox控制台目前无法登录如何解决问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”windows...
    99+
    2023-07-01
  • java控制台如何实现聊天程序
    本篇内容主要讲解“java控制台如何实现聊天程序”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“java控制台如何实现聊天程序”吧!本文实例为大家分享了java控制台实现聊天程序的具体代码,供大家...
    99+
    2023-06-20
  • 如何登录阿里云服务器控制台详尽指南
    阿里云是中国最大的云计算服务提供商之一,其服务器控制台提供了丰富的管理功能,包括服务器配置、资源管理、监控等。本文将详细介绍如何登录阿里云服务器控制台。 如何登录阿里云服务器控制台:步骤1:注册阿里云账号首先,你需要在阿里云官网上注册一个账...
    99+
    2023-11-18
    阿里 控制台 详尽
  • SpringBoot如何整合Springsecurity实现数据库登录及权限控制
    目录第一步第二步是封装一个自定义的类第三步, 我们需要判断密码啦总结我们今天使用SpringBoot来整合SpringSecurity,来吧,不多BB 首先呢,是一个SpringBo...
    99+
    2022-11-12
  • python如何实现控制台输出颜色
    这篇“python如何实现控制台输出颜色”除了程序员外大部分人都不太理解,今天小编为了让大家更加理解“python如何实现控制台输出颜色”,给大家总结了以下内容,具有一定借鉴价值,内容详细步骤清晰,细节处理妥当,希望大家通过这篇文章有所收获...
    99+
    2023-06-06
  • linux控制台下如何实现2048小游戏
    这篇“linux控制台下如何实现2048小游戏”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇...
    99+
    2022-10-19
  • 如何实现限制SSH单用户登录
    这篇文章给大家分享的是有关如何实现限制SSH单用户登录的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。使用方法: 用root权限在后台(比如screen里)运行这个脚本代码如下:#!/usr/bin/perl&nb...
    99+
    2023-06-13
  • 如何使用Jupyter Notebooks构建一个远程管理控制台
    小编给大家分享一下如何使用Jupyter Notebooks构建一个远程管理控制台,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!SSH 是一个强大的远程管理工具,...
    99+
    2023-06-15
  • python如何实现远程控制电脑(结合微信)
    不知道大家有没有这样一个烦恼,“自己的电脑总是被别人使用,又不好意思设置密码”,所以利用python设计了一个程序来实现自由管控。 功能虽然简单,但大家可以通过其思路来实现更多的功能。 大致功能主要是两个部...
    99+
    2022-06-04
    如何实现 远程控制 电脑
  • ASP 响应实时 shell,如何实现远程控制服务器?
    在日常的工作中,我们经常需要远程控制服务器。这时候,如何实现远程控制服务器就成了一项非常重要的技能。本文将介绍如何使用 ASP 响应实时 shell 实现远程控制服务器的方法。 ASP(Active Server Pages)是一种用于创...
    99+
    2023-08-12
    响应 实时 shell
  • Java如何实现简单控制台版ATM系统
    本篇内容主要讲解“Java如何实现简单控制台版ATM系统”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“Java如何实现简单控制台版ATM系统”吧!ATM系统项目ATM系统要实现的功能查询:账号必...
    99+
    2023-06-30
  • C#如何实现控制台飞行棋小游戏
    这篇文章将为大家详细讲解有关C#如何实现控制台飞行棋小游戏,小编觉得挺实用的,因此分享给大家做个参考,希望大家阅读完这篇文章后可以有所收获。本文实例为大家分享了C#实现控制台飞行棋小游戏的具体代码,供大家参考,具体内容如下using&nbs...
    99+
    2023-06-20
  • 如何通过VNC实现公网远程控制macOS设备
    公网远程控制macOS【使用mac自带VNC】 文章目录 公网远程控制macOS【使用mac自带VNC】前言1. 测试局域网内远程控制1.1 macOS打开屏幕共享1.2 测试局域网内VNC远...
    99+
    2023-10-28
    macos
  • php如何实现登录失败次数限制
    这篇“php如何实现登录失败次数限制”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇“php如何实现登录失败次数限制”文章吧。p...
    99+
    2023-06-26
  • 如何配置CentOS系统以限制root用户远程登录
    要限制root用户远程登录,可以按照以下步骤配置CentOS系统:1. 以root用户登录到系统。2. 打开SSH配置文件`/etc...
    99+
    2023-10-10
    CentOS
  • 微信小程序如何实现登录
    这篇文章主要为大家展示了“微信小程序如何实现登录”,内容简而易懂,条理清晰,希望能够帮助大家解决疑惑,下面让小编带领大家一起研究并学习一下“微信小程序如何实现登录”这篇文章吧。微信小程序 实现登录最近一段时...
    99+
    2022-10-19
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作