返回顶部
首页 > 资讯 > 精选 >scrapy远程登录控制台如何实现
  • 189
分享到

scrapy远程登录控制台如何实现

2023-07-05 06:07:33 189人浏览 八月长安
摘要

这篇文章主要讲解了“scrapy远程登录控制台如何实现”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“scrapy远程登录控制台如何实现”吧!远程登录控制台Scrapy附带一个内置的telne

这篇文章主要讲解了“scrapy远程登录控制台如何实现”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“scrapy远程登录控制台如何实现”吧!

远程登录控制台

Scrapy附带一个内置的telnet控制台,用于检查和控制Scrapy运行过程。telnet控制台只是一个运行在scrappy进程内部的常规python shell,因此您可以从中做任何事情。

telnet控制台是一个 built-in Scrapy extension 它在默认情况下是启用的,但如果需要,您也可以禁用它。有关扩展本身的更多信息,请参阅 Telnet控制台扩展 。

警告

通过公共网络使用telnet控制台是不安全的,因为telnet不提供任何传输层安全性。拥有用户名/密码验证不会改变这一点。
预期用途是本地连接到正在运行的Scrapy Spider(Spider进程和Telnet客户端在同一台计算机上)或通过安全连接(VPN、ssh通道)进行连接。请避免在不安全的连接上使用telnet控制台,或使用 TELNETCONSOLE_ENABLED 选择权。

如何访问telnet控制台

telnet控制台侦听中定义的tcp端口 TELNETCONSOLE_PORT 设置,默认为 6023 . 要访问控制台,您需要键入:

telnet localhost 6023Trying localhost...Connected to localhost.Escape character is '^]'.Username:PassWord:>>>

默认用户名为 scrapy 密码是自动生成的。自动生成的密码可以在垃圾日志上看到,如下例所示:

2018-10-16 14:35:21 [scrapy.extensions.telnet] INFO: Telnet Password: 16f92501e8a59326
默认用户名和密码可以被设置覆盖 TELNETCONSOLE_USERNAME 和 TELNETCONSOLE_PASSWORD .

警告
用户名和密码仅提供有限的保护,因为telnet不使用安全传输-默认情况下,即使设置了用户名和密码,通信也不会加密。

您需要在windows和大多数linux发行版中默认安装的telnet程序。

telnet控制台中的可用变量

elnet控制台就像一个运行在scrappy进程内部的常规Python shell,所以您可以从中做任何事情,包括导入新模块等。

但是,telnet控制台附带一些为方便起见而定义的默认变量:

捷径描述
crawler残废的爬虫 (scrapy.crawler.Crawler 对象)
enginecrawler.engine属性
spider主动蜘蛛
slot发动机槽
extensions扩展管理器(crawler.extensions属性)
statsstats收集器(crawler.stats属性)
settingsScrapy设置对象(crawler.settings属性)
est打印发动机状态报告
prefs内存调试(请参见 调试内存泄漏)
p到的快捷方式 pprint.pprint()功能
hpy内存调试(请参见 调试内存泄漏)

telnet控制台使用示例

以下是使用telnet控制台可以执行的一些示例任务:

查看发动机状态
你可以使用 est() scrapy引擎使用telnet控制台快速显示其状态的方法:

elnet localhost 6023>>> est()Execution engine statustime()-engine.start_time                        : 8.62972998619len(engine.downloader.active)                   : 16engine.scraper.is_idle()                        : Falseengine.spider.name                              : followallengine.spider_is_idle()                         : Falseengine.slot.closing                             : Falselen(engine.slot.inprogress)                     : 16len(engine.slot.scheduler.dqs or [])            : 0len(engine.slot.scheduler.MQs)                  : 92len(engine.scraper.slot.queue)                  : 0len(engine.scraper.slot.active)                 : 0engine.scraper.slot.active_size                 : 0engine.scraper.slot.itemproc_size               : 0engine.scraper.slot.needs_backout()             : False

暂停、恢复和停止报废发动机

暂停:

telnet localhost 6023>>> engine.pause()>>>

恢复:

telnet localhost 6023>>> engine.unpause()>>>

停止:

telnet localhost 6023>>> engine.stop()Connection closed by foreign host.

Telnet控制台信号

scrapy.extensions.telnet.update_telnet_vars(telnet_vars)
在telnet控制台打开之前发送。您可以连接到这个信号来添加、删除或更新telnet本地命名空间中可用的变量。为此,需要更新 telnet_vars 听写你的处理程序。

参数
telnet_vars (dict) – telnet变量的dict

远程登录设置

以下是控制telnet控制台行为的设置:

TELNETCONSOLE_PORT

违约: [6023, 6073]

用于telnet控制台的端口范围。如果设置为 None 或 0 ,使用动态分配的端口。

TELNETCONSOLE_HOST

违约: '127.0.0.1'

telnet控制台应该监听的接口

TELNETCONSOLE_USERNAME

违约: 'scrapy'

用于telnet控制台的用户名

TELNETCONSOLE_PASSWORD

违约: None

telnet控制台使用的密码,默认行为是让它自动生成。

感谢各位的阅读,以上就是“scrapy远程登录控制台如何实现”的内容了,经过本文的学习后,相信大家对scrapy远程登录控制台如何实现这一问题有了更深刻的体会,具体使用情况还需要大家实践验证。这里是编程网,小编将为大家推送更多相关知识点的文章,欢迎关注!

--结束END--

本文标题: scrapy远程登录控制台如何实现

本文链接: https://lsjlt.com/news/350108.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • scrapy远程登录控制台如何实现
    这篇文章主要讲解了“scrapy远程登录控制台如何实现”,文中的讲解内容简单清晰,易于学习与理解,下面请大家跟着小编的思路慢慢深入,一起来研究和学习“scrapy远程登录控制台如何实现”吧!远程登录控制台Scrapy附带一个内置的telne...
    99+
    2023-07-05
  • scrapy远程登录控制台的实现
    目录远程登录控制台如何访问telnet控制台telnet控制台中的可用变量telnet控制台使用示例暂停、恢复和停止报废发动机远程登录设置远程登录控制台 Scrapy附带一个内置的t...
    99+
    2023-02-27
    scrapy 远程登录控制台 scrapy 远程登录
  • Linux如何实现远程控制
    小编给大家分享一下Linux如何实现远程控制,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!Linux一般作为服务器使用,而服务器一般放在机房,你不可能在机房操作你...
    99+
    2023-06-28
  • java控制台如何实现聊天程序
    本篇内容主要讲解“java控制台如何实现聊天程序”,感兴趣的朋友不妨来看看。本文介绍的方法操作简单快捷,实用性强。下面就让小编来带大家学习“java控制台如何实现聊天程序”吧!本文实例为大家分享了java控制台实现聊天程序的具体代码,供大家...
    99+
    2023-06-20
  • windows xbox控制台目前无法登录如何解决
    这篇文章主要介绍“windows xbox控制台目前无法登录如何解决”,在日常操作中,相信很多人在windows xbox控制台目前无法登录如何解决问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”windows...
    99+
    2023-07-01
  • 如何登录腾讯云服务器控制台系统
    通过用户名和密码登录:首先需要输入正确的用户名和密码。在登录时,用户名和密码将被保存在控制台中的“安全性”选项卡中,以便管理员能够验证账户和访问权限。 使用命令行工具:如果您已经安装了腾讯云服务器的命令行工具,可以通过命令行工具来登录控制...
    99+
    2023-10-28
    腾讯 控制台 服务器
  • mysql实现远程登录
    CentOS7上安装mysql后,想要实现mysql远程登录。主要解决二个问题:(1)为mysql用户授予远程登录权限(改表法或授权法);(2)防火墙开放3306端口。(一)授予登录权限mysql -u root -p 输入密码进...
    99+
    2014-12-25
    mysql实现远程登录
  • 如何登录阿里云服务器控制台详尽指南
    阿里云是中国最大的云计算服务提供商之一,其服务器控制台提供了丰富的管理功能,包括服务器配置、资源管理、监控等。本文将详细介绍如何登录阿里云服务器控制台。 如何登录阿里云服务器控制台:步骤1:注册阿里云账号首先,你需要在阿里云官网上注册一个账...
    99+
    2023-11-18
    阿里 控制台 详尽
  • java控制台实现聊天程序
    本文实例为大家分享了java控制台实现聊天程序的具体代码,供大家参考,具体内容如下 发送端 package ip.chat; import java.io.BufferedRe...
    99+
    2024-04-02
  • python如何实现控制台输出颜色
    这篇“python如何实现控制台输出颜色”除了程序员外大部分人都不太理解,今天小编为了让大家更加理解“python如何实现控制台输出颜色”,给大家总结了以下内容,具有一定借鉴价值,内容详细步骤清晰,细节处理妥当,希望大家通过这篇文章有所收获...
    99+
    2023-06-06
  • C++实现控制台版扫雷程序
    本文实例为大家分享了C++实现控制台版扫雷程序的具体代码,供大家参考,具体内容如下 测试平台: WIN7 工具: VC6.0 , VS2008都能编译得过。 花了两天时间写的,里面涉...
    99+
    2024-04-02
  • win10怎么实现远程控制
    在win10中实现远程控制的方法:1.右键“此电脑”选择“属性”;2.点击“远程设置”选项;3.勾选“允许远程协助连接这台计算机”;4.打开远程连接窗口;5.输入计算机名,填写用户名和密码;具体步骤如下:首先,在win10系统桌面中右键点击...
    99+
    2024-04-02
  • linux控制台下如何实现2048小游戏
    这篇“linux控制台下如何实现2048小游戏”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借鉴价值,希望大家阅读完这篇文章能有所收获,下面我们一起来看看这篇...
    99+
    2024-04-02
  • SpringBoot如何整合Springsecurity实现数据库登录及权限控制
    目录第一步第二步是封装一个自定义的类第三步, 我们需要判断密码啦总结我们今天使用SpringBoot来整合SpringSecurity,来吧,不多BB 首先呢,是一个SpringBo...
    99+
    2024-04-02
  • SpringBoot结合JWT登录权限控制的实现
    目录一、准备LoginUser(存放登录用户信息) 和JwtUser二、准备JwtTokenUtils三、准备JWTAuthenticationFilter (验证登录)、JWTAu...
    99+
    2024-04-02
  • ubuntu如何远程登录windows
    ubuntu远程登录windows的方法:在windows上右键“我的电脑” → 选择“属性” → 点击左侧“远程设置” → 在会话框中勾选“允许远程连接”功能。在ubuntu系统上,打开菜单“应用程序” → 选择“互联网” → 点击“终端...
    99+
    2024-04-02
  • python如何实现远程控制电脑(结合微信)
    不知道大家有没有这样一个烦恼,“自己的电脑总是被别人使用,又不好意思设置密码”,所以利用python设计了一个程序来实现自由管控。 功能虽然简单,但大家可以通过其思路来实现更多的功能。 大致功能主要是两个部...
    99+
    2022-06-04
    如何实现 远程控制 电脑
  • Linux远程登录实现教程解析
    Linux一般作为服务器使用,而服务器一般放在机房,你不可能在机房操作你的Linux服务器。 这时我们就需要远程登录到Linux服务器来管理维护系统。 Linux系统中是通过ssh服务实现的远程登录功能,默认ssh服...
    99+
    2022-06-03
    Linux 远程登录
  • 如何实现限制SSH单用户登录
    这篇文章给大家分享的是有关如何实现限制SSH单用户登录的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。使用方法: 用root权限在后台(比如screen里)运行这个脚本代码如下:#!/usr/bin/perl&nb...
    99+
    2023-06-13
  • SpringMVC如何使用拦截器控制登录
    SpringMVC如何使用拦截器控制登录?针对这个问题,这篇文章详细介绍了相对应的分析和解答,希望可以帮助更多想解决这个问题的小伙伴找到更简单易行的方法。SpringMVC读取Cookie判断用户是否登录,对每一个action都要进行判断。...
    99+
    2023-05-31
    springmvc 拦截器
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作