返回顶部
首页 > 资讯 > 后端开发 > PHP编程 >简数采集器数据发布到PHPWind
  • 136
分享到

简数采集器数据发布到PHPWind

大数据爬虫经验分享内容运营php 2023-10-10 06:10:47 136人浏览 泡泡鱼
摘要

简数采集器支持采集数据自动批量发布到PHPWind CMS系统。使用步骤如下: 1. 安装phpWind发布插件(在PHPWind后台安装)          1)下载PHPWind采集发布插件下载地址:            PHPWi

简数采集器支持采集数据自动批量发布到PHPWind CMS系统。使用步骤如下:

1. 安装phpWind发布插件(在PHPWind后台安装)

         1)下载PHPWind采集发布插件下载地址:

           PHPWind免登录发布接口-下载地址-CSDN

         2)修改PHPWind系统代码:打开 “根目录/conf/application/phpwind.php” 文件,注释掉csrf配置项代码(大约在18行到21行);

csrf' => array(   'class' => 'LIB:filter.PwCsrfTokenFilter',    'pattern' => '~(bbs/upload/*|windid/uploadAvatar/*|app/upload/run)')修改为//csrf' => array(//   'class' => 'LIB:filter.PwCsrfTokenFilter', //   'pattern' => '~(bbs/upload/*|windid/uploadAvatar/*|app/upload/run)'//)

          3)继续修改PHPWind系统代码:

                打开 “根目录//src/service/forum/dao/PwThreadsContentDao.php” 文件,增加支持html发布代码(大约在18行);

protected $_dataStruct = array('tid', 'useubb', 'aids', 'content', 'sell_count', 'reminds', 'Word_version', 'tags', 'ipfrom', 'manage_remind');在'useubb'` 的后面增加 `'usehtml',修改后如下:protected $_dataStruct = array('tid', 'useubb','usehtml', 'aids', 'content', 'sell_count', 'reminds', 'word_version', 'tags', 'ipfrom', 'manage_remind');

        4)解压下载的插件zip压缩包,得到UTF8和GBK版本文件,核实用户的PHPWind系统是哪个版本,再将对应版本里的 “keydatas” 文件夹整个打包压缩成zip压缩包格式,命名为keydatas.zip;

        5)登陆Phpwind系统后台,点击【插件与模板】--》【应用管理】--》【本地安装】--》 在【本地上传】中点击【上传文件】按钮,将上一步处理好的keydatas.zip压缩包进行上传;

        6)安装成功后,在Phpwind后台【已安装】列表中,找到对应采集发布插件,点击【设置】按钮,修改默认密码,完成发布插件安装;

2. 创建发送目标 (在简数系统控制台)

简数采集器某个任务的【发送目标管理】处:

        1)点击 “发送到WEB配置” 按钮,创建对应PhpWind系统的发送目标;

        2)第一步填写PhpWind采集发布插件的信息;

       3)第二步映射配置要发布的字段内容,最后点击保存;

一般使用默认配置即可,需指定发布分类栏目,在【栏目ID】行第二列填写要发送的版块数字ID,获取方式:PHPWind后台 --》论坛 --》版块管理 --》fid。

作者填写对应作者名称,不存在的作者系统会自动创建。

3. 采集数据发布到PhpWind

在简数采集器某个任务的【结果数据&导出发送】处:

        1)点击页面上的【发送数据】按钮;

        2)选择要发送的数据范围,以及要发布的PHPWind发送目标;

        3)最后点击【发送】按钮,即可发送采集的数据到PhpWind CMS系统中。

采集发布文章到PhpWind就完成了,十分简单方便,简数采集器无需看代码写规则,系统智能识别+鼠标点选可视化配置采集规则,一学就会的智能数据采集器,还支持自动采集翻译发布,关键词泛采集,导入导出数据等功能!

来源地址:https://blog.csdn.net/ccchen888/article/details/133124621

--结束END--

本文标题: 简数采集器数据发布到PHPWind

本文链接: https://lsjlt.com/news/426765.html(转载时请注明来源链接)

有问题或投稿请发送至: 邮箱/279061341@qq.com    QQ/279061341

猜你喜欢
  • 简数采集器数据发布到PHPWind
    简数采集器支持采集数据自动批量发布到PHPWind CMS系统。使用步骤如下: 1. 安装PHPWind发布插件(在PHPWind后台安装)          1)下载PHPWind采集发布插件下载地址:            PHPWi...
    99+
    2023-10-10
    大数据 爬虫 经验分享 内容运营 php
  • 简数采集器数据发布到PHPCMS
    简数采集器支持将采集数据自动批量发布到PHPCMS系统。使用步骤如下: 目录 1. 安装PHPCMS发布插件(在PHPCMS后台上传安装) 2. 创建发送目标 (在简数系统控制台) 3. 采集数据发布到PHPCMS 1. 安装PHPCM...
    99+
    2023-09-14
    经验分享 大数据 内容运营 爬虫 php
  • 详解火车头采集器免登录采集数据发布到DEDECMS织梦的方法
    将dede/config.php中的下面代码: //检验用户登录状态 $cuserLogin = new userLogin(); if($cuserLogin->getUserID()==-1) ...
    99+
    2022-06-12
    火车头采集器 采集数据 DEDECMS
  • 简洁短小:php数据采集利器
    作为一名网络开发者,我经常需要从网页上获取数据并进行处理。而在这个过程中,PHP采集网页数据成为了我最常用的工具之一。今天,我将对比评测两种常见的php采集网页数据的方式:使用curl库和使用file_get_contents函数。 1.介...
    99+
    2023-10-26
    函数 请求
  • RDBMS数据定时采集到HDFS
    [toc] RDBMS数据定时采集到HDFS 前言 其实并不难,就是使用sqoop定时从MySQL中导入到HDFS中,主要是sqoop命令的使用和Linux脚本的操作这些知识。 场景 在我们的场景中,需要...
    99+
    2024-04-02
  • 数据采集 - Marvin
                     链接:https://bdcc.bigdataedu.org/block/48(需账号登录)...
    99+
    2016-08-03
    数据采集 - Marvin
  • 数据采集要用到代理IP吗
    这篇文章主要介绍“数据采集要用到代理IP吗”,在日常操作中,相信很多人在数据采集要用到代理IP吗问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”数据采集要用到代理IP吗”的疑惑有所帮助!接下来,请跟着小编一起来...
    99+
    2023-06-25
  • 数据采集实战(一)-
    概述 最近在学习python的各种数据分析库,为了尝试各种库中各种分析算法的效果,陆陆续续爬取了一些真实的数据来。 顺便也练习练习爬虫,踩了不少坑,后续将采集的经验逐步分享出来,希望能给后来者一些参考,也希望能够得到先驱者的指点! 采集工...
    99+
    2017-02-11
    数据采集实战(一)-
  • 数据采集实战(二)-
    1. 概述 京粉(https://union.jd.com/)是京东联盟下的网站,通过分享其中的商品链接可以赚取佣金,类似淘客联盟。 采集京粉的商品,既可以练习 puppeteer的使用,平时想在京东购物时,也能用得上(采集看看...
    99+
    2015-01-09
    数据采集实战(二)-
  • 数据采集实战(三)-
    1. 概述 王者荣耀是一直都挺喜欢的一个手游,玩了好几年,最近一段开始喜欢看比赛,所以想着采集点数据看看各个战队或者选手的情况。 顺便也练习练习 puppeteer 的使用。 数据来源于:尚牛电竞 。 2. 采集流程 王者荣耀最近正在进行...
    99+
    2020-07-29
    数据采集实战(三)-
  • 数据采集实战(四)-
    1. 概述 前段时间在看一本很多人推荐的线性代数教材《线性代数应该这样学》第三版,这一版每个章节都有大量的习题。 官方网站上虽然按照章节提供了习题的答案,一来因为网站是国外的,访问不流畅,二来答案中还夹杂着广告,影响查看。 所以,想试着将...
    99+
    2019-04-29
    数据采集实战(四)-
  • 数据采集实战(五)-
    1. 概述 现在学校越来越重视孩子课外知识的掌握,给孩子挑选课外书一般都是参考学校或者家长之间的推荐。 有时,也会想看看在儿童阶段,目前到底流行的是些什么样的书。 ​ 于是,就简单写了这个小爬虫,采集了畅销童书的前20名。 要想采集更多的...
    99+
    2015-05-29
    数据采集实战(五)-
  • 数据采集与存储
    1.2 数据采集技术的功能及特点 数据采集技术是指通过各种手段和工具,从各种数据源中采集、提取和处理数据的过程。数据采集技术的主要功能包括: 数据源的识别:通过各种手段找到需要采集数据的来源,包括网站...
    99+
    2023-09-15
    python mysql spark
  • 亚马逊数据采集
    爬虫技术:通过网页抓取、HTTP请求、DNS解析等技术手段来获取网站数据。 用户行为数据:通过用户访问网站的行为记录来获取用户信息,包括访问时间、访问页面、跳出率、购买记录等。 第三方API接口:通过第三方API接口,可以获取网站的用户信...
    99+
    2023-10-27
    亚马逊 数据采集
  • python串口数据怎么采集并发送
    要在Python中采集和发送串口数据,你需要使用一个串口通信库,比如pySerial。下面是一个简单的示例代码,展示了如何使用pyS...
    99+
    2023-10-10
    python
  • 分布式及高可用元数据采集原理
    引言:元数据采集是元数据产品的核心部分,如何提升采集效率是需要仔细斟酌的事情,既要保持稳定性也要保持跟上主流技术的发展趋势。元数据产品从最初集中式WEB应用系统到现在流行的分布式、微服务这种系统架构,原有元...
    99+
    2024-04-02
  • php实现大数据采集
    随着互联网的不断发展,数据采集成为了人们获取信息的重要手段。然而,随着数据量的不断增加,传统的手动采集方法已经无法满足需求,因此,大数据采集技术成为了关键。在这里,我们来介绍一下php实现大数据采集的方法。一、 数据采集流程数据采集流程通常...
    99+
    2023-05-24
  • 用vue设计一个数据采集器
    目录场景核心问题状态监听状态监听优势状态监听劣势重构实现思路依赖收集总结场景 在业务上现在有一个场景,当发生业务行为变化时,需要对各个模块的行为进行数据收集,数据用途可以用作回顾,...
    99+
    2024-04-02
  • 第02期:Prometheus 数据采集(一)
    上篇文章(第01期:详解 Prometheus 专栏开篇)介绍了 Prometheus 的架构,本文开始将介绍 Prometheus 数据采集。本文首先会介绍采集数据的格式和分类,然后会给出一些使用上的建议。 一、采集数据格式及分类 1....
    99+
    2022-04-30
    第02期:Prometheus 数据采集(一)
  • 第03期:Prometheus 数据采集(二)
    本期作者:罗韦 爱可生上海研发中心成员,研发工程师,主要负责 DMP 平台监控告警功能的相关工作。 上篇文章(第02期:数据采集一)介绍了 Prometheus 数据采集的格式和分类,本文会对采集过程进行详细的介绍。 Prometheu...
    99+
    2021-09-25
    第03期:Prometheus 数据采集(二)
软考高级职称资格查询
编程网,编程工程师的家园,是目前国内优秀的开源技术社区之一,形成了由开源软件库、代码分享、资讯、协作翻译、讨论区和博客等几大频道内容,为IT开发者提供了一个发现、使用、并交流开源技术的平台。
  • 官方手机版

  • 微信公众号

  • 商务合作