• [织梦吧]唯一域名:www.dedecms8.com,织梦DedeCMS学习平台.

当前位置: > DedeCMS教程 > DedeCMS安装使用 >

DEDECMS采集规则导入导出图文教程

来源: www.dedecms8.com 编辑:织梦吧 时间:2012-01-13点击:

  我们都知道,DEDEdedecms8.com">dedecms8.com">CMS开发的默认系统后台自带有采集功能,本篇教程演示教你如何使用DEDE采集功能。

  所谓采集即程序按照指定的规则定向获取其他网站数据的一种方式。网络采集是用来批量采集网页,论坛等的内容,直接保存到数据库或发布到网站的一种工具,是一个从目标网页中摘取某些数据形成统一的本地数据库的一个过程。

  这些数据本来只是在可见的网页中以文本形式存在。这个过程所需要的不仅仅是网页爬行器与网页包装器。一个复杂的数据抽取过程需要应付种种障碍,例如会话识别,HTML表单,客户端Java脚本,以及数据整合问题例如与数据集与单词集不一致的情况,以及缺失和冲突的数据。可以根据用户设定的规则自动采集原网页,获取格式网页中需要的内容。

  回到重点:DEDE采集规则的导入方法

  1、登录DEDE后台,打开采集栏,点击导入采集规则,如图:

DEDE采集规则的使用与导入,导出的方法

  2、找到已有的DEDE采集规则粘贴到上图方框里,(注意请复制完整的规则进行粘贴,不要漏掉一个字符),粘贴到了之后点确定,下面的代码中是hi一个采集例子,如下图继续操作:

BASE64:e2RlZGU6bGlzdGNvbmZpZ30NCntkZWRlOm5vdGVpbmZvIG5vdGVuYW1lPSK7pLf0vLzHyS3DwMjdLbCuwPbFrtDUzfggLSC4/Lbgssm8r7nm1PLH687KOmh0dHA7Ly81OTgwODA3MDcubmV0IiBjaGFubmVsaWQ9IjEiIG1hY3RodHlwZT0ic3RyaW5nIg0KICAgIHJlZnVybD0iaHR0cDovL2JlYXV0eS4yNy5jbi9oZmpxLyIgc291cmNlbGFuZz0iZ2IyMzEyIiBjb3NvcnQ9ImFzYyINCiAgaXNyZWY9Im5vIiBleHB0aW1lPSIxMCIgdXNlbW9yZT0iMCIgL30NCntkZWRlOmxpc3RydWxlIHNvdXJjZXR5cGU9ImJhdGNoIiByc3N1cmw9Imh0dHA6Ly8iIHJlZ3h1cmw9Imh0dHA6Ly9iZWF1dHkuMjcuY24vaGZqcS9pbmRleF8oKikuaHRtbCINCnN0YXJ0aWQ9IjEiIGVuZGlkPSIyODEiIGFkZHY9IjEiIHVybHJ1bGU9ImFyZWEiIG11c3RoYXM9ImJlYXV0eS4yNy5jbiINCiBub3RoYXM9Ind3dy4yNy5jbiIgbGlzdHBpYz0iMCIgdXNlbW9yZT0iMCJ9DQogICAge2RlZGU6YWRkdXJsc317L2RlZGU6YWRkdXJsc30NCiAgICB7ZGVkZTpiYXRjaHJ1bGV9ey9kZWRlOmJhdGNocnVsZX0NCiAgICB7ZGVkZTpyZWd4cnVsZX17L2RlZGU6cmVneHJ1bGV9DQogICAge2RlZGU6YXJlYXN0YXJ0fTxkaXYgY2xhc3M9IkRsaXN0V2YiPnsvZGVkZTphcmVhc3RhcnR9DQogICAge2RlZGU6YXJlYWVuZH08ZGl2IGNsYXNzPSJCaXI2Ij57L2RlZGU6YXJlYWVuZH0NCnsvZGVkZTpsaXN0cnVsZX0NCg0Key9kZWRlOmxpc3Rjb25maWd9DQoNCntkZWRlOml0ZW1jb25maWd9DQp7ZGVkZTpzcHBhZ2Ugc3B0eXBlPSdmdWxsJyBzcnVsPScxJyBlcnVsPSc1J317L2RlZGU6c3BwYWdlfQ0Ke2RlZGU6cHJldmlld3VybH1odHRwOi8vYmVhdXR5LjI3LmNuL2MvMjAxMTEwMTkvMTMxODkxOTA4NF8zNjk0NzYuaHRtbHsvZGVkZTpwcmV2aWV3dXJsfQ0Ke2RlZGU6a2V5d29yZHRyaW19ey9kZWRlOmtleXdvcmR0cmltfQ0Ke2RlZGU6ZGVzY3JpcHRpb250cmltfXsvZGVkZTpkZXNjcmlwdGlvbnRyaW19DQp7ZGVkZTppdGVtIGZpZWxkPSd0aXRsZScgdmFsdWU9JycgaXN1bml0PScnIGlzZG93bj0nJ30NCiAgIHtkZWRlOm1hdGNofTx0aXRsZT5bxNrI3V08L3RpdGxlPnsvZGVkZTptYXRjaH0NCiAgIHtkZWRlOnRyaW0gcmVwbGFjZT0iIn0tu6S39Ly8x8ktw8DI3XsvZGVkZTp0cmltfQ0KICAge2RlZGU6ZnVuY3Rpb259ey9kZWRlOmZ1bmN0aW9ufQ0Key9kZWRlOml0ZW19e2RlZGU6aXRlbSBmaWVsZD0nd3JpdGVyJyB2YWx1ZT0nJyBpc3VuaXQ9JycgaXNkb3duPScnfQ0KICAge2RlZGU6bWF0Y2h9W8TayN1dey9kZWRlOm1hdGNofQ0KICAge2RlZGU6dHJpbSByZXBsYWNlPSIifTxhKFtePl0qKT4oLiopPC9hPnsvZGVkZTp0cmltfQ0Ke2RlZGU6dHJpbSByZXBsYWNlPSIifTxzY3JpcHQoW14+XSopPiguKik8L3NjcmlwdD57L2RlZGU6dHJpbX0NCiAgIHtkZWRlOmZ1bmN0aW9ufXsvZGVkZTpmdW5jdGlvbn0NCnsvZGVkZTppdGVtfXtkZWRlOml0ZW0gZmllbGQ9J3NvdXJjZScgdmFsdWU9JycgaXN1bml0PScnIGlzZG93bj0nJ30NCiAgIHtkZWRlOm1hdGNofVvE2sjdXXsvZGVkZTptYXRjaH0NCiAgIHtkZWRlOnRyaW0gcmVwbGFjZT0iIn08YShbXj5dKik+KC4qKTwvYT57L2RlZGU6dHJpbX0NCntkZWRlOnRyaW0gcmVwbGFjZT0iIn08c2NyaXB0KFtePl0qKT4oLiopPC9zY3JpcHQ+ey9kZWRlOnRyaW19DQogICB7ZGVkZTpmdW5jdGlvbn17L2RlZGU6ZnVuY3Rpb259DQp7L2RlZGU6aXRlbX17ZGVkZTppdGVtIGZpZWxkPSdwdWJkYXRlJyB2YWx1ZT0nJyBpc3VuaXQ9JycgaXNkb3duPScnfQ0KICAge2RlZGU6bWF0Y2h9W8TayN1dey9kZWRlOm1hdGNofQ0KICAge2RlZGU6dHJpbSByZXBsYWNlPSIifTxhKFtePl0qKT4oLiopPC9hPnsvZGVkZTp0cmltfQ0Ke2RlZGU6dHJpbSByZXBsYWNlPSIifTxzY3JpcHQoW14+XSopPiguKik8L3NjcmlwdD57L2RlZGU6dHJpbX0NCiAgIHtkZWRlOmZ1bmN0aW9ufXsvZGVkZTpmdW5jdGlvbn0NCnsvZGVkZTppdGVtfXtkZWRlOml0ZW0gZmllbGQ9J2JvZHknIHZhbHVlPScnIGlzdW5pdD0nMScgaXNkb3duPScxJ30NCiAgIHtkZWRlOm1hdGNofTxkaXYgY2xhc3M9Im1scjEwIGZzMTQgcGIxMCBwdDEwIj5bxNrI3V08ZGl2IGNsYXNzPSJpbmxlLXBhZyI+ey9kZWRlOm1hdGNofQ0KICAge2RlZGU6dHJpbSByZXBsYWNlPSIifTxhKFtePl0qKT4oLiopPC9hPnsvZGVkZTp0cmltfQ0Ke2RlZGU6dHJpbSByZXBsYWNlPSIifTxzY3JpcHQoW14+XSopPiguKik8L3NjcmlwdD57L2RlZGU6dHJpbX0NCntkZWRlOnRyaW0gcmVwbGFjZT0iIn08IS0tKC4qKS0tPnsvZGVkZTp0cmltfQ0Ke2RlZGU6dHJpbSByZXBsYWNlPSIifTxkaXYoW14uXSopPnsvZGVkZTp0cmltfQ0Ke2RlZGU6dHJpbSByZXBsYWNlPSIifTwvZGl2PnsvZGVkZTp0cmltfQ0KICAge2RlZGU6ZnVuY3Rpb259DQoNCg0KDQoNCnsvZGVkZTpmdW5jdGlvbn0NCnsvZGVkZTppdGVtfQ0Key9kZWRlOml0ZW1jb25maWd9:END

DEDE采集功能的使用 DEDE采集规则的导入与导出的方法

  以上就是采集规则的导入方法了.很简单的两步,中途最容易出错的就是遗漏了规则的字母,导致采集规则不完整所以出错。

  3、导入采集规则了之后我们再进行采集操纵了,点击采集节点管理,点击采集进行自动化采集模式.如图:

DEDE采集功能的使用 DEDE采集规则的导入与导出的方法

  4、正在采集中的演示图:(注意这里采集的速度快慢都取决于你采集规则的采集内容多少来决定,请中途不要关闭浏览器,让其自动采集完成)

DEDE采集功能的使用 DEDE采集规则的导入与导出的方法

About D8

  • ©2014 织梦吧(d8) DedeCMS学习交流平台
  • 唯一网址 www.DedeCMS8.com 网站地图
  • 联系我们 1978130638@qq.com ,  QQ