DedeCMS采集功能使用基本知识讲解.pdf

《DedeCMS采集功能使用基本知识讲解.pdf》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、第一部分：自带的采集功能讲解1第一部分：自带的采集功能讲解采集是指有着确定方向、明确目的的采撷和记录写作材料的一种活动。它主要指调查采访和查阅和搜集资料。采集最主要的作用在于为写作、分析、报表获取直接的和间接的材料。今天我们讲的采集主要是指网站采集，网站采集的概念主要是：程序按照指定的规则定向获取其他网站数据的一种方式，另一种简单的说法就是将CTRL+CCTRL+V程序化，系统化，自动化，智能化DedeCMS早期就已经加入了这个采集的功能，以前我们添加网站内容一般都是通过复制、粘贴、编辑然后再发布，这样对于少量的文章还是可以，但如果对于一个新站，什么内

2、容都没有，那就需要复制粘提大量的文章，这是一个重复、枯燥的过程，内容采集就是解决这个问题，将这个重复的操作简化成规则，通过规则进行批量操作。当然采集还可以通过一些专门的采集器来进行采集，国内比较出名的采集器有火车头。今天我们这里以DedeCMS程序自带的采集功能来讲解如何使用采集，并介绍如何对采集的内容进行一些批量的管理。首先我们进入系统后台，打开[采集]-[采集节点管理]，在学习使用这个采集工能之前先介绍一些基本的技术知识。首先我们需要知道HTML基本内容，我们知道浏览器中显示的各种各样的页面其实都是由最基本的HTML组成的，我们可以在我们DedeC

3、MS系统后台发布一篇内容，然后对内容进行一些格式上面的设置。本教程内容版权归属织梦CMS所有。Tealun整理转换。2DedeCMS采集功能使用基本知识讲解也就是说我们的页面都是HTML代码经过浏览器解析后显示出来的，这些基本的HTML代码是给机器看的，而解析出来显示的内容是给我们的用户看的，机器其实是一个死东西，他阅读网页不像用户一样直接看到某一个部分的内容，机器能够看到的是某一部分代码。例如，我们查看一个网页：http://www.dedemo.cn/news/cms/2009/0304/791.html，我们很容易就看到这个文档的内容部分，如图中

4、黄色区域。本教程内容版权归属织梦CMS所有。Tealun整理转换。第一部分：自带的采集功能讲解3我们的电脑是看不出来的，他不会判断显示出来的东西，他只会去解析代码，我们可以通过在页面点击右键，选择查看这个页面的源文件。相对于我们看到的页面中的正文部分，机器则是阅读这些代码中相应的正文内容代码的，如下图黄色部分所显示的代码：也就是说，我们如果需要采集这些内容，需要告诉机器你应该从哪段代码开始，然后到什么地方结束，中间的这个部分就是我们需要的内容，然后将这些内容自动添加到数据库中本教程内容版权归属织梦CMS所有。Tealun整理转换。4DedeCMS采集功

5、能使用基本知识讲解来，省去自己添加内容的枯燥。这里我们就讲到了采集中的一个概念：规则，简单的说也就是我们告诉计算机需做什么。比如采集内容，我们告诉计算机从什么地方的代码开始，到什么地方的代码结束，这些内容就是一个规则，在DedeCMS程序中我们需要涉及到2个地方的规则，1.列表规则；2.内容规则。列表规则：告诉计算机你去采集哪几篇文章，这些文章列表从HTML代码的什么地方开始，到HTML代码的什么地方结束；内容规则：告诉计算机去采集哪个部分的内容，文档的内容是从HTML代码的什么地方开始，到HTML代码的什么地方结束；我们说学会使用采集功能，其中最主要

6、的也就是学会制定采集的规则，有了这些规则之后，采集其实是非常简单的一件事情。采集的一般步骤主要有以下几步：1、制定列表采集规则，这里设置主要告诉服务器你采集哪些内容，一般都是被采集网站的列表页；2、制定内容采集规则：这里告诉服务器你采集页面的内容在页面的哪个部分，一般都是被采集网站的内容页；3、选择栏目、条件导出采集内容；4、批量对采集过来的内容进行维护；（可以没有）5、生成采集后的HTML页面代码；我们也能够很清晰的看出，采集最关键的是前2个步骤，这两个步骤是决定采集内容是否成功的一个重要环节，有一个地方采集出错都将不会成功采集到网站的内容。第二部分

7、：如何使用DedeCMS的采集程序来采集页面信息下面我们结合实例讲解如何使用DedeCMS的采集程序来采集页面信息。我们来看打开的采集节点管理页面：我们把一个整体的采集规则及内容称为一个节点，我们通过对节点的管理可以轻松方便的对我们采集的规则及采集的内容进行管理，当然采集规则也是可以导出的，我们只需要选本教程内容版权归属织梦CMS所有。Tealun整理转换。第二部分：如何使用DedeCMS的采集程序来采集页面信息5中相应的采集节点，但后单击[导出配置]，就可以将我们事先指定好的采集规则导出来，同大家一同分享。当然获得了节点规则也可以通过系统的[导入采集

8、规则]将采集规则导入到系统中去，这样方便了对采集节点的管理，同时我们也可以查看这个节点当前采集