用ForeSpider采集【链接列表】的数据
的有关信息介绍如下:本教程采集“人上人”首页“最新资讯”栏目列表中的数据,同样适用于采集网页中链接列表数据的其他网站。
新建任务
①点击“采集配置”。
②点击【任务列表】中的“+”,新建采集任务。
③在图示红框中输入采集地址和任务名称,完成后点击“下一步”。
④采集链接数据,需要采集【数据抽取】和【普通翻页】,点击“完成”。
翻页配置
①:点击左侧“链接抽取-普通翻页”。
②:这时我们将网页拉到最底部,Ctrl+左键 选择“下一页”确认选区。
注意:记得随时点击右上角的“保存”,养成良好的操作习惯。
翻页采集预览
完成第2步骤后,点击右上方“采集预览”,最终呈现应如下图:
新建表结构
①选择“采集配置”-“数据建表”。
②点击“+”,新建表并自定义名称,这里取“人上人数据”。
配置采集字段,表结构建立如下:
字段名称:id
A.采集内容:选择“主键”,此处务必选“自增ID主键”。
B.字段属性:选择 “索引字段”、“键值唯一”、“主键字段”。
字段名称:title
A.采集内容:选择“选区内可见文本”。
B.数据类型:选择“字符串”。
C.数据长度:一个汉字占用两个字符,可根据需求填写范围。
字段名称:zhaiyao
A.采集内容: 选择“选区内可见文本”。
B.数据类型:选择“字符串”。
C.数据长度:一个汉字占用两个字符,可根据需求填写范围。
新建数据表
表结构建立完成后,需要新建数据表。
选择“人上人数据”,点击【创建】按钮。创建表名称可随意填写,需注意开头仅可使用英文字母,可加数字。中文名称不能作为表名称。
列表识别
ctrl+鼠标单击,shift+鼠标单击(扩大选区),选中第一个列表框后,点击列表识别,识别列表。
确认选区
①title字段
A.点击左侧“title”。
B.Ctrl+左键选择图示2位置的标题。
C.点击图示3位置的“确认选区”即可完成。
②Zhaiyao字段:
A.点击左侧“zhaiyao”
B.Ctrl+左键选择图示2位置的文字部分
C.点击图示3位置的“确认选区”即可完成
数据采集
采集预览确认无误后,选择“数据采集”,勾选“人上人教育”,点击开始采集。