多语言展示
当前在线:896今日阅读:176今日分享:34

美团商家信息如何采集

介绍采集美团商家数据的方法
工具/原料

八爪鱼采集器v7.0

使用功能点:
1

Ajax滚动加载设置

2

分页列表内容提取END

步骤1:创建采集任务
1

登录进入主界面选择,选择自定义模式

2

将上面网址的网址复制粘贴到网站输入框中,点击“保存网址”

3

保存网址后,页面将在八爪鱼采集器中打开,红色方框中的信息是这次演示要采集的内容END

步骤2:ajax延时时间设置
1

1)设置打开网页步骤的ajax滚动加载时间在页面打开后,当下拉页面时,会发现页面有新的数据在进行加载

2

所以需要进行以下设置:打开流程图,点击“打开网页”步骤,在右侧的高级选项框中,勾选“页面加载完成向下滚动”,设置滚动次数,每次滚动间隔时间,一般设置2秒,这个页面的滚动方式,选择“直接滚动到底部”;最后点击确定(注意:这里的滚动次数及间隔需要针对网站进行设置,测试方法可以参考八爪鱼7.0教程——AJAX滚动教程)

3

2)找到翻页按钮,设置翻页循环将页面下拉到底部,找到下一页按钮,鼠标点击,在右侧操作提示框中,选择“循环点击下一页”

4

由于页面使用了ajax加载技术,当翻页采集时候,网站总需要重新加载,所以对翻页步骤需进行上面打开网页步骤中的设置END

步骤3:商家信息采集
1

1) 选中需要采集的字段信息,创建采集列表如图,移动鼠标选中列表中商家的名称,右键点击,需采集的内容会变成绿色

2

移动鼠标选中红色方框里任意文本字段后,列表中所有适配内容会变成绿色,在右侧操作提示框中,查看提取的字段,可以将不需要的字段删除,然后点击“选中全部”

3

注意: 鼠标放在提示框中的字段上会出现一个删除标识,点击即可删除该字段。

4

点击“采集以下数据”

5

2)修改采集字段名,并点击下方提示中的“保存并开始采集”END

步骤4:数据采集及导出
1

根据采集的情况选择合适的采集方式,这里选择“启动本地采集”

2

说明:本地采集占用当前电脑资源进行采集,如果存在采集时间要求或当前电脑无法长时间进行采集可以使用云采集功能,云采集在网络中进行采集,无需当前电脑支持,电脑可以关机,可以设置多个云节点分摊任务,10个节点相当于10台电脑分配任务帮你采集,速度降低为原来的十分之一;采集到的数据可以在云上保存三个月,可以随时进行导出操作。

3

采集完成后,选择合适的导出方式,将采集好的数据导出

4

如有帮助,请点【投票】如有细品,可点【收藏】如要学习,可以【关注】如要赠人,可点【分享】如有疑问,可以【留评】END

推荐信息