高德地图数据采集方法_第1页
高德地图数据采集方法_第2页
已阅读5页,还剩18页未读 继续免费阅读

付费下载

下载本文档

版权说明:本文档由用户提供并上传,收益归属内容提供方,若内容存在侵权,请进行举报或认领

文档简介

1、八爪鱼云采集网络爬虫软件 高德地图数据采集方法本文介绍使用八爪鱼采集高德地图数据(以美食地址为例)的方法。采集网站:/采集的内容包括:店铺名,分类,地址,联系号码使用功能点:l 创建循环翻页l 分页列表信息采集l Ajax设置步骤1:创建高德地图数据采集任务1)进入主界面,选择“自定义采集2) 将要采集的网站URL复制粘贴到输入框中,点击“保存网址”步骤2:文本输入1)鼠标移动到地址选择框,在右面的提示框中选择“点击该元素”然后鼠标选中输入框,在提示框中选择“输入文字”3) 在弹出的输入框中输入要采集的城市,这里以新乡为例

2、,然后点击确定。鼠标点击新乡,并在输入框中选择“点击该元素”步骤3:创建翻页循环1) 移动鼠标,在右面拖入一个循环框,如下图所示鼠标点击输入框,在右面提示框中选择“输入文字”,然后选择确定把输入文字的步骤拖入规则流程,在高级选项中选择执行前等待“2秒”,选择文本列表,并在列表中输入需要采集的品类,这里以菜系为例,如下图可输入“火锅”等。鼠标选中输入文本步骤,高级选项中勾选使用当前循环里的文本来填充输入框2) 鼠标点中搜索框,接着选择“循环点击每个元素”。3) 进入火锅店列表页后,鼠标移动到最后并选中翻页按钮,在右面的提示框中选择”循环点击的单个元素“3)之后选中火锅店的第一条链接,系统自动识别

3、出其他的元素后,在右面的提示框中选择“选中全部”,以创建循环翻页。再选择“循环点击单个元素”步骤4:高德地图数据提取详细信息1)进入列表详情页以后,选中店名, 然后在右面的提示框中选择“采集该元素文本”,同样操作,可以把地址、分类等信息采集下来。2)然后鼠标点中字段旁边的编辑标识,可以对提取字段的自定义命名,点中旁边的删除标识可以删除不需要的字段。鼠标选中返回,然后选择“点击该元素”步骤5:Ajax设置由于此网页涉及Ajax技术,我们需要进行一些高级选项的设置。选中“点击元素”步骤,打开“高级选项”,勾选“Ajax加载数据”,设置时间为“2秒”。每一个点击元素的高级选项都需要设置。Ajax设置

4、完成之后,再重新启动本地采集,采集完成后,会跳出提示,选择“导出数据”选择“合适的导出方式”,将采集好的数据导出这里我们选择excel作为导出为格式,数据导出后如下图相关采集教程:百度地图数据采集:/tutorialdetail-1/cjbddtsj-7.html腾讯地图数据采集:/tutorialdetail-1/txdtdatacj.html淘宝买家秀图片采集详细教程:/tutorialdetail-1/tbmjxpic.html百度贴吧帖子信息采集详细教程:

5、/tutorialdetail-1/tiebashendu.html知乎信息采集详细教程,以知乎发现话题为例:/tutorialdetail-1/zh-ht.html八爪鱼7.0版本云采集使用方法(含定时云采集):/tutorialdetail-1/ycjsyff_7.html八爪鱼90万用户选择的网页数据采集器。1、操作简单,任何人都可以用:无需技术背景,会上网就能采集。完全可视化流程,点击鼠标完成操作,2分钟即可快速入门。2、功能强大,任何网站都可以采:对于点击、登陆、翻页、识别验证码、瀑布流、Ajax脚本异步加载数据的网页,均可经过简单设置进行采集。3、云采集,关机也可以。配置好采集任务后可关机,任务可在云端执行。庞大云采集集群24*7不间断运行,不用担心

温馨提示

  • 1. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007和PDF阅读器。图纸软件为CAD,CAXA,PROE,UG,SolidWorks等.压缩文件请下载最新的WinRAR软件解压。
  • 2. 本站的文档不包含任何第三方提供的附件图纸等,如果需要附件,请联系上传者。文件的所有权益归上传用户所有。
  • 3. 本站RAR压缩包中若带图纸,网页内容里面会有图纸预览,若没有图纸预览就没有图纸。
  • 4. 未经权益所有人同意不得将文件中的内容挪作商业或盈利用途。
  • 5. 人人文库网仅提供信息存储空间,仅对用户上传内容的表现方式做保护处理,对用户上传分享的文档内容本身不做任何修改或编辑,并不能对任何下载内容负责。
  • 6. 下载文件中如有侵权或不适当内容,请与我们联系,我们立即纠正。
  • 7. 本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。

评论

0/150

提交评论