图片抓取工具使用方法

图片抓取工具使用方法

ID:31592926

大小:766.26 KB

页数:12页

时间:2019-01-14

图片抓取工具使用方法_第1页
图片抓取工具使用方法_第2页
图片抓取工具使用方法_第3页
图片抓取工具使用方法_第4页
图片抓取工具使用方法_第5页
资源描述:

《图片抓取工具使用方法》由会员上传分享,免费在线阅读,更多相关内容在学术论文-天天文库

1、八爪鱼·云采集服务平台www.bazhuayu.com图片抓取工具使用方法我们日常工作中经常遇到需要大量提取图片的工作,但一张张的图片保存效率太低,有没有便捷的方法或工具能让我们事半功倍呢?其实掌握这三大要素:明确图片网站类型、学会使用图片批量下载工具、明确能够/不能够实现的功能,图片采集不再是难事。本文向大家介绍一款网络数据采集工具【八爪鱼数据采集器】,教大家如何使用八爪鱼采集软件抓取图片的方法。一、明确图片网站的几大类型1、非瀑布流网站的图片采集示例网站:豆瓣网https://www.douban.com/photos/album/1620960735/?start

2、=0八爪鱼·云采集服务平台www.bazhuayu.com八爪鱼可以对网页中图片的URL进行采集,然后通过专用的图片批量下载工具将URL转化为图片,下载并保存到本地电脑。2、瀑布流网站的图片采集:直接采集图片地址示例网站:百度图片网八爪鱼·云采集服务平台www.bazhuayu.comhttps://image.baidu.com/search/index?tn=baiduimage&ipn=r&ct=201326592&cl=2&lm=-1&st=-1&sf=1&fmq=&pv=&ic=0&nc=1&z=&se=1&showtab=0&fb=0&width=&heig

3、ht=&face=0&istype=2&ie=utf-8&fm=index&pos=history&word=%E5%A4%8F%E7%9B%AE%E5%8F%8B%E4%BA%BA%E5%B8%90此类网站,需要按下面的步骤对采集规则进行Ajax滚动设置:①点击采集规则打开网页步骤的高级选项;②勾选页面加载完成后下滚动;③填写滚动的次数及每次滚动的间隔;④滚动方式设置为:直接滚动到底部;百度图片采集-设置ajax滚动完成上面的规则设置后,再对页面中图片的url进行采集。八爪鱼·云采集服务平台www.bazhuayu.com3、瀑布流网站采集:只可点击图片进入图片详情页

4、,再采集图片地址示例网站:花瓣网http://huaban.com/explore/huatong/此类网站,具有以下两个特征:页面上的图片不是一次加载完成,需要滚动多次才会滚动到底部;图片详情页不能通过点击标题进入,而需要点击图片才能进入。针对这类网站,除了要对采集规则进行Ajax滚动设置外,还需要增加一个点击“a标签”的步骤。如下图设置Ajax滚动,此步骤与2相同,在此不再赘述。花瓣网图片采集-设置ajax滚动八爪鱼·云采集服务平台www.bazhuayu.com由于我们采集时需要点击图片,才能进入到产品详情页,在建立元素循环列表的时候,需要将图片链接设置为列表项。

5、点击页面内的第一张图片,再点击“A标签”,系统会选中图片的链接并发现同类链接。选择“选中全部”,再选择“循环点击每个链接”花瓣网图片采集-点击“A标签”一、学会使用图片批量下载工具1、八爪鱼图片批量下载工具使用教程图片批量下载工具:https://pan.baidu.com/s/1c2n60NI八爪鱼·云采集服务平台www.bazhuayu.com1)下载八爪鱼图片批量下载工具,双击文件中的MyDownloader.app.exe文件,打开软件2)打开File菜单,选择从EXCEL导入(目前只支持EXCEL格式文件)3)进行相关设置,设置完成后,点击OK即可导入文件选择

6、EXCEL文件:导入你需要下载图片地址的EXCEL文件八爪鱼·云采集服务平台www.bazhuayu.comEXCEL表名:对应数据表的名称文件URL列名:表内对应URL的列名称保存文件夹名:EXCEL中需要单独一个列,列出图片想要保存到文件夹的路径,可以设置不同图片存放至不同文件夹如果要把文件保存到文件夹,则路径需要以“”结尾,例如:“D:同步”,如果要下载后按照指定的文件名保存,则需要包含具体的文件名,例如“D:同步1.jpg”如果下载的文件路径和文件名完全一样,则原先存在的文件会被删除八爪鱼·云采集服务平台www.bazhuayu.com一、明确能够/不

7、能够实现的功能1、暂不支持直接采集图片里的信息八爪鱼暂不支持采集图片里的信息,想要提取图片中的信息,可以在将图片下载下来后,使用网上的图片信息提取工具进行图片信息的提取。2、图片URL的两种类型图片网站直接采集下来的图片URL,分为两种类型:一种可以在浏览器中打开,也可以通过图片批量下载工具,将URL转化为图片;一种可以在浏览器中打开,但是不可以通过图片批量下载工具,将其转化为图片。前一种,URL中会明确标示出其图片格式,常见的有:jpg、gif、png等。如下图,百度图片网直接采集下来的图片URL中,包含的图片格式为.jpg,属于前一种

当前文档最多预览五页,下载文档查看全文

此文档下载收益归作者所有

当前文档最多预览五页,下载文档查看全文
温馨提示:
1. 部分包含数学公式或PPT动画的文件,查看预览时可能会显示错乱或异常,文件下载后无此问题,请放心下载。
2. 本文档由用户上传,版权归属用户,天天文库负责整理代发布。如果您对本文档版权有争议请及时联系客服。
3. 下载前请仔细阅读文档内容,确认文档内容符合您的需求后进行下载,若出现内容与标题不符可向本站投诉处理。
4. 下载文档时可能由于网络波动等原因无法下载或下载错误,付费完成后未能成功下载的用户请联系客服处理。