八爪鱼采集论坛帖子图文攻略
八爪鱼采集器使用进阶教程共24页文档
一起使用 •使用循环
与文本循环配合使用，达到循环输 入文本效果 •自定义
设置Xpath路径表达式，根据用户 需求自定义流程步骤位置
识别验证码
基本信息：
•识别验证码 流程步骤名称
高级选项：
•执行前等待 流程步骤执行前等待时间
•或者出现元素 填写Xpath路径，配合执行前等待
循环本身不产生任何操作，只负责建立循环，与
循环产生联动的是勾选了使用循环的流程步骤，来达到 循环的效果 循环/提取数据
与上述类似，循环本身不会产生任何操作，真正 与循环产生联动的是勾选了使用循环的提取数据
流程结束图标，此图片代表一个任务执行完成到 循环 结束
提取数据
运行逻辑
循环Ⅰ
循环Ⅰ第一项 循环Ⅰ第二项 循环Ⅰ第三项
。
。
。
循环Ⅰ第N项 。
。
。
循环Ⅰ结束
循环Ⅱ第一项 循环Ⅱ第二项
一起使用 •验证码图片Xpath
填写Xpath路径，告诉八爪鱼验证 码图片位置 •验证码输入框Xpath
输入框Xpath，用于配合验证码图 片Xpath，正确输入验证码 当前验证码
用于流程设计时调试规则用
判断条件
基本信息：
•判断条件 判断条件分为此次判断条件整体，
和各具体条件分支 条件分支
按不同分支条件执行不同流程步骤
•或者出现元素 填写Xpath路径，配合执行前等待一
起使用，在等待时间内元素出现则不再继 续等待 •使用当前循环
与循环配合使用 •添加其他特殊字段
网页标题、时间、当前时间、固定 字段等特殊字段
自定义数据字段（修改抓取方式， 定位方式即XPath，格式化数据 删除选中字段 将选中字段上移、下移
如何利用八爪鱼爬虫爬取图片
如何利用八爪鱼爬虫爬取图片很多电商、运营等行业的朋友，工作中需要用到大量的图片，手动复制太麻烦，现在市面上有一款自动化爬虫工具：八爪鱼采集器，可以帮助大家用最简单的方式自动爬取大量图片，上万张图片几个小时即可轻松搞定。
八爪鱼先将网页中图片的URL采集下来，再通过八爪鱼专用的图片批量下载工具，将采集到的图片URL中的图片，下载并保存到本地电脑中。
下面以ebay网站为例，给大家介绍八爪鱼爬虫爬取图片的方法。
采集网站：https:///使用功能点：●分页列表信息采集●执行前等待●图片URL转换步骤1：创建采集任务1）进入主界面，选择“自定义采集”八爪鱼爬取图片步骤12）将上面网址的网址复制粘贴到网站输入框中，点击“保存网址”八爪鱼爬取图片步骤23）系统自动打开网页，红色方框中的图片是这次演示要采集的内容八爪鱼爬取图片步骤3步骤二：创建翻页循环1）点击右上角的“流程”，即可以看到配置流程图。
将页面下拉到底部，找到下一页的大于号标志按钮，鼠标点击，在右侧操作提示框中，选择“循环点击单个链接”八爪鱼爬取图片步骤4由于该网页每次翻页网址随之变化，所以不是ajax页面，不需要设置ajax。
如果有网站每次翻页，网址不变，则需要在高级选项设置ajax加载。
步骤三：图片链接地址采集1）选中页面内第一个图片，系统会自动识别同类图片。
在操作提示框中，选择“选中全部”八爪鱼爬取图片步骤52）选择“采集以下图片地址”八爪鱼爬取图片步骤5由左上角流程图中可见，八爪鱼对本页全部图片进行了循环，并在“提取数据”中对图片链接地址进行了提取。
此时可以用鼠标随意点击循环列表中的某一条，再点击“提取数据”，验证一下是否都有正常提取。
如果有的循环项没有提取到，说明该xpath定位不准，需要修改。
（多次测试，尚未发现不准情况。
）八爪鱼爬取图片步骤6如还想提取其他字段，如标题，可选择“提取数据”，在下方的商品列表上点击一个商品的标题，选择“采集该链接的文本”八爪鱼爬取图片步骤7修改下字段的名称，如网页加载较慢，可设置“执行前等待”八爪鱼爬取图片步骤8点击“开始采集，免费版用户点击“启动本地采集”，旗舰版用户可点击“启动云采集”八爪鱼爬取图片步骤9说明：本地采集占用当前电脑资源进行采集，如果存在采集时间要求或当前电脑无法长时间进行采集可以使用云采集功能，云采集在网络中进行采集，无需当前电脑支持，电脑可以关机，可以设置多个云节点分摊任务，10个节点相当于10台电脑分配任务帮你采集，速度降低为原来的十分之一；采集到的数据可以在云上保存三个月，可以随时进行导出操作。
如何利用八爪鱼爬虫抓取数据
如何利用八爪鱼爬虫抓取数据听说很多做运营的同学都用八爪鱼采集器去抓取网络数据，最新视频，最热新闻等，但还是有人不了解八爪鱼爬虫工具是如何使用的。
所以本教程以百度视频为例，为大家演示如何采集到页面上的视频，方便工作使用。
常见场景：1、遇到需要采集视频时，可以采集视频的地址（URL），再使用网页视频下载器下载视频。
2、当视频链接在标签中，可切换标签进行采集。
3、当视频链接在标签中，也可采集源码后进行格式化数据。
操作示例：采集要求：采集百度视频上综艺往期视频示例网址：/show/list/area-内地+order-hot+pn-1+channel-tvshow操作步骤：1、新建自定义采集，输入网址后点击保存。
注：点击打开右上角流程按钮。
2、创建循环翻页，找到采集页面中下一页按钮，点击，执行“循环点击下一页”。
在流程中的点击翻页勾选Ajax加载数据，时间设置2-3秒。
3、创建循环点击列表。
点击第一张图片，选择“选中全部”（由于标签可能不同，会导致无法选中全部，可以继续点击没被选中的图片）继续选择循环点击每个元素4、进入详情页后，点击视频标题（从火狐中可以看到视频链接在A标签中，如图所示），所以需要手动更换到相应的A标签。
手动更换为A标签：更换为A标签后，选择“选中全部”，将所有视频标题选中，此时就可以采集视频链接地址。
5、所有操作设置完毕后，点击保存。
然后进行本地采集，查看采集结果。
6、采集完成后将URL导出，使用视频URL批量下载工具将视频下载出来就完成了。
相关采集教程：公告信息抓取/tutorial/hottutorial/qita/gonggao网站源码抓取/tutorial/hottutorial/qita/qitaleixing网页抓取工具新手入门/tutorial/xsksrm八爪鱼网站抓取入门功能介绍/tutorial/xsksrm/rmgnjsajax网页数据抓取/tutorial/gnd/ajaxlabel模拟登录并识别验证码抓取数据/tutorial/gnd/dlyzmxpath抓取网页文字/tutorial/gnd/xpath八爪鱼抓取AJAX滚动页面爬虫教程/tutorial/ajgd_7网页采集提取数据教程，以自定义抓取方式为例/tutorial/zdytq_7八爪鱼——90万用户选择的网页数据采集器。
【八爪鱼v7采集教程】无下一页,数字翻页解决方法
【八爪鱼v7采集教程】无下一页，数字翻页解决方法我们可能遇到一些网页，页面上并没有翻页按钮，而是一排页码，我们需要直接点击页码进行翻页。
这种方式如何解决呢首先我们打开一个这样的网页，如：/news/打开之后翻页页面如下图显示无下一页、数字翻页-图1可以在火狐看下这个翻页的源码，如下图所示：当前页在第一页，源码是span标签开头的，其他页面是a标签开头的。
无下一页、数字翻页-图2我们再翻到其他页，看看是不是也是这个特点。
可以看到当前页在第7页，第7页的源码显示是span开头的，其他页码变为a标签开头的。
无下一页、数字翻页-图3我们可以根据这个特点相应的写xpath,然后手动创建翻页循环。
我们需要让八爪鱼选择的是当前页的下一页,也就是span元素的后面一个元素, 这时我们需要检验如何写Xpath才能准确定位到当前页。
借助于火狐浏览器，我们先定位span标签无下一页、数字翻页-图4看上图这个页面里面span标签有很多，我们再看一下原本需要的span标签，可以看到span 标签里面的class属性，根据这个属性定位。
无下一页、数字翻页-图5 如下图，//span[@class=’thisclass’]即能定位到我们需要的当前页无下一页、数字翻页-图6接下来我们打开八爪鱼中的Xpath工具，生成选择后面元素的Xpath无下一页、数字翻页-图8利用following-sibling定位当前页的下一页，后面元素是a,我们将a加在刚刚生成的Xpath 后//span[@class=’thisclass’]/following-sibling::a可以定位到当前span下面的所有兄弟元素，注意这个following-sibling后面的::是固定格式无下一页、数字翻页-图9由于我们只需要定位到当前页的下一页，所以只需要定位到第一个a标签，即给a一个标号//span[@class='thisclass']/following-sibling::a[1]无下一页、数字翻页-图10可以看到当前页为第7页，现在定位到了它的下一页即第8页。
百度贴吧帖子内容采集方法
百度贴吧帖子内容采集方法本文介绍使用八爪鱼采集器简易模式采集百度贴吧帖子内容的方法。
百度贴吧内容采集字段包括：帖子网址，帖子标题，发帖人，本吧等级，帖子内容。
需要采集百度内容的，在网页简易模式界面里点击百度进去之后可以看到所有关于百度的规则信息，我们直接使用就可以的。
百度贴吧帖子内容采集步骤1采集百度知道内容（下图所示）即打开百度贴吧快速采集贴吧的内容。
1、找到百度贴吧快速采集的规则然后点击立即使用百度贴吧帖子内容采集步骤22、下图显示的即为简易模式里面百度知道的规则查看详情：点开可以看到示例网址任务名：自定义任务名，默认为百度贴吧快速采集任务组：给任务划分一个保存任务的组，如果不设置会有一个默认组百度账号：即百度的账号名登陆密码：即百度的账号密码贴吧名称：要采集的贴吧的名字，比如旅游吧采集页数：采集页数，如果不设置会一直采集到最后一条。
示例数据：这个规则采集的所有字段信息百度贴吧帖子内容采集步骤33、规则制作示例例如采集百度贴吧名称为旅游吧的据信息，在设置里如下图所示：任务名：自定义任务名，也可以不设置按照默认的就行任务组：自定义任务组，也可以不设置按照默认的就行登陆名称：即百度的账号名登陆密码：即百度的账号密码贴吧名称：要采集的贴吧的名字，输入“旅游吧”采集页数：采集5页即输入5设置好之后点击保存百度贴吧帖子内容采集步骤4保存之后会出现开始采集的按钮百度贴吧帖子内容采集步骤54、选择开始采集之后系统将会弹出运行任务的界面可以选择启动本地采集（本地执行采集流程）或者启动云采集（由云服务器执行采集流程），这里以启动本地采集为例，我们选择启动本地采集按钮百度贴吧帖子内容采集步骤65、选择本地采集按钮之后，系统将会在本地执行这个采集流程来采集数据，下图为本地采集的效果百度贴吧帖子内容采集步骤76、采集完毕之后选择导出数据按钮即可，这里以导出excel2007为例，选择这个选项之后点击确定百度贴吧帖子内容采集步骤87、然后选择文件存放在电脑上的路径，路径选择好之后选择保存百度贴吧帖子内容采集步骤98、这样数据就被完整的导出到自己的电脑上来了哦百度贴吧帖子内容采集步骤10相关采集教程：豆瓣电影短评采集大众点评评价采集搜狗微信文章采集八爪鱼——70万用户选择的网页数据采集器。
八爪鱼爬虫采集方法
八爪鱼爬虫采集方法网页爬虫是一个比较热门的网络词，因为大数据时代，各行各业的从业人员都需要大量的数据信息，通过分析这类数据来优化升级自己的产品，从而满足所有消费者的需求，从而更好地抢占市场。
目前市面上比较好用的爬虫工具首推八爪鱼采集器，所以今天就教大家八爪鱼爬虫工具的使用方法，让你轻松get网络爬虫。
文章内示例网址为：/guide/demo/genremoviespage1.html自定义模式采集步骤：步骤1：首先打开八爪鱼采集器→找到自定义采集→点击立即使用自定义模式-图1步骤2：输入网址→设置翻页循环→设置字段提取→修改字段名→对规则进行手动检查→选择采集类型启动采集自定义模式-图2：输入网址自定义模式-图3：设置翻页循环自定义模式-图4：创建循环列表自定义模式-图5：提取字段自定义模式-图6：修改字段名注意点：1.设置翻页循环：观察网页底部有没有翻页图标，如果有并且需要翻页则点击翻页图标，操作提示中循环点击下一页表示循环翻页，可以在循环中设置翻页次数，设置几次则采集网页最新内容几页。
采集该链接的文本选项则会出现提取数据步骤，提取下一页对应的文本；点击采集该链接地址步骤选项会出现提取数据步骤，提取当前字段对应的链接地址。
点击该链接则会出现点击元素步骤，点击该元素一次。
2.设置字段提取：先对网页内容进行分区块，思路为循环各区块，再从循环到的区块中提取每个字段内容，所以设置时先点击2-3各区块，八爪鱼会自动选中剩余所有区块，点击采集以下元素文本会出现循环提取数据步骤，实现对区块的循环采集，但是此时每个区块循环时只会将区块内文字合并为一条提取，此时我们删除该字段并手动添加需要提取的所有字段；点击循环点击每个元素则会出现循环点击元素步骤，对每个区块进行一次点击，该示例中区块点击没有效果，所以该示例中循环点击不存在效果。
如果选择错误，或者出现的内容列表不是你需要的，可以在操作提示中点击区块后的垃圾桶图标进行删除操作，或者点击取消选择，重新设置。
八爪鱼爬虫详细使用教程
八爪鱼爬虫详细使用教程作为一款简单易用的网页数据采集工具，八爪鱼的强大功能早已深入人心。
为了让更多人学会使用八爪鱼，小编整理了一个以采集百度贴吧帖子内容为例的教程，提供给大家操作学习。
本文以采集百度贴吧帖子内容为例，介绍八爪鱼爬虫的使用教程。
在这里仅仅以其中一个帖子举例说明：旅行贴吧的某个帖子（【集中贴】2018年1、2月出发寻同行的请进来登记）采集内容包括：贴吧帖子内容，贴吧用户昵称使用功能点：●创建循环翻页●修改Xpath步骤1：创建百度贴吧帖子内容采集任务1）进入主界面，选择“自定义采集” 2）将要采集的网站URL复制粘贴到输入框中，点击“保存网址”步骤2：创建循环翻页1）网页打开以后，鼠标下拉到最底部，选择下一页，提示框中选择“循环点击下一页”2)鼠标选中帖子的回复，在右面的提示框中选择“选中全部”2）如果要采集贴吧的其他信息，也可以选择，这里选择的是贴吧昵称，贴吧昵称。
接着选择“采集元素”，把不必要的字段删除。
步骤3：修改XPATH1）保存采集后发现有些帖子内容没有正确采集，所以需要修改XPATH，打开右上角的流程按钮2）点击循环选项，“循环方式”选择“不固定元素列表”，“不固定元素列表”填入XPATH：//div[@class="l_post j_l_post l_post_bright "]。
2)点击“提取数据”，修改贴吧帖子内容XPATH。
选中帖子内容字段，依次点击“自定义数据字段”->“自定义元素定位方式”，并设置：元素匹配的XPATH://div[@class="l_post j_l_post l_post_bright "]//div[@class="d_post_content j_d_post_content clearfix"]相对XPATH：//div[@class="d_post_content j_d_post_content clearfix"]选中帖子内容字段自定义数据字段位置帖子内容字段数据提取xpath设置3)修改贴吧用户昵称XPATH。
如何利用八爪鱼爬虫抓取数据
如何利用八爪鱼爬虫抓取数据很多人都听说过八爪鱼采集器，知道它强大的网页数据采集功能，以及简单的操作步骤。
但是有的同学担心不懂代码，不会使用八爪鱼爬虫做抓取。
作为同样技术水平为0的文科生小编，看了教程后使用起来666，友好又高效，向你保证不会技术也可以轻松采集。
要系统的学习八爪鱼，完成从入门到采集大神的历练，需要经过以下几个阶段：一、理解八爪鱼工作的核心原理二、了解八爪鱼入门词汇（有一个初步印象）三、采集基本流程教程（明白整体架构）四、细致学习功能点教程+实战案例教程（开始实际操作）一、理解八爪鱼工作的核心原理八爪鱼采集的核心原理是：模拟人浏览网页，复制数据的行为，通过记录和模拟人的一系列上网行为，代替人眼浏览网页，代替人手工复制网页数据，从而实现自动化从网页采集数据，然后通过不断重复一系列设定的动作流程，实现全自动采集大量数据。
理解核心原理是十分必要的，只有理解了工作原理，再结合实际操作仔细体会，才会取得事半功倍的效果。
二、了解八爪鱼入门词汇（有一个初步印象）要掌握的入门词汇主要有：积分、规则、云加速、云优先、URL、单机采集、云采集、定时采集、URL循环、自动导出、COOKIE、XPATH、HTML八爪鱼入门词汇详细资料，请点击以下链接查看：/doc-wf三、了解采集基本流程教程（明白整体架构）八爪鱼在配置规则、采集数据的时候，主要会经过以下几个步骤：打开网页、点击元素、输入文本、提取数据、循环、下翻下拉列表、条件分支、鼠标悬停。
针对这些步骤，八爪鱼内置了很多高级选项。
在针对具体网页的采集过程中，网页结构、网页情况是不一样的。
我们需要观察网页结构，相应地在八爪鱼中进行高级选项的设置。
那么，了解八爪鱼采集基本流程，是十分必要的。
八爪鱼采集基本流程详解，请点击以下链接查看：/doc-wf四、细致学习功能点教程+实战案例教程（开始实际操作）经过前两步，我们掌握了入门词汇，知道经常出现在八爪鱼中的积分、规则、云加速、云优先、URL、COOKIE、XPATH等词是什么意思；我们对八爪鱼的基本采集步骤有了清晰的把控，明白有8大步骤和若干高级选项需要设置。
旅游景点采集八爪鱼采集图文攻略
旅游八爪鱼采集专题景点游记采集有关旅游景点的攻略采集在前面的八爪鱼采集软件的精选规则中都有提到，前文介绍了像马蜂窝、去哪儿等旅游相关网站的数据采集，有兴趣的小伙伴可以前往了解。
本文中，主要想来介绍下，百度旅游频道有关景点情况介绍的内容，如何通过八爪鱼采集器进行采集操作。
先到八爪鱼采集软件内的规则市场搜索一下，有关百度的采集，目前更新的规则比较多，比如说百度地图采集、百度知道采集、百度景点采集等。
找到百度景点采集的规则下载下来。
百度景点采集的规则分成3个子规则，首先是采集城市的链接地址，再以城市的链接地址循环采集每个景点的链接地址，最后是通过景点的链接地址再采集景点的游记、门票、评价等信息。
很多时候，我们在遇到一个采集数量比较大的网站时，都可以考虑用上述采集思路将一个采集任务分成不同的小任务进行执行，可以提高采集速度和采集数据的准确性.很多小伙伴们在下载现成的规则使用的时候，都需要根据自己的实际需求，将部分采集规则设置进行适当的修改后使用。
一般来说，最常用到的，就是修改示例中的目标网址及采集字段，本规则中需要修改的是循环框中的网址列表。
经上文可知，由于本套规则中是先城市再景点再游记，一环套一环的规则采集办法，执行完城市任务的时候需要将结果应用到景点任务中的循环URL中，同理，景点中采集得到的结果要应用到游记中的URL循环中去。
具体操作如下图所示：如果需要建立一个以网址列表的循环，操作步骤也非常简单，首先，可以手工拖入一个循环框，在右侧的高级选项中，选择URL列表循环，将结构相同的网址保存进入，点击【OK】，再点击保存，接着拖入【打开网页】操作进入循环框，在右侧的高级选项中，选择以【使用当前循环里的URL作为导航地址】并保存，网址循环设置就成功了，小伙伴们可以自己去体验下。
最后，回到百度旅游景点采集的规则上来，修改完成后即可来看看数据采集的情况啦！。
八爪鱼采集软件采集商品评价信息的图文攻略
八爪鱼采集软件采集商品评价信息的图文攻略
采集评价信息可以用于改进服务质量和优化升级产品功能。
下面我就来介绍下，八爪鱼采集器如何采集商品评价的具体操作步骤。
1.登陆软件，新用户可以先直接前往规则市场进行先搜索下，看看是否有自
己想要的规则，这里我们主要来介绍如何自己配置一个任务规则进行采集，点击【快速开始】，先新建一个任务。
任务名称可以自己随意写，方便识
别就可以了。
点击【下一步】进入到设计工作流程。
2.设计工作流程—打开网址：在浏览器内输入一个要采集的店铺的网址，点
击打开，对于结构相同的多网址采集，可以设置一个网址循环。
我们这里
只介绍单网址采集的设置，多网址采集另外单独介绍。
更多采集内容可以八爪鱼采集器网站查看.
3.注意：评价页面不能一步定位到，所以需要【点击元素】可以通过点击商
品位置的评价定位到，并可设置AJAX延迟时间
4.设计工作流程-建立翻页循环：点击页面上的下一步，弹出对话框，设立
翻页循环
5.设计工作流程-建立元素列表循环：选择页面上的评价，由于页面上的评
价要选中一行，所以可以在弹窗框内选择【TR】，选择一行，由于AJAX 网页有时候加载延迟的问题影响到数据提取速度，我们可以设置AJAX加载延迟。
6.设计工作流程-提取数据：点击页面上的要提取的内容，提取字段内容
7.点击【下一步】设立【执行计划】，单机采集可以直接点击【下一步】进
入到【完成】界面，选择【单机采集（调试任务）】：检查规则的配置情况。
QQ采集图文详解-八爪鱼采集
八爪鱼采集器如何将QQ群以及QQ号码导出来的详细图文攻略。
1、打开采集器，登陆进去之后，找到菜单项【采集规则】一项，双击打开，在【规则市场】中找到规则名称为：QQ群-群成员-QQ号邮箱采集的规则，点击产品名称进入规则下载页，首次使用的用户需要先下载此规则，已经下载过此规则的用户可以调过，无需再次下载。
2、进入到软件主页，双击【快速开始】选项，在左上角菜单栏双击【导入任务】选项，将刚下载好的规则导入进去，为了方便管理任务，你可以新建一个任务分组比如QQ号码采集，方便记忆，这个分组名称可以任意建立命名。
3、在【我的任务】中找到刚刚导入的规则任务名称，双击点击开始运行。
注意，规则导入过一次之后，下次再使用此规则，打开软件后直接进入该步骤即可，无需再次运行第一步和第二步。
4、按照提示，点击下一步，进入到【设计工作流程】页面，此步骤如果你需要再已有的规则上进行修改，可以在此页面进行配置或修改新的规则，如果无需修改，直接点击下一步进入下一流程。
5、【设置执行计划】页面，你可以设置采集的相关选项，如果你打算使用云采集，还可以设置启动的时间，系统会自动按照该时间进行采集，云采集还能将每次下载的数据自动去重，自动过滤你之前已经下载过的数据。
如果你不打算采取云采集，直接点击【下一步】进入下一流程
6、任务配置完成页，你可以选择【检查任务】进入QQ数据采集运行检查，任务检查时点击运行按钮，即可开始QQ采集，在此，需要你登陆要采集的QQ号码，系统即可自动开始运行，任务检查完毕，你也可以将数据直接导出
7、在任务配置完成页，你也可以选择【完成】设置【云采集】或【单机采集】，云采集系统会自动根据你的设置定时定量完成采集和去重工作。
八爪鱼采集器使用进阶教程
新标签页问题
我们在采集分页列表，一般是以下两个逻辑： 1.标签页A保存列表元素 2.标签页B打开详情页页面 如果我们在点击元素高级选项处，不勾选新开标 签页，那么我们实际上就会在标签页A点击到详情页， 此时由于标签页A的变化，列表中保存的元素就已经不 存在，所以导致我们只能提取一条详情页数据 原理： 八爪鱼在建立流程设计时，实际上都是基于某个 标签页进行建立的，如果你所建立的流程设计是基于B 页面，但实际上当你点击该流程设计时，内核浏览器 出现在A页面，此时你就应该删除流程设计重新制作或 者通过拖拽，完成自动修复：
翻页问题
死循环翻页 死循环翻页，一般都是由点击翻页的自定义定位 元素方式中的XPath路径不精准导致的，此时我们需 要根据网页特点，来修改Xpath，教程。 •提取为空 如果网页能正常打开，提取为空一般有下列两种 情况： 1）IFRAME IFRAME问题教程 2）Xpath不精准 Xpath不精准，导致部分数据提取不到，这时我 们需要观察网页结构进行修改Xpath Xpath基础教程 观看完后，尝试自己解决，如果未能解决，可以 到Xpath板块进行发帖咨询
循环
基本信息：
•循环列表 循环操作的列表元素
高级选项：
•执行前等待 流程步骤执行前等待时间 •或者出现元素 填写Xpath路径，配合执行前等待 一起使用 •元素在Iframe里 填写Iframe的Xpath，解决框架网页 问题 •循环方式 五种循环方式，解决各种循环场景 •满足以下条件时退出循环 限制循环次数
输入文本
基本信息：
•输入框 输入框信息 要输入的文本 需要在输入框输入的文本信息
高级选项：
•执行前等待 流程步骤执行前等待时间 •或者出现元素 填写Xpath路径，配合执行前等待 一起使用 •使用循环 与文本循环配合使用，达到循环输 入文本效果 •自定义 设置Xpath路径表达式，根据用户 需求自定义流程步骤位置
八爪鱼采集器使用方法图解
八爪鱼采集器使用方法
图解
文档编制序号：[KKIDT-LLE0828-LLETD298-POI08]
八爪鱼采集器使用方法图解：
1、打开八爪鱼采集器的客户端，登陆软件之后新建一个任务，打开你要采集的网站地址。
这里我自己示范的原创设计手稿的采集。
2、进入到设计工作流程环节，在界面浏览器那输入你要采集的网址，点击打开，你就能看到你要采集的网站界面，由于这个网址存在多页内容需要采集，我们再设置采集规则的时候，可以先建立翻页循环，先把鼠标选择页面上的【下一页】按钮，在弹出的任务对话框，选择高级选项中的【循环点击下一页】，软件会自动建立一个翻页循环。
3、建好翻页循环好，就是采集当前页上的内容，我要采集图片的URL，就选中一个图片，然后单击，软件会自动弹出对话框，先建立一个元素循环列表。
当前页面的所有元素都被抓取后，循环列表则建立完成。
4、设置要抓取的内容，选择元素循环列表中的任意一个元素，在浏览器内找到该元素对应的图片，点击后弹出对话框，选择【抓取这个元素的图片地址】为字段1，同时我为了方便识别，还抓取了字段2为图片标题名称，设置原理同图片地址。
5、检查一下，翻页循环框应该将产品循环框嵌套在内，表示，先抓取完当前一整页的图片URL后再翻页。
6、设置执行计划后，就可以开始采集了，单击采集的话，直接点击【完成】步骤下的【检查任务】，开始运行任务。
采集完毕后可以直接下载成EXCEL的文件。
7、将URL转换为图片，这里用八爪鱼图片转换工具，将EXCEL导入之
后，就可以自动等待系统将图片下载下来了！
8、。
八爪鱼图片采集攻略
八爪鱼采集软件批量图片采集攻略瀑布流网站、AJAX网页等技术和网站技术架构和网页结构都与以往传统的网站有所区别，如何对这类型网站进行网页数据采集，下面，本文就来详细介绍下，这类型网站时使用八爪鱼采集器的详细操作步骤。
以“东大门”这个站为采集范例，来说明下图片采集要如何实现。
先来看下这个网站的特殊之处，首先，页面上的图片不是一次加载完成，而需要滚动多次才会滚动到底部，这类型的网站像新浪微博也是类似情况，当然也有的瀑布流网站是一直加载无法见底的，这个情况另外介绍。
其次，产品详情页不能通过点击标题进入，而需要点击图片才能进入。
针对以上两点问题，在使用八爪鱼采集器采集图片等信息的时候，在设置规则的时候需要注意以下几点：1、打开网页的时候，需要设置AJAX网页加载，以便确保数据采集的时候不会遗漏，像东大门这个示范站，我们实际滚动大约需要4次，所以我们在AJAX加载到底部，滚动次数可以设置为4次或5次均可，次数可以适当的比实际的滚动次数稍微多一两次！2、由于我们采集时需要点击图片才能进入到产品详情页，在建立元素循环列表的时候，需要将图片链接设置为列表项，如下图所示，我们需要点击A标签取到图片的链接地址，并以此链接为循环列表，添加元素到列表的时候，每次都需要点击A标签，2-3次添加之后系统会将所有选中的图片链接自动读取出来。
3、采集图片的URL，按第二步的操作进入到详情页后，就是提取数据了，对于产品名称和价格，都是文本形式，提取非常简单，而对于图片，会需要先采集到图片本身的URL，再进行转换，采集办法如下图所示，选中图片后，在弹出的对话框中可选中IMG标签，选择图片的超链接进行采集。
4、设置完成后，保存，来看下采集的战果！URL、产品名称、价格均已采集下来，我们导出为EXCEL格式的文件。
5、将图片的URL转换为图片批量下载下来，相关的工具再八爪鱼数据采集器论坛可以免费下载。
将URL地址导入工具即可将图片转换下来！经过以上简单的5步，AJAX网页上的瀑布流图片就采集下来了，当然，如果你要进行多页采集，只需要再第2步的设置一次翻页循环即可，翻页循环的相关视频教程可直接点此查看。
八爪鱼采集器使用入门教程
三、提取数据
正式的采集步骤
四、点击元素 循环本身是不会有任何执行操作的，如果要实现循环翻页，则 需要一个点击元素来和循环产生联动
流程设计步骤
流程设计步骤： 在八爪鱼采集器中，一共有11个流程设计操作，其中分为基本步骤和进阶步骤，划分为以下： 基本步骤： 基本步骤本身是应用较多的流程设计操作，通常来说，要实现一个网页的数据快 速整理与采集，这些步骤是必不可少的，基本步骤如下： 1）打开网页 2）点击元素 3）循环 4）提取数据 进阶步骤： 进阶步骤，是指除基本步骤外，我们需要通过下列操作来辅助完成我们的数据采 集，例如：有时候我们采集的数据需要先输入文本才能进行采集，进阶步骤如下： 1）输入文字 2）识别验证码 3）切换下拉选项 4）判断条件 5）移动鼠标到元素上 6）结束循环 7）结束流程
操作基本信息及高级选项
在八爪鱼中，流程操作由基本信息与高级选项两部分组成 一、基本信息： 基本信息一般会将该操作流程的基本信息显示出来，例如：打开网页会显示你打开网页的URL， 点击元素会显示你点击的元素文本等 二、高级选项： 高级选项，可以设置一些额外的选项设置，以便辅助规则正确有效执行，例如：执行前等待、元素 在iframe里等
二、任务规则：
任务规则，就是指根据特定的网页，按人用浏览器去访问网页的过程制定好的自动化任务程 序，一般来说，一个类型相似的网站对应一个任务规则 三、任务状态： 1)任务生命周期:可执行状态、等待状态、运行中状态、已完成状态、已停止状态 2）运行中状态：1）本地采集状态、云采集状态
八爪鱼软件地图采集图文攻略
使用八爪鱼采集软件采集百度地图搜索结果图文攻略
八爪鱼采集软件的规则市场内更新了百度地图搜索结果采集，本文主要介绍如何采集的详细图文步骤。
首先还是先去八爪鱼采集器内的规则市场搜索下，百度地图采集的规则，如下图：
搜索到之后，将百度地图的规则下载下来，导入到新任务中。
有的小伙伴们会提到下载的时候需要扣除积分，规则太多则完全不够用啊，其实，积分的获取非常简单，八爪鱼采集器提供了各种免费赚积分的途径，快速查看如何免费赚积分。
下载下来的规则，里面有一个关键词示例，就是“教育”，大家可以自行修改成自己想要查询的关键词，修改办法十分简单，点击流程框内的“输入文字”，在右侧的框内将教育修改成为其他的关键词，点击保存，注意，本处只可放入一个关键词哦。
由于这个地图页面有防采集措施，所以大家就一个关键词一个关键词的采集比较好，建议使用云采集会更有效的突破防采集哦！如果要多个关键词一起修改，则可按下图设置关键词循环。
最后，我们就来一起看下采集的成果吧！采集完毕后可以根据自己的需要将数据保存为EXCEL、TXT、HTML、数据库等多种格式哦。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
八爪鱼采集软件如何采集论坛帖子的图文攻略
八爪鱼采集器如何采集论坛的帖子及图片的详细操作步骤。
先来看看采集规则市场内的有关论坛方面的采集规则都有哪些？
搜索“论坛”相关的关键词，可以找到Discuz论坛帖子采集和天涯论坛帖子采集两个比较有代表性的论坛类型，当然，如果小伙伴需要采集其他的论坛比如说百度贴吧、晋江文学论坛、新闻论坛等，可以借鉴这两个规则举一反三。
网站也有采集软件相关的视频教程。
以Discuz论坛为例，规则里面只采集了前三页，如果需要修改成采集更多页的话，可以在此处进行修改！
规则中采集的内容为发帖人、帖子标题、帖子内容、查看、回复、发帖内容等字段，小
伙伴们可以根据自己的需要增加或删除字段。
如果需要采集图片则可选择先采集图片的URL 超级链接，再去八爪鱼论坛上下载图片转化工具，将URL批量转换为图片URL。
全部设置完毕之后，点击下一步进入到单机采集调试的环节，来看看采集的成果吧。
天涯帖子采集规则如果要修改，也可以参照上面的方法依次类推。
小伙伴们还可以将八爪鱼采集软件运用到其他类型的论坛上。