1、打开网页

打开网页部分，就是你自己想要的网页。

——————————————————————————————

2、寻找“加载更多”、“在显示20条”的Xpath的路径

官方认为火狐浏览器，加载一些插件就可以了。

在附加组件里面。需要加载两个插件： firebug、firePath。自己搜索一下，就能下载得到。

右键：“使用Firebug查看元素”，

点击“FirePath”

点击原页面的“加载页面”，Xpath就会显示出来了。

——————————————————————————————

3、设置循环、Ajax

然后填写在“单个元素“里面，如果上面出现字样——”加载更多“，那么就代表这个步骤设置成功。

同时，拖拽一个点击元素在里面，并在”高级选项“设置两个步骤：

勾选“使用循环”；

勾选Ajax加载，设置2s。

——————————————————————————————

4、循环-提取内容

这个步骤，跟常规的设置一样。

直接点击元素——创建一个元素列表以处理一组元素——添加列表——继续编辑列表——再点击——添加到列表——创建列表完成——循环

同时注意的是：如果是加载更多、再显示的问题，不能放在上述的循环之上，要放在之下。

5、提取数据——正则化

提取数据的时候，会出现需要只选择一部分，需要选择：

格式化数据-添加步骤，然后进行步骤的选择。

——————————————————————————————

最终的流程表：

每每以为攀得众山小，可、每每又切实来到起点，大牛们，缓缓脚步来俺笔记葩分享一下吧，please~

———————————————————————————

由于代码布置采集器比较麻烦，又很早知道八爪鱼采集器的强大，所以把一些常规的采集内容贴成图文教程，供以后使用。八爪鱼采集器官方视频教程见：http://www.bazhuayu.com/tutorial/zxs.aspx?t=0采集流程：1、打开网页2、寻找“加载更多”、“在显示20条”的Xpath的路径3、设置循环、Ajax4、循环-提取内容5、内容正则

在我软的UWP里面有一个接口ISupportIncrementalLoading 只要你的集合继承这个，并且实现里面的方法，就能自动实现加载更多的这个动作。说白了就是UWP里面UI列表控件跟集合一个契约。在Flutter里面没有这种类似的东西，但是实际项目里面会出现大量的列表需要加载更多。 FlutterCandies QQ群:181398081 不哭乖站起来继续撸代码，Flutter bug...

八爪鱼 是一款网页爬虫工具，可以不用编写代码快速实现网页数据的爬取。关于其基础操作，可以在其官网的使用教程 http://www.bazhuayu.com/tutorialIndex 进行查看。其中主要针对其翻页和带有验证码的登录以及x pat h操作进行阐述。在制作采集规则时，页面没有“下一页”等翻页按钮，而是一排页码，如"1","2","3","4","5"…… 如何...

在学会selenium之前， 八爪鱼 也是不错的数据采集工具（免费），本文是我学习使用此工具时的笔记。其实官网已经给出了教程，实测对照着教程执行可以实现，以下是我个人的补充。 八爪鱼 界面组成：左侧的流程图 + 右侧的网页 + 网页右上角的操作提示框刚开始操作的时候，由于要关注的地方比较多，很容易点错，下文中的表格分成三列，分别记录网页和提示框中的操作方法，并给出了流程图中相应的变化，方便新手对照执行。操作都是从 八爪鱼 的首页开始，到点击【采集】按钮结束。官网教程：输入一个关键词，实测采集成功 2.输入所需采集网址。 3.点击所需采集的字段，并选择所需采集字段的属性（采集文本或链接），可以在流程中修改采集字段的名称。最重要的是确保采集流程图的正确性。以上步骤完成后，点击开始采集。 4.采集完成后导出数据。

在线的 JS 教程有很多，以下是一些推荐的教程： 1. MDN web 文档：https://developer.mozilla.org/zh-CN/docs/Web/JavaScript 2. W3School：https://www.w3school.com.cn/js/ 3. Codecademy：https://www.codecademy.com/learn/introduction-to-javascript 4. freeCodeCamp：https://www.freecodecamp.org/learn/javascript-algori th ms-and-data-structures/ 5. JavaScript 标准参考教程：https://javascript.ruanyifeng.com/ 这些教程都是免费的，并且有很多练习题帮助你掌握 JS。你还可以尝试看一些书籍，例如《JavaScript 高级程序设计》（JavaScript: Th e Advanced Guide）和《你不知道的 JavaScript》（You Don't Know JavaScript）。