简数导航:简数首页  简数控制台  采集入门教程  数据导出发送  AI写作生成

滚动加载页面采集

  有些列表页没有数字分页或 "加载更多" 按钮,只能通过滚动到页面底部,才能触发新内容加载(如瀑布流页面)。这种 "滚动加载" 方式使得常规翻页采集失效。

  对于这类页面,可以使用简数采集器的 "Ajax动态加载" 功能,自动模拟滚动页面来采集全部数据。

使用说明:

启用【Ajax动态加载】模拟滚动

  在采集任务的列表提取器中,按以下步骤操作:点击【动态】→ 勾选【启用 Ajax 动态加载】→ 选择【滚动页面】→ 按需设置【滚动到的位置】与【滚动次数】。

相关参数设置说明:

  • 【滚动到的位置】:模拟滚动页面时单次向下滚动的距离,默认值为 1000 像素,若页面越较长,可适当调大该数值;

  • 【滚动次数】:设置总共滚动的次数,建议不超过 5 次(通常 3-5 次即可加载大部分最新内容,次数过多容易导致采集超时)。

  完成此配置后,请继续按常规流程配置列表提取器(网址采集)详情提取器(内容采集),最后运行任务即可采集滚动翻页的更多数据。

补充说明:"Ajax动态加载" 的三种加载类型:

  • 【仅等待】:当列表提取器预览窗口看不到想采的数据(空白、一直“加载中”或内容缺失等),但在浏览器里正常显示,就可尝试启用Ajax等待功能。

  • 【点击加载更多】:适用于通过点击 "加载更多" 按钮来分批加载数据的网页,没有数字分页或 "下一页" 链接;

  • 【滚动页面】:适用于通过滚动到页面底部来触发加载新内容的页面(如瀑布流页面)。


简数导航:简数首页  简数控制台  采集入门教程  数据导出发送  采集翻译

results matching ""

    No results matching ""