简数导航:采集入门教程 数据导出发送 AI写作生成 采集场景示例 Open API文档
自动采集与发送最新数据
自动采集并发送最新数据,只需限定监控网站的前几页最新内容,省去反复过滤大量旧数据,显著提升采集效率。
配置方法如下:
1. 创建并配置采集规则
利用简数的 "智能识别 + 可视化操作" 特色功能,可快速完成采集规则配置。
在智能向导创建任务,仅需输入一个网址,便能自动识别页面数据和生成采集规则,包括:列表页、翻页和详情页(标题、正文、作者、时间、标签等)。
支持可视化调整配置:自由点选目标内容,多字段结构化存储数据,灵活满足各种采集需求。
完整操作指引可看【采集入门教程】
2. 自动采集最新数据
通过限制采集的列表页数,实现快速且精准采集最新数据:
1)只采集列表前几页
大多数网站的最新内容,会按时间倒序排在列表前几页。因此采集最新数据,只需在【采集起始网址】处,填写列表页的前几页(比如首页或前3页)网址即可。
这样每次自动采集时,系统只会快速扫描并抓取前几页的新增内容,无需再反复采集、过滤成百上千页的旧数据,白白浪费时间。
2)配置定时自动采集
定时自动采集:可自由设置按每天,每周,每间隔多少小时(或分钟)自动执行一次数据采集。
配置方法:在采集任务,点击【启动|定时采集】 -》勾选上 "启用定时采集" -》设置定时方式和相关时间-》点击【开始采集|定时采集】按钮,系统便会在指定时间,自动执行采集最新数据。
如需采集网站的全部历史数据,可先一次性采集所有列表翻页的数据,再修改为自动采集列表前几页的最新数据。
3. 自动发送数据
自动发送数据功能,常与定时自动采集功能搭配使用,在数据采集环节完成后,自动触发数据发送。
配置方法:添加发送目标 -》在采集任务的 "自动化配置" -》勾选上 "自动发送" -》选择发送目标 -》按需调整其他发送配置(发送数量、顺序等),保存完成配置。
如无需采集新数据,仅需自动发送已有的存量数据,可直接单独使用定时自动发送功能。
简数导航:采集入门教程 数据导出发送 AI写作生成 采集场景示例 Open API文档