摘要
本发明公开了一种网站资产收集的调度方法、系统、设备及存储介质,属于网络信息技术领域,解决在大批量任务的情况下,任务变得繁杂,难以控制,容错率低的技术问题。方法包括以下步骤:步骤S1.读取任务并写入编排器;步骤S2.对编排器内的任务进行执行时间的编排,编排方案支持自定义或智能编排;步骤S3.根据对任务编排的时间点,精确无误地启动任务;步骤S4.收集并整理任务执行产生的所有数据;步骤S5.当所有网站资产数据处理完毕后,根据整理的数据生成报告。本发明可以在大批量任务的情况下,轻松对任务的执行时间编排,对任务自动调度,对资源合理使用,对任务全周期控制。同时本发明高效、自动化,可以省去大量人工、服务器成本。
技术关键词
资产
支持自定义
生成报告
采集器
网络信息技术
网站系统
页面数据
调度系统
模块
处理器
计算机设备
可读存储介质
收集器
存储器
服务器
算法
周期