一种自动化数据采集方法、系统和相关设备

本申请公开了一种自动化数据采集方法、系统和相关设备，方法包括：接收用户通过配置文件输入的待采集目标网站的账号与密码信息，并根据采集需求生成任务队列；利用Playwright框架提供的上下文隔离功能，在单个浏览器实例中创建独立的上下文环境，同时启动多个浏览器实例并进行数据隔离；利用Playwright框架提供的代码注入功能，在浏览器页面内部执行与待采集目标网站一致的加密算法，得到加密参数；根据所述任务队列生成并发起携带所述加密参数的API请求，以完成数据采集。本申请在并发性能、动态页面支持、安全性以及扩展性方面优于现有技术，尤其适合高并发、高动态复杂场景下的数据采集需求。