一种融合LLM实现意图理解的混合脑机接口系统

一种融合LLM实现意图理解的混合脑机接口系统，包括信号采集模块，脑电‑眼动关键词拼写模块和意图生成模块。信号采集模块用于脑电和眼动数据获取；脑电‑眼动关键词拼写模块根据眼动数据判定用户是否有拼写字符或选择指令的意图，如有，则向用户呈现SSVEP刺激并采集脑电‑眼动数据，分别利用两种信号计算所选择目标方格的置信度，并对置信度进行加权融合，确定用户拼写的目标，从而完成关键词的拼写。意图生成模块将通过大语言模型生成多个供用户选择的待选意图。本发明提高了脑电解码的准确性和可靠性并实现了脑机接口异步通信，通过融合大语言模型增强了脑机接口用户意图表达的准确性和与外界通信的效率。