摘要
本发明涉及智能家居控制领域,具体是基于人工智能的多场景灯饰控制系统,包括多视角相机、点云构建模块、上下文词级输入模块、室内场景感知模块、室内人物状态识别模块和灯饰控制模块;本发明通过对室内场景与人物行为进行智能联合识别,对灯饰的智能化动态控制;本发明创造性的设计一种基于文本引导的跨视图特征提取方法,通过文本引导多视图融合,并自适应的将反投影图像特征与点云特征融合为统一的场景视觉表示,实现精准场景识别;本发明创造性的设计一种基于跨模态的双向状态空间特征提取方法,对多模态特征进行交叉融合,并根据属性对融合特征进行重排与进一步融合,实现精准的行为识别,进而实现对不同场景灯饰的精准模式切换。
技术关键词
灯饰控制系统
空间特征提取方法
视觉特征
场景
跨模态
稀疏特征
多视角特征
多层感知机
RGB特征
重排特征
状态空间模型
识别模块
骨骼特征
融合特征
人体骨骼关键点
图像