摘要
本发明公开了一种基于视觉和语言模型的皮肤型机器人面部表情控制方法和系统,包含以下步骤:步骤S1:获取输入图像;通过安装在机器人眼部的摄像头捕获目标表情对应的图像,步骤S2:提取输入图像的面部关键点特征;步骤S3:初步获取机器人面部舵机的参数指令;步骤S4:驱动机器人面部舵机;本发明开发的皮肤型机器人面部表情驱动方法通过分阶段的方式对视觉和语言信息进行分析,能实现机器人面部表情的实时驱动效果,利用大语言模型对机器人面部表情的驱动进行微调,使得机器人在一些细微表情上也能表现出良好的区分度,开发的皮肤型机器人具有逼真的面部表情,可以应用于文旅、医疗、教育等多个交互领域。
技术关键词
机器人面部表情
面部关键点
机器人眼部
机器人控制单元
人脸网格模型
坐标
特征值
视觉
面部特征信息
人脸检测模型
舵机控制器
脉冲
图像获取单元
特征提取单元
参数
系统为您推荐了相关专利信息
特征提取单元
多模态
特征提取模块
情绪特征
面部关键点
深度神经网络模型
视频流
文本
手语翻译方法
识别模块
分辨率提升
面部关键点
阻断方法
超分辨率网络
图像增强模型
三维人脸动画
单张人脸图像
面部动作单元
三维人脸重建
三维人脸网格