一种基于多模态与预训练模型的视觉语义栅格地图构建法

AITNT
正文
推荐专利
一种基于多模态与预训练模型的视觉语义栅格地图构建法
申请号:CN202411831794
申请日期:2024-12-12
公开号:CN119963752A
公开日期:2025-05-09
类型:发明专利
摘要
本发明公开了一种基于多模态与预训练模型的视觉语义栅格地图构建法,包括以下步骤:采集数据;利用预训练模型获取语义图像;获取全局和局部三维坐标及其对应的色彩及语义信息;构建栅格地图。本发明充分融合多模态数据,利用RGB‑D相机的深度图像、彩色图像及相机位姿信息,融入语义信息,让地图兼具空间布局、视觉及语义特征,提升机器人对环境的理解,增强地图在不同场景下的实用性与适配性。本发明为地图中的每个点赋予语义信息,可使机器人更好地理解环境,实现与人类更自然的交互,提高地图构建的实用性和易接受性。
技术关键词
栅格地图构建 彩色图像 相机 矩阵 坐标系 多模态 像素 制图系统 语义分割模型 视觉 构建栅格地图 色彩 预训练模型 融入语义信息 字典 机器人对环境
系统为您推荐了相关专利信息
1
一种基于数据驱动的配电网台区分布式储能协同控制方法
配电网台区 协同控制方法 分布式储能 配电网系统 储能设备
2
一种螺帽螺纹缺陷检测方法、系统及介质
螺纹缺陷检测方法 三维点云数据 螺帽 高分辨率相机 激光扫描仪
3
一种网约车需求预测方法
空气质量指数 需求预测方法 周期性 序列 时间段
4
基于分布式传感网络的地下设施振动监测方法和系统
分布式传感网络 振动监测方法 网络拓扑结构 节点特征 降维特征
5
GNSS误差量化和全局地图对齐
全球导航卫星系统 误差 坐标系 锚点 全局地图
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号