基于领域引导BERT的岩土工程语义嵌入检索方法

AITNT
正文
推荐专利
基于领域引导BERT的岩土工程语义嵌入检索方法
申请号:CN202411869841
申请日期:2024-12-18
公开号:CN119903168B
公开日期:2025-12-02
类型:发明专利
摘要
本发明属于人工智能岩土工程技术领域,提出了一种基于领域引导BERT的岩土工程语义嵌入检索方法,旨在解决岩土工程信息检索中信息分散、语义不一致及检索效率低下的问题。该方法通过收集岩土领域的多种文本资料,构建结构化的训练数据集,并引入领域引导注意力机制优化BERT模型,实现对领域关键术语的动态建模。采用Siamese架构实现高效的语义嵌入学习与优化,提高语义相似度计算的准确性。通过设计对比损失和注意力正则化损失的总损失函数,结合AdamW优化器进行模型训练。本发明能够显著提升岩土工程信息检索的精准性与效率,为岩土工程领域的知识管理和信息检索提供有力支持。同时,本发明还涉及用于存储和处理相关数据的存储器或服务器配置。
技术关键词
检索方法 语义 注意力机制 BERT模型 分段 服务器 信息检索 文本 数据 故障转移功能 术语 岩土工程技术 存储器 自然语言 资料 答案 性能监控 标记
系统为您推荐了相关专利信息
1
基于对比学习和LLMs的短文本主题识别方法
主题识别方法 多层感知机 样本 文本 关键词
2
一种敏感内容的问答方法、装置、设备及存储介质
大语言模型 问答方法 语义 指令 样本
3
基于深度学习的采煤沉陷InSAR相位滤波方法及模型
相位滤波方法 卷积模块 上采样 数字高程模型数据 采样模块结构
4
基于深度学习的对话情感预测方法、系统、电子设备及存储介质
情感预测方法 情感特征 发言者 多头注意力机制 BERT模型
5
基于注意力机制的二进制数据压缩存储方法、系统及电子设备
数据压缩存储方法 注意力机制 深度卷积神经网络 寻找算法 识别算法
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号