一种基于语义增强混合重建的三维生成方法

AITNT
正文
推荐专利
一种基于语义增强混合重建的三维生成方法
申请号:CN202411384389
申请日期:2024-09-30
公开号:CN119273871A
公开日期:2025-01-07
类型:发明专利
摘要
本发明公开了一种基于语义增强混合重建的三维生成方法,包括步骤:1、利用GPT‑4模型将输入的原始文本进行语义增强;2、文本生成二维图像;将语义增强的文本输入到文生图扩散模型,使得生成的二维图像有助于三维重建;3、从二维图像生成多视图,将文生图扩散模型中生成的图像输入多视图扩散模型,生成不同视角下的图像,用来进行三维重建;4、使用图像和文本进行三维混合重建,将生成的多视图和原始文本作为输入,通过三维大型重建模型生成三平面表示;5、从三平面表示生成三维网格;将三平面表示作为输入,利用FlexiCubes进行等值面提取,得到最终的三维网格。本发明解决了三维对象生成缓慢,质量低下,与语义不对齐的情况。
技术关键词
三维生成方法 文本 语义 令牌 跨模态 融合策略 多层感知机层 交叉注意力机制 融合特征 解码器 图像编码器 生成框架 网格 图像嵌入 融合方法 矩阵 视觉 多视角 代表
系统为您推荐了相关专利信息
1
一种日志质量检测方法、系统、电子设备及存储介质
抽象语法树 日志 大语言模型 生成代码 语义
2
流程图图像的解析与结构化重建方法、设备及存储介质
可视化界面 节点 文本 元素 箭头
3
数据合规确定方法、装置、电子设备和存储介质
标签 风险 字段 电子设备 模式匹配
4
一种基于改进lcs算法的文档对比方法
LCS算法 对象 列表 字符 Wunsch算法
5
基于自适应阈值脉冲神经网络的多模态人机交互芯片
运动意图 传感器模块 芯片 识别模块 生成特征
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号