基于多模态大模型和可微三维渲染的三维隐写方法

本发明公开了一种基于多模态大模型和可微三维渲染的三维隐写方法，该方法拟通过多模态大模型，将文字、音频或图像等待隐藏信息通过可微的三维渲染管线隐藏到三维模型中，适用于隐秘通信以及三维模型水印等诸多场景。该方法的步骤如下：1)先用多模态大模型训练一个信息解码器，注意，该信息解码器仅能作用于单一的模态数据；2)用现有的三维重建技术生成任意的三维模型；3)用(1)中得到的信息解码器对(2)中生成的三维模型进行特定信息的微调，通过可微的三维渲染管线将信息藏入三维模型中。