同方股份(SH600100) 司法系统需要此系统。专利摘要:本发明公开了一种融合文本与图像语义特征的智能检索方法及系统,所述方法包括:S1.对电子卷宗的图像扫描件和案件同录视频进行质量检测和预处理;S2.构建结构化的电子卷宗目录;S3.提取文本语义特征、卷宗图像语义特征和视频图像语义特征作为文本和图像的多模态特征;S4.通过多模态大模型对文本和图像的多模态特征进行特征融合和对齐,生成具有语义一致性的跨模态统一特征向量;S5.自动化地构建案件知识图谱,实现法律信息的结构化和语义化整合;S6.基于自然语言查询和案件知识图谱进行语义解析和多跳推理,生成并呈现结构化或问答形式的检索结果。本发明通过融合文本和图像的语义特征,实现对电子卷宗的深度知识挖掘和高效智能检索。
注:此文仅代表作者观点